guoyunsky
guoyunsky

Heritrix源码分析(一) 包介绍

本博客属原创文章,欢迎转载！但转载请务必注明出处:http://guoyunsky.iteye.com/blog/613249
本博客已迁移到本人独立博客: http://www.yun5u.com/
欢迎加入Heritrix群(QQ)：109148319,10447185（已满）  , Lucene/Solr群(QQ) :  118972724

    之前说过要分享下我的爬虫经验，但一直找不到突破口，现在才感觉写点东西真的很难，所以大家真的要感谢那些无私的前辈们，在网上留下的一篇篇可以指点迷津的文章。
想了很久，还是先从Heritrix的包开始说起，然后再说类，最后讲下如何加工Heritrix，也就是将其打造成自己想要的爬虫，这里补充下，我用的版本是1.14.3.
    同时欢迎加入我建的Heritrix爬虫群一起讨论学习: 10447185
   
序号 包名                                   说明
1   org.apache.commons.httpclient     封装了apache的httpclient用于Fetch网页内容
2 org.apache.commons.httpclient.cookie 封装了apache的httpclient用于Fetch网页内容,这里主要处理Cookie
3 org.apache.commons.pool.impl 封装了apache的httpclient用于Fetch网页内容,还待研究
4 org.archive.crawler Heritrix程序运行的入口包,如Heritrix运行可以直接抓取
5 org.archive.crawler.admin Heritrix的管理包,比如CrawlJob表示一个抓取任务job,CrawlJobHandler管理JOB,以及日志统计等
6 org.archive.crawler.admin.ui 服务于UI管理界面,如Job参数的设置
7 org.archive.crawler.datamodel Heritrix的数据模型包,如在Heritrix中代表一个URL的CandidateURI
8 org.archive.crawler.datamodel.credential 管理Heritrix数据模型中的凭证,如抓取某些网站需要用户名和密码
9 org.archive.crawler.deciderules Heritrix的规则包,如决定哪些URL可以抓取可以调度
10 org.archive.crawler.deciderules.recrawl 还待研究,应该是决定哪些URL需要重新抓取
11 org.archive.crawler.event 事件管理,如Heritrix的暂停、重启、停止等
12 org.archive.crawler.extractor Heritrix的造血器,通过它抽取新的URL再次进行抓取
13 org.archive.crawler.fetcher Heritrix的获取包,如获取HTTP、DNS、FTP数据
14 org.archive.crawler.filter Heritrix的过滤器,如配合Rule过滤一些不要的URL
15 org.archive.crawler.framework Heritrix的框架包,存放一些核心类,一般是父类,如Heritrix控制类CrawlController;调度器类Frontier
16 org.archive.crawler.framework.exceptions Heritrix框架异常包,通常这里的异常抛出会导致Heritrix的停止
17 org.archive.crawler.frontier Heritrix的调度器,决定抓取哪个URL
18 org.archive.crawler.io Heritrix的IO格式包,感觉取名不合理,这里只是定义一些格式,如统计数据的格式,错误日志的格式
19 org.archive.crawler.postprocessor 辅助处理器包,感觉取名也不合理,这里只是对处理URL前后进行一些处理,如URL重定向
20 org.archive.crawler.prefetch Heritrix的预处理器包,如确定一个URL是否已经解析了DNS
21 org.archive.crawler.processor 还没接触到,待研究
22 org.archive.crawler.processor.recrawl 还没接触到,待研究
23 org.archive.crawler.scope Heritrix抓取范围管理,如种子
24 org.archive.crawler.selftest 管理Heritrix的Web工程self.war
25 org.archive.crawler.settings 管理Heritrix配置文件order.xml中的各项配置
26 org.archive.crawler.settings.refinements 管理Heritrix自己对数据格式的标准,如时间格式
27 org.archive.crawler.url 还没怎么接触到,待研究
28 org.archive.crawler.url.canonicalize Heritrix的URL规范化,用于规范每一个URL
29 org.archive.crawler.util Heritrix用于抓取的工具包,如BDB操作工具,IO操作工具
30 org.archive.crawler.writer Heritrix的下载包,用于将抓取的URL内容写入硬盘
31 org.archive.extractor 还没接触到,待研究
32 org.archive.httpclient Heritrix为结合httpclient量身打造的包,让自身更好的获取网页内容
33 org.archive.io Heritrix的IO包,自己封装的一些IO操作类
34 org.archive.io.arc 针对arc格式的IO操作包
35 org.archive.io.warc 针对warc格式的IO操作包
36 org.archive.net Heritrix扩展了java.net的包,主要扩展java.net.URI类
37 org.archive.net.md5 Heritrix对URL MD5加密包,所用不多,待研究
38 org.archive.net.rsync 还没接触到,待研究
39 org.archive.net.s3 还没接触到,待研究
40 org.archive.queue 还没接触到,待研究
41 org.archive.uid Heritrix ID管理,主要针对URI
42 org.archive.util 整个Heritrix的工具类
43 org.archive.util.anvl 还没接触到,待研究
44 org.archive.util.bdbje Heritrix对BDB的封装
45 org.archive.util.fingerprint 还没接触到,待研究
46 org.archive.util.iterator Heritrix自身封装的迭代器
47 org.archive.util.ms 还没接触到,待研究
48 st.ata.util 扩展的其他包,待研究            


Heritrix自己的包有48个之多,还有它导入的第三方包也有30多个,可见其复杂性...

你可能感兴趣的:(apache,.net,qq,配置管理,Solr)

  • 【TCN回归预测】蜣螂算法优化时间卷积神经网络DBO-TCN负荷数据回归预测【含Matlab源码 6222期】 Matlab领域 matlab
    欢迎来到海神之光博客之家✅博主简介：热爱科研的Matlab仿真开发者，修心和技术同步精进，完整代码论文复现程序定制期刊写作科研合作扫描文章底部QQ二维码。个人主页：海神之光代码获取方式：海神之光Matlab王者学习之路—代码获取方式⛳️座右铭：行百里者，半于九十。更多Matlab智能算法神经网络预测与分类仿真内容点击①Matlab神经网络预测与分类（进阶版）②付费专栏Matlab智能算法神经网络预
  • 【diffusers极速入门（四）】EMA 操作是什么？ 多恩Stone DiffusionAIGCTransformer人工智能深度学习pytorchpythonAIGCdiffusers
    系列文章目录【diffusers极速入门（一）】pipeline实际调用的是什么？call方法!【diffusers极速入门（二）】如何得到扩散去噪的中间结果？Pipelinecallbacks管道回调函数【diffusers极速入门（三）】生成的图像尺寸与UNet和VAE之间的关系本文将介绍diffusers中常见的EMA操作。提示：写完文章后，目录可以自动生成，如何生成可参考右边的帮助文档文章
  • 【diffusers极速入门（六）】缓存梯度和自动放缩学习率以及代码详解 多恩Stone AIGCDiffusion编程学习diffuserspytorchAIDeeplearningAIGCpython
    系列文章目录【diffusers极速入门（一）】pipeline实际调用的是什么？call方法!【diffusers极速入门（二）】如何得到扩散去噪的中间结果？Pipelinecallbacks管道回调函数【diffusers极速入门（三）】生成的图像尺寸与UNet和VAE之间的关系【diffusers极速入门（四）】EMA操作是什么？【diffusers极速入门（五）】扩散模型中的Schedul
  • Flink访问Kerberos环境下的Hive 我若成风zhb flinkflinkkerberoshivehadoop
    目录测试环境工程搭建示例代码及运行总结本文主要介绍如何使用Flink访问Kerberos环境下的Hive。测试环境1.hive版本为2.1.12.flink版本为1.10.0工程搭建使用IDE工具通过Maven创建一个Java工程，具体创建过程就不详细描述了。1.在工程的pom.xml文件中增加如下依赖org.apache.flinkflink-java${flink.version}provid
  • 【spark床头书系列】如何在YARN上启动Spark官网权威详解说明 BigDataMLApplication sparkspark大数据分布式
    【spark床头书系列】如何在YARN上启动Spark官网权威详解说明点击这里看全文文章目录添加其他JAR文件准备工作配置调试应用程序Spark属性重要说明KerberosYARN特定的Kerberos配置Kerberos故障排除配置外部Shuffle服务使用ApacheOozie启动应用程序使用Spark历史服务器替代SparkWebUI官网链接确保HADOOP_CONF_DIR或者YARN_C
  • Ubuntu 网卡启动及配置 草莓奶忻 #Linuxubuntulinux
    文章目录问题分析查看网卡信息启动网卡配置网卡应用更改参考问题分析打开虚拟机后发现没有网卡网络。查看网卡信息sudoiplinksetens33up得到本机的所有网卡信息，例如我这边网卡为ens33启动网卡启动网卡后发现依然网卡没有IP地址。配置网卡ubuntuserver20.04采用读yaml配置文件的方式修改网卡配置，文件在/etc/netplan/下，一般为00-installer-conf
  • 【ELM回归预测】蜣螂算法优化极限学习机DBO-ELM数据回归预测【含Matlab源码 3566期】 Matlab仿真科研站 matlab
    欢迎来到Matlab仿真科研站博客之家✅博主简介：热爱科研的Matlab仿真开发者，修心和技术同步精进，Matlab项目合作可私信。个人主页：Matlab仿真科研站博客之家代码获取方式：扫描文章底部QQ二维码⛳️座右铭：行百里者，半于九十；路漫漫其修远兮，吾将上下而求索。⛄更多Matlab神经网络预测与分类（仿真科研站版）仿真内容点击Matlab神经网络预测与分类（仿真科研站版）⛄一、蜣螂算法优化
  • 1.6 在7类LSA中利用FA地址解决次优路径问题 2301_80344964 网络
    1.实验目的了解OSPF的7类LSA的FA地址的作用2.实验拓扑3.基础配置R1[R1]discu[V200R003C00]#sysnameR1#interfaceGigabitEthernet0/0/0ipaddress10.0.13.1255.255.255.0#interfaceGigabitEthernet0/0/1ipaddress10.0.12.1255.255.255.0#inter
  • QRCNN-BiLSTM卷积神经网络-双向长短期记忆神经网络分位数回归区间预测附Matlab完整源码 天天酷科研 分位数回归区间预测（QR）QRCNN-BiLSTM卷积双向长短期记忆神经网络分位数回归区间预测
    效果模型描述QRCNN-BiLSTM卷积神经网络-双向长短期记忆神经网络分位数回归区间预测附Matlab完整源码QRCNN-BiLSTM（QuantileRegressionConvolutionalNeuralNetwork-BidirectionalLongShort-TermMemory）是一种结合了卷积神经网络（CNN）和双向长短期记忆神经网络（BiLSTM）的分位数回归模型，用于区间预测
  • XXL-RPC v1.9.0 | RPC服务框架
    ReleaseNotes1、【优化】服务底层代码重构优化，精简依赖、减少依赖包体；2、【调整】内置注册中心XxlRpcRegister(xxl-rpc-admin)迁移，整合至XXL-CONF：XXL-CONF：一站式服务管理平台（配置中心、注册中心），提供动态配置管理、服务注册及发现能力；降低中间件认知及运维成本。Github：https://github.com/xuxueli/xxl-con
  • Apache Airflow 2.1.2：开源工作流管理系统的全面指南 銀河鐵道的企鵝
    本文还有配套的精品资源，点击获取简介：ApacheAirflow2.1.2是一个开源的工作流管理系统，用于编排、调度和监控复杂的业务逻辑。它基于DAG（有向无环图）概念，通过Python代码定义任务的Operator，定义任务的执行顺序和条件。该版本提供了任务调度、监控、错误处理、插件扩展和多环境管理等核心功能。解压后包含许可证文件、文档和源代码目录等，且介绍了安装和运行步骤。Airflow适用于
  • 神经网络入门推荐知识,神经网络入门书籍推荐 快乐的小肥熊 ai智能写作神经网络matlab人工智能python
    适合初学者的神经网络和遗传算法资料遗传算法（GeneticAlgorithm）是模拟达尔文生物进化论的自然选择和遗传学机理的生物进化过程的计算模型，是一种通过模拟自然进化过程搜索最优解的方法。遗传算法是从代表问题可能潜在的解集的一个种群（population）开始的，而一个种群则由经过基因（gene）编码的一定数目的个体(individual)组成。每个个体实际上是染色体(chromosome)带
  • qml显示加载QWidget窗口 令狐掌门 QML入门进阶教程qml显示QWidget
    本篇博客介绍如何在qml界面里显示QWidget窗口，开发环境Qt6.5.3qml.视频讲解：https://edu.csdn.net/learn/40003/654001?spm=3001.4143qml和QWidget是两套独立的开发方式，二者的窗口可以相互嵌套显示，本篇博客介绍把QWidget窗口封装为动态库，然后在QML的窗口里显示出来，并且在qml窗口里可以链接QWidget界面类的方法
  • .NET 网页或json数据抓取系列：1 - 发送请求 RonaldRooney 网络数据抓取json.net
    1.创建HttpWebRequest发送请求，添加Headers信息，例如User-Agent,token,Authorizationvarclient=(HttpWebRequest)WebRequest.Create(newUri(url));client.Method=method;//Post或者Getclient.Headers.Add("User-Agent","Mozilla/5.0
  • 请大神指导android调用.NET后台的Json格式？？ 火星撞地球2012 .Nethttp接口.net接口android
    比如说做登录，需要到数据库里查询，这时，不是应该有一个后台，android发送一个请求给后台，后台以http接口形式反馈json数据给前台所以，我想问问后台怎么做？用.net的语言,最好有个Demo给小弟，只要实现一个接口的就行了，麻烦大家了。谢谢先。
  • asp.net json参数请求接口方法 suxuelian asp.netc#
    废话不多说，直接上源码调用代码：//请求实体varmodel=newPersonnel(){Name="赵思文",Sex="男"};//请求接口varhtml=PostHtmlByJson("http://www.test.api.com",JsonConvert.SerializeObject(model));请求方法//////post请求方法//////请求地址///json参数///pub
  • .Net HTTP 请求封装代码 code36 C#&.Net开发http网络协议.net
    有了这些方法请求第三api接口就不用慌了，拷贝就可以用了定义了一个请求的接口IHttpClientMananger：1）POST请求泛型数据//////POST请求泛型数据//////请求的对象///地址///参数///头部数据///TaskPostEntityAsync(stringurl,HttpContenthttpContent,Dictionaryheads=null);2）Form表单
  • 【SpringCloud微服务实战04】Nacos 配置中心 李维山 javaspringcloudspringboot
    一、Nacos配置添加二、Nacos配置读取1、引入Nacos的配置管理客户端依赖：com.alibaba.cloudspring-cloud-starter-alibaba-nacos-config2、在客户端服务中的resource目录添加bootstrap.yml引导文件，添加配置如下：（优先级高于application.yml）spring:application:
  • 探索Json.NET：高效JSON处理的首选库 毕习沙Eudora
    探索Json.NET：高效JSON处理的首选库项目地址:https://gitcode.com/gh_mirrors/ne/Newtonsoft.Json项目介绍Json.NET是一个强大且高度可定制的JSON库，专为.NET开发者设计。它由JamesNewton-King创建并维护，以其卓越的性能和易用性赢得了广泛的赞誉。作为最受欢迎的.NETJSON库之一，Json.NET提供了从JSON到.
  • .net 如何处理网页的Json请求？ 周山至水数翠峰 .netjson服务器
    一、传变量客户端请求客户端一般是用Jscript写的，传送变量，代码如下：functionsave(i){//这是用PostMethod使用var1=value1&var2=value2格式传送数据varcount=chkCount.value;varchk0="";for(k=0;kSave1(stringchk0){intn=0;string[]sa=chk0.Split(",");Listc
  • 【win11】amd全大核CPU调度异常，或inter大小核自定义调度配置 东哥他爸 windows
    前言台式机一般使用高性能，笔记本一般是平衡或oem提供的电源选项不建议修改选项，但在内部很多设置被隐藏了，需要手动打开隐藏的设置惠普战99为例驱动装完了以后默认设置都大小核，但CPU是AMD锐龙7系列所以是全大核，需要进行调整，命令如下：CPU核心调度配置管理员运行CMD命令行输入如下命令：生效的异类策略powercfg-attributesSUB_PROCESSOR7f2f5cfa-f10c-4
  • 【蓝牙学习笔记一】三种实现蓝牙架构 理茶德 蓝牙蓝牙协议栈BLE蓝牙蓝牙架构
    实现蓝牙的三种架构实现蓝牙的三种架构通过阅读这篇博文的学习总结https://blog.csdn.net/iini01/article/details/799439081.Host+controller双芯片标准架构：将host和controller放在两个芯片上面这种双芯片架构通常用在手机上的蓝牙应用实现。手机里面有很多SoC(systemonchip系统级芯片)和模块，这些SoC和模块都有自己
  • 使用Jmeter进行压力测试 海人_IOes Jmeterjmeter压力测试服务器
    文章目录一、压力测试关注点1、压力测试分为两种测试场景2、压测参数设置3、压测结果查看4、压测结果分析5、影响性能的主要参考因素二、压测脚本的编写1、创建线程组2、配置元件3、取样器4、响应断言5、添加监听器6、执行测试测试计划，查看测试报告7、命令行执行测试计划，查看测试报告参考地址：https://blog.csdn.net/weixin_45189665/article/details/12
  • Kubernetes满足高性能计算 qichengzong_right kubernetes云原生linuxlinux云原生kubernetes
    Kubernetes满足高性能计算Kubernetes满足高性能计算HPC工作负载的独特挑战打破容器和HPC之间的界限现有方法Kubernetes上的混合工作负载在IHME部署混合工作负载链接文章内容大部分翻译自kubernetes官方博文KubernetesMeetsHigh-PerformanceComputing，文章编写时间较早，结合自身认知对内容进行标注解释。Kubernetes满足高性
  • 关于在GitLab的CI/CD中用docker buildx本地化多架构打包dotnet应用的问题 公西雒 linuxC#gitlabci/cddockerdotnetQEMU
    关于在GitLab的CI/CD中用dockerbuildx本地化多架构打包dotnet应用的问题这是一个DevOps综合性问题dockerbuildx多架构打包.NET应用的问题用QEMU模拟多架构环境打包这是一个DevOps综合性问题网络上的方案都是细分的领域，未见一个集成了GitLab+docker+dotnet的多架构DevOps方案。由此，才产生了这篇文章，来说一说，我在自动化持续交付的过
  • 使用GitLab CI/CD部署应用到Kubernetes集群的方案 拿我格子衫来 GitLabCI/CD教程ci/cdkubernetesdevops
    最近业余时间调研了一下在GitLabCI/CD中部署应用到Kubernetes的方案。这是一个老生常谈的话题，很多粉丝和读者问我如何部署应用到K8s中。其实思路是很清晰的，只是其中又很多点大家可能无法串起来。那么本篇文章就带领大家实践一下如何做CD的方案。本方案的好处就是，读者不需要了解太多关K8s相关知识也可以实现该方案。Kubernets的命令行工具是kubectl。就像我们使用docker命
  • JMeter在Mac下的安装使用 晓风残月Yuperman 系统安全软件工程jmeter
    博主介绍：大家好，我是想成为Super的Yuperman，互联网宇宙厂经验，17年医疗健康行业的码拉松奔跑者，曾担任技术专家、架构师、研发总监负责和主导多个应用架构。技术范围：目前专注java体系，有多年java、golang、.Net、DDD、软件架构、redis、nginx、tomcat、mysql、oracle等经验业务范围：对传统业务应用技术转型，从数字医院到区域医疗，从院内业务系统到互联
  • Apache Hive 聚合函数与 OVER 窗口函数：从基础到高级应用 大鳥 sqlhiveapachehivehadoop
    在大数据时代，ApacheHive是处理和分析海量数据的强大工具。Hive提供了丰富的聚合函数和强大的OVER窗口函数，能够帮助我们高效地进行数据分析。本文将综合介绍Hive的聚合函数和OVER窗口函数，结合实际使用场景和代码示例，帮助读者深入理解这些功能，尤其是它们在时间序列分析中的应用。一、Hive聚合函数基础聚合函数是Hive中用于对一组数据进行计算并返回单个值的函数。它们在数据分析中非常常
  • ping命令第1版主流程的源码分析
    我们知道，ping命令是通过ICMP（InternetControlMessageProtocol，互联网控制消息协议）来检测网络连通性和延迟的。执行ping命令的主机（源主机）会向目标主机发送ICMPEchoRequest报文，目标主机收到该报文后，应响应ICMPEchoReply报文。如果源主机能够收到目标主机返回的ICMPEchoReply报文，就说明目标主机可达。再根据当前时间戳与发送时间
  • Linux上安装Apache HTTP服务器 华科℡云 linux运维服务器
    ApacheHTTPServer，简称Apache，是世界上最流行的开源Web服务器软件之一。它以其高度的可靠性、强大的功能和广泛的兼容性而闻名。在Linux操作系统上安装Apache服务器是一个相对简单的过程，无论是用于个人网站托管、企业服务部署，还是作为开发测试环境，Apache都是一个不错的选择。以下是在Linux上安装ApacheHTTP服务器的详细步骤。1.更新软件包列表在安装任何新软件
  • Enum 枚举 120153216 enum枚举
    原文地址：http://www.cnblogs.com/Kavlez/p/4268601.html Enumeration 于Java 1.5增加的enum type...enum type是由一组固定的常量组成的类型，比如四个季节、扑克花色。在出现enum type之前，通常用一组int常量表示枚举类型。比如这样： public static final int APPLE_FUJI = 0
  • Java8简明教程 bijian1013 javajdk1.8
            Java 8已于2014年3月18日正式发布了，新版本带来了诸多改进，包括Lambda表达式、Streams、日期时间API等等。本文就带你领略Java 8的全新特性。  一.允许在接口中有默认方法实现         Java 8 允许我们使用default关键字，为接口声明添
  • Oracle表维护 快速备份删除数据 cuisuqiang oracle索引快速备份删除
    我知道oracle表分区，不过那是数据库设计阶段的事情，目前是远水解不了近渴。 当前的数据库表，要求保留一个月数据，且表存在大量录入更新，不存在程序删除。 为了解决频繁查询和更新的瓶颈，我在oracle内根据需要创建了索引。但是随着数据量的增加，一个半月数据就要超千万，此时就算有索引，对高并发的查询和更新来说，让然有所拖累。 为了解决这个问题，我一般一个月会进行一次数据库维护，主要工作就是备
  • java多态内存分析 麦田的设计者 java内存分析多态原理接口和抽象类
          “  时针如果可以回头，熟悉那张脸，重温嬉戏这乐园，墙壁的松脱涂鸦已经褪色才明白存在的价值归于记忆。街角小店尚存在吗？这大时代会不会牵挂，过去现在花开怎么会等待。       但有种意外不管痛不痛都有伤害，光阴远远离开，那笑声徘徊与脑海。但这一秒可笑不再可爱，当天心
  • Xshell实现Windows上传文件到Linux主机 被触发 windows
    经常有这样的需求，我们在Windows下载的软件包，如何上传到远程Linux主机上？还有如何从Linux主机下载软件包到Windows下；之前我的做法现在看来好笨好繁琐，不过也达到了目的，笨人有本方法嘛； 我是怎么操作的： 1、打开一台本地Linux虚拟机，使用mount 挂载Windows的共享文件夹到Linux上，然后拷贝数据到Linux虚拟机里面；（经常第一步都不顺利，无法挂载Windo
  • 类的加载ClassLoader 肆无忌惮_ ClassLoader
    类加载器ClassLoader是用来将java的类加载到虚拟机中，类加载器负责读取class字节文件到内存中，并将它转为Class的对象（类对象），通过此实例的 newInstance()方法就可以创建出该类的一个对象。   其中重要的方法为findClass(String name)。   如何写一个自己的类加载器呢？ 首先写一个便于测试的类Student
  • html5写的玫瑰花 知了ing html5
    <html> <head> <title>I Love You!</title> <meta charset="utf-8" /> </head> <body> <canvas id="c"></canvas>
  • google的ConcurrentLinkedHashmap源代码解析 矮蛋蛋 LRU
    原文地址： http://janeky.iteye.com/blog/1534352 简述 ConcurrentLinkedHashMap 是google团队提供的一个容器。它有什么用呢？其实它本身是对 ConcurrentHashMap的封装，可以用来实现一个基于LRU策略的缓存。详细介绍可以参见 http://code.google.com/p/concurrentlinke
  • webservice获取访问服务的ip地址 alleni123 webservice
    1. 首先注入javax.xml.ws.WebServiceContext, @Resource private WebServiceContext context; 2. 在方法中获取交换请求的对象。 javax.xml.ws.handler.MessageContext mc=context.getMessageContext(); com.sun.net.http
  • 菜鸟的java基础提升之道——————>是否值得拥有 百合不是茶
    1，c++，java是面向对象编程的语言，将万事万物都看成是对象；java做一件事情关注的是人物，java是c++继承过来的，java没有直接更改地址的权限但是可以通过引用来传值操作地址，java也没有c++中繁琐的操作，java以其优越的可移植型，平台的安全型，高效性赢得了广泛的认同，全世界越来越多的人去学习java，我也是其中的一员      java组成：
  • 通过修改Linux服务自动启动指定应用程序 bijian1013 linux
    Linux中修改系统服务的命令是chkconfig (check config)，命令的详细解释如下: chkconfig 功能说明：检查，设置系统的各种服务。 语　　法：chkconfig [ -- add][ -- del][ -- list][系统服务] 或 chkconfig [ -- level  <</SPAN>
  • spring拦截器的一个简单实例 bijian1013 javaspring拦截器Interceptor
    Purview接口 package aop; public interface Purview { void checkLogin(); } Purview接口的实现类PurviesImpl.java package aop; public class PurviewImpl implements Purview { public void check
  • [Velocity二]自定义Velocity指令 bit1129 velocity
    什么是Velocity指令 在Velocity中，#set,#if, #foreach, #elseif, #parse等，以#开头的称之为指令，Velocity内置的这些指令可以用来做赋值，条件判断，循环控制等脚本语言必备的逻辑控制等语句，Velocity的指令是可扩展的，即用户可以根据实际的需要自定义Velocity指令   自定义指令(Directive)的一般步骤 &nbs
  • 【Hive十】Programming Hive学习笔记 bit1129 programming
    第二章 Getting Started 1.Hive最大的局限性是什么？一是不支持行级别的增删改(insert, delete, update)二是查询性能非常差(基于Hadoop MapReduce）,不适合延迟小的交互式任务三是不支持事务2. Hive MetaStore是干什么的？Hive persists table schemas and other system metadata.
  • nginx有选择性进行限制 ronin47 nginx 动静　限制
    http { limit_conn_zone $binary_remote_addr zone=addr:10m; limit_req_zone $binary_remote_addr zone=one:10m rate=5r/s;... server {... location ~.*\.(gif|png|css|js|icon)$ {
  • java-4.-在二元树中找出和为某一值的所有路径 . bylijinnan java
    /* * 0.use a TwoWayLinkedList to store the path.when the node can't be path,you should/can delete it. * 1.curSum==exceptedSum:if the lastNode is TreeNode,printPath();delete the node otherwise
  • Netty学习笔记 bylijinnan javanetty
    本文是阅读以下两篇文章时： http://seeallhearall.blogspot.com/2012/05/netty-tutorial-part-1-introduction-to.html http://seeallhearall.blogspot.com/2012/06/netty-tutorial-part-15-on-channel.html 我的一些笔记 ===
  • js获取项目路径 cngolon js
    //js获取项目根路径，如： http://localhost:8083/uimcardprj function getRootPath(){     //获取当前网址，如： http://localhost:8083/uimcardprj/share/meun.jsp     var curWwwPath=window.document.locati
  • oracle 的性能优化 cuishikuan oracleSQL Server
       在网上搜索了一些Oracle性能优化的文章，为了更加深层次的巩固[边写边记]，也为了可以随时查看，所以发表这篇文章。     1.ORACLE采用自下而上的顺序解析WHERE子句，根据这个原理，表之间的连接必须写在其他WHERE条件之前，那些可以过滤掉最大数量记录的条件必须写在WHERE子句的末尾。（这点本人曾经做过实例验证过，的确如此哦！
  • Shell变量和数组使用详解 daizj linuxshell变量数组
    Shell 变量 定义变量时，变量名不加美元符号（$，PHP语言中变量需要），如： your_name="w3cschool.cc" 注意，变量名和等号之间不能有空格，这可能和你熟悉的所有编程语言都不一样。同时，变量名的命名须遵循如下规则： 首个字符必须为字母（a-z，A-Z）。 中间不能有空格，可以使用下划线（_）。 不能使用标点符号。 不能使用ba
  • 编程中的一些概念，KISS、DRY、MVC、OOP、REST dcj3sjt126com REST
    KISS、DRY、MVC、OOP、REST （1）KISS是指Keep It Simple,Stupid（摘自wikipedia），指设计时要坚持简约原则，避免不必要的复杂化。 （2）DRY是指Don't Repeat Yourself（摘自wikipedia），特指在程序设计以及计算中避免重复代码，因为这样会降低灵活性、简洁性，并且可能导致代码之间的矛盾。 （3）OOP 即Object-Orie
  • [Android]设置Activity为全屏显示的两种方法 dcj3sjt126com Activity
    1. 方法1：AndroidManifest.xml 里，Activity的 android:theme  指定为" @android:style/Theme.NoTitleBar.Fullscreen" 示例:   <application      
  • solrcloud 部署方式比较 eksliang solrCloud
    solrcloud 的部署其实有两种方式可选，那么我们在实践开发中应该怎样选择呢？ 第一种：当启动solr服务器时，内嵌的启动一个Zookeeper服务器，然后将这些内嵌的Zookeeper服务器组成一个集群。  第二种：将Zookeeper服务器独立的配置一个集群，然后将solr交给Zookeeper进行管理   谈谈第一种：每启动一个solr服务器就内嵌的启动一个Zoo
  • Java synchronized关键字详解 gqdy365 synchronized
    转载自：http://www.cnblogs.com/mengdd/archive/2013/02/16/2913806.html 多线程的同步机制对资源进行加锁，使得在同一个时间，只有一个线程可以进行操作，同步用以解决多个线程同时访问时可能出现的问题。 同步机制可以使用synchronized关键字实现。 当synchronized关键字修饰一个方法的时候，该方法叫做同步方法。 当s
  • js实现登录时记住用户名 hw1287789687 记住我记住密码cookie记住用户名记住账号
    在页面中如何获取cookie值呢? 如果是JSP的话,可以通过servlet的对象request 获取cookie,可以 参考:http://hw1287789687.iteye.com/blog/2050040 如果要求登录页面是html呢?html页面中如何获取cookie呢? 直接上代码了 页面:loginInput.html 代码: <!DOCTYPE html PUB
  • 开发者必备的 Chrome 扩展 justjavac chrome
    Firebug：不用多介绍了吧https://chrome.google.com/webstore/detail/bmagokdooijbeehmkpknfglimnifench ChromeSnifferPlus：Chrome 探测器，可以探测正在使用的开源软件或者 js 类库https://chrome.google.com/webstore/detail/chrome-sniffer-pl
  • 算法机试题 李亚飞 java算法机试题
           在面试机试时，遇到一个算法题，当时没能写出来，最后是同学帮忙解决的。        这道题大致意思是：输入一个数，比如4,。这时会输出：           &n
  • 正确配置Linux系统ulimit值 字符串 ulimit
    在Linux下面部 署应用的时候，有时候会遇上Socket/File: Can’t open so many files的问题；这个值也会影响服务器的最大并发数，其实Linux是有文件句柄限制的，而且Linux默认不是很高，一般都是1024，生产服务器用 其实很容易就达到这个数量。下面说的是，如何通过正解配置来改正这个系统默认值。因为这个问题是我配置Nginx+php5时遇到了，所以我将这篇归纳进
  • hibernate调用返回游标的存储过程 Supanccy2013 javaDAOoracleHibernatejdbc
    注：原创作品，转载请注明出处。     上篇博文介绍的是hibernate调用返回单值的存储过程，本片博文说的是hibernate调用返回游标的存储过程。     此此扁博文的存储过程的功能相当于是jdbc调用select 的作用。 1，创建oracle中的包，并在该包中创建的游标类型。 ---创建oracle的程
  • Spring 4.2新特性-更简单的Application Event wiselyman application
    1.1 Application Event Spring 4.1的写法请参考10点睛Spring4.1-Application Event 请对比10点睛Spring4.1-Application Event 使用一个@EventListener取代了实现ApplicationListener接口,使耦合度降低; 1.2 示例 包依赖 <p
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他