Varnish配置，Error 503解决之道

   首先，说说Varnish的配置方法。
Varnish的启动需要配置文件（*.vcl）,以及其他一些启动参数配合（具体参数在此略去不谈，man一下会看到一切）。我安装的是Varnish-2.0.4
整个安装过程如下：

#./configure --prefix=/usr/local/varnish --enable-developer-waring --enable-debugging-sybmbles --enable-werror
#make
#make install

编译安装完成，然后就需要启动它，我写的启动文件如下：

###Start.sh######
#!/bin/sh
#file:start.sh
date -u
/usr/local/varnish/sbin/varnishd -a 173.26.100.206:80  -s file,/cache/varnish/V,1024m  -f         /usr/local/varnish/etc/varnish/default.vcl  -p thread_pool_max=1500  -p thread_pools=5  -p listen_depth=512  -p client_http11=on  -p connect_timeout = 1s -p send_timeout = 20s

以下是deault.vcl配置

######defualt.vcl########
backend default {
.host = "173.26.100.206";
.port = "81";
}

#Below is a commented-out copy of the default VCL logic.  If you
#redefine any of these subroutines, the built-in logic will be
#appended to your code.

sub vcl_recv {
if (req.request != "GET" &&
req.request != "HEAD" &&
req.request != "PUT" &&
req.request != "POST" &&
req.request != "TRACE" &&
req.request != "OPTIONS" &&
req.request != "DELETE") {
/* Non-RFC2616 or CONNECT which is weird. */
return (pipe);
}
if (req.request != "GET" && req.request != "HEAD") {
/* We only deal with GET and HEAD by default */
return (pass);
}
if (req.http.Authorization || req.http.Cookie) {
/* Not cacheable by default */
return (pass);
}
return (lookup);
}

sub vcl_pipe {
# Note that only the first request to the backend will have
# X-Forwarded-For set.  If you use X-Forwarded-For and want to
# have it set for all requests, make sure to have:
# set req.http.connection = "close";
# here.  It is not set by default as it might break some broken web
# applications, like IIS with NTLM authentication.
return (pipe);
}

sub vcl_pass {
return (pass);
}

sub vcl_hash {
set req.hash += req.url;
if (req.http.host) {
set req.hash += req.http.host;
} else {
set req.hash += server.ip;
}
return (hash);
}

sub vcl_hit {
if (!obj.cacheable) {
return (pass);
}
return (deliver);
}

sub vcl_miss {
return (fetch);
}

sub vcl_fetch {
if (!obj.cacheable) {
return (pass);
}
if (obj.http.Set-Cookie) {
return (pass);
}
set obj.prefetch =  -30s;
return (deliver);
}

sub vcl_deliver {
return (deliver);
}

sub vcl_discard {
/* XXX: Do not redefine vcl_discard{}, it is not yet supported */
return (discard);
}

sub vcl_prefetch {
/* XXX: Do not redefine vcl_prefetch{}, it is not yet supported */
return (fetch);
}

sub vcl_timeout {
/* XXX: Do not redefine vcl_timeout{}, it is not yet supported */
return (discard);
}

sub vcl_error {
set obj.http.Content-Type = "text/html; charset=utf-8";
synthetic {"
<?xml version="1.0" encoding="utf-8"?>
<!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Strict//EN"
"http://www.w3.org/TR/xhtml1/DTD/xhtml1-strict.dtd">
<html>
<head>
<title>"} obj.status " " obj.response {"</title>
</head>
<body>
<h1>Error "} obj.status " " obj.response {"</h1>
<p>"} obj.response {"</p>
<h3>Guru Meditation:</h3>
<p>XID: "} req.xid {"</p>
<address>
<a href="http://www.varnish-cache.org/">Varnish</a>
</address>
</body>
</html>
"};
return (deliver);
}

如 此配置，运行./Start.sh启动Varnish监听本机80端口，backend为Apache监听的81端口。问题出现了，通过81端口访问，正 常响应，浏览器获得正确页面；访问81端口，出现503 error。对于这个问题在网上搜了很多方法试图解决，比较多的办法是在配置文件里修改添加：

backend default {
.host = "173.26.100.206";
.port = "81";
###下面三行为新加配置
.connect_timeout = 1s;
.first_byte_timeout = 5s;
.between_bytes_timeout = 2s;
}

事实上并不奏效，自己摸索良久，偶然将start.sh中一些启动选项去掉，结果发现可以正常响应了。
新的启动文件如下：

####Start.sh#####
#!/bin/sh
#file:start.sh
date -u
/usr/local/varnish/sbin/varnishd -a 173.26.100.206:80  -s file,/cache/varnish/V,1024m  -f         /usr/local/varnish/etc/varnish/default.vcl  -p thread_pool_max=1500  -p thread_pools=5  -p listen_depth=512  -p client_http11=on 

去掉了connect_timeout和send_timeout，相当于使用系统默认配置。

结果一切归于正常，Varnish又一次表现出高速的http代理能力。

你可能感兴趣的:(varnish)

  • 正则表达式：匹配字符串---文件内容（介绍） 圆缘1987
    REGEXP：由一类特殊字符及文本字符所编写的模式，其中有些字符（元字符）不表示字符字面意义，而表示控制或通配的功能•程序支持：grep,sed,awk,vim,less,nginx,varnish等•分两类：基本正则表达式：BRE扩展正则表达式：EREgrep-E,egrep•正则表达式引擎：采用不同算法，检查处理正则表达式的软件模块PCRE（PerlCompatibleRegularExpre
  • varnish安装步骤 TerryWater linuxMAGENTO
    1.安装环境，其他软件，varnish需要这些软件的支持。yuminstall-yautomakeautoconflibtoolncurses-devellibxsltgroffpcre-develpkgconfiglibedit*2.wgethttp://jaist.dl.sourceforge.net/project/pcre/pcre/8.34/pcre-8.34.zip手动下载地址：htt
  • Cloudera公司的CDH与HDP均无法下载问题（403 Forbidden (varnish) the provided credentials were incorrect） 小宇0926 大数据平台搭建cloudera
    Cloudera公司的CDH与HDP均无法下载问题1.问题描述2.解决方法1.问题描述最近想下载CDH的相关安装包，发现需要输入用户名和密码然而输入cloudera账号之后，会出现如下提示也就是说cloudera不允许下载免费的安装包了，查了一下，如果然如此。2.解决方法使用开源的Apache的相关软件包http://archive.apache.org/dist/CDH&Ambari安装包百度云
  • web缓存代理 沈阳最速传说と疾走の猛虎！贵物刀一郎です javaspring开发语言
    缓存代理的概述wed代理的工作机制缓存网页对象，减少重复请求web缓存代理作用1.存储一些之前被访问的，且可能将要被再次访问的静态网络资源对象，使用户可以直接从缓存代理服务器获取资源，从而减少上游原始服务器的负载压力，加快整个访问速度。2.代理服务器还可以代替客户端去获取原始服务器资源，从而隐藏客户端真实地址常见的web缓存代理应用：本地实现：nginx、squid、varnish云环境远端实现：
  • varnish的简单使用 做咩啊～ 综合架构缓存
    varnish的简单使用安装配置配置启动参数文件配置环境信息文件配置varnish反向代理配置varnish启动varnish更加直观的查看varnish缓存手动清除缓存清除指定的缓存varnish配置多后端配置多后端在本地配置域名解析查看测试结果负载均衡配置导入模块定义负载均衡调度器调用负载均衡varnish推送平台配置通过图形化的方式简化缓存清理步骤部署安装varnish已被收录进EPEL源，
  • 四层负载均衡--LVS + HA young_dump_broke LVS+HA负载均衡器lvsHA调度器linux
    负载均衡分类：硬件负载均衡：F5BIG-IP不适用于小企业，使用不多软件负载均衡：lvs、haproxy、nigix、httpd、varnish基于应用层划分：4层-传输层，我们使用lvs、haproxy（tcp)只针对于ip地质7层-应用层：haproxynginx针对与应用lvs概述LVS（LinuxVirtualServer）即Linux虚拟服务器，是由章文嵩博士主导的开源负载均衡项目，目前
  • Web高并发解决方案 我就是400 负载均衡架构Linux高并发memcached高并发memcachedlinux架构负载均衡
    《手把手让你实现开源企业级web高并发解决方案》（lvs+heartbeat+varnish+nginx+eAccelerator+memcached）原创作品，允许转载，转载时请务必以超链接形式标明文章原始出处、作者信息和本声明。否则将追究法律责任。http://freeze.blog.51cto.com/1846439/677348本来想起个比较风趣点的标题，可想来思去，还是走常规路线，做一系
  • 五大开源 Web 代理服务器横评：Squid、Privoxy、Varnish、Polipo、Tinyproxy hebeind100 奇文分享SquidPrivoxyVarnishPolipoTinyproxy
    Web代理软件转发HTTP请求时并不会改变数据流量。它们可以配置成透明代理，而无需客户端配置。它们还可以作为反向代理放在网站的前端；这样缓存服务器可以为一台或多台web服务器提供无限量的用户服务。网站代理功能多样，有着宽泛的用途：从缓存页面、DNS和其他查询，到加速web服务器响应、降低带宽消耗。代理软件广泛用于大型高访问量的网站，比如纽约时报、卫报，以及社交媒体网站如Twitter、Facebo
  • HA Cluster和keepalived主从,主主高可用设置以及varnish缓存机制（二） 家有猪宝_
    四、简述http协议缓存原理及常用首部讲解cache：缓存程序的运行具有局部性特征：·时间局部性：一个数据被访问过之后，可能很快会被再次访问到；·空间局部性：一个数据被访问时，其周边也有可能被访问到；cache：命中热区：经常被访问到的数据区域；缓存命中率：判断缓存的利用率的衡量指标，hit/(hit+miss):取值范围·页面命中率：基于页面数量进行衡量·字节命中率：基于页面的体积进行衡量缓存的
  • Keepalived、varnish 请叫我飘哥
    1、Nginx+Keepalived实现站点高可用网络拓扑网络拓扑环境说明Nginx代理服务器：10.192.1.163、10.192.1.164Keepalived高可用程序提供对外服务IP地址VIP：10.192.1.99Web服务：10.192.1.66、10.192.1.67、10.192.1.68提供站点服务搭建10.192.1.163/64安装、配置Nginx和Keepalived安装
  • 架构师日记——Varnish的Grace模式和Saint模式 饥渴计科极客杰铿 架构师架构师后端服务缓存
    GRACE模式当几个客户端请求同一个页面的时候，varnish只发送一个请求的后端服务器，然后让那个其他几个请求挂起等待返回结果，返回结果后，复制请求结果发送给客户端。如果你的服务器每秒有数千万的点击率，那么这个队列是庞大的，没有用户喜欢等待服务器响应，为了解决这个问题，可以指示varnish去保持缓存的对象超过他们的TTL（就是该过期的，先别删除），而且去提供旧内容给正在等待的请求。为了提供旧的
  • web cache 无玄
    linux运维中，webcacheserver方案的部署是一个很重要的环节，选择也有很多种比如：varnish、squid、nginx。常用webcacheserver（varnish、squid、nginx）对比：varnish和squid是专业的cache服务，而nginx的cache功能是由第三方模块完成。要做cache服务的话，肯定是要选择专业的cache服务，优先选择squid和varn
  • 架构组件比较 fxly0401 Software&Architecture架构
    作为一个架构师，就必须要考虑如何选型，我们从性能、功能、配置上来进行比较筛选。软件名称性能功能过滤规则配置Squid不能多核是硬伤；磁盘缓存容量有优势；性能中等多；支持ACL角色控制；支持ICP缓存协议支持外部文件读取及热加载；支持热启动Varnish多核支持；内存缓存；性能强够用；支持集群，但不支持ICP集群；支持后端存活检查不支持外部文件读取；需要转义；支持热启动Nginx多核支持；支持代理插
  • Varnish 学习笔记总结 weixin_34232363 后端开发工具操作系统
    2019独角兽企业重金招聘Python工程师标准>>>声明：文中内容来自以下四个部分的学习笔记总结：1.马哥教育马永亮老师讲授的varnish课程2.高俊峰先生写的书籍《高性能Linux服务器构建实战》中的varnish章节3.陈明乾先生的51cto博客：http://freeloda.blog.51cto.com/2033581/12974144.互联网文档。特此向以上先贤致敬！！内容概括：一v
  • 2018-10-17 缓存服务varnish 阿丧小威
    参考：https://www.cnblogs.com/cutemsyu/p/6051876.html1、varnish程序环境软件包：yuminstallvarnish/etc/varnish/varnish.params：配置varnish服务进程的工作特性，例如监听的地址和端口，缓存机制；/etc/varnish/default.vcl：配置各Child/Cache线程的缓存；主程序：/usr
  • varnish入门 怎么就重名了 杂记负载均衡
    b站视频官网docker安装varnish某位博客园的varnish系列varnish04-varnish如何使用VCL3varnish的原理varnish是什么varnish的安装VCL基础VarnishConfigurationLanguage(VCL)是一种特定于领域的语言，可以用于描述VarnishCache服务如何处理请求和缓存策略。当加载新配置时，由Manager进程创建的VCC进程将
  • nginx、varnish和tomcat的负载均衡（端口号配置） 董大志
    本篇文档主要是为了搭配tomcat、varnish及nginx三者之间的端口号的配置，以实现三者之间的负载均衡!!运行环境：ubuntu16.04/centos7.4tomcat7jdk1.8nginx-1.5.11varnish-3.0.4注：tomcat、varnish及nginx的编译安装及初步配置可参考一下文献!https://www.jianshu.com/p/00e1ab183b6bh
  • python开发要学什么_运维为什么要学编程？编程为什么是Python？ weixin_39949954 python开发要学什么
    作者介绍：comyn，李学明。python大神，原大众点评运维平台架构师，腾讯广告部核心运维专家，饿了么Python运维开发高级总监，现就职于海淘公司。多年一线运维经验，参与过架构改造、平台迁移、自动化建设等运维核心项目，对开源系统都有深入理解，如LVS、Haproxy、MogileFS、Varnish、Nginx等，曾修改iptables内核实现实时流量镜像复制，奠定了大型公司流量无损压力测试模
  • 为什么叫python编程-运维为什么要学编程？编程为什么是Python？ weixin_37988176
    作者介绍：comyn，李学明。python大神，原大众点评运维平台架构师，腾讯广告部核心运维专家，饿了么Python运维开发高级总监，现就职于海淘公司。多年一线运维经验，参与过架构改造、平台迁移、自动化建设等运维核心项目，对开源系统都有深入理解，如LVS、Haproxy、MogileFS、Varnish、Nginx等，曾修改iptables内核实现实时流量镜像复制，奠定了大型公司流量无损压力测试模
  • Varnish开源HTTP反向代理缓存服务器、部署安装、测试 我还能再学点 服务器缓存运维
    一、概述Varnish是一个高性能的开源HTTP反向代理缓存服务器，它可以加速动态内容的交付并降低服务器的负载。Varnish常被用作HTTP加速器和负载均衡器，通过缓存静态文件、动态内容甚至整个页面来减少请求的数量和服务器响应时间。它支持各种缓存规则，可以针对不同的用户或请求类型缓存不同的信息，并提供丰富的管理工具和API以便于配置和监控。Varnish在Web性能优化和高可用性方面发挥着重要作
  • Varnish开源HTTP反向代理缓存服务器 人间打气筒（Ada） http缓存varnish运维缓存
    第三阶段基础时间：2023年6月13日参加人：全班人员内容：Varnish目录Varnish端口号：TCP/6081TCP/6082配置文件：/etc/varnish/default.vcl安装部署：测试功能：VarnishVarnish是一个高性能的开源HTTP反向代理缓存服务器，它可以加速动态内容的交付并降低服务器的负载。Varnish常被用作HTTP加速器和负载均衡器，通过缓存静态文件、动态
  • Varnish系列之三：动静分离架构与实现 平平淡淡的猪
    Varnish状态引擎说明：subvcl_recv{if(req.method=="PRI"){/*WedonotsupportSPDYorHTTP/2.0*/return(synth(405));}if(req.method!="GET"&&req.method!="HEAD"&&req.method!="PUT"&&req.method!="POST"&&req.method!="TRACE"
  • 实现高可用WordPress部署 weixin_34112208 php后端数据库
    1概述本文通过HAProxy,Keepalive,实现动静分离wordpress,在每台haproxy和wordpress服务器之间加入缓存，通过缓存实现加速。具体需求如下.(1)动静分离部署wordpress，动静都要能实现负载均衡.(2)在haproxy和后端主机之间添加varnish进行缓存.(3)haproxy的设定要求：动静分离.(4)haproxy高可用.(5)通过VIP：172.18
  • vanish 圈圈_4eef
    varnish包安装yuminstallvarnishvarnish网址：www.varnish-cache.org命中率：warmup缓存热身，，缓存的有效性判断机制：过期时长：Expires绝对时长。。cache-control:maxage=最大时间相对时长，，，cache-control:s-maxage=控制公共缓存的可缓存时长。。varnish缓存文档。条件试请求：last-modif
  • HA Cluster和keepalived主从,主主高可用设置以及varnish缓存机制 佐岸的咖啡
    1)、简述HAcluster原理i).HAcluster的定义集群cluster是指使用一组计算机作为一个整体向用户提供一组网络资源。在集群中的每个计算机系统称为集群节点（node）。集群可随着业务的增长，通过添加新的节点的方式来提升集群性能。集群的类型包括：LoadBalance、HighAvailability、HighPerformance这三种，而我们通常所说的HAcluster就是Hig
  • HA Cluster和keepalived主从,主主高可用设置以及varnish缓存机制（一） 家有猪宝_
    一、简述HAcluster原理高可用集群，英文原文为HighAvailabilityCluster，简称HACluster；集群（cluster）就是一组计算机，它们作为一个整体向用户提供一组网络资源。这些单个的计算机系统就是集群的节点（node）。高可用性集群（HAcluster）是指如单系统一样地运行并支持（计算机）持续正常运行的一个主机群。高可用集群的出现是为了使集群的整体服务尽可能可用，从
  • 高性能高可用方案Nginx （一）LNMP环境搭建 weixin_33834075 运维php开发工具
    1、理论部分1.1、负载均衡的实现负载进程架构的实现方式有多种，一般分为：1）TCP层实现的负载均衡2）应用层实现的负载均衡1.1.1、TCP层实现的负载均衡例如：lvs（调度性能强悍）1.1.2、应用层实现的负载均衡例如：nginx,haproxy,apache(mod_proxy),varnish，squid1.2、nginx的功能：1.2.1、基本的HTTP服务器特性1）提供静态和指数文件,
  • 兔子进洞算法_下兔子洞：一个varnishreload错误的故事-第1部分 cullen2012 pythonlinuxjavashellubuntu
    兔子进洞算法Afterhittingthekeyboardbuttonsforthepast20minutes,asifhewastypingforhislife,ghostinushankaturnstomewithahalf-madlookinhiseyesandaslysmile,“Dude,IthinkIgotit.在过去的20分钟里，他一直按着键盘按键，仿佛他正在为自己的生活而打字一样，
  • redis（2）-redis数据缓存、mysql和redis数据同步、varnish缓存及负载均衡及健康检查 Linux菜鸟玩家 自动化运维redis缓存数据库
    1、Redis持久化—Redis和AOFRDB的优点RDB是一个非常紧凑的文件,它保存了某个时间点得数据集,非常适用于数据集的备份,比如你可以在每个小时报保存一下过去24小时内的数据,同时每天保存过去30天的数据,这样即使出了问题你也可以根据需求恢复到不同版本的数据集.RDB是一个紧凑的单一文件,很方便传送到另一个远端数据中心或者亚马逊的S3（可能加密），非常适用于灾难恢复.RDB在保存RDB文件
  • 上能写代码，下要“揍”黑客，还有什么不是程序员的“锅”？ CSDN 程序人生 资讯程序人生网络安全业界资讯
    软件工程大师杰拉尔德·温伯格（GeraldWeinberg）说过：“如果建筑商按照程序员编写程序的方式建造建筑，那么第一只出现的啄木鸟（找Bug）就会摧毁整个文明。近日，美国计算机协会的六月刊（COMMUNICATIONSOFTHEACM）收录了一篇名为《软件行业仍然是问题所在》的文章。此文作者Poul-HenningKamp是一位丹麦的计算机软件开发人员，也是FreeBSD、Varnish等开源
  • SAX解析xml文件 小猪猪08 xml
    1.创建SAXParserFactory实例 2.通过SAXParserFactory对象获取SAXParser实例 3.创建一个类SAXParserHander继续DefaultHandler，并且实例化这个类 4.SAXParser实例的parse来获取文件     public static void main(String[] args) { //
  • 为什么mysql里的ibdata1文件不断的增长？ brotherlamp linuxlinux运维linux资料linux视频linux运维自学
    我们在 Percona 支持栏目经常收到关于 MySQL 的 ibdata1 文件的这个问题。 当监控服务器发送一个关于 MySQL 服务器存储的报警时，恐慌就开始了 —— 就是说磁盘快要满了。 一番调查后你意识到大多数地盘空间被 InnoDB 的共享表空间 ibdata1 使用。而你已经启用了 innodbfileper_table，所以问题是： ibdata1存了什么？ 当你启用了 i
  • Quartz-quartz.properties配置 eksliang quartz
    其实Quartz JAR文件的org.quartz包下就包含了一个quartz.properties属性配置文件并提供了默认设置。如果需要调整默认配置，可以在类路径下建立一个新的quartz.properties，它将自动被Quartz加载并覆盖默认的设置。   下面是这些默认值的解释 #-----集群的配置 org.quartz.scheduler.instanceName =
  • informatica session的使用 18289753290 workflowsessionlogInformatica
    如果希望workflow存储最近20次的log，在session里的Config  Object设置，log  options做配置，save  session log :sessions  run  ;savesessio log for  these runs:20 session下面的source 里面有个tracing 
  • Scrapy抓取网页时出现CRC check failed 0x471e6e9a != 0x7c07b839L的错误 酷的飞上天空 scrapy
    Scrapy版本0.14.4 出现问题现象： ERROR: Error downloading <GET http://xxxxx  CRC check failed   解决方法   1.设置网络请求时的header中的属性'Accept-Encoding': '*;q=0'   明确表示不支持任何形式的压缩格式，避免程序的解压
  • java Swing小集锦 永夜-极光 java swing
    1.关闭窗体弹出确认对话框   1.1   this.setDefaultCloseOperation (JFrame.DO_NOTHING_ON_CLOSE);   1.2   this.addWindowListener ( new WindowAdapter () { public void windo
  • 强制删除.svn文件夹 随便小屋 java
              在windows上，从别处复制的项目中可能带有.svn文件夹，手动删除太麻烦，并且每个文件夹下都有。所以写了个程序进行删除。因为.svn文件夹在windows上是只读的，所以用File中的delete()和deleteOnExist()方法都不能将其删除，所以只能采用windows命令方式进行删除
  • GET和POST有什么区别？及为什么网上的多数答案都是错的。 aijuans get post
        如果有人问你，GET和POST，有什么区别？你会如何回答？ 我的经历      前几天有人问我这个问题。我说GET是用于获取数据的，POST，一般用于将数据发给服务器之用。     这个答案好像并不是他想要的。于是他继续追问有没有别的区别？我说这就是个名字而已，如果服务器支持，他完全可以把G
  • 谈谈新浪微博背后的那些算法 aoyouzi 谈谈新浪微博背后的那些算法
    本文对微博中常见的问题的对应算法进行了简单的介绍，在实际应用中的算法比介绍的要复杂的多。当然，本文覆盖的主题并不全，比如好友推荐、热点跟踪等就没有涉及到。但古人云“窥一斑而见全豹”，希望本文的介绍能帮助大家更好的理解微博这样的社交网络应用。 微博是一个很多人都在用的社交应用。天天刷微博的人每天都会进行着这样几个操作：原创、转发、回复、阅读、关注、@等。其中，前四个是针对短博文，最后的关注和@则针
  • Connection reset 连接被重置的解决方法 百合不是茶 java字符流连接被重置
    流是java的核心部分,,昨天在做android服务器连接服务器的时候出了问题,就将代码放到java中执行,结果还是一样连接被重置   被重置的代码如下;   客户端代码; package 通信软件服务器; import java.io.BufferedWriter; import java.io.OutputStream; import java.io.O
  • web.xml配置详解之filter bijian1013 javaweb.xmlfilter
    一.定义 <filter> <filter-name>encodingfilter</filter-name> <filter-class>com.my.app.EncodingFilter</filter-class> <init-param> <param-name>encoding<
  • Heritrix Bill_chen 多线程xml算法制造配置管理
    作为纯Java语言开发的、功能强大的网络爬虫Heritrix，其功能极其强大，且扩展性良好，深受热爱搜索技术的盆友们的喜爱，但它配置较为复杂，且源码不好理解，最近又使劲看了下，结合自己的学习和理解，跟大家分享Heritrix的点点滴滴。 Heritrix的下载（http://sourceforge.net/projects/archive-crawler/）安装、配置，就不罗嗦了，可以自己找找资
  • 【Zookeeper】FAQ bit1129 zookeeper
    1.脱离IDE，运行简单的Java客户端程序 #ZkClient是简单的Zookeeper~$ java -cp "./:zookeeper-3.4.6.jar:./lib/*" ZKClient    1. Zookeeper是的Watcher回调是同步操作，需要添加异步处理的代码 2. 如果Zookeeper集群跨越多个机房，那么Leader/
  • The user specified as a definer ('aaa'@'localhost') does not exist 白糖_ localhost
    今天遇到一个客户BUG，当前的jdbc连接用户是root，然后部分删除操作都会报下面这个错误：The user specified as a definer ('aaa'@'localhost') does not exist 最后找原因发现删除操作做了触发器，而触发器里面有这样一句 /*!50017 DEFINER = ''aaa@'localhost' */  原来最初
  • javascript中showModelDialog刷新父页面 bozch JavaScript刷新父页面showModalDialog
    在页面中使用showModalDialog打开模式子页面窗口的时候，如果想在子页面中操作父页面中的某个节点，可以通过如下的进行：       window.showModalDialog('url',self,‘status...’); // 首先中间参数使用self       在子页面使用w
  • 编程之美-买书折扣 bylijinnan 编程之美
    import java.util.Arrays; public class BookDiscount { /**编程之美 买书折扣 书上的贪心算法的分析很有意思，我看了半天看不懂，结果作者说，贪心算法在这个问题上是不适用的。。 下面用动态规划实现。 哈利波特这本书一共有五卷，每卷都是8欧元，如果读者一次购买不同的两卷可扣除5%的折扣，三卷10%，四卷20%，五卷
  • 关于struts2.3.4项目跨站执行脚本以及远程执行漏洞修复概要 chenbowen00 strutsWEB安全
    因为近期负责的几个银行系统软件，需要交付客户，因此客户专门请了安全公司对系统进行了安全评测，结果发现了诸如跨站执行脚本，远程执行漏洞以及弱口令等问题。 下面记录下本次解决的过程以便后续 1、首先从最简单的开始处理，服务器的弱口令问题，首先根据安全工具提供的测试描述中发现应用服务器中存在一个匿名用户，默认是不需要密码的，经过分析发现服务器使用了FTP协议， 而使用ftp协议默认会产生一个匿名用
  • [电力与暖气]煤炭燃烧与电力加温 comsci
          在宇宙中,用贝塔射线观测地球某个部分,看上去,好像一个个马蜂窝,又像珊瑚礁一样,原来是某个国家的采煤区.....       不过,这个采煤区的煤炭看来是要用完了.....那么依赖将起燃烧并取暖的城市,在极度严寒的季节中...该怎么办呢?   &nbs
  • oracle O7_DICTIONARY_ACCESSIBILITY参数 daizj oracle
    O7_DICTIONARY_ACCESSIBILITY参数控制对数据字典的访问.设置为true,如果用户被授予了如select any table等any table权限,用户即使不是dba或sysdba用户也可以访问数据字典.在9i及以上版本默认为false,8i及以前版本默认为true.如果设置为true就可能会带来安全上的一些问题.这也就为什么O7_DICTIONARY_ACCESSIBIL
  • 比较全面的MySQL优化参考 dengkane mysql
    本文整理了一些MySQL的通用优化方法，做个简单的总结分享，旨在帮助那些没有专职MySQL DBA的企业做好基本的优化工作，至于具体的SQL优化，大部分通过加适当的索引即可达到效果，更复杂的就需要具体分析了，可以参考本站的一些优化案例或者联系我，下方有我的联系方式。这是上篇。   1、硬件层相关优化   1.1、CPU相关   在服务器的BIOS设置中，可
  • C语言homework2，有一个逆序打印数字的小算法 dcj3sjt126com c
    #h1#   0、完成课堂例子 1、将一个四位数逆序打印 1234 ==> 4321 实现方法一： # include <stdio.h> int main(void) { int i = 1234; int one = i%10; int two = i / 10 % 10; int three = i / 100 % 10;
  • apacheBench对网站进行压力测试 dcj3sjt126com apachebench
       ab 的全称是 ApacheBench ， 是 Apache 附带的一个小工具 ， 专门用于 HTTP Server 的 benchmark testing ， 可以同时模拟多个并发请求。前段时间看到公司的开发人员也在用它作一些测试，看起来也不错，很简单，也很容易使用，所以今天花一点时间看了一下。 通过下面的一个简单的例子和注释，相信大家可以更容易理解这个工具的使用。
  • 2种办法让HashMap线程安全 flyfoxs javajdkjni
    多线程之--2种办法让HashMap线程安全 多线程之--synchronized 和reentrantlock的优缺点 多线程之--2种JAVA乐观锁的比较( NonfairSync VS. FairSync)     HashMap不是线程安全的,往往在写程序时需要通过一些方法来回避.其实JDK原生的提供了2种方法让HashMap支持线程安全.  
  • Spring Security（04）——认证简介 234390216 Spring Security认证过程
    认证简介 目录 1.1     认证过程 1.2     Web应用的认证过程 1.2.1    ExceptionTranslationFilter 1.2.2    在request之间共享SecurityContext   1
  • Java 位运算 Javahuhui java位运算
    // 左移( << ) 低位补0 // 0000 0000 0000 0000 0000 0000 0000 0110 然后左移2位后，低位补0： // 0000 0000 0000 0000 0000 0000 0001 1000 System.out.println(6 << 2);// 运行结果是24 // 右移( >> ) 高位补"
  • mysql免安装版配置 ldzyz007 mysql
    1、my-small.ini是为了小型数据库而设计的。不应该把这个模型用于含有一些常用项目的数据库。 2、my-medium.ini是为中等规模的数据库而设计的。如果你正在企业中使用RHEL,可能会比这个操作系统的最小RAM需求(256MB)明显多得多的物理内存。由此可见，如果有那么多RAM内存可以使用，自然可以在同一台机器上运行其它服务。 3、my-large.ini是为专用于一个SQL数据
  • MFC和ado数据库使用时遇到的问题 你不认识的休道人 sqlC++mfc
    =================================================================== 第一个 =================================================================== try{ CString sql; sql.Format("select * from p
  • 表单重复提交Double Submits rensanning double
    可能发生的场景： *多次点击提交按钮 *刷新页面 *点击浏览器回退按钮 *直接访问收藏夹中的地址 *重复发送HTTP请求（Ajax） （1）点击按钮后disable该按钮一会儿，这样能避免急躁的用户频繁点击按钮。 这种方法确实有些粗暴，友好一点的可以把按钮的文字变一下做个提示，比如Bootstrap的做法： http://getbootstrap.co
  • Java String 十大常见问题 tomcat_oracle java正则表达式
    　1.字符串比较，使用“==”还是equals()? 　　"=="判断两个引用的是不是同一个内存地址(同一个物理对象)。 　　equals()判断两个字符串的值是否相等。 　　除非你想判断两个string引用是否同一个对象，否则应该总是使用equals()方法。 　　如果你了解字符串的驻留(String Interning)则会更好地理解这个问题。 　 　
  • SpringMVC 登陆拦截器实现登陆控制 xp9802 springMVC
    思路，先登陆后，将登陆信息存储在session中，然后通过拦截器，对系统中的页面和资源进行访问拦截，同时对于登陆本身相关的页面和资源不拦截。   实现方法： 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他