DKider
DKider

python爬虫015-处理网页源码中的 问题，以及用pyquery解析时遇到的奇葩Bug。

先从网页源码来看吧：

image.png
中间的内容我省略了

我需要的内容就在这个

标签中，从这一点来看还是很友好的。

比如我要的到这个籍贯信息：

image.png

可以发现，在“江苏”之前，有一个 ，这个符号是html中的空格符号。
如果学过前端的相关知识，就会知道，在浏览器解析页面的时候，“ ”空格是省略的，不显示的，如果我们需要显示空格就需要使用 。
但是这给我们解析的时候带来了很大的困难，总是报gbk解析器无法解析之类的错误。

事实上我上面是瞎说的，这里的主要问题，就在这里：

--snip--
native_place = doc.find(
            '#xjkpTable > tbody > tr:nth-child(7) > td:nth-child(2)'
        ).text()
--snip--

这一条语句不会有任何的输出。因为它的到的东西是空的。

我从昨天的这个时候到今天下午的五点，才解决这个问题，这个伪类选择器是我从浏览器直接复制下来的，应该是没问题，所以我把测试的重点放在了页面源码的编码上，什么gbk、utf-8、utf-16，基本上常见的编码方式都试过了，encode，decode啥的都用上了，也没用。

后来。我用response.encoding打印出响应的编码方式，结果他就是utf-8。
emmmmm
那为什么获取不到呢？
后来用了xpath、BeautifulSoup、各种解析库，就是得不到正确的结果，而且编码问题越来复杂，我把它保存到本地，它又说gbk无法解析、cp936啥的也不行、laint-1啥的也出来了。

想了一整天，看遍了度娘的前几页，一无所获。

后来我试了试，将伪类选择器换一换，因为我是直接用开发者工具拷贝下来的，所以我没有怀疑他的准确性，一般来说页没有问题。我直接选择了

标签：
find('table')
是有结果的，而且没乱码。
然后我有选择了
find('tbody')
！！！！没了，什么都没有了。没输出，没报错。
然后我直接选择了所有的标签：
find('tr')
? ? ? ?又有结果了，emmmm,html里有这个标签吗？

???

这w3school上查的，应该是有的。

那没问题啊，又想了很久。

不知道你么注意到了没有，最开始的两张图里的

的结束标签是灰色的。

我最开始的时候之一到了，但是不知道什么意思，现在也还是不知道。

于是我做了一个很简单的事情，把伪类选择器的tbody标签那一层删除。

--snip--
native_place = doc.find(
            '#xjkpTable > tr:nth-child(7) > td:nth-child(2)'
        ).text()
--snip--

普天同庆，解决了。。

解决的稀里糊涂。就这样子，我的到了我想要的数据。

前面什么 ，邮，\xa0，等等奇怪的编码问题，都没了。

天哪，我浪费了一整天在这个bug上。

F U

你可能感兴趣的:(python爬虫015-处理网页源码中的 问题，以及用pyquery解析时遇到的奇葩Bug。)

  • 异地收款码平台哪个最好，二维码异地收款无限制 神州网络公司
    三方支付公司举不胜数，支持远程收款的为数不多，今天小编从通道稳定何资金清算两个方面来注意列举好用的收款码平台，有银联商务收款单，旺铺收款单，富友收款单，付呗收款单，随行付通道固码。收款单是固码的衍生版，固码也俗称静态码，也有同行习惯将收款单称为动态码，只要提供动态码技术支持的平台远程收款都相对好用。银联商务收款单银联商务收款单，央行支付公司牌照，隶属于银联商务股份有限公司产品，注册资金27亿，公司
  • 广州司法亲子鉴定去哪里做（广州正规司法亲子鉴定机构名单） 中量国鉴
    现实生活中，亲子鉴定的用途很多。除了我们都知道的确认与孩子之间的亲缘关系，亲子鉴定还广泛适用于办理户口、医学出生证明、入学、出国、公证、移民、打官司等用途。在广州想做亲子鉴定，哪里能做呢，要准备什么？这根据想要做的亲子鉴定类型不同，而有所不同。广州哪里可以做亲子鉴定，医院可以吗？现在还有很多人认为DNA亲子鉴定应该要到医院里才能做，但实际上，由于亲子鉴定不属于常规的医疗服务，且DNA亲子鉴定需要特
  • 拼命三郎石秀，梁山上一位真正的好汉，为兄弟两肋插刀 白口闲话
    石秀，绰号拼命三郎，是梁山上一位真正的好汉。石秀好打抱不平，重义气，敢为兄弟两肋插刀。石秀性格孤僻，打起架来不要命，因此有了‘拼命三郎’的绰号。当年石秀沦落到蓟州，见街头有几个混混在群殴一个人。石秀看不过去，出手打跑了那几个混混。石秀救下的那个人，正是病关索杨雄，二人结拜为兄弟，杨雄邀请石秀住进自己家。石秀出手救杨雄，恰好被路过的戴宗和杨林看到。戴宗有意招募石秀上梁山，但被石秀婉拒，不过这也为后来
  • 广东科德投资服务费怎么退?答案是:可以退! 申请退款流程公布!有法可依！成功退费方法及案例讲述 法律维权小卫士
    在投顾公司服务费是可以退的。如果认为投顾公司存在违规操作或欺诈行为或者承诺的收益未能实现、服务内容与宣传不符、投顾建议缺乏准确性等，可以通过有效的退款流程来申请退回服务费。结尾咨询法助顾问退款流程具体退款流程可能包括提交相关的聊天记录和交易证据，签署退款文件并填写到账信息等步骤。完成这些步骤后，服务费用将会在约定的时间内原路退回。同时，根据《消费者权益保护法》的相关规定，消费者在购买、使用商品和接
  • 华杉版资治通鉴【1979】李师道覆灭。2023-07-12 华杉2009
    资治通鉴卷第二百四十一唐纪五十七公元819年2月——821年6月共2年5个月宪宗昭文章武大圣至神孝皇帝下元和十四年（公元819年）1、二月，楚州刺史李听袭击海州，攻克东海、朐山、怀仁等县。李愬击败平卢兵于沂州，攻拔丞县。李师道听闻官军侵逼，征发民众修缮郓州城壕，加强守备，妇女都被强征去工作，民众更加恐惧和怨恨。都知兵马使刘悟，是刘正臣的孙子，李师道派他将兵一万余人屯驻阳谷，以抵御官军。刘悟对人宽厚
  • 结婚，钱是个大问题 LittleBoss
    同学小张毕业不到一年奉子成婚，老公家里有车有房有钱，自己挣的钱够自己零花就好，生了娃以后索性把工作辞了，全职带娃。以前觉得这样的生活太没追求了，现在自己为钱奔波的时候，觉得不用考虑下个月工资能发多少的生活真好，不用担心没钱付房租的生活惬意，想自驾游随时可以。同学小王家境不好，谈的男朋友家里很有钱，当时我们都觉得她可能会在男方家里受委屈，结果毕业后不久男朋友把房买了，俩人同居了。姑娘没有任何负担，就
  • 《喋血双雄》2024美版电影[1080p中文字幕]免费在线观看未删减完整版夸克网盘高清迅雷网盘百度云 全网优惠分享君
    《喋血双雄》作为吴宇森导演的经典之作，其1989年的港版曾一度成为香港动作电影的标杆，其独特的暴力美学风格和深刻的兄弟情谊让无数影迷为之倾倒。然而，时隔三十五年，吴宇森亲自操刀翻拍的2024美版《喋血双雄》却引发了诸多争议与讨论。本文将从剧情、角色、风格以及观众反响等方面，对这部新作进行全面点评。提示：文章排版原因，喋血双雄资源链接地址放在文章结尾，往下翻就行提示：文章排版原因，喋血双雄资源链接地
  • Template execution failed: ReferenceError: name is not defined An_s 技术（javascript）配置（环境）reactjsvue.jswebpack
    问题我们使用了html-webpack-plugin（webpack）进行编译html，导致的错误。排查结果连接地址html-webpack-plugin版本低(2.30.1)，html模板里面不能有``符号，注释都不行``//varreg=newRegExp(`(^|&)${name}=([^&]*)(&|$),"i”)这样也不支持varreg=newRegExp(`(^|&)${name}=(
  • 树立管道思维，把握你的生命线 清荷_b306
    《管道的故事》-树立管道思维，把握你的生命线01.今日导读亲爱的同学们，很高兴遇见你，我是简老师。今天继续为你解读《管道的故事》这本书的第二部分内容。昨天，我们通过管道的故事，重点向大家介绍了提桶思维和管道思维。知道了要想实现财务自由，就要拥有可靠的管道收入，否则，月薪再高也无用。一旦失去工作，就会失去收入来源。那么，我们该如何改变原有的思维，从而去掌控自己的生命线呢？今天，我们继续在《管道的故事
  • 民工蜕变记录 民工小丁
    叫醒我的不是闹钟也不是梦想，而是小时候吹过的牛逼今日起床：5:00坚持早起：第29天成功日志1-坚持每日早起2-坚持每日阅读3-坚持每日锻炼4-完成课程学习并认真写完作业书读万卷今日阅读：《黑天鹅》健康与运动今日锻炼：俯卧撑20个坚持锻炼：第8天每日精进--每日一省昨天看小可舞蹈展示，看到曾经连劈叉都不行的小家伙，现在居然跳的这么好，突然有感：也就是每个星期一节舞蹈课，从开始什么都不会，到现在可以
  • vue项目使用tsx
    1、vue2.7中使用webpack处理，配置如下{test:/\.(ts|tsx)$/,use:[{loader:'babel-loader',options:{presets:['@babel/preset-env','@vue/babel-preset-jsx']}},{loader:'ts-loader',options:{appendTsSuffixTo:[/\.vue$/]//vue文
  • 长篇小说|一剑破苍穹3 懒懒喵咪
    男孩吓了一跳，他身体灵巧地向旁边一躲，双手凝聚着灵力，往前一挥，江思月被巨大的力量震得后退了好几步。“呼，我太弱了。”江思月稳住身子，看了看自己的手。“你要干什么？”此刻顾靖还是警戒地站在原地，做好了进攻的架势。“没事，我只是想要看看你水平怎么样。看来我白修炼了，这破玩意。”江思月“噗嗤”一声笑了。“对了，我看看大约明天，我就离开你们家，出去。你回头和你妈妈还有你爸爸说一声。”“你要去哪？”“额，
  • 家有一老如有一宝 静候_轮回
    快重阳节了，上周四老妈回老家准备“拜山”事宜。于是家里开始鸡飞狗跳，幸福感暴跌。先是我跟龙先生轮流带娃，上午我带娃那龙先生就上班。要不就是龙先生带娃，我去上班。结果是，即使在这个月剩下的四天里我还是不能够完成足够的出勤天数。汗......还有更让我们作为爸妈愧疚的就是，小宝正餐比较难正常自己吃，零食牛奶倒是没少吃。但是今天早上一称，外婆才回去四天，小宝就瘦了。被我老妈一顿数落。你们做爸妈也太不上心
  • 看一个广告赚1元的软件，手机上用这个方法一天挣50以上 配音就业圈
    高效利用移动平台，智慧创收新途径：探索日入五十元的广告浏览应用在数字时代的浪潮中，创新技术正以前所未有的方式改变着我们的生活方式与经济模式。兼职副业推荐公众号，配音新手圈，声优配音圈，新配音兼职圈，配音就业圈，鼎音副业，有声新手圈，每天更新各种远程工作与在线兼职，职位包括：写手、程序开发、剪辑、设计、翻译、配音、无门槛、插画、翻译、等等。。。每日更新兼职。1、配音新手圈这是一个公众号配音新手圈里面
  • LeetCode第860题解析
    在柠檬水摊上，每一杯柠檬水的售价为5美元。顾客排队购买你的产品，（按账单bills支付的顺序）一次购买一杯。每位顾客只买一杯柠檬水，然后向你付5美元、10美元或20美元。你必须给每个顾客正确找零，也就是说净交易是每位顾客向你支付5美元。注意，一开始你手头没有任何零钱。如果你能给每位顾客正确找零，返回true，否则返回false。示例1：输入：[5,5,5,10,20]输出：true解释：前3位顾客
  • 百年百部图画书阅读打卡Day11：《河马幼儿园》 囡啵萬的中央哆
    今天我们要分享的是21本中年代最为久远的一本《河马幼儿园》，这部作品早在1922年就问世了，由我国著名的作家、学者、翻译家郑振铎老师在他创办的我国最早的儿童期刊《儿童世界》上连载。这组故事原名叫作《河马幼稚园》，由于“幼稚园”是1922年使用的旧称，所以将标题和内文中的“幼稚园”改为“幼儿园”。这本作品是由郑振铎先生创作的。他是福建长乐人，中国现代著名作家、文学评论家、文学史家、艺术史家、翻译家、
  • 内地顶级个唱品牌——华晨宇火星演唱会 山海里的微光yu
    时隔两年，2021华晨宇火星演唱会终于在海口拉开帷幕。历时6天，每天超过240分钟的时长，酣畅淋漓的演出，无论是歌迷还是华晨宇，都真切的沉浸在的火星世界。如今演唱会落幕已经过去了一个星期，然而在参加了演唱会的歌迷和路人心中那些光影，那些和音乐交织的、闪动的、跳跃的色彩久久挥之不去。每当夜幕降临，让人不得不为之赞叹。原来，参办2008年北京奥运会闭幕式的［锋尚文化］参与并助力华晨宇火星演唱会。202
  • yarn : 无法加载文件 D:\nvm\nodejs\yarn.ps1，因为在此系统上禁止运行脚本。有关详细信息，请参阅 https:/go.microsoft.com/fwlink/? 尔嵘 Vue3.0vue.js
    这个错误是因为PowerShell的执行策略（ExecutionPolicy）阻止了yarn脚本的运行。以下是几种解决方法：方法1：临时更改执行策略（推荐先尝试）以管理员身份打开PowerShell运行以下命令：powershellSet-ExecutionPolicy-ScopeProcess-ExecutionPolicyBypass然后再次尝试运行yarn命令方法2：永久更改执行策略（需要管
  • 高考后的日子 星兮
    我像极了一个在学校上浑水摸鱼的人。竟然也上完了高中。高中受过的那些精神折磨，在18一一都消失。明明那是应该大放光彩的机会，我却没有把它留下，到了这个年纪，突然发现打工不累，学习反而更使我累，我突然意识到以前的种种不开心都是我不喜欢学习的证据。我突然发现又遗憾觉得自己做的不够好。自己可以在努力一点，就可以离喜欢的人近点了。一切都要重新努力，不为了什么，不为了混文凭，而是梦想，小时候的自己真的是白日做
  • 2021-10-23成交量卖出形态：股价放量跌破支撑位 股票
    实例：洋河股份在2012年12月下跌过程中多次在同一价位获得支撑反弹，在些价位形成了一个支撑位，在2013年1月28日股价放量跌破了该支撑位，意味着股价将在空方的打压下持续下跌，股价自此一路下行。形态简介：当股价下跌到支撑位附近时，如果无法获得有效支撑，而是放量跌破这个支撑位，就说明前期的支撑位已经失败、多方已经无力继续支撑股价。越来越多的投资者开始卖出股票，未来股价将在这些空方力量的打压下持续下
  • webView显示网页的时候，右半部分有白色一片空白区域
    这时需要设置他的滚动条wv_showHTML.setScrollBarStyle(View.SCROLLBARS_INSIDE_OVERLAY)WebView中android:scrollbarSize="0dip"加上这句就好了引用于：http://www.17jquery.com/html_html5/38376/和http://bbs.csdn.net/topics/350001955
  • 并发编程原理与实战（十八）ReentrantLock API全面解析
    上一篇讲解了Lock接口核心API和相比于synchronized的关键优势，本文来进一步学习Lock接口的具体实现类ReentrantLock。认识ReentrantLock基本行为和语义下面我们先看ReentrantLock的定义。/***Areentrantmutualexclusion{@linkLock}withthesamebasic*behaviorandsemanticsasthe
  • 并发编程原理与实战（九）限流利器信号量的最佳实践分析 帧栈 Java并发编程java
    系统掌握并发编程系列（一）精准理解线程的创建和停止系统掌握并发编程系列（二）详解Thread类的主要属性和方法系统掌握并发编程系列（三）一步步剖析线程返回值系统掌握并发编程系列（四）详细分析传统并发协同方式（synchronized与wait()notify()）系统掌握并发编程系列（五）讲透传统并发协同方式伪唤醒与加锁失效问题系统掌握并发编程系列（六）详细讲解并发协同利器CountDownLat
  • 侧耳倾听 温暖的佳佳
    可能很多人都不知道，能和所有人沟通的秘诀，不是多么擅长表达，而是善于倾听，今天我们来分享三个倾听要点。被尊重。我们有个误区，觉得认真听别人说话，不时点头微笑，注视他的眼睛，就是倾听。其实倾听不在于有多投入，而在于你到底从对方的话中听到了什么，只有听到感受和需求，并且给予对方期待的回应，他才能感觉到被尊重。被理解。回应对方，他未必能感觉到被理解，因为如果方法不对的话，回应只会适得其反。要别人感觉你理
  • 从0到1解析微信推客小程序源码与实现指南 开发加微信：hedian116 微信小程序架构
    一、什么是微信推客小程序微信推客小程序是一种基于微信生态系统的社交电商工具，它允许用户通过分享商品链接或小程序页面来推广商品，并在交易成功后获得相应佣金。这类小程序通常包含商品展示、分享功能、订单跟踪和佣金结算等核心模块。二、推客小程序的核心功能模块用户系统：微信授权登录用户身份识别（普通用户/推客）个人信息管理商品展示模块：商品分类浏览商品详情页搜索功能推广功能：生成专属推广链接分享到微信好友/
  • 贺兰夜话（一）王二小的美好岁月（18） Gwen_f64c
    （十八）转过天，天刚蒙蒙亮，罗成酒醉醒来；说要赶早班车回省城。二小知道春播将至，队上每天都有去车站拉化肥的大车。跑到马号，见车去圈空。只好又跑到赵谝子家借车，得知晓华昨晚的事，心绪越发焦急不安。可是哥们还要送，罗成真是个难得的朋友。在车站分手前，罗成几乎调动起他所认知的语言，劝慰了二小。他说，你要像个爷们，当断则断才是男人、你把眼光放远点，别在一棵树吊死、人这一辈子，关键就是几步……见二小还是沉默
  • 《我，华夏飞鱼，惊艳全球运动员！》林宇、黄玉婷全文免费在线阅读无广告_《我，华夏飞鱼，惊艳全球运动员！》无弹窗全文在线阅读 霸道推书1
    小说简介：他穿越到这方世界时临近高考，打算好好学习上一个好大学。奈何和北大差了十分，为了补分，他参加了奥数比赛，结果到了才发现参加成了奥运？既来之则安之，在他做预备动作时，系统来了。“恭喜宿主成功参加奥运会，获得阶段性任务：获得的金牌数量越多，获得相应积分越多。”于是乎，他开局就给自己兑换了一个满级短跑技能，一举拿下金牌！靠着金牌换积分，来获得更多...书名：《我，华夏飞鱼，惊艳全球运动员！》主角
  • 【算法】贪心算法——柠檬水找零
    题解：柠檬水找零(贪心算法)目录1.题目2.题解3.参考代码4.证明5.总结1.题目题目链接：LINK2.题解分情况讨论+贪心算法当顾客为5元时，收下当顾客为10元时，收下10元并找回5元当顾客为20元时，收下20元并找回10+5元或者5+5+5元这里仅20元时候找钱会有分歧，所以这里我们用贪心算法，即优先留下尽可能多的5元，尽快把10元扔出去。原因：5元是“万金油”，既可以给10元找零，也可以给
  • 晨间日记 木子化敏
    昨晚又是一场雨，睡眼朦胧中也不知道什么时间下的，今晨起来，小有些细雨蒙蒙！穿着短袖衫还有些凉意呢？吃吧早餐，赶时间上班，走进校园，看雨后的校园格外清亮，清新，看到活泼可爱的学生们打着招呼，心里美滋滋的！校园内的百日红已经盛开，雨后更加艳丽，就好像学生们一样，朝气蓬勃，充满活力，让人眼前一亮，煞是好看！雨后天气凉爽起来，大家可以充分享受夏风的吹拂，学生们学得带劲，学校一派新气象！朗朗书声合着老师们激
  • 2023-09-11 做一束暖暖的光
    一、中原焦点团队杜冰冰焦点初15期坚持分享第1591天二、坚持读书分享第1521天，《洛克菲勒写给儿子的38封信》第79--86页广州云浮之行顺利结束，此刻在回家的路上，龙老师特别交代，持续打磨自己的自我介绍，目的是深挖自己，加强自己的强项，放大自己的优势，做到内外联动此乃真强大。我的自我介绍如下：大家好！我是河南叶县的杜冰，做临床护士23年，做中层管理者9年，现任叶县人民医院呼吸内科护士长。现在
  • jQuery 键盘事件keydown ,keypress ,keyup介绍 107x jsjquerykeydownkeypresskeyup
    本文章总结了下些关于jQuery 键盘事件keydown ,keypress ,keyup介绍，有需要了解的朋友可参考。 一、首先需要知道的是： 1、keydown() keydown事件会在键盘按下时触发. 2、keyup()  代码如下 复制代码 $('input').keyup(funciton(){      
  • AngularJS中的Promise bijian1013 JavaScriptAngularJSPromise
    一.Promise         Promise是一个接口，它用来处理的对象具有这样的特点：在未来某一时刻（主要是异步调用）会从服务端返回或者被填充属性。其核心是，promise是一个带有then()函数的对象。         为了展示它的优点，下面来看一个例子，其中需要获取用户当前的配置文件： var cu
  • c++ 用数组实现栈类 CrazyMizzz 数据结构C++
    #include<iostream> #include<cassert> using namespace std; template<class T, int SIZE = 50> class Stack{ private: T list[SIZE];//数组存放栈的元素 int top;//栈顶位置 public: Stack(
  • java和c语言的雷同 麦田的设计者 java递归scaner
    软件启动时的初始化代码，加载用户信息2015年5月27号 从头学java二 1、语言的三种基本结构：顺序、选择、循环。废话不多说，需要指出一下几点：      a、return语句的功能除了作为函数返回值以外，还起到结束本函数的功能，return后的语句 不会再继续执行。      b、for循环相比于whi
  • LINUX环境并发服务器的三种实现模型 被触发 linux
    服务器设计技术有很多，按使用的协议来分有TCP服务器和UDP服务器。按处理方式来分有循环服务器和并发服务器。 1  循环服务器与并发服务器模型 在网络程序里面，一般来说都是许多客户对应一个服务器，为了处理客户的请求，对服务端的程序就提出了特殊的要求。 目前最常用的服务器模型有： ·循环服务器：服务器在同一时刻只能响应一个客户端的请求 ·并发服务器：服
  • Oracle数据库查询指令 肆无忌惮_ oracle数据库
    20140920   单表查询 -- 查询************************************************************************************************************ -- 使用scott用户登录   -- 查看emp表   desc emp  
  • ext右下角浮动窗口 知了ing JavaScriptext
    第一种 <!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-transitional.dtd"> <html xmlns="http://www.w3.org/1999/
  • 浅谈REDIS数据库的键值设计 矮蛋蛋 redis
    http://www.cnblogs.com/aidandan/ 原文地址：http://www.hoterran.info/redis_kv_design 丰富的数据结构使得redis的设计非常的有趣。不像关系型数据库那样，DEV和DBA需要深度沟通，review每行sql语句，也不像memcached那样，不需要DBA的参与。redis的DBA需要熟悉数据结构，并能了解使用场景。
  • maven编译可执行jar包 alleni123 maven
    http://stackoverflow.com/questions/574594/how-can-i-create-an-executable-jar-with-dependencies-using-maven <build> <plugins> <plugin> <artifactId>maven-asse
  • 人力资源在现代企业中的作用 百合不是茶 HR 企业管理
    //人力资源在在企业中的作用人力资源为什么会存在，人力资源究竟是干什么的 人力资源管理是对管理模式一次大的创新，人力资源兴起的原因有以下点： 工业时代的国际化竞争，现代市场的风险管控等等。所以人力资源 在现代经济竞争中的优势明显的存在，人力资源在集团类公司中存在着 明显的优势(鸿海集团)，有一次笔者亲自去体验过红海集团的招聘，只 知道人力资源是管理企业招聘的 当时我被招聘上了，当时给我们培训 的人
  • Linux自启动设置详解 bijian1013 linux
    linux有自己一套完整的启动体系，抓住了linux启动的脉络，linux的启动过程将不再神秘。 阅读之前建议先看一下附图。 本文中假设inittab中设置的init tree为： /etc/rc.d/rc0.d /etc/rc.d/rc1.d /etc/rc.d/rc2.d /etc/rc.d/rc3.d /etc/rc.d/rc4.d /etc/rc.d/rc5.d /etc
  • Spring Aop Schema实现 bijian1013 javaspringAOP
    本例使用的是Spring2.5 1.Aop配置文件spring-aop.xml <?xml version="1.0" encoding="UTF-8"?> <beans xmlns="http://www.springframework.org/schema/beans" xmln
  • 【Gson七】Gson预定义类型适配器 bit1129 gson
    Gson提供了丰富的预定义类型适配器，在对象和JSON串之间进行序列化和反序列化时，指定对象和字符串之间的转换方式，   DateTypeAdapter   public final class DateTypeAdapter extends TypeAdapter<Date> { public static final TypeAdapterFacto
  • 【Spark八十八】Spark Streaming累加器操作（updateStateByKey) bit1129 update
    在实时计算的实际应用中，有时除了需要关心一个时间间隔内的数据，有时还可能会对整个实时计算的所有时间间隔内产生的相关数据进行统计。 比如： 对Nginx的access.log实时监控请求404时，有时除了需要统计某个时间间隔内出现的次数，有时还需要统计一整天出现了多少次404，也就是说404监控横跨多个时间间隔。   Spark Streaming的解决方案是累加器，工作原理是，定义
  • linux系统下通过shell脚本快速找到哪个进程在写文件 ronin47
    一个文件正在被进程写 我想查看这个进程 文件一直在增大 找不到谁在写 使用lsof也没找到 这个问题挺有普遍性的，解决方法应该很多，这里我给大家提个比较直观的方法。 linux下每个文件都会在某个块设备上存放，当然也都有相应的inode, 那么透过vfs.write我们就可以知道谁在不停的写入特定的设备上的inode。 幸运的是systemtap的安装包里带了inodewatch.stp，位
  • java-两种方法求第一个最长的可重复子串 bylijinnan java算法
    import java.util.Arrays; import java.util.Collections; import java.util.List; public class MaxPrefix { public static void main(String[] args) { String str="abbdabcdabcx";
  • Netty源码学习-ServerBootstrap启动及事件处理过程 bylijinnan javanetty
    Netty是采用了Reactor模式的多线程版本，建议先看下面这篇文章了解一下Reactor模式： http://bylijinnan.iteye.com/blog/1992325 Netty的启动及事件处理的流程，基本上是按照上面这篇文章来走的 文章里面提到的操作，每一步都能在Netty里面找到对应的代码 其中Reactor里面的Acceptor就对应Netty的ServerBo
  • servelt filter listener 的生命周期 cngolon filterlistenerservelt生命周期
    1. servlet    当第一次请求一个servlet资源时，servlet容器创建这个servlet实例，并调用他的 init(ServletConfig config)做一些初始化的工作，然后调用它的service方法处理请求。当第二次请求这个servlet资源时，servlet容器就不在创建实例，而是直接调用它的service方法处理请求，也就是说
  • jmpopups获取input元素值 ctrain JavaScript
    jmpopups 获取弹出层form表单 首先，我有一个div，里面包含了一个表单，默认是隐藏的，使用jmpopups时，会弹出这个隐藏的div，其实jmpopups是将我们的代码生成一份拷贝。 当我直接获取这个form表单中的文本框时，使用方法：$('#form input[name=test1]').val()；这样是获取不到的。 我们必须到jmpopups生成的代码中去查找这个值，$(
  • vi查找替换命令详解 daizj linux正则表达式替换查找vim
    一、查找 查找命令 /pattern<Enter> ：向下查找pattern匹配字符串 ?pattern<Enter>：向上查找pattern匹配字符串 使用了查找命令之后，使用如下两个键快速查找： n：按照同一方向继续查找 N：按照反方向查找 字符串匹配 pattern是需要匹配的字符串，例如： 1:  /abc<En
  • 对网站中的js,css文件进行打包 dcj3sjt126com PHP打包
    一，为什么要用smarty进行打包 apache中也有给js,css这样的静态文件进行打包压缩的模块，但是本文所说的不是以这种方式进行的打包，而是和smarty结合的方式来把网站中的js,css文件进行打包。 为什么要进行打包呢，主要目的是为了合理的管理自己的代码 。现在有好多网站，你查看一下网站的源码的话，你会发现网站的头部有大量的JS文件和CSS文件，网站的尾部也有可能有大量的J
  • php Yii: 出现undefined offset 或者 undefined index解决方案 dcj3sjt126com undefined
    在开发Yii 时，在程序中定义了如下方式：        if($this->menuoption[2] === 'test')，那么在运行程序时会报：undefined offset:2，这样的错误主要是由于php.ini 里的错误等级太高了，在windows下错误等级
  • linux 文件格式（1） sed工具 eksliang linuxlinux sed工具sed工具linux sed详解
    转载请出自出处： http://eksliang.iteye.com/blog/2106082 简介       sed 是一种在线编辑器，它一次处理一行内容。处理时，把当前处理的行存储在临时缓冲区中，称为“模式空间”（pattern space），接着用sed命令处理缓冲区中的内容，处理完成后，把缓冲区的内容送往屏幕。接着处理下一行，这样不断重复，直到文件末尾
  • Android应用程序获取系统权限 gqdy365 android
    引用 如何使Android应用程序获取系统权限         第一个方法简单点，不过需要在Android系统源码的环境下用make来编译：         1. 在应用程序的AndroidManifest.xml中的manifest节点
  • HoverTree开发日志之验证码 hvt .netC#asp.nethovertreewebform
    HoverTree是一个ASP.NET的开源CMS，目前包含文章系统，图库和留言板功能。代码完全开放，文章内容页生成了静态的HTM页面，留言板提供留言审核功能，文章可以发布HTML源代码，图片上传同时生成高品质缩略图。推出之后得到许多网友的支持，再此表示感谢！留言板不断收到许多有益留言，但同时也有不少广告，因此决定在提交留言页面增加验证码功能。ASP.NET验证码在网上找，如果不是很多，就是特别多
  • JSON API：用 JSON 构建 API 的标准指南中文版 justjavac json
    译文地址：https://github.com/justjavac/json-api-zh_CN 如果你和你的团队曾经争论过使用什么方式构建合理 JSON 响应格式， 那么 JSON API 就是你的 anti-bikeshedding 武器。 通过遵循共同的约定，可以提高开发效率，利用更普遍的工具，可以是你更加专注于开发重点：你的程序。 基于 JSON API 的客户端还能够充分利用缓存，
  • 数据结构随记_2 lx.asymmetric 数据结构笔记
    第三章 栈与队列 一．简答题 1. 在一个循环队列中，队首指针指向队首元素的  前一个    位置。  2.在具有n个单元的循环队列中，队满时共有  n-1  个元素。  3. 向栈中压入元素的操作是先  移动栈顶指针&n
  • Linux下的监控工具dstat 网络接口 linux
    1) 工具说明dstat是一个用来替换 vmstat,iostat netstat,nfsstat和ifstat这些命令的工具, 是一个全能系统信息统计工具. 与sysstat相比, dstat拥有一个彩色的界面, 在手动观察性能状况时, 数据比较显眼容易观察; 而且dstat支持即时刷新, 譬如输入dstat 3, 即每三秒收集一次, 但最新的数据都会每秒刷新显示. 和sysstat相同的是,
  • C 语言初级入门--二维数组和指针 1140566087 二维数组c/c++指针
    /* 二维数组的定义和二维数组元素的引用 二维数组的定义： 当数组中的每个元素带有两个下标时，称这样的数组为二维数组； (逻辑上把数组看成一个具有行和列的表格或一个矩阵); 语法： 类型名 数组名[常量表达式1][常量表达式2] 二维数组的引用： 引用二维数组元素时必须带有两个下标，引用形式如下： 例如： int a[3][4];  引用：
  • 10点睛Spring4.1-Application Event wiselyman application
    10.1 Application Event Spring使用Application Event给bean之间的消息通讯提供了手段 应按照如下部分实现bean之间的消息通讯 继承ApplicationEvent类实现自己的事件 实现继承ApplicationListener接口实现监听事件 使用ApplicationContext发布消息