E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
Python爬虫学习手札
Python爬虫学习
1.1搭建爬虫程序开发环境爬取未来七天天气预报frombs4importBeautifulSoupfrombs4importUnicodeDammitimporturllib.requesturl="http://www.weather.com.cn/weather/101120901.shtml"try:headers={"User-Agent":"Mozilla/5.0(WindowsNT10
曹博Blog
·
2024-02-19 16:09
Python
python
爬虫
学习
♦小美
手札
♦像选姑娘一样挑自己心仪的葡萄酒
图片发自App购买葡萄酒,无论你是走进超市,还是一个酒庄、会所或者一家酒吧,或是五星级宾馆的餐厅,都会遇到同样的问题:你看展架上摆满了这么多琳琅满目的葡萄酒,而且各色各样的酒标还有不同的语言文字,甚至酒标还有不少让人看不懂的行话和术语,这时候恐怕没有经过系统训练的你的选择困难症就马上犯了,这也许就是很多人进入一间陌生的红酒场所最终选择知难而退或者随便挑一瓶便宜的、外观好看的酒应付一下就跑的主要原因
醉红孙小美
·
2024-02-14 15:38
python爬虫学习
day2—百度翻译
##第零步安装requests库以及了解AJAX请求##第一步打开百度翻译网址,随便输入一个英文单词,我们可以发现网页进行了局部刷新,而非整体性的,因此我们可以猜测,这是一个AJAX请求。##第二步F12打开控制台,点击网络(network),因为我们已经猜测这是一个AJAX请求,因此我们选择XHR(实现网页得局部刷新)或者叫Fetch/XHR。然后输入一个英文单词,例如write。我们挨个点击,
2401_82964032
·
2024-02-13 21:32
爬虫
学习
python
百度
python爬虫学习
day3—KFC肯德基餐厅信息查询
##第零步安装requests库以及了解AJAX请求##第一步打开肯德基餐厅信息查询(kfc.com.cn)随便输入一个地址后发现页面没有整体刷新,并且点击下一页页面也仍然是局部刷新,因此判断是AJAX请求。##第二步F12打开控制台,点击网络(network),选择XHR(实现网页得局部刷新)或者叫Fetch/XHR。选择一个地址后,我们可以得到点击后我们可以得到:其url为https://ww
2401_82964032
·
2024-02-13 21:32
爬虫
学习
beautifulsoup
python爬虫学习
day1—Books to Scrape
##第零步安装requests库与BeautifulSoup库,以及学习一点点html知识##第一步导入requests库与BeautifulSoup库importrequestsfrombs4importBeautifulSoup##第三步查看网站是否有反爬机制如果有可以选择伪装浏览器headers={"User-Agent":"自己浏览器的标识"}按F12找到网络(network)然后刷新网页
2401_82964032
·
2024-02-13 21:02
python
beautifulsoup
python爬虫beautifulsoup实例-
Python爬虫学习
(二)使用Beautiful Soup库
(一)使用BeautifulSoup库(默认将HTML转换为utf-8编码)1,安装BeautifulSoup库:pipinstallbeautifulsoup42,简单使用:importrequests;from_socketimporttimeoutfrombs4importBeautifulSoup#使用BeautifulSoup库需要导包#fromaifcimportdatadefgetH
weixin_37988176
·
2024-02-11 18:39
风骚榜(2020-09-23更新五律榜)
五律榜第一与诸同学游香山诗画园瞻龙榆生
手札
/北林子(拏云诗友)龙七风骚客,百年高旷怀。篁烟横彩峪,蝶影下青崖。思渐车尘远,感尤山气佳。忽然黄叶落,一片择空阶。
张成昱
·
2024-02-10 13:11
风骚榜(2023-02-03更新五律榜)
五律榜第一与诸同学游香山诗画园瞻龙榆生
手札
/北林子(拏云诗友)龙七风骚客,百年高旷怀。篁烟横彩峪,蝶影下青崖。思渐车尘远,感尤山气佳。忽然黄叶落,一片择空阶。
张成昱
·
2024-02-09 02:15
私人
手札
.4
「牧人把自己的山羊赶往牧场去,他看见有些野山羊夹杂在自己的羊群里。傍晚到来的时候,他将他们都赶进他的一个山洞里去。但是第二天起了很大的暴风雨,不能带他们到平时的牧场去,牧人便在那里饲养他们。他对于自己的山羊给的食料很少,只够他们不至于饿死罢了,但是对于那外来的羊却给得很多,因为想把他们留为己有。在风雨停止了的时候,他要把所有的羊都赶向牧场去,可是那些野羊到了山边,全逃走了。牧人便责备他们忘恩负义,
谢丹儒
·
2024-02-08 20:53
七言
复又不眠厌秋蝉弦月生辉泪已干倦鸟归巢时有至披风载雨踏金簪——《赵氏
手札
•七言》图片发自App
白先生的白娘子
·
2024-02-07 12:36
2022-1-7晨间日记
二十个哈欠》周目标·完成进度本周,学习财务知识,已看两小节,还剩7小节投资寻找好苗子中关注每日财经新闻关注高价苗的波动学习·信息·阅读学习一年后的职称考试陆续吸收知识中,手册和题典知识手册学习中一小节
手札
断续阅读边城未完成
我是你的
·
2024-02-07 05:04
风骚榜壬寅年清榜之五律榜
五律榜第一与诸同学游香山诗画园瞻龙榆生
手札
/北林子(拏云诗友)龙七风骚客,百年高旷怀。篁烟横彩峪,蝶影下青崖。思渐车尘远,感尤山气佳。忽然黄叶落,一片择空阶。
张成昱
·
2024-02-07 05:36
无疑是王羲之这些
手札
。
中国书法从最初的甲骨文,到后来的大篆、小篆、隶书、行书、草书,每一次变化都是从字体到字形的质的改变。王羲之就是处于书体改革的重要关口的一位承前启后、推陈出新的关键人物。从汉魏到晋末的一个半世纪中,王羲之在钟繇的楷、行书体的基础上,大大推进了隶意的消减,同时推进楷书的发展。他完善了楷书,将它从此定形,此后楷书千百年不再变化;他美化了行书、草书,使它们更加成熟。王羲之的书法对后世产生了深远的影响,从唐
郑辉贤国学艺术
·
2024-02-07 05:07
python爬虫学习
步骤和推荐资料
学习Python爬虫是一项非常实用的技能,可以帮助你获取网络上的数据,进行信息抓取和分析。以下是一系列学习步骤和对应的参考资料,帮助你入门和深入学习Python爬虫。###学习步骤:####Step1:基础Python编程在学习爬虫之前,首先要确保你对基础的Python语法有一定的了解。参考资料:-[Python官方文档](https://docs.python.org/3/)-[w3school
suoge223
·
2024-02-06 00:27
python
爬虫
学习
【C++学习
手札
】基于红黑树封装模拟实现map和set
慕斯主页:修仙—别有洞天本文前置知识:红黑树♈️今日夜电波:漂流—菅原纱由理2:55━━━━━━️────────4:29◀️⏸▶️☰关注点赞收藏您的每一次鼓励都是对我莫大的支持目录一、前言map和set的底层原理二、红黑树的封装通过模板使得map和set都可复用红黑树迭代器类operator++()operator--()红黑树类仿函数mapset封装后的红黑树begin()和end()通过仿函
慕斯( ˘▽˘)っ
·
2024-02-05 03:39
C++修仙
筑基中
c++
stl
c语言
数据结构
Python爬虫学习
之scrapy库
一、scrapy库安装pipinstallscrapy-ihttps://pypi.douban.com/simple二、scrapy项目的创建1、创建爬虫项目打开cmd输入scrapystartproject项目的名字注意:项目的名字不允许使用数字开头也不能包含中文2、创建爬虫文件要在spiders文件夹中去创建爬虫文件cd项目的名字\项目的名字\spiderscdscrapy_baidu_09
蜀道之南718
·
2024-02-03 11:46
python
爬虫
学习
笔记
scrapy
Python大牛写的爬虫学习路线,分享给大家!
今天给大家带来我的
python爬虫学习
路线,供大家参考!
IT青年
·
2024-02-02 18:28
python爬虫学习
笔记之数据提取
参考博客:
python爬虫学习
笔记_fdk少东家的博客-CSDN博客1、XPath语法和lxml库1.01、什么是XPath?
py爱好者~
·
2024-02-01 07:03
笔记
1024程序员节
python
爬虫
python爬虫学习
笔记之数据存储
参考博客:
python爬虫学习
笔记_fdk少东家的博客-CSDN博客1、json文件处理:1.01、什么是json:JSON(JavaScriptObjectNotation,JS对象标记)是一种轻量级的数据交换格式
py爱好者~
·
2024-02-01 07:03
笔记
python
爬虫
python爬虫学习
笔记之网络请求
参考博客:
python爬虫学习
笔记_fdk少东家的博客-CSDN博客'requests'库安装和文档地址:利用pip进行安装:pipinstallrequests中文文档:Requests:让HTTP服务人类
py爱好者~
·
2024-02-01 07:02
笔记
分类
爬虫
python
Python爬虫学习
之scrapy库
一、scrapy库安装pipinstallscrapy-ihttps://pypi.douban.com/simple二、scrapy项目的创建1、创建爬虫项目打开cmd输入scrapystartproject项目的名字注意:项目的名字不允许使用数字开头也不能包含中文2、创建爬虫文件要在spiders文件夹中去创建爬虫文件cd项目的名字\项目的名字\spiderscdscrapy_baidu_09
蜀道之南718
·
2024-02-01 03:07
python
爬虫
笔记
学习
Python爬虫学习
之requests库
目录一、requests的基本使用二、get请求三、post请求四、代理的使用五、cookie登录以及验证码图片识别一、requests的基本使用importrequestsurl='http://www.baidu.com'response=requests.get(url=url)#一个类型和六个属性#Response类型#print(type(response))#设置响应的编码格式resp
蜀道之南718
·
2024-02-01 03:36
python
爬虫
笔记
学习
Python爬虫学习
之解析_jsonpath
一、jsonpath的基本使用importjsonimportjsonpathobj=json.load(open('json文件','r',encoding='utf-8'))ret=jsonpath.jsonpath(obj,'jsonpath语法')二、jsonpath语法e.g.importjsonimportjsonpathobj=json.load(open('jsonpath.jso
蜀道之南718
·
2024-02-01 03:36
python
爬虫
笔记
私人
手札
.6
「情商(EQ)就是我们认知自身情感的能力,以正确的方式去判断所感受到的情感,并且知道这种情感出现的原因。情商能帮助我们认识到触发情感的原因是什么,知道这种情感对自身以及他人所产生的影响,然后为了获得最好的结果,对自身的情感反馈进行调整。」——常听人说情商就是说话让人舒服,当时听到这话我瞬间懵了,这……情商难道不是自己的么?怎么变成是让别人舒服呢?说一个人有没有情商——难道在说他有没有让自己舒服?—
谢丹儒
·
2024-01-31 16:41
Python爬虫学习
之requests库
目录一、requests的基本使用二、get请求三、post请求四、代理的使用五、cookie登录以及验证码图片识别一、requests的基本使用importrequestsurl='http://www.baidu.com'response=requests.get(url=url)#一个类型和六个属性#Response类型#print(type(response))#设置响应的编码格式resp
蜀道之南718
·
2024-01-31 10:18
爬虫
python
笔记
学习
Python爬虫学习
之urllib库
目录一、urllib库的基本使用二、一个类型和六个方法三、用urllib下载1、下载网页2、下载图片3、下载视频四、urllib请求对象的定制1、url的组成https://www.baidu.com/s?wd=参数2、UA反爬五、编解码1、get请求方式之urllib.parse.quote()2、get请求方式之urllib.parse.urlencode()3、post请求方式六、ajax的
蜀道之南718
·
2024-01-31 10:48
python
爬虫
学习
Python爬虫学习
之解析_xpath
一、xpath的基本使用(1)导入lxml.etreefromlxmlimportetree(2)etree.parse()解析本地文件tree=etree.parse('xpath的基本使用.html')print(tree)(3)etree.HTML()服务器响应文件html_tree=etree.HTML(content)(4)html_tree.xpath(xpath路径)二、xpath语
蜀道之南718
·
2024-01-31 10:48
python
爬虫
开发语言
python爬虫学习
之解析_BeautifulSoup
目录一、bs4的基本使用(1)导入(2)创建对象二、节点定位1、根据标签名查找节点2、基本函数使用(1)find(2)find_all(3)select三、节点信息1、获取节点内容2、获取节点属性附:bs4的基本使用.html四、bs4的应用注:Python3.10+,使用BeautifulSoup时出现错误“AttributeError'collections'hasnoattribute'Ca
蜀道之南718
·
2024-01-31 10:48
python
爬虫
学习
Python爬虫学习
之selenium库
目录一、selenium库的基本使用二、selenium元素定位三、selenium元素信息四、selenium交互一、selenium库的基本使用#(1)导入seleniumfromseleniumimportwebdriver#(2)创建浏览器操作对象path='chromedriver.exe'browser=webdriver.Chrome(path)#(3)访问网站url='https:
蜀道之南718
·
2024-01-31 10:42
python
爬虫
学习
python爬虫学习
之selenium_chrome handless的使用
目录一、Chromehandless简介二、Chromehandless的系统要求三、Chromehandless的基本配置(直接复制放在.py文件开头)四、Chromehandless的应用五、Chromehandless的封装一、Chromehandless简介Chromehandless模式,Google针对Chrome浏览器59版新增的一种模式,可以让你不打开UI界面的情况下使用Chrom
蜀道之南718
·
2024-01-31 10:42
python
爬虫
学习
风骚榜(2023-04-04更新五律榜)
五律榜第一与诸同学游香山诗画园瞻龙榆生
手札
/北林子(拏云诗友)龙七风骚客,百年高旷怀。篁烟横彩峪,蝶影下青崖。思渐车尘远,感尤山气佳。忽然黄叶落,一片择空阶。
张成昱
·
2024-01-30 22:02
开发
手札
:unity性能优化(一)
unity性能优化一直是一个综合的问题,涵盖了CPU、内存、GPU、资源、UI、3D等方面,实际上我自己都不敢说懂unity优化,只能结合自己这些年开发的经历来谈一下,算是抛砖引玉,如果有人有更好的优化建议和文章,希望留言分享出来。就我的经历中,优化分为前期优化和后期优化,不知道是不是因为大环境的原因,我参与的项目开发,几乎全都是立刻开发项目,出第一版,然后迭代更新。后期的时候就会发现很多性能方面
羊羊2035
·
2024-01-27 16:06
开发手札
开发
手札
:git日常抽风记录
今天一大早代码提交不上github,各种方法解决不了,虽然最终不知道是否根治解决了,但是起码目前没问题,所以记录一下。今天来公司三台开发机(两台window、一台macos)全部sshconnecttimeouterrorcode22或443,我尝试打开github官网,发现只能开启的情况下打开,而且需要更新host,我添加了140.82.112.3github.com就可以在正常网络下打开git
羊羊2035
·
2024-01-27 16:36
开发手札
git
ssh
github
开发
手札
:unity warning as error
最近一个月做AR项目碰到各种问题,真是一个月项目,花三周配置调试,当然最后问题都解决了。不过有个东西居然我才知道,哈哈哈哈,所以记录一下。因为我最近都在做图像方面处理,涉及到了一些unsafecode,和微软的MR插件,所以用到了插件中一个csc.rsp文件(我都没打开查看过,想着信任微软),我起先是没特别在意这个文件的,如下:然后我发现我工程中很多deprecatedapi全部变成了error,
羊羊2035
·
2024-01-27 16:36
开发手札
unity
c#
开发
手札
:图形中int和float运算性能问题
这一篇主要围绕一些代码洁癖问题进行观察测试,在gameplay和shader开发中,int/float等数值类型的乘除运算属于很常见的,关于其性能和耗时也有区别(这点我看了百度google也没个明确的说法),当然我们如果只是写普通代码,其实不用过于在意此这些问题。如果是进行着色器开发,我们还是要明了一下比较好。在着色器开发中,片段函数中代码的计算运算次数是很庞大的,以千万/亿为单位,所以我们需要明
羊羊2035
·
2024-01-27 16:06
开发手札
开发
手札
:记录跟踪ios上架问题
事情是这样的,业余时间开发了几个app(三个游戏一个软件),因为apple政策收紧的原因,游戏是不考虑上架了,除非我做一个不错的先在steam得到好评再说,所以只考虑上架那个图形工具app,上架流程就和以前上架一样,xcodebuildarchive签名后uploadtoapplestoreconnect。这里unity+xcode又出了个幺蛾子,那就是uiwebview的问题,在ios13之后u
羊羊2035
·
2024-01-27 16:06
开发手札
ubuntu 部署
手札
适用于ubuntu16.04apt-get换源系统设置->软件和更新->下载自->选择chine->mirrors.aliyun.com/ubuntu选择国内源后再更新语言库及其他更新操作会快更多!转成中文及添加中文输入法系统设置->语言支持->[新系统会提示语言支持需更新之类的先更新]->添加或删除语言->选择中国(简体)or[ChineseSimplified]->应用到整个系统->键盘输入法
weixin_34122604
·
2024-01-27 16:05
运维
数据库
php
开发
手札
:Github Timeout 22
今天(2024.01.26日),提交github又出现了sshconnecttimeouterrorcode22,不论是创建新的sshkey还是配置.ssh/config都没用。偶然在知乎上看到了解决方案,只需要在host中添加:140.82.113.4github.com更新提交都可以用了。
羊羊2035
·
2024-01-27 16:34
开发手札
github
寸铁写作培训
手札
|新手影评篇
文/奔跑的蜗牛寸铁学号:288影评,顾名思义,就是对电影的评论。我以前认为,既然是评论,那范围就是很广泛的,也就是说,看完之后,有什么想法,都可称之为评论。当然,这只是我以前所认为的影评。昨日听了寸铁老师焱公子的分享课《非专业如何写出一篇好看又赚钱的影评》,我才明白,我以前所认为的影评,应该称之为观后感,真正的影评远远不是如此简单。1感想可以是个人感情的抒发,想什么就可以写什么,而影评如果也是随性
土木水
·
2024-01-27 10:33
三记.4//某某宗女修修炼
手札
一早又开始玩,终于等到了魔皇的求婚!心愿成真的这一刻我以为是我眼花!第236年,如愿和魔皇结婚啦!佛子居然会心中酸涩…我们不是朋友吗?第238年,新婚结束跑去找佛子挂了一下,宝贝占有欲咔咔涨,芜湖~第240年,想了一下还是别把占有刷太高,好怕他囚禁我和别人结了仇,还是去游历吧。第241年,救了个药王谷长老,之前的原则在年轻紫发帅哥死掉之后就不存在了,先活着吧。修仙人嘛,只要活的久,爱恨情仇也不算太
非瑜真的不矫情
·
2024-01-26 16:47
教学
手札
2020-03-02
今天开始线上课,之前准备了很久,其实也没怎么准备,领导说第一周就利用U校园的现成资料,让学生看视频,做练习。第二周需要备新课。所以今天的ppt只有四页,就是告诉学生我们要做些什么,然后就自己看视频去了。电脑上有QQ群,U校园,职教云,PPT,腾讯课堂,上午的课用的是QQ群课堂,优点是很方便,缺点就是没法记录课程,无法备查,不过听其他老师说,腾讯课堂上午很卡,幸运逃过一波。下午换腾讯课堂,也许是因为
人123
·
2024-01-25 05:34
python hack-requests_
Python爬虫学习
笔记(二)——requests库的使用
准备工作requests库不是python自带的库,可以用pip安装。在使用时导入requests即可。基本用法GET请求r=requests.get(url)print(r.text)其中,网页返回的内容是json格式的字符串类型,所以可以直接调用json()方法得到字典格式的内容print(r.json())此外,如果需要附加额外的信息,可以用params这个参数,示例如下:data={'na
weixin_39832628
·
2024-01-24 03:29
python
hack-requests
python爬虫学习
笔记(一)——requests库
一.HTTP基本原理1.URL和URIURL是URI的子集,URI还包括URN,在互联网中,我们一般的网页链接可以被称为URL或者URI,大多数人称为URL。2.超文本我们平常在网站浏览的网页就是超文本解析而成的,这些源代码是一系列的HTML代码,如img:显示图片,p:指定显示段落等。HTML可以被称为超文本。3.http和httpsHTTP,HypertextTransferProtocol,
梦独吟
·
2024-01-24 03:29
python爬虫
python
python
Python网络爬虫步骤是什么?新手小白必看 !
文末领取全套
Python爬虫学习
资源python网络爬虫步骤(1)准备所需库我们需要准备一款名为BeautifulSoup(网页解析)的开源库,用于对下载的网页进行解析,我们是用
Python小远
·
2024-01-23 22:28
python
爬虫
开发语言
彼岸
手札
·杜撰
彼岸一惯而来总是闲的平凡而安静,当然如果没有那些时不时的就出现的不速之客,把柒夏惹的毛都竖起来的话,彼岸会一直都很安静的。不过,今天貌似有那么点小插曲。彼岸书店,其实是一个不算小的院落。严格来说,算是有三进院落,从彼岸的大门进去,是彼岸书店的正常营业空间,院中一角有一个千年的银杏树,银杏树经过千年的累计的营养,如一把自然生成的大伞,一半给路人遮阳,一半给彼岸挡雨。树下是一个小巧的亭子,名曰:“如是
昶Akire
·
2024-01-22 22:02
三记.1//某某宗女修修炼
手札
第1年,认识的全是同门,无趣。第2年,认识个自在殿和尚,无趣。第3年,认了个练气大圆满的弟子[卜铛],才6岁,开始教导,可爱小孩,截个图。第3-5年,一直在和徒弟刷好感,小孩子真的好萌好可爱啊!!而且还笨笨的。好好刷满继续游历,第5年,有个[分神后期]的魔修[谢文琮]对我一见钟情并表白,这人1400+岁,不是处,我拒绝了他,继续游历去了。现在是第8年,依然没有遇到合适的鱼,[谢文琮]三年来礼物都没
非瑜真的不矫情
·
2024-01-21 22:32
View属性知识
手札
View的位置参数:event.getX():表示的是触摸的点距离自身左边界的距离;event.getRawY():表示的是触摸点距离屏幕上边界的距离;View.getLeft():子View的左边界到父View的左边界的距离;View.getTranslationX():表示在X轴的偏移量。初始值为0,向左偏移为负,向右偏移为正。View在平移过程中,View.getLeft()的值不会改变,此
正规程序员
·
2024-01-21 09:27
python爬虫的原理以及步骤-python学习之python爬虫原理
原标题:python学习之python爬虫原理今天我们要向大家详细解说python爬虫原理,什么是python爬虫,python爬虫工作的基本流程是什么等内容,希望对这正在进行
python爬虫学习
的同学有所帮助
weixin_37988176
·
2024-01-20 10:03
Python爬虫学习
笔记(一)---Python入门
一、pycharm的安装及使用二、python的基础使用1、字符串连接2、单双引号转义3、换行4、三引号跨行字符串5、命名规则6、注释7、优先级not>and>or8、列表(list)9、字典(dictionary)10、元组(tuple)11、迭代12、format方法13、引入模块14、文件15、异常与测试一、pycharm的安装及使用pycharm的安装可以自行去搜索教程。pycharm的使
摩卡摩卡~
·
2024-01-20 03:31
2024科研
python
爬虫
学习
4.15小班
手札
1.裂变群复盘今天早上我在督导水痕的提醒下,收听了,昨天的主班们的复盘。内心触动很大。尤其是芳香的分享。说真的这次带裂变群,非常的耗能,我这两个裂变群耗费了我许多的精力,但发圈数甚至是个位数。听了芳香的分享。我醒悟到我想到了通过链接来推动发圈,可是这一批裂变群学员连圈都不发,心累。这个让我完全没有法子了。通过这次的收听,我知道了,我没利用好一切的资源。群公告,群内赋能等等。在结合上周船长说的战略思
清欢的心灵花园
·
2024-01-20 00:56
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他