爬取豆瓣

爬虫框架Scrapy之Item Pipeline

以下是itempipeline的一些典型应用：验证爬取的数据(检查item包含某些字段，比如说name字段)查重(并丢弃)将爬取结果保存到文
whele·2024-02-04 10:55

《清平乐》开启宋朝极至美学的高光时刻

正午阳光出品，豆瓣评分7.1的《清平乐》是由张开宙执导，朱朱编剧，王凯、江疏影、任敏、杨玏、边程、叶祖新、喻恩泰、王楚然、刘钧等主演的古装剧。
莫染说·2024-02-04 09:38

《隐秘的角落》三个孩子三种结局：父母才是孩子的宿命

2020年这个不太平静的夏天，一部悬疑犯罪网剧《隐秘的角落》横空出世，豆瓣上20多万人打出9.0的高分，足以说明它到底有多震撼人心。
月色沉思·2024-02-04 09:02

python爬虫实战之异步爬取数据

python爬虫实战之异步爬取数据文章目录前言一、需求二、使用步骤1.思路2.引入库3.代码如下总结前言python中异步编程的主要三种方法：回调函数、生成器函数、线程大法。
尽君欢·2024-02-04 09:35

Python爬虫（四）——高性能异步爬取网上视频

高性能异步爬虫目的：在爬虫中使用异步实现高性能的数据爬取操作。异步爬虫的方式：1.多线程，多进程（不建议）：好处：可以为相关阻塞的操作单独开启线程或者进程，阻塞操作就可以异步执行。
零陵上将军_xdr·2024-02-04 09:05

python爬虫之异步爬虫（多进程和多线程）

异步爬虫之多进程和多线程基本概念目的：在爬虫中使用异步实现高性能的数据爬取操作线程和进程的区别线程具有许多传统进程所具有的特征，故又称为轻型进程(Light—WeightProcess)或进程元；而把传统的进程称为重型进程
SongErrors·2024-02-04 09:04

Python爬虫8-异步加载

目录9.1异步加载技术与爬虫方法9.1.1异步加载技术概述9.1.2异步加载网页示例9.1.3逆向工程9.2综合案例1-爬取简书网用户动态信息9.2.1爬虫思路分析9.2.2爬虫代码及分析9.1异步加载技术与爬虫方法
查尔斯-狩乃·2024-02-04 09:04

《如何高效阅读一本书》读后感(237班6组陈云)

关于如何高效阅读一本书，他提出了4个步骤:首先，根据实际问题选择书籍，方式可以通过阅读平台，如豆瓣，或者通过优秀出版社，如中信，或者听书后选择书籍，也可以参考经典书籍后的参考资料。
2b77a8704b45·2024-02-04 08:28

python爬虫6—高性能异步爬虫

如果有多个URL等待我们爬取，我们通常是一次只能爬取一个，爬取效率低，异步爬虫可以提高爬取效率，可以一次多多个URL同时同时发起请求异步爬虫方式：一、多线程、多进程（不建议）：可以为爬取阻塞（多个URL
pyniu·2024-02-04 08:58

《失控玩家》：如果你只是一串代码，人生还有意义吗？

一直有一个好奇，豆瓣评分是否会有水分，是不是也有水军参与刷分，但比起这个问题，更让我好奇的是，很多看起来很不错的片子，评分却没有预想的高，百思不得其解，其实，《失控玩家》在豆瓣评分不算低，达到了7.5分
阿娟夏雪·2024-02-04 08:11

爬取财富500强的数据，用xpath定位，爬取两层链接

文章目录前言一、Xpath定位1.安装lxml2.引用etree3.代码示例4.解读xpath4.html结构二、使用步骤1.引入库2.拼接第二层链接的url三、完整代码前言这篇文章的爬取对象是2021
zxclong·2024-02-04 08:08

豆瓣小组配音兼职，豆瓣配音小组兼职下载

作为国内最大的文化交流平台之一，豆瓣拥有众多活跃的小组社区，为广大用户提供了一个展示自己声音才华的机会。
配音新手圈·2024-02-04 07:45

2018年12月21日豆瓣日报

豆瓣今天开给今年给豆瓣提供优质内容的用户发豆邮，会有礼物，一大帮没收到豆邮的豆红不乐意了这才是正解啊
沙加之伦·2024-02-04 06:34

热门影评 | 它不是恐怖片，却比恐怖片更过瘾

中影指数：豆瓣上万人评至8.8分，公映后烂番茄保持住93%新鲜度，全球飙高的票房成绩与讨论热度，都无一例外的指向：它不仅是目前最好的“伪纪录桌面电影”，还很有可能就是今年最好的电影之一。
中影指数·2024-02-04 06:50

《雪中悍刀行》直接打1分

剧集播出后，在豆瓣长评中，不少书迷给出一星、两星评价，表达对人设、选角
馨肝宝贝·2024-02-04 06:24

问题儿童作为“包袱”丢向《寄宿学校》，父母后悔莫及

今天介绍的这部恐怖片《寄宿学校》，在豆瓣得分7.3，在恐怖片中的得分已属中上。故事发生在在20世纪90年代的纽约，12岁的小男孩雅各布经常做噩梦，梦中总是有一个满嘴鲜血的女人出现在他面前。
狄南电影·2024-02-04 06:32

什么时候，我们曾是天才和疯子的结合？

其实，今天早上过来，打开豆瓣，看到很多人对这本书褒贬不一，我倒是觉得这是一件有意思的事情。一本书，若是所有人都说好，那可能
三味淑屋·2024-02-04 05:33

python requests库的get()方法使用

r=requests.get(url,params,**kwargs)参数解释：url:需要爬取的网站地址。par
夸西·2024-02-04 05:53

走出国门的花木兰，为何不受待见？

98版《花木兰》魔咒重现：海外烂番茄新鲜度75%，国内豆瓣评分4.7。网上一片捧98版踩真人版的吐槽，并不符合当年惨淡收场的实况。
现代脂砚斋·2024-02-04 04:59

越是怕，就越无所适从

现如今，公众号上，上，技术专栏上，知乎上，豆瓣上，，等等这些媒体资源上，每次刷的时候都会看看越来越多人的创作。有爆款作品，有短而精的作品，自己的内心又一次被触动
浅语笑笑·2024-02-04 04:43

豆瓣评分9.3，从小说集《邂逅》看汪曾祺对生活至真的热爱

文|深夏晚晴天ZMH2017年，是汪曾祺先生逝世二十周年，豆瓣上有网友发起了一个名为“我读汪曾祺”的话题，在该话题下，有超过三百篇内容，获得了近43万次的浏览。
深夏晚晴天ZMH·2024-02-04 04:33

银河补习班

豆瓣評分6.2，如果你选片是通过先看评分而定，你可能会与許多真正的好片擦肩而過。《银河补习班》“人生就像射箭，梦想就像箭靶子，如果连箭靶子也找不到，那每天拉弓又有什么意义呢?”
璇兒·2024-02-04 03:29

RestTemplate请求重定向url，cookie失效问题分析

问题描述开发过程中，原本使用webmagic爬取网页信息；由于需要html中的个别字段信息；故准备改用restTemplate来获取Html；问题来了，使用restTemplate调用接口的时候发现一直会跳转到登录页
干饭两斤半·2024-02-04 03:14

python 爬虫篇(2)----＞re正则实战豆瓣读书爬取(附带源码)

re正则实战—豆瓣读书爬取提示：文章写完后，目录可以自动生成，如何生成可参考右边的帮助文档文章目录re正则实战---豆瓣读书爬取前言一、准备工具二、构建请求头三、请求数据四、解析数据五、保存数据总结(源码
万物都可def·2024-02-04 03:43

爬虫更换IP地址的两种方法

当你的爬取频次过快或者被网站封禁时，可以断开网络再重新拨号，从而获取一个新的IP地址。这样可以绕过网站的限制，继续进行爬取。使用代理IP：代理IP是一种通过中间服务器来访问目标网站的方式。
Bearjumpingcandy·2024-02-04 03:39

端银成交社读书笔记+《爆款文案》+铜钱草

书名：爆款文案作者：关键明豆瓣评分：7.3类、型：文案、营销、广告、商业、写作、企业、互联网、诗歌阅读推荐人：端银阅读方式：纸质书籍早在18年末，我就听闻了此书，但我并未购买，家里的书很多都放得快发霉了也没有读过
橘小闹·2024-02-04 02:46

人生的意义

据说这是豆瓣网友称作只有35%读懂率的书。大部分人
黎雨萱·2024-02-04 02:10

《金吾卫之天魔鬼畜》之悬疑推理类网剧推荐

《灵魂摆渡》——豆瓣评分8.1分，喜欢看恐怖片的同学不要错过惹，片中借用了许多漫画梗，剧情在惊悚之中又显得温馨
supremen·2024-02-04 01:23

温格·朱利是谁？

奈何我读书少，又对幸福婚姻很有兴趣，就随手打开豆瓣搜索了这本书，结果没有找到。我又打开了万能的淘宝和神奇的二手书平台，都没有发现这本书，这就有意思了。在浏览器里搜索这句话，可以找到2
小小变化·2024-02-04 01:15

2021-07-22

针对外国网站如何爬取信息，我进行了学习和实践。
大竹英雄·2024-02-04 01:10

python常用的第三方库下载,python官网下载第三方库

pip离线安装使用背景我们平时遇到很多pip安装软件的软件源的问题，一会儿这慢一会儿那慢，常见的软件源如下：豆瓣:SimpleIndex清华大学:SimpleIndex中国科技大学:SimpleIndex
Night368171·2024-02-04 00:44

express+request实现-图夫在线爬取网页

先奉上图夫地址：https://tufu.xkboke.comGIT开源地址：git地址（欢迎star）懒惰驱动Idea有时候在站酷或者UI中国看到很好的图片和作品都会想收藏下来学习一下，但是每次右击另存为都很麻烦，而且有的还要放大后才有原图可以下载；作为一个伪全栈怎么能忍呢，然后就想着扒扒他们网站的源码看，这一看发现图片原图存放的位置都有着规律，这就很高兴啦，哈哈!雏形诞生浪起来！！很快完成了第
小K前端·2024-02-03 23:11

基于Django的新冠疫情可视化分析系统计算机毕业设计源码08504

文中利用MySQL数据库存放从官网爬取的疫情数据，使用Django技术查询MySQL数据库中的疫情数据，实现网页和数据库的动态交互，利用Python技术进行新冠疫情可视化分析系统，制作了疫情折线图，用来展示疫情近期的变化趋势
vx_cxsj813·2024-02-03 23:08

Python+Django+Mysql新冠疫情可视化分析系统98626-计算机毕业设计（可赠源码）

文中利用MySQL数据库存放从官网爬取的疫情数据，使用Django技术查询MySQL数据库中的疫情数据，实现网页和数据库的动态交互，利用Python技术进行新冠疫情可视化分析系统，制作了疫情折线图，用来展示疫情近期的变化趋势
bs_wa66·2024-02-03 23:37

(免费领源码）Python&Django&Mysql新冠疫情可视化分析系统08504- 计算机毕业设计

文中利用MySQL数据库存放从官网爬取的疫情数据，使用Django技术查询MySQL数据库中的疫情数据，实现网页和数据库的动态交互，利用Python技术进行新冠疫情可视化分析系统，制作了疫情折线图，用来展示疫情近期的变化趋势
2301_3224142804·2024-02-03 23:37

Python+Django+Mysql新冠疫情可视化分析系统 -计算机毕业设计源码08504

文中利用MySQL数据库存放从官网爬取的疫情数据，使用Django技术查询MySQL数据库中的疫情数据，实现网页和数据
bs_wa66·2024-02-03 23:36

《人生第一次·出生》：没有生过人，还谈什么人生

安利给大家一部体察人生的纪录片：《人生第一次》开播三集，哔哩哔哩9.8分，豆瓣9.1分总导演秦博，上次带给我们的作品是《人间世2》着重记录了“生死关头”这样极具冲击力的人生转折感染并启发无数人深思：什么是生命
老太太放映室·2024-02-03 22:48

【三知论026餖鈖児】

有时候我也会偷偷到他们的豆瓣页面去看看，但有些人，连豆瓣也已经停止更新了。
餖鈖児·2024-02-03 22:15

关于爬取所有哔哩哔哩、任意图片、所有音乐、的python脚本语言-Edge浏览器插件 全是干货！

首先有自己的edge浏览器基本上都有并且找到插件选项1.哔哩哔哩视频下载助手（爬取哔哩哔哩视频）bilibili哔哩哔哩视频下载助手-MicrosoftEdgeAddons下面是效果：2.图片助手(ImageAssistant
yuwenduo123·2024-02-03 22:55

电影《辩护人》一部改变历史的电影

影片目前在豆瓣评分高达9.2分，名列豆瓣TOP250榜单的第60名。电影的主人公宋佑硕虽然是一个只有高中学历的底层工人，但是他不甘现实穷困潦倒的折磨。
小南影视XN·2024-02-03 22:06

新剧尝鲜 | 又一网飞大尺度新剧来袭！

9月13日由游戏改编的大尺度动漫《赛博朋克：边缘跑手》上架网飞，刚一上架便在豆瓣得到了9.3的高分。
人小不大·2024-02-03 20:16

fofa资产收集-python爬虫

当然不是，而是需要一个无限制爬取的脚本.脚本#coding:utf-8importsys#reload(sys)#sys.setdefaultencoding('utf-8')importimportlib
KLKH·2024-02-03 20:54

1、安全开发-Python爬虫&EDUSRC目标&FOFA资产&Web爬虫解析库

requests库和Web爬虫解析库的使用，python爬虫自动化，批量信息收集Python开发工具：PyCharm2022.1激活破解码_安装教程(2022年8月25日更新~)-小白学堂一、EDUSRC平台爬取接收漏洞的教育机构名称
++⁠⁠·2024-02-03 20:52

【Tool】Selenium与Poe碰撞出的火花

步骤代码结构使用selenium爬取poe网第一步：需要在你的chrom浏览器登录你的poe账号，能正常回复后，打开开发者工具，找到cookie第二步：复制这三个cookie
犟小孩·2024-02-03 19:08

口碑炸裂| 盘点2021值得N刷的5部好剧

精挑细选之后，我从中选出5部口碑炸裂、豆瓣高分、值得N刷、不看后悔的剧，推荐给大家。这5部风格各异、脑洞大开的精彩好剧，你看过几部？如果全看过，那真是赚到了废话少说，咱们现在就上车！
茹锦花开·2024-02-03 19:16

林地瓜的8月购书单

以下是地瓜的8月购书单：（因为是新购书单，地瓜尚未阅读，关于内容介绍的部分，均来自于寻书神器豆瓣读书。
落卜卜·2024-02-03 19:11

1分钟学会做9种下酒菜，再也不怕家里来客人了！

辣炒田螺食材：田螺、干辣椒、花椒、豆瓣、泡姜、蒜、泡椒、植物油、料酒、味精、盐、白糖。做法：1.田螺买回后，放清水里养3天，每天换一次水。用剪刀剪去屁股，洗净后，捞出，滤水。
丰淳·2024-02-03 19:40

关于如何活着，这5本哲学散文集有话要说

关于如何活着这5本哲学散文集有话要说01《巴黎的忧郁》波德莱尔豆瓣评分：8.3(1882人评价)日本作家芥川龙之介曾说，“人生不如一句波德莱尔。”因为波德莱尔对生活的体察，细致入微得让人害怕。
小雨爸爸的电子书·2024-02-03 18:36

[Python] 如何使用scikit-learn的preprocessing和impute模块进行数据预处理（数据无量纲化，缺失值填充，对分类型特征编码与哑变量，对连续型特征进行二值化与分段）

获取数据的方式可以通过数据抓取、数据爬取、数据采集工具等方法进行。数据获取是数据挖掘的第一步，关键在于选择合适的数据源、确定需要的数据特征，并采用适当的技术和方法进行数据的提取和整理。
老狼IT工作室·2024-02-03 18:16

愿你细水长流，愿你百岁无忧，愿你做一个幸福的《无名之辈》

这部电影刚刚看到豆瓣评分8.2分，百度评分8.8分，累计票房6亿。虽然有的人说这个分数虚高，但是这个分数最起码可以说明，在大众的眼里，这是一部好电影。
罗秦然·2024-02-03 17:37
上一页 13 14 15 16 17 18 19 20 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他