第一Python第一个爬虫项目

第一Python第一个爬虫项目

完整代碼

import urllib.request
url = "https://www.douban.com"
headers = {
"User-Agent":" Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/70.0.3538.25 Safari/537.36 Core/1.70.3741.400 QQBrowser/10.5.3869.400"
}
req = urllib.request.Request(url=url,headers=headers)
response =urllib.request.urlopen(req)
print(response.read().decode("utf-8"))

爬取結果:

C:\Users\Lenovo\AppData\Local\Programs\Python\Python38-32\python.exe D:/c++/py1.py

豆瓣

Do.add(‘dialog’, {path: ‘https://img3.doubanio.com/f/shire/383a6e43f2108dc69e3ff2681bc4dc6c72a5ffb0/js/ui/dialog.js’, type: ‘js’, requires: [‘https://img3.doubanio.com/f/shire/8377b9498330a2e6f056d863987cc7a37eb4d486/css/ui/dialog.css’]});
Do.global(‘https://img3.doubanio.com/f/sns/b5793c2d7c298173d57ecf7d96708b5615336def/js/sns/fp/base.js’, ‘dialog’);

html[class*=ua-ff] .rec_topics_subtitle{
line-height: 14px;
}

豆瓣

豆瓣6.0

下载豆瓣 App
第一Python第一个爬虫项目_第1张图片

iOS / Android 扫码直接下载

    热门话题  · · · · · ·  ( 去话题广场 )

      
      
  • 热点内容 ······  ( 更多 )

    • 下午茶 156张照片
    • 姥爷的诗 19张照片
    • 【微不足道的事】 59张照片
    • 100 days pixel art 87张照片

    热门专栏 ······  ( 更多 )

    电影

    影片分类  · · · · · ·  ( 更多 )

    • 爱情
    • 剧情
    • 喜剧
    • 动画
    • 经典
    • 科幻
    • 悬疑
    • 动作
    • 犯罪
    • 青春
    • 搞笑
    • 文艺
    • 惊悚
    • 励志
    • 纪录片
    • 黑色幽默
    • 战争
    • 恐怖
    • 美国
    • 日本
    • 香港
    • 韩国
    • 中国大陆
    • 中国
    • 英国
    • 法国
    • 台湾
    • 印度

    近期热门  · · · · · ·  ( 更多 )

    1. 汉密尔顿
    2. 灰猎犬号
    3. 永生守卫
    4. 好久不见,武汉
    5. 猎谎者
    6. 侵入者
    7. 咱们裸熊:电影版
    8. 翻译疑云
    9. 前哨
    10. 想哭的我戴上了猫的面具

    正在热映  · · · · · ·  ( 更多 )

    • 多力特的奇幻冒险
      多力特的奇幻冒...
      5.7
      选座购票
    • 喋血战士
      喋血战士
      5.6
      选座购票
    • 第一次的离别
      第一次的离别
      7.2
      选座购票
    • 风声
      风声
      8.2
      选座购票
    • 寻梦环游记
      寻梦环游记
      9.1
      选座购票
    • 当幸福来敲门
      当幸福来敲门
      9.1
      选座购票
    • 何以为家
      何以为家
      9.1
      选座购票
    • 疯狂动物城
      疯狂动物城
      9.2
      选座购票

    小组

    小组分类  · · · · · ·

    • 兴趣»
    • 旅行
    • 摄影
    • 影视
    • 音乐
    • 文学
    • 游戏
    • 动漫
    • 运动
    • 戏曲
    • 桌游
    • 怪癖
    • 生活»
    • 健康
    • 美食
    • 宠物
    • 美容
    • 化妆
    • 护肤
    • 服饰
    • 公益
    • 家庭
    • 育儿
    • 汽车
    • 购物»
    • 淘宝
    • 二手
    • 团购
    • 数码
    • 品牌
    • 文具
    • 社会»
    • 求职
    • 租房
    • 励志
    • 留学
    • 出国
    • 理财
    • 传媒
    • 创业
    • 考试
    • 艺术»
    • 设计
    • 手工
    • 展览
    • 曲艺
    • 舞蹈
    • 雕塑
    • 纹身
    • 学术»
    • 人文
    • 社科
    • 自然
    • 建筑
    • 国学
    • 语言
    • 宗教
    • 哲学
    • 软件
    • 硬件
    • 互联网
    • 情感»
    • 恋爱
    • 心情
    • 心理学
    • 星座
    • 塔罗
    • LES
    • GAY
    • 闲聊»
    • 吐槽
    • 笑话
    • 直播
    • 八卦
    • 发泄

    热门小组 ······  ( 更多 )

    • 我爱三毛
      47489 个成员
    • 沙发客
      23409 个成员
    • 刘慈欣
      30718 个成员
    • 西双版纳
      11771 个成员
    • 记事本圆梦小组
      117469 个成员
    • 搭讪学
      94092 个成员
    • 这辈子一定要做几件疯狂的事
      92420 个成员
    • 自己给自己剪头发
      35134 个成员
    • 我们就是要做衣服给自己穿
      3707 个成员

    读书

    
    

    热门标签  · · · · · ·  ( 更多 )

    • [文学]
    • 小说
    • 随笔
    • 日本文学
    • 散文
    • 诗歌
    • 童话
    • 名著
    • 港台
    • 更多
    • [流行]
    • 漫画
    • 推理
    • 绘本
    • 青春
    • 科幻
    • 言情
    • 奇幻
    • 武侠
    • 更多
    • [文化]
    • 历史
    • 哲学
    • 传记
    • 设计
    • 建筑
    • 电影
    • 回忆录
    • 音乐
    • 更多
    • [生活]
    • 旅行
    • 励志
    • 教育
    • 职场
    • 美食
    • 灵修
    • 健康
    • 家居
    • 更多
    • [经管]
    • 经济学
    • 管理
    • 商业
    • 金融
    • 营销
    • 理财
    • 股票
    • 企业史
    • 更多
    • [科技]
    • 科普
    • 互联网
    • 编程
    • 交互设计
    • 算法
    • 通信
    • 神经网络
    • 更多

    新书速递  · · · · · ·  ( 更多 )

    • 无辜
      无辜
      〔英〕佩内洛普...
      免费试读
    • 难言之隐
      难言之隐
      〔英〕戴维·洛...
      免费试读
    • 凡人
      凡人
      〔美〕菲利普·...
      免费试读
    • 南货店
      南货店
      张忌
      免费试读

    原创数字作品  · · · · · ·  ( 更多 )

    • 奈何花铺
      奈何花铺
      免费
      免费试读
    • 春江花月夜
      春江花月夜
      免费
      免费试读
    • 墨者信条
      墨者信条
      免费
      免费试读
    • 收刀入鞘
      收刀入鞘
      免费
      免费试读

    音乐

    
    

    本周流行音乐人  · · · · · ·  ( 更多 )

    •       
    • 【华语】这些才是我心里的“...
    • 「抒情摇滚乐」没有这些歌!...
    • 这些歌,好多电影都用过
    • JAZZ|星空下的荒野即兴
    • Matrix-three
    • 回到火星

    豆品

    热门活动  · · · · · ·

    官方小组  · · · · · ·  ( 更多 )

    热卖商品  · · · · · ·  ( 更多 )

    同城

    活动标签  · · · · · ·

    • 音乐»
    • 小型现场
    • 音乐会
    • 演唱会
    • 音乐节
    • 戏剧»
    • 话剧
    • 音乐剧
    • 舞剧
    • 歌剧
    • 戏曲
    • 其他
    • 聚会»
    • 生活
    • 集市
    • 摄影
    • 外语
    • 桌游
    • 夜店
    • 交友
    • 美食
    • 派对
    • 电影»
    • 主题放映
    • 影展
    • 影院活动
    • 其他»
    • 讲座
    • 展览
    • 运动
    • 旅行
    • 公益

    北京 · 本周热门活动  · · · · · ·  ( 更多 )

    • 肆囍 · 【Filter】2020巡演 好久不见 有新歌招待
      8月8日 周六 20:00 - 22:00
      北京市海淀区复兴路69号 北...
    • 加拿大华人乐队We Are Various(WAV)2020巡演
      8月26日 周三 20:00 - 22:00
      北新桥板桥南巷人美大厦北1...
    • PeaceHotel和平饭店2020新专辑巡演
      8月23日 周日 20:30 - 22:00
      北京市东城区北新桥板桥南...
    • 【演出时间待定】张韶涵演唱会北京站
      2月29日 周六 - 12月31日 周四
      凯迪拉克中心(原五棵松体...
    © 2005-2020 douban.com, all rights reserved 北京豆网科技有限公司
    京ICP证090015号 京ICP备11027288号 网络视听许可证0110418号
    京网文[2015]2026-368号 京公网安备11010502000728  新出网证(京)字129号
    违法和不良信息举报电话:4008353331-9 
    中国互联网举报中心 电话:12377 新出发京批字第直160029号

    关于豆瓣 · 在豆瓣工作 · 联系我们 · 法律声明
    · 帮助中心
    · 移动应用
    · 豆瓣广告
    
      网上有害信息举报专区
    
    
    
    
    
    

    你可能感兴趣的:(python)