Python爬虫框架Scrapy 学习笔记 10.1 -------【实战】 抓取天猫某网店所有宝贝详情

第一部分:任务描述

起始页面:http://shanhuijj.tmall.com/search.htm?spm=a1z10.3-b.w4011-3112923129.1.KjGkS2

这个页面列出了网店的所有宝贝,如图:

wKioL1SyeDzROtSdAAYS77oyuvg128.jpg


点击进入宝贝详情页面,例如:http://detail.tmall.com/item.htm?spm=a1z10.3-b.w4011-3112923129.62.xGx75B&id=10910218037&rn=918f15e64b1131d19b6f0f9585ec0330&abbucket=1

目标数据:

1.商品名称(productName),

2.价格区间(priceRange)
3.月销量(monthSale)

4.累计评价(totalComment)

5.收藏人数(popularity)

6.成交记录(tradeRecord):买家(buyer),型号(type),数量(amount),价格(price),成交时间(tradeTime)


wKiom1St3bGhWCLJAAGDTwy1Ino057.jpg


wKioL1St3nOwxd53AAIkZceudH4344.jpg


你可能感兴趣的:(python,scrapy,爬虫框架)