python爬虫动态页面xpath无法解析

1. 无法解析的原因

当使用requests.get()获取某一页面后,程序正常返回html页面,但页面的主内容存在于标签中,使用xpath无法解析。

2. 解决方案

  1. 使用正则
  2. 使用selenium模仿浏览器登录,获取JavaScript执行后的html页面

你可能感兴趣的:(python爬虫动态页面xpath无法解析)