案例:使用selenium,打开baidu首页,然后在搜索框搜索“咸蛋dd”,查看下一页,然后返回上一页,最后退出页面。
(一开始跟着网课敲案例的代码,发现很多代码都报错了,百度了一下发现是因为现在的selenium已经舍弃了一些语法,需要用新的语法来进行爬取,这里写的是修改过后的代码,可以直接拿来用)
果然还是要自己手敲一遍,否则我都不知道这个语法有变化了。
from selenium import webdriver
from selenium.webdriver.common.by import By
path='chromedriver.exe'
browser=webdriver.Chrome(path)
url='https://www.baidu.com'
browser.get(url)
import time
time.sleep(2)
#获取文本框的对象
input=browser.find_element(By.ID,"kw")
#print(input)
#在文本框中输入咸蛋dd
input.send_keys("咸蛋dd")
time.sleep(2)
#获取“百度一下”按钮
button=browser.find_element(By.ID,"su")
button.click()
time.sleep(2)
#滑到底部
bottom="document.documentElement.scrollTop=100000"
browser.execute_script(bottom)
time.sleep(2)
next=browser.find_element(By.XPATH,"//a[@class='n']")
next.click()
time.sleep(2)
#返回上一页
browser.back()
print("1")
time.sleep(2)
#退出
browser.quit()