selenium chrome webdriver 无头浏览器配置

粘吧粘吧,改两个配置路径就能用:

  1. executable_path
  2. user-data-dir (这里的 Data 1 该路径下原本没有,随便写个什么都行,只要和该路径下已有的不重复就行,会自动创建)
def spider(url):
	# 浏览器驱动地址,高版本的浏览器驱动必须指定路径才好使
    executable_path = r"C:\Users\JHC\Desktop\paint_cv\Boss_Spider\chromedriver.exe"
    os.environ["webdriver.chrome.driver"] = executable_path
    # 定义配置对象
    options = webdriver.ChromeOptions()
    # 指定用户的配置地址,并加载至配置对象中。直接复制不好使,每台电脑都不一样,参照路径自己写
    options.add_argument("--user-data-dir="+r"C:\Users\JHC\AppData\Local\Google\Chrome\User Data 1")
    # 无头模式
    options.add_argument('--headless')
    options.add_argument('--disable-gpu')
    
    try:
        browser = webdriver.Chrome(executable_path,options=options)
        browser.get(url)
        # 这个位置可以插入 个随机时间休眠的函数,休眠几秒,更好的模拟人工
        # 窗口最小化
        browser.minimize_window()
		# page_info:页面源码
        page_info = browser.page_source
        # 调用处理数据或者存页面信息函数,后续省略
    except Exception as e:
    	#打印错误信息
        print(e)
        # 打印错误的具体行数
        print(e.__traceback__.tb_lineno)

你可能感兴趣的:(爬虫,selenium,chrome,网络爬虫,自动化,python)