go:chromedp包

非常好的教程:https://zhangguanzhang.github.io/2019/07/14/chromedp/

玩chromedp一共注意三部分:

  • 1,options配置
options := []chromedp.ExecAllocatorOption{
		// false意味展示浏览器窗口,默认true
		chromedp.Flag("headless", false),	
		chromedp.Flag("hide-scrollbars", false),
		chromedp.Flag("mute-audio", false),
		chromedp.UserAgent(`Mozilla/5.0 (Windows NT 6.3; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/73.0.3683.103 Safari/537.36`),
	}
options = append(chromedp.DefaultExecAllocatorOptions[:], options...)
c, cc := chromedp.NewExecAllocator(ctx, options...)
defer cc()
  • 2,配置context
ctx := context.Background()
ctx, cancel := chromedp.NewContext(c)
defer cancel()
  • 3,run

这里在run里写浏览器的每一个操作步骤

err := chromedp.Run(ctx,
		chromedp.Navigate(`https://www.whatsmyua.info/?a`),
		chromedp.WaitVisible(`#custom-ua-string`),
		chromedp.Text(`#custom-ua-string`, &ua),
		chromedp.Sleep(10* time.Second),
	)

你可能感兴趣的:(FE,and,Scrapy)