flaresolverr环境搭建

FlareSolverr 是一个基于浏览器自动化技术的反爬虫解决方案。它可以应对一些比较复杂的反爬虫策略,如 Cloudflare、hCaptcha 等,并提供了简单易用的 API 接口。

具体来说,FlareSolverr 就是一个被动式的浏览器渲染服务,它使用了 Headless Chrome 和 Puppeteer 技术来模拟人工操作浏览器的行为,并通过自定义的 JavaScript 脚本和与浏览器进行交互,最终获取网页中的数据或跳过反爬虫策略。

在使用 FlareSolverr 时,你需要先启动一个 FlareSolverr 服务器,然后通过发送 HTTP 请求的方式来获取解决后的结果,用来过Cloudflare非常好用

flaresolverr项目地址

1、拉取flaresolverr容器

docker pull flaresolverr/flaresolverr

2、运行flaresolverr容器

docker run -d   --name=flaresolverr   -p 8191:8191   -e LOG_LEVEL=info   --restart unless-stopped   ghcr.io/flaresolverr/flaresolverr:latest

3、用curl工具测试环境

curl -L -X POST 'http://192.168.30.253:8191/v1' -H 'Content-Type: application/json' --data-raw '{
  "cmd": "request.get",
  "url":"http://www.google.com/",
  "maxTimeout": 6000
}'

你可能感兴趣的:(FlareSolverr,flareSolverr,cloudflare爬虫,跳过cloudflare)