puppeteer

Puppeteer入门

简介Puppeteer是GoogleChrome团队官方的无界面(Headless)Chrome工具它是一个NodeJs库提供了高级的API来控制基于ChromeDebugProtocols(简称CDP
-夏末微凉-·2023-07-16 00:07

Puppeteer自动化的性能优化与执行速度提升

前言最近随着复杂的自动化任务的增加，robot项目出现了很多问题，经常要人工智能，在上次清远漂流的时候，就是经常报警，而且基本都是我人工智能解决的，厉害吧????。这些问题包括：经常卡住，运行慢、卡，浏览器关不掉，CPU和内存经常是满载运行的，特别是CPU，经常是99%的使用率。Chromium消耗最多的资源是CPU，一是渲染需要大量计算，二是Dom的解析与渲染在不同的进程，进程间切换会给CPU造
全栈修炼·2023-07-16 00:06

puppeteer的常用操作方法

1、实现递归滑动页面直到底部awaitpage.evaluate(async()=>{awaitnewPromise((resolve,reject)=>{vartotalHeight=0;vardistance=100;vartimer=setInterval(()=>{varscrollHeight=document.body.scrollHeight;window.scrollBy(0,di
空心树无芽·2023-07-16 00:06

前端基础建设与架构30 实现高可用：使用 Puppeteer 生成性能最优的海报系统

在前面第28讲“设计性能守卫系统：完善CI/CD流程”中我们提到了Puppeteer。
办公模板库 素材蛙·2023-07-16 00:03

puppeteer-不需重构，无痛加强vue单页面应用的SEO，提升百度收录排名

想偷懒的我看到了puppeteer，可以一试！原理实际上就是当普通用户访问我们的网站时，访问的就是单页面应用，但是当爬虫访问我们的网站时就会被转发到puppeteer服务上，传送给爬虫的
阿乐今天敲代码没·2023-06-23 22:44

linux下express+puppeteer安装部署并用PM2守护进程

背景承上篇puppeteer-不需重构，无痛加强vue单页面应用的SEO，提升百度收录排名,是在本地nginx部署前端，本地另起express服务进行测试，下面我们来讲讲如何部署express到linux
阿乐今天敲代码没·2023-06-23 22:14

puppeteer + nodejs 抓取网页内容

版本信息.png3、安装puppeteer模块。  3.1puppeteer简单介绍  Puppeteer是什么  Puppeteer
梦将空·2023-06-19 18:32

Selenium控制已打开的chrome、IE浏览器

这个模式打开的情况下，Puppeteer或者Selenium可以通过websocket连上去，进
H-大叔·2023-06-19 03:52

CentOS 安装 puppeteer

谷歌官方推出的puppeteer包，用于驱动无界面chrome。之前都是用的第三方包来驱动，这次试试官方的。
fourn熊能·2023-06-19 03:01

「nodejs + docker + github pages 」 定制自己的 「今日头条」

思路每天定时抓取资讯的标题和链接整合后发布到自己的网站这样每天只要打开自己的网站就可以看到属于自己的今日头条啦～抓取资讯puppeteer定时任务node-s
null仔·2023-06-18 23:54

代理IP爬取之快代理

核心代码npmindex.jsconstpuppeteer=require('puppeteer');(async()=>{constbrowser=awaitpuppeteer.launch();constpage
KuseBear·2023-06-18 08:50

puppeteer磁盘占用过高问题

问题：当使用一段时间后磁盘占用超过85%发生了报警病因：异常关闭导致/tmp/文件夹下puppeteer_dev_profile-xxxx文件过多可以点击这里查看其他文章解释解决方案：functionwait
萌木盖·2023-06-17 21:47

【PlayWright教程（一）】安装和使用（python）

当今常用的三个自动化测试（或者爬虫）库：库SeleniumPuppeteerPlaywrightJavaScript支持官方支持官方支持官方支持Python异步支持无第三方，而且bug不少官方支持Python
Code_LT·2023-06-17 19:06

Node+puppeteer学习笔记（七）-- 鼠标移动登录滑块

官方英文版API入口：https://github.com/GoogleChrome/puppeteer/blob/master/docs/api.md.汉化版API入口：https://yq.aliyun.com
温柔夏目·2023-06-16 21:08

Node+puppeteer学习笔记（六）-- 点击页面的alert、confirm、prompt三种JavaScript弹框

官方英文版API入口：https://github.com/GoogleChrome/puppeteer/blob/master/docs/api.md.汉化版API入口：https://yq.aliyun.com
温柔夏目·2023-06-16 21:37

终极攻略！如何彻底防止Selenium被检测！

Selenium与Puppeteer能被网站探测的几十个特征》中，我们知道目前网上的反检测方法几乎都是掩耳盗铃，因为模拟浏览器有几十个特征可以被检测，仅仅隐藏webdrive
编程启航·2023-06-15 21:21

Python|Pyppeteer实现自动登录Google Voice并获取cookie(12)

本文以Googlevoice登录为例，使用puppeteer的python版本pyppeteer来实现。为什么不使用selenium呢？
写python的鑫哥·2023-06-14 12:54

puppeteer调研

介绍Puppeteer是一个Node库，它提供了一个高级API来通过DevTools协议控制Chromium或Chrome。
小岳岳不怕·2023-06-11 11:19

Puppeteer入门实践

否则需要配置环境变量2、创建node项目并初始化随便新建一个文件夹进入文件夹搜索cmd回车执行npminit-y安装依赖使用vscode或webStorm打开项目,我这里使用WebStorm进行演示安装puppeteer
記億揺晃着的那天·2023-06-11 06:03

Puppeteer 部署 - Docker容器 - Idea一键部署

Puppeteer代码注意部署到服务器，报错Runningasrootwithout--no-sandboxisnotsupported.解决方案：constbrowser=awaitpuppeteer.launch
記億揺晃着的那天·2023-06-11 06:03

node抓取视频（puppeteer）

需求通过抖音的一个主页链接，下载该用户的所有视频思路分析发现其视频地址均通过一个接口返回，便手动复制其数据，过滤出所需视频地址A坑①：地址A要在浏览器的手机模式下才跳转到真实的视频地址B查资料发现神器Puppeteer
YellowPoint·2023-04-21 04:30

puppeteer学习笔记（二）--环境搭建Win、MAC、Linux环境，以及使用Sublime Text3运行

1、MAC环境搭建（1）安装node进入官网下载安装包，和正常的软件一样正常安装就可以了，系统会自动配置环境的官网地址：https://nodejs.org/zh-cn/.在这里插入描述打开终端输入命令：node-v正常显示表示成功在这里插入图片描述(2)使用命令安装1.新建一个文件夹，切换进入，输入命令：npminit一直回车就好了，最后输入yes同意，在当前文件夹下面会生成一个文件：packa
潘潘Leo·2023-04-20 04:28

微信带备注群发真好玩!

为了迎接即将到来的春节,我研究了下微信机器人相关1.wechatyJS操作个人微信的一个库github:https://github.com/Chatie/wechatywechaty2.环境配置由于这个库用到了puppeteer
ZZES_ZCDC·2023-04-19 07:23

Nodejs 操作 Sql Server

Nodejs操作SqlServerIntro最近项目需要爬取一些数据，数据有加密，前端的js又被混淆了，ajax请求被hook了，有些复杂，最后打算使用puppeteer来爬取数据。
天天向上卡索·2023-04-16 07:01

入门指南：使用Puppeteer进行前端自动化测试

在这篇博客中，我们将介绍Puppeteer，这是一个功能强大的前端自动化测试工具，可以帮助您提高测试效率和准确性。我是将它用于自己项目的冒烟测试。并配合Mocha测试框架一起使用。
寒烟说·2023-04-15 14:05

前端周刊：2021-7期

Puppeteer实践指南-网页生成PDF生成PDF只是Puppeteer的一种非典型应用场景，Puppeteer的关键词是无头浏览器，能做的
tower1229·2023-04-13 19:42

chrome新特性-recorder

chrome新特性-recorder一、简介二、录制三、录制回放1.ChromeDevTool工具2.Puppeteer脚本(1)介绍(2)使用一、简介recorder与SeleniumIDE浏览器插件类似
格一物·2023-04-11 15:34

最完美方案！如何防止 Selenium 被检测出来

Selenium与Puppeteer能被网站探测的几十个特征》中，我们知道目前网上的反检测方法几乎都是掩耳盗铃，因为模拟浏览器有几十个特征可以被检测，仅仅隐藏webdriver这一个值是没有任何意义的。
VIP_CQCRE·2023-04-06 17:44

Puppeteer开发过程中遇到的问题及解决方案

工欲善其事必先利其器，请先检查本机是否安装NodeJS环境以及查阅API：Google官方文档：https://developers.google.com/web/tools/puppeteerAPI（
繁华哟·2023-04-05 08:23

无头浏览器与Puppeteer中PDF生成应用指南

通过一系列的社区调研后发现，Puppeteer这个Node库可以提供一个相对高级的API，以DevTools协议控制Chrome或者Chromium，其无头模式可以将HTML转为PDF。
AlexGeek·2023-04-04 00:18

vue项目SEO优化方案——prerender-spa-plugin插件实现预渲染

vue.config.jsconstPrerenderSPAPlugin=require('prerender-spa-plugin');constRenderer=PrerenderSPAPlugin.PuppeteerRenderer
h_jQuery·2023-04-04 00:00

Selenium绕过浏览器指纹的九种方法

方法一、使用stealth.min.js去https://github.com/berstend/puppeteer-extra下载反正我是没成功，大家仅供参考defmergeStealthJS(self
THMAIL·2023-04-03 01:16

Puppeteer之Pyppeteer-百度页面输入关键词，随机点击某新闻(7)

前言本文是该专栏的第7篇，结合项目案例让你熟练使用pyppeteer，后面会持续分享Pyppeteer的干货知识，记得关注。本文介绍使用pyppeteer打开百度搜索页面，输入关键词，并随机点击某个新闻链接，然后再次返回关键词结果页。做过SEO的同学，相信对该需求并不陌生。废话不多说，下面跟着笔者直接往下看正文。正文需求：使用pyppeteer打开百度搜索页面，输入关键词，并随机点击搜索词结果页的
写python的鑫哥·2023-04-02 03:56

种草Cypress和TestCafe，QA同学一定想了解的Web UI自动化测试工具

Cypress、TestCafe、Puppeteer在技术雷达中被誉为后Selenium时代WebUI测试的三驾马车。
不爱下雨天·2023-03-31 07:03

服务端渲染 ECharts 图表

整体实现示意图服务端渲染ECharts图表流程示意图Nodejshttpserver这里使用puppeteer代替浏览器，以实现前端代码的渲染执行，然后使用
奋斗_登·2023-03-29 14:09

关于验证码--Puppeteer

动态验证码1.点击式点击式验证码，记录一组鼠标点击值（x,y坐标值）作为参数发送给后端，再模拟一组点击事件，使用mouse.click(x,y,[options])，完成验证。前端点击事件，代码编写。2.滑动式滑动式验证码，截图。解决方案前端解决方案--引用大佬的话：ScreenShot_20180627195923.png后端方案：使用node.js模拟滑动验证码操作后端使用mouse.move
jebirth·2023-03-29 14:42

基于puppeteer打造de前端巡检系统 - 用可见数据提升前端页面性能

交代背景通过不到半年努力，我司前端开发已经完全转向CI/CD了，在转型的道路上，对于前端代码的异常监控(听云/senTry部分页面有用)，没有一个自己主动触发的定时巡检系统，为了进一步提升质量，我们进行了前端巡检系统的开发系统现状系统是从8月初开发,中旬上线的。运行了1个月，通过不同组前端小伙伴之间的努力，线上已经没有标红报错，且在请求数/大文件请求/白屏时间都有明显提升。对接测试/部署系统后，每
kyle背背要转运·2023-03-26 20:05

记一次使用puppeteer的填坑日志

在windows上使用headlesstrue出现newPage不执行的问题问题原因，这是因为puppeteer不能再windows上以沙盒运行解决方法，不使用沙盒运行constbrowser=awaitpuppeteer.launch
爱写Bug的程序猿·2023-03-23 16:34

基于url-to-pdf-api构建docker镜像，制作一个网页另存服务

docker镜像，制作一个网页另存服务]基于url-to-pdf-api构建docker镜像，制作一个网页另存服务业务背景：需要根据一个url路径打印这个网页的内容解决方案：1.使用wkhtml2pdf2.使用puppeteer
天之骄子_7541·2023-03-23 14:27

Linux 机器安装nodejs 、puppeteer及踩坑（页面抓取转pdf）

安装一些必备命令yum-yinstallwgetunzipnode安装1.获取nodejswget-chttps://nodejs.org/dist/v10.16.3/node-v10.16.3-linux-x64.tar.xz2.解压tar-xvfnode-v10.16.3-linux-x64.tar.xz3.移动文件夹将文件夹移动到用户目录下，并重命名为node（通常该步骤是便于应用程序使用）
范er_er·2023-03-23 04:16

三分钟学会如何在函数计算中使用 puppeteer

简介使用puppeteer结合函数计算，可以快速的构建弹性的服务完成各种功能，包括：生成网页截图或者PDF高级爬虫，可以爬取大量异步渲染内容的网页模拟键盘输入、表单自动提交、登录网页等，实现UI自动化测试捕获站点的时间线
weixin_34007906·2023-03-22 13:39

yarn安装antd-pro依赖包时Building fresh packages卡在puppeteer的解决办法。

.[-/8]⠠puppeteer等了非常久，最后显示ERROR:FailedtodownloadChromiumr674921!Set"PUPPETEER_
joejoexiaozi·2023-03-16 11:37

puppeteer 在 docker 中应用出现的问题

由于项目是通过docker部署且服务器系统为ubuntu，且后续项目中需要使用到puppeteer这个库，但在后续的使用过程中出现了一些问题，记录一下。
心情后花园·2023-03-16 07:45

2018-04-17持续集成 未实践

阮一峰持续集成百度CIJenKins自动部署puppeteer破解geetest滑动验证码koa-cliKOA-CLI
black白先森·2023-03-14 03:50

Playwright 简明入门教程：录制自动化测试用例，结合 Docker 使用

写在前面Playwright是微软出品的Web自动化测试工具和框架，和GooglePuppeteer有着千丝万缕的关系。前一阵答应了小伙伴，要做一些自动化测试相关的分享。
soulteary·2023-03-13 01:52

phantomjs vs puppeteer

phantomJS服务phantomjs是一个基于webkit内核的无头浏览器，没有UI界面。它就是一个浏览器，只是内部的点击、翻页等人为相关操作需要程序设计实现。提供了javascriptAPI接口，可以通过js直接与webkit内核交互，提供了windows、linux、mac等不同OS的安装使用包。phantomjs官网：http://phantomjs.org/GitHub地址：https
倔强的索罗·2023-03-12 04:58

three.js-master 如何正确启动

（npmi报错可先执行一下npmconfigsetpuppeteer_skip_chromium_downloadtrue-g）
BuzzLightYearcc·2023-03-09 04:30

Web UI自动化框架-Puppeteer

Puppeteer是什么Puppeteer是Node.js工具引擎Puppeteer提供了一个高级API来通过DevTools协议控制Chromium或ChromePuppeteer默认情况下是以headless
沈宥·2023-02-19 05:58

利用Node Puppeteer 来搭建多端统一的海报渲染服务

作者：falost原文地址：https://falost.cc/article/5d74e54f8457894be1bc3b45缘起在朋友圈，你可能会见过有很多带着个人信息或者二维码的绚丽的海报图片，看起来很高大上的样子。在很早之前，我有过了解的是，这些海报图片都是由UI设计师，进行人肉设计出来的，非常考验设计师的忍耐力。再到后来，随着web技术的发展，出现了由前端来生成一张又一张的海报图片，这样
falost·2023-02-07 11:47

puppeteer爬虫示例,京东拍卖

官方地址https://github.com/puppeteer/puppeteer//constpuppeteer=require('puppeteer');importpuppeteerfrom'puppeteer
王小杰at2019·2023-02-05 12:51
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他