PHP笔记网

革命尚未成功，同志仍须努力下载JDK17

【Puppeteer爬虫】收藏
作者：Albert.Wen  添加时间：2024-01-17 22:48:12  修改时间：2024-11-21 08:54:27  分类：03.数据采集/爬虫  编辑
  1. 【Puppeteer爬虫】启动时，浏览器最大化，页面自适应分辨率
  2. 【Puppeteer爬虫】反反爬插件：puppeteer-extra-plugin-stealth
  3. 【Puppeteer爬虫】不下载Chromium浏览器，自动查找已安装的Chrome
  4. 【Puppeteer爬虫】使用Chrome默认的“用户数据目录”，保存用户的登录状态
  5. 【Puppeteer爬虫】结合项目来谈谈 Puppeteer
  6. 【Puppeteer爬虫】使用 Puppeteer 开发一个微博爬虫：protocolTimeout 和 滚动加载微博
  7. 【Puppeteer爬虫】执行js代码：page.evaluate() 
  8. 【Puppeteer爬虫】删除”输入框“中现有的文本字符串
  9. 【Puppeteer爬虫】跳转到新 tab 页时的“页面实例”
  10. 【Puppeteer爬虫】拖动元素
  11. 【Puppeteer爬虫】Chrome开启远程调试端口 —— 重要
  1. Puppeteer中文手册
  2. Github地址、官网教程 、入门教程
  3. --------------------------------------------------------------------------
  4. gz-spider：[Github地址]一个基于Puppeteer和Axios的NodeJs爬虫框架 —— 使用教程
  5. ppspider：[Github地址]基于puppeteer的web爬虫框架，提供灵活的任务队列管理调度方案，提供便捷的数据保存方案（nedb/mongodb），提供数据可视化和用户交互的实现方案
  6. puppeteer-hcaptcha：[Github地址]A library to solve hcaptcha challenges that are automated within puppeteer. 
  7. Puppeteer-JQuery：[Github地址]Fluent jquery integration for puppeteer
  8. Puppeteer-jQuery：jQuery api的使用puppeteer-jquery
  9. puppeteer-extra-plugin-stealth：[Github地址] A plugin for puppeteer-extra and playwright-extra to prevent detection.
    有开发者给 puppeteer 写了一套插件(10多个插件)，叫做puppeteer-extra。其中，就有一个插件叫做puppeteer-extra-plugin-stealth。这个东西，就来专门用来让 puppeteer 隐藏模拟浏览器的指纹特征。
  10. --------------------------------------------------------------------------
  11. Node.js 解析 HTML 类库：cheerio（jQuery语法）  —— 在线手册
  12. 结合项目来谈谈 Puppeteer —— ElementHandle 都提供了哪些操作元素的函数呢？（接口文档）elementHandle.click()：点击某个元素
  13. JS爬虫监控网页属性，精准采集数据播
  14. 爬虫利器 Puppeteer 的一些最佳实践 —— page.evaluate()使用技巧：执行JS。如何给pageFunciton()传递变量参数？
  15. 双探 Puppeteer：爬取苏宁易购的商品信息
  16. Puppeteer拦截某条url并返回其响应内容(场景和方法) API RequestInterception拦截器的使用
  17. 一个websocket 可以多个页面创建吗_实战分享｜给我一个Puppeteer,没有爬不了的网站 ——》 跳转到新的Tab页处理（获取新建页面的“页面实例”）
  18. 【Puppeteer爬虫】跳转到新 tab 页时的“页面实例”
  19. Puppeteer拖拽验证码 、【Puppeteer爬虫】拖动元素
  20. --------------------------------------------------------------------------
  21. [Web UI自动化测试]Puppeteer介绍
  22. [Web UI自动化测试]Puppeteer使用Page Object设计模式和自动等待
  23. [Web UI自动化测试]Puppeteer之定位和操作页面元素
  24. [Web UI自动化测试]Puppeteer之处理弹框、实现文件上传下载以及操作iframe下页面元素
  25. [Web UI自动化测试]Puppeteer之多tab页下运行自动化测试以及实现页面元素拖动操作
  26. [Web UI自动化测试][重点]Puppeteer之模拟鼠标、键盘输入、操作shadow dom内的页面元素 
    —— keyboard.down()、keyborad.up()、keyboard.press() = keyboard.down()+keyboard.up()
  27. --------------------------------------------------------------------------
  28. puppeteer 完整教程 常用api
  29. puppeteer 教程（2） ---- puppeteer介绍
  30. puppeteer 教程（3） ---- puppeteer 环境搭建及其工具推荐
  31. puppeteer 教程（4） ----入门例子（访问百度，并截图）
  32. puppeteer 教程（5） ----入门例子（爬取csdn文章列表标题）
  33. puppeteer 教程（6） ----入门例子（模拟登陆51cto）
  34. puppeteer 教程（7） ---- 如何用手机模式打开浏览器
  35. puppeteer 教程（10） ----进阶（puppeteer 代码自动生成）
  36. puppeteer 教程（11） ----进阶（puppeteer 处理淘宝滑块验证码）
  37. puppeteer 教程（12） ----进阶（puppeteer 从浏览器缓存中拿文件，js，压缩文件等）
  1. 检测浏览器WebDriver特征参数：https://bot.sannysoft.com
  2. 爬虫反爬之Selenium 与 Puppeteer 能被网站探测的几十个特征
  3. 如何避免Puppeteer被反爬？
  4. 如何利用puppeteer爬取带反爬的网站
  5. 爬虫漫游指南：无头浏览器puppeteer的检测攻防
  6. Puppeteer使用中的那些坑 —— 为什么会采用puppeteer？
  7. 【避免反爬】最完美方案！模拟浏览器如何正确隐藏特征 —— 插件：puppeteer-extra-plugin-stealth
  1. 【Puppeteer爬虫】Chrome开启远程调试端口
Copyright © 2012-2035 PHP笔记网 版权所有 粤ICP备17073848号