pyppeteer Chrome无响应问题解决

Memory_and_Dream

已于 2022-01-20 18:51:14 修改

阅读量6.5k

点赞数 4

CC 4.0 BY-SA版权

文章标签： taobao

于 2018-11-30 16:52:01 首次发布

本文链接：https://blog.youkuaiyun.com/Memory_and_Dream/article/details/84660662

本文分享了使用Pyppeteer进行淘宝自动登录时遇到的Chrome卡顿问题及解决方案。通过设置launch参数'dumpio':True，解决了由于stdout和stderr累积导致的程序卡顿。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

pyppeteer 是puppeteer的python非官方实现。感觉以后要比selenium好用，不过现在用的人还不多，所以有些问题卡了半天也没人可以问。

我用pyppeteer来做淘宝自动登录的时候发现页面打开多了就卡主了，chrome未响应。折腾了我好几天，自己看源码才发现launch要设置dumpio:True，不然程序调用subprocess.Popen打开chrome之后stderr，stdout没有输出重定向，然后累积多了就卡住了。

        browser = await launch({'headless': False, 'args': ['--no-sandbox'],'dumpio':True})  #dumpio':True就不会卡住了

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

Memory_and_Dream

关注关注

4
点赞
踩
8

收藏

觉得还不错? 一键收藏
11
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

Puppeteer之Pyppeteer-Pyppeteer基础用法入门(1)

Python进阶专栏《爬虫实战进阶》，《Pyppeteer从入门到精通》原创作者

01-12

2149

很多人说，pyppeteer是比selenium更高效的爬虫库，其主要原因在于pyppeteer使用了python的异步协程库Asyncio，而它可结合Scrapy进行分布式爬虫。GitHub上面的地址，可查看如下：需要注意的是，pyppeteer采用了python的Async机制，所以其运行要求的python版本需要3.6以上。pip3 install Pyppeteer # 或者使用 pip install Pyppeteer这里补充一点，

Puppeteer之Pyppeteer-Pyppeteer鼠标和键盘操作用法(2)

Python进阶专栏《爬虫实战进阶》，《Pyppeteer从入门到精通》原创作者

01-14

2039

所以在浏览器中绝大多数操作都可以使用Pyppeteer来完成，比如页面功能测试，自动提交表单，请求响应拦截，导出页面PDF，测试浏览器扩展等。熟悉selenium的同学都知道，很多平台有自动检测机制，如果单纯的靠页面定位元素去操作网站，并不是一种明智的选择。用过selenium的同学都清楚，简单的去定位页面元素并进行点击输入操作，对于存在反爬的网站，大部分都能检测出来selenium的自动操作行为，而产生各种验证码。所以，自动化操作想要规避网站的自动化检测机制，加入鼠标的操作，是必不可少的。

11 条评论您还未登录，请先登录后发表或查看评论

使用puppeteer进行模拟访问时，浏览器、页面卡住不动的问题

一直在路上的求知人。

06-18

6815

测试URL：https://www.ly.com/HotelInfo-94010082.html?spm0=10002.2001.1.0.2.2.1 遇到的问题：使用puppeteer打开个别网站的网页时，会遇到卡住，一直无法结束的问题。如图：可以看到浏览器上方tag一直在转圈圈。原因是，在代码中设置了Page的JS执行解析，在这个页面中含有"debugger"调试信息，不懂前端开发人员...

puppeteer-core launch 卡住问题

japlus的博客

12-01

1563

执行到 await puppeteer.launch 会卡住。安装对应版本的puppeteer解决。

Puppeteer常见问题排查与解决方案指南

最新发布

gitblog_01059的博客

05-30

330

Puppeteer常见问题排查与解决方案指南前言 Puppeteer作为一款强大的Node.js库，为开发者提供了控制Chrome/Chromium浏览器的高级API。但在实际使用过程中，开发者可能会遇到各种环境配置和运行问题。本文将系统梳理Puppeteer使用中的常见问题及其解决方案，帮助开发者快速定位和解决问题。模块加载问题找不到内部模块错误问题现象：出现Cannot find mo...

解决首次pyppeteer使用报错，下载Chromium浏览器失败，查了很多都不能解决 OSError: Chromium downloadable not found at

weixin_44532999的博客

04-26

3709

自己安装了以后，我打算来调用是一下结果就报错了，问题说在 await launch() 位置有问题，问了 GPT 说，下载的东西没找到，也打开这个链接了确实没有这是报错信息，按照这个信息找了半天但是没有结果。网上也看了很多帖子，但是给出的地址都不能访问，没有头绪。不过我回过来想到，我是有运行成功的环境的，我突然想到是不是版本的问题：，我对比了下我运行正常的版本好好好，版本确实有点差异，安装回旧版本试试然后运行代码不报错了，正常返回。

Google Chrome 未响应。是否立即重新启动？---解决方法(秒速解决)

weixin_34111790的博客

12-07

2927

Google Chrome 未响应。是否立即重新启动？解决方法不当的退出会造成 Google Chrome 无法启动。出现“Google Chrome 未响应。是否立即重新启动？”的错误。　　要解决这个问题：　　１.同时按住Windows旗帜键（在左边Alt的左边）和R键，调出Windows的“运行”窗口　　２.输入CMD，按Enter键　　３.输入taskkill ...

Google Chrome 未响应。是否立即重新启动?

weixin_30340775的博客

06-06

266

从QQ点开链接提示Google Chrome 未响应，但浏览器可以正常使用未出现未响应，解决办法：右键Chrome.exe -- -属性 > 兼容性--- 勾选最下方的“以管理员身份运行此程序” 转载于:https://www.cnblogs.com/yby120/p/9146709.html...

pyspider 页面无响应

非-浪的博客

05-27

433

因为 pyspider 框架前后端不分离，返回的页面是用的cdn 里面的js包， cdn被墙了，解决将 https://cdnjs.cloudflare.com/ajax/libs/sortable/0.6.0/js/sortable.min.js 做个替换 https://cdn.bootcdn.net/ajax/libs/sortable/0.6.0/js/sortable.min.js 即将 cdnjs.cloudflare.com 转换为 cdn.bootcdn.net grep ‘clou

Chrome进入设置页面崩溃，无响应，下载文件也会无响应 可能的解决方法

jinyangwang的博客

06-03

2125

** 由于我莫名其妙地好了，说下可能的两个关键步骤。 ** 就是网上所说的输入法卸载，一定要卸载干净，如果不想重启，去任务管理器找到第三方输入法后台结束任务。如果上面没效果再试第二步。地址栏输入： chrome://settings/clearBrowserData 点击清除数据，可能还会显示无响应，此时稍微等一会儿就可以了，浏览器就会恢复正常了。我目前Chrome版本是版本 85.0.4158.1（正式版本）dev （64 位） ...

06-11

8. **Headless模式**：Pyppeteer支持在无界面（headless）模式下运行Chrome，这在服务器环境或需要节省系统资源的情况下特别有用。 9. **更新机制**：由于Pyppeteer依赖于Chrome，所以当新的Chrome版本发布时，可能...

可配合pyppeteer防反爬干扰脚本完美

12-11

`pyppeteer` 是一个基于 Google Chrome/Chromium 的 Python 库，它允许开发者通过 Puppeteer API 进行远程控制，实现无头浏览器自动化，从而有效地规避一些反爬策略。本文将深入探讨 `pyppeteer` 在防反爬干扰中的...

Pyppeteer原理介绍和入门尝试

06-24

2810

1.Chrome 浏览器和 Chromium 浏览器在 Pyppetter 中，实际上它背后也是有一个类似 Chrome 浏览器的 Chromium 浏览器在执行一些动作进行网页渲染，首先说下 Chrome 浏览器和 Chromium 浏览器的渊源。Chromium 是谷歌为了研发 Chrome 而启动的项目，是完全开源的。

[乐意黎原创] chrome 显示 "a plugin (shockwave flash) isn't responding" 并停止响应的解决

打杂人

04-22

4441

在Chrome 使用过种中，会出现 "a plugin (shockwave flash) isn't responding" 的提示，并且当前的选项卡假死，无响应了。经过一番研究，解决方法如下： 1. Google chrome 在使用过程中会出现： 2. 解决办法： 1).在 Chrome 地址栏, 输入chrome://plugins 并找到 “Adobe Flash Player /Shockwave Flash.” 项，点击 Disable.

chrome 未响应_在Google Chrome中更好地响应网站测试

culi3182的博客

08-21

635

chrome 未响应Is your site mobile-aware? Is it truly responsive? If it’s not, according to eMarketer, there are expected to be more than 1.75 billion smartphone users this year. By 2017 global mobile phon...

关闭 chrome 网页没有响应的对话框

热门推荐

闲云孤鹤

11-30

1万+

chrome 最近经常跳出如下对话框：避免方法：打开chrome://setting里的隐私设置：在"内容设置"里勾选"阻止第三方Cookie和网站数据"。参考： https://www.youtube.com/watch?v=VNsuP1jlRP4

Chrome浏览器无法弹出新页面

dianling3902的博客

08-28

6155

问题描述：连接校园网时，打开浏览器，点击连接无反应，不弹出新页面。解决方法：第一步：第二步：转载于:https://www.cnblogs.com/zhyantao/p/11421892.html...

Google Chrome 未响应。是否立即重新启动？

xustart7720的博客

07-13

2149

不当的退出，配置文件损坏，会造成 Google Chrome 无法启动。出现“Google Chrome 未响应。是否立即重新启动？”的错误。要解决这个问题：１、同时按住Windows旗帜键 + R键，调出Windows的“运行”窗口２、输入CMD，按Enter键３、输入taskkill /f /im chrome.exe，按Enter键４、重新打开Google Chrome

pyppeteer 拦截websocket

09-09

### 回答1：关于pyppeteer拦截websocket的问题，我可以回答。Pyppeteer是一个基于Python的无头浏览器控制库，可以通过它来模拟人类的浏览行为。Pyppeteer中的websocket拦截功能可以用于拦截浏览器中的WebSocket请求，并对请求进行自定义处理。具体操作可以查阅相关文档和示例代码。 ### 回答2： pyppeteer 是一个非常强大的 Python 库，使用它可以对 Chrome 或者 Chromium 进行远程控制。如果想要拦截 WebSocket，可以使用 pyppeteer 提供的 WebSocket 相关的 API 来实现。首先，我们需要使用 `pyppeteer.page.Page` 类的 `expose_function` 方法在 JavaScript 环境中注册一个回调函数。这个回调函数将会在每当有 WebSocket 打开时被调用。示例如下： ```python async def handle_websocket(future, msg): # 在这里处理 WebSocket 相关的逻辑 print('Handle WebSocket: {}'.format(msg)) # 你可以在这里进行拦截、修改或者记录 WebSocket 的数据 page = await browser.newPage() # 注册回调函数 await page.expose_function('handleWebSocket', handle_websocket) ``` 然后，在每次打开 WebSocket 时，可以通过在 JavaScript 中调用注册函数，来将 WebSocket 的信息传递给 Python 进行处理。示例如下： ```javascript // 创建 WebSocket 连接 const ws = new WebSocket('wss://example.com'); // 在 WebSocket 打开时，调用注册的回调函数，将 WebSocket 信息传递给 Python ws.onopen = () => { window.handleWebSocket('ws opened'); }; // 在 WebSocket 关闭时，调用注册的回调函数，将 WebSocket 信息传递给 Python ws.onclose = () => { window.handleWebSocket('ws closed'); }; ``` 通过这种方法，你可以在 `handle_websocket` 回调函数中处理 WebSocket 数据，可以拦截、修改或记录 WebSocket 的内容，以满足你的特定需求。以上就是使用 pyppeteer 拦截 WebSocket 的基本方法，希望对你有所帮助。 ### 回答3： pyppeteer是一个基于Python的无头浏览器控制库，可以用于模拟浏览器行为，实现自动化测试、数据爬取等功能。在pyppeteer中，我们可以通过拦截websocket来实现对浏览器的网络请求的控制和监控。要拦截websocket，我们可以使用pyppeteer的Page对象的`waitForRequest()`和`waitForResponse()`方法。首先，我们可以使用`waitForRequest()`方法来等待页面发起的websocket请求。例如，我们可以使用以下代码来等待页面中发起的websocket请求： ``` request = await page.waitForRequest(lambda request: request.url.startswith('ws://')) ``` 这样，当页面中发起websocket请求时，代码将会暂停执行，直到请求发起，然后将请求对象赋值给`request`变量。然后，我们可以使用`waitForResponse()`方法来等待服务器对websocket请求的响应。例如，我们可以使用以下代码来等待服务器对websocket请求的响应： ``` response = await page.waitForResponse(lambda response: response.request.url.startswith('ws://')) ``` 这样，当服务器对websocket请求进行响应时，代码将会暂停执行，直到接收到响应，然后将响应对象赋值给`response`变量。在拦截到websocket请求和响应后，我们可以进行进一步的操作，比如修改请求参数、过滤响应数据等。这样，我们就可以实现对websocket的拦截和控制。总而言之，使用pyppeteer可以很方便地拦截websocket，通过`waitForRequest()`和`waitForResponse()`方法可以实现对浏览器的网络请求的控制和监控，从而达到我们的目的。希望以上回答能够帮到你！