pyppeteer登录头条获取cookie爬坑。

好帅的爸爸（）

于 2019-07-15 16:21:37 发布

阅读量8.7k

点赞数 5

CC 4.0 BY-SA版权

分类专栏： python 文章标签： pyppeteer

本文链接：https://blog.youkuaiyun.com/wangliuqi123/article/details/95980727

本文介绍了如何通过pyppeteer库登录头条网站并获取cookie的过程。首先，由于版本问题，需要卸载websockets并安装指定版本。在遇到'Runtime.callFunctionOn: Target closed.'错误时，参考了相关博客找到解决方案。然后，文章详细讲解了如何设置Cookie，特别是当pyppeteer需要循环传递cookie列表到方法中。最终，展示了完整的登录并保存cookie的代码，适用于首次和二次登录的情况。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

首先需要需要pip 卸载 websockets 安装指定版本的。

pip uninstall websockets #卸载websockets
pip install websockets==6.0 #指定安装6.0版本

否则，你会在

waitForSelector 判断元素是否出现，而且页面上js跳转后的新页面，这个地方会出现上面的报错。

Runtime.callFunctionOn: Target closed.

参考链接：https://www.cnblogs.com/baihuitestsoftware/p/10531462.html

保存cookie：

cookies2 = await page.cookies()
    await save_cookie(cookies2)

.设置Cookie：（pyppeteer的设置cookie的方法每次传一个dict进去。所以需要循环cookie列表。）

await page.goto('https://www.toutiao.com/')
    for cookie in cookie1:
        await page.setCookie(cookie)
    await page.goto('https://www.toutiao.com/')
    print("登录成功")
    await page.waitForSelector('.logged', {'timeout': 300000})

整体代码：（首次登录输入账户