playwright绕过浏览器检测，使用本地浏览器

dxxmsl

已于 2024-07-11 12:30:19 修改

阅读量6.9k

点赞数 5

文章标签： python 网络爬虫

于 2023-08-27 19:03:59 首次发布

本文链接：https://blog.youkuaiyun.com/dxxmsl/article/details/132526362

版权

本文介绍了如何利用Playwright库通过ws方式与本地浏览器进行通信，实现无须手动打开浏览器的自动化操作，特别提到了通过添加remote-debugging-port参数来绕过浏览器检测。两种使用方法包括在每次运行后手动开启调试模式，或在程序中直接启动带调试选项的浏览器实例。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

此方法是playwright与本地浏览器以ws方式通信

可以绕过基本上大部分浏览器检测，因为这就是一个真正的浏览器

更多博客内容访问我的博客网站：回锅炒辣椒的博客

两种使用方式:

每次运行程序之后先打开浏览器

找到自己桌面chrome的快捷方式键
点击属性
在目标一栏的最后添加 --remote-debugging-port=9999 端口可自定义
with sync_playwright() as p:
# 创建一个连接
browser = p.chromium.connect_over_cdp("http://localhost:9999")
content = browser.contexts[0]
page = content.new_page()
在上述page下进行浏览器操作即可

不打开浏览器，自行打开

在程序中添加下面的代码即可

import subprocess
# 这个路径可以是Google浏览器的exe路径，也可以是快捷方式的路径
chrome_path = r'"C:\Program Files\Google\Chrome\Application\chrome.exe"'
debugging_port = "--remote-debugging-port=9999"

command = f"{chrome_path} {debugging_port}"
subprocess.Popen(command, shell=True)

之后就是

   with sync_playwright() as p:
   # 创建一个连接
   browser = p.chromium.connect_over_cdp("http://localhost:9999")
   content = browser.contexts[0]
   page = content.new_page()

在上述page下进行浏览器操作即可

注意:
此方法不可以在打开了普通版(非第一种情况)的浏览器使用

更多爬虫与反爬虫可见GitHub仓库：
https://github.com/xishandong/crawlProject