selenium chrome webdriver 无头浏览器配置

粘吧粘吧,改两个配置路径就能用:

  1. executable_path
  2. user-data-dir (这里的 Data 1 该路径下原本没有,随便写个什么都行,只要和该路径下已有的不重复就行,会自动创建)
def spider(url):
	# 浏览器驱动地址,高版本的浏览器驱动必须指定路径才好使
    executable_path = r"C:\Users\JHC\Desktop\paint_cv\Boss_Spider\chromedriver.exe"
    os.environ["webdriver.chrome.driver"] = executable_path
    # 定义配置对象
    options = webdriver.ChromeOptions()
    # 指定用户的配置地址,并加载至配置对象中。直接复制不好使,每台电脑都不一样,参照路径自己写
    options.add_argument("--user-data-dir="+r"C:\Users\JHC\AppData\Local\Google\Chrome\User Data 1")
    # 无头模式
    options.add_argument('--headless')
    options.add_argument('--disable-gpu')
    
    try:
        browser = webdriver.Chrome(executable_path,options=options)
        browser.get(url)
        # 这个位置可以插入 个随机时间休眠的函数,休眠几秒,更好的模拟人工
        # 窗口最小化
        browser.minimize_window()
		# page_info:页面源码
        page_info = browser.page_source
        # 调用处理数据或者存页面信息函数,后续省略
    except Exception as e:
    	#打印错误信息
        print(e)
        # 打印错误的具体行数
        print(e.__traceback__.tb_lineno)
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值