Selenium之PhantomJS相关设置

设置PhantomJS请求头

默认情况下:

from selenium import webdriver
import time

driver = webdriver.PhantomJS()
driver.get('http://httpbin.org/user-agent')
print(driver.page_source)
driver.close()

1203446-20170917193344438-897339036.png

设置User-Agent

from selenium import webdriver
from selenium.webdriver.common.desired_capabilities import DesiredCapabilities
import time

user_agent = "Mozilla/5.0 (Windows NT 6.3; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/56.0.2924.3 Safari/537.36"

dcap = dict(DesiredCapabilities.PHANTOMJS)
dcap["phantomjs.page.settings.userAgent"] = user_agent
dcap["phantomjs.page.customHeaders.User-Agent"] = user_agent

driver = webdriver.PhantomJS(desired_capabilities=dcap)
driver.get('http://httpbin.org/user-agent')
print(driver.page_source)
driver.close()

1203446-20170917193502438-1461923156.png
User-Agent已经变成指定的内容

设置PhantomJS不加载图片

from selenium import webdriver
from selenium.webdriver.common.desired_capabilities import DesiredCapabilities
import time

SERVICE_ARGS = ['--load-images=false', '--disk-cache=true','--ignore-ssl-errors=true']

driver = webdriver.PhantomJS(service_args=SERVICE_ARGS)
driver.get('https://www.baidu.com')
driver.save_screenshot('baidu.png')
driver.close()

1203446-20170917194229063-1513084236.png

SERVICE_ARGS 常用的参数

--cookies-file=/path/to/cookies.txt       # 指定cookies文件
--disk-cache=[true|false]                 # 是否应用磁盘缓存
--ignore-ssl-errors=[true|false]          # 是否忽略ssl证书错误
--load-images=[true|false]                # 是否加载图片
--output-encoding=encoding                # 指定输出编码 默认是utf8
--proxy=address:port                      # 指定代理服务器,格式是--proxy=192.168.1.42:8080
--proxy-type=[http|socks5|none]           # 指定代理服务器协议类型
--proxy-auth                              # 代理服务器认证,格式是--proxy-auth=username:password

更多设置可以参考官网
参数设置

转载于:https://www.cnblogs.com/cnkai/p/7538264.html

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值