nanxiaoting的博客

环境为ubuntu，浏览器为firefox。在python上运行，总是出现打开浏览器页面，然而打不开目标网页。在python下显示错误为：message:connection refused。各种百度然而没用解决。最后发现是geckodriver版本高，19.0以后的需要firefox的版本为55以上。于是更新firefox为最新版59。问题解决。firefox更新在ubuntu 上命令:sudo...

# coding=utf-8 import requests import re import json from io import open #from multiprocessing import Pool from requests.exceptions import RequestException headers = {'User-Agent':'Mozilla/5.0 '} def ...

# coding=utf-8 import urllib2 from bs4 import BeautifulSoup import re import requests import urllib ''' <li class="gl-item" data-sku="1026202803" data-spu="1026202802" data-pid="1026202802"> &...

#coding=utf-8 from bs4 import BeautifulSoup import re import urllib2 import xlwt import sys reload(sys) sys.setdefaultencoding('utf-8') #得到页面全部内容 def askURL(url): request = urllib2.Request(url)#发...