
python3 爬虫
学无止境慢慢来
每天进步一点点,活成自己羡慕的模样。
keep coding!!!
展开
-
scrapCesium-supermap.py
from urllib import requestimport osimport urllibdef get_abs_paths(directory, totalPathFiles=[]): ''' 此函数旨在获取directory目录下,所有文件的绝对路径, 并放在totalPathFiles里。 directory,目标目录。 '''...原创 2019-04-15 17:05:50 · 166 阅读 · 0 评论 -
python3 urllib.request.urlopen() 错误UnicodeEncodeError: 'ascii' codec can't encode characters
问题所在:python3 urlopen()链接地址中不能出现中文。解决办法:使用urllib.parse.quote进行转换。from urllib.parse import quoteimport stringurl = 'https://movie.douban.com/j/search_subjects?type=movie&tag=' + str(tag) + '...转载 2019-04-07 19:11:09 · 1018 阅读 · 0 评论 -
python3 scrapCesium.py
"""2019.6.18日,更新。"""from urllib import requestimport osimport urllibdef get_abs_paths(directory, totalPathFiles=[]): """ 此函数旨在获取directory目录下,所有文件的绝对路径, 并放在totalPathFiles里。 dir...原创 2018-12-24 17:29:47 · 724 阅读 · 0 评论 -
python3 贴吧爬虫.py
"""参考:https://blog.51cto.com/alun51cto/2388710"""__author__ = 'ALunr'# date: 2019/5/3from urllib import parseimport urllib.request# 写一个爬取网页的函数loadPagedef loadPage(url, filename): """ ...转载 2019-07-05 16:44:29 · 286 阅读 · 0 评论