
python爬虫
Bystander~
胆大妄为,无法无天,玉树临风一少年
展开
-
Python爬取两个城市之间的直线距离
因需要爬取江浙沪皖地级市之间的城市距离,爬取的网址是http://www.china6636.com/。爬取代码如下:###江浙沪皖41城市代号x=[27005208,27017237,27029767,27035786,27036716,27071629,27044783,27115330,27045424,27060216, 27060379,27059992,27065633,27085865,27074128,27017808,27071103,27045640,27003122,2701原创 2020-05-28 15:47:53 · 1858 阅读 · 0 评论 -
python爬取2345天气网上2011年-2018年历史天气
由于学业需要,本文利用python爬取2345历史天气,爬取年份为2011年到2018年,由于网页格式以及自身编程水平有限,本文分成四个部分爬取2011~2018的历史天气,分别为:2011-2015年,201年1-2月,2016年3-12月,2017年以后。本文爬取的地区是江浙沪皖地区的历史天气。首先为2011年-2015年的天气代码如下:#####多个城市循环爬取###输入待查城市代号city0=[58362,58343,58141,58044,58238,58259,58357,58246,5原创 2020-05-27 15:54:18 · 1748 阅读 · 2 评论 -
python爬取新浪新闻——以新车为例
爬取新浪新闻时,主题词不同,网页格式也不一样,故在此选用“新车”为主题,爬取新浪新闻的标题、发布时间、链接、具体内容以及发布作者爬取网址:http://auto.sina.com.cn/newcar/index.d.html爬取代码如下:####爬取新闻标题、发布时间、新闻链接import requestsfrom bs4 import BeautifulSoupimport urll...原创 2019-11-01 16:05:21 · 456 阅读 · 0 评论 -
python爬取ZOL桌面壁纸图片
最近迷上了爬虫,看了一丢丢视频学习之后,开始实战,爬取图片地址:http://desk.zol.com.cn/循环爬取“风景”图片,实现代码如下:from urllib import request,errorimport rekey_name=request.quote("fengjing")##定义函数,将爬到的每一页的商品url写入到文件def savefile(data):...原创 2019-11-01 09:32:20 · 840 阅读 · 1 评论