Twinkle_sone的博客

# -*- coding：utf-8 -*-import requestsimport timeimport jsonimport osimport socket# 设置请求超时时间，防止长时间停留在同一个请求socket.setdefaulttimeout(8)def sougou_pic_url(num, keyword): pic_url= [] heade...

python网络爬虫（批量爬取网页图片），主要使用requests库和BeautifulSoup库，没有的请先去安装。接下来我会完整地分析整个爬取的过程，本次以http://www.netbian.com/该网站为例，网站页面如下：首先我们分析一下爬取的过程，先看第一张图片查看网页代码（F12）：可以发现该图片链接的地址，点击该图片进入以下界面：找到图片的下载地...