
爬虫
洲小洲
人生的三次成长:第一是发现自己不是世界中心的时候;第二是发现即使再怎么努力终究还是有些事令人无能为力的时候;第三是明知有些事可能会无能为力,但还是会尽力争取的时候。
展开
-
爬虫爬取网页图片
代码 import urllib.request import requests from lxml import etree url = "https://699pic.com/tupian/fengjing.html" def schedule(blocknum,blocksize,totalsize): per = 100*blocknum*blocksize/totalsize if per>100: per=100 print('下载进度:%d'原创 2022-04-27 21:20:16 · 345 阅读 · 0 评论 -
爬虫的多线程爬出网页的URL
代码 import urllib.request import time import queue from threading import Thread import threading url = "https://www.pythontab.com/html/pythonjichu/"(可以根据自己的实际情况选取url) #构建队列 queue = queue.Queue() queue.put(url) for i in range(2,10): new_url = url+str(i)+原创 2022-04-27 21:08:46 · 413 阅读 · 0 评论