qq_38077360的博客

爬取猫眼电影排行榜 1.爬取首页源代码 爬取首页的基本网页源代码 发现不同页码的网址规律 import requests def get_url(url): header = { 'User-Agent': 'XXXX' #换取自己的 } response = requests.get(url, headers=header) content ...

爬取百度贴吧 实现功能：输入任何一个字符串，进入该页面，获取该页面的html代码，并保存在本地中。保存前10页的html信息。 自己练习 1.爬取有关lol的页面信息 将问题简单化，先爬取特定网页的1-10页的html信息 观察每一页网址，发现每当页数+1时，pn+50 import requests headers={ 'User-Agent': 'Mozilla/5.0 (X...