sevenama的博客

在MOOC学习了用python爬取网页的方法。因为和上一次看视频相隔时间太久，有一些知识点遗忘了，查了一些资料整理下来。 首先，爬取网页的通用代码框架如下： >>> import requests >>> url = "***" >>> try: kv = {'user-agent':'Mozilla/5.0'} r = requests.get(url,headers = kv) r.raise_for_status() r.encodi