
Python学习
文章平均质量分 64
Python学习
鸣鼓ming
这个作者很懒,什么都没留下…
展开
-
04网络爬虫-批量下载网站图片
1.获取图片的url我们以下载搜狗图片网站为例1.打开网站 https://pic.sogou.com2.搜索一个想下载的图片3.按F12打开调试窗口滑动滚轮翻页, 看看网络请求链接, 我们找找规律https://pic.sogou.com/napi/pc/searchList?mode=1&start=48&xml_len=48&query=%E7%8C%ABhttps://pic.sogou.com/napi/pc/searchList?mode=1&原创 2022-01-09 17:32:50 · 1870 阅读 · 1 评论 -
02网络爬虫-使用 Beautiful Soup 解析网页
接着上一篇博客的学习https://blog.youkuaiyun.com/qq_41865229/article/details/1215462221.安装Beautiful Soup通过 requests 库已经可以抓到网页源码,接下来要从源码中找到并提取数据。Beautiful Soup 是 python 的一个库,其最主要的功能是从网页中抓取数据。Beautiful Soup 目前已经被移植到 bs4 库中,也就是说在导入 Beautiful Soup 时需要先安装 bs4 库。在终端执行安装命令 p原创 2022-01-09 10:30:11 · 2419 阅读 · 0 评论 -
01网络爬虫-使用requests库编写简单爬虫
1.安装Request库1.创建一个工程2.在终端命令行执行安装requests命令pip install requests2.爬虫代码1.使用 GET 方式抓取数据main.pyimport requests #导入requests包def main(): url = 'http://www.cntour.cn/'# 想要爬取数据的网站的网址 strhtml = requests.get(url) # Get方式获取网页数据 print(原创 2021-11-25 22:35:39 · 2960 阅读 · 0 评论