爬虫入门（一）之获取皮卡丘图片

最新推荐文章于 2024-07-22 17:25:13 发布

lvbu89757

最新推荐文章于 2024-07-22 17:25:13 发布

阅读量448

点赞数 1

CC 4.0 BY-SA版权

分类专栏：爬虫

本文链接：https://blog.youkuaiyun.com/lvbu89757/article/details/96001834

本文是爬虫入门教程，通过requests包演示如何获取皮卡丘百度图片的URL，并下载图片。首先介绍requests包的安装与使用，接着讲解如何找到请求的URL，模拟发送请求。然后，解析网页找到图片URL，最终实现批量下载皮卡丘图片。请注意合法合规使用爬虫，避免非法或高风险操作。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

爬虫入门

requests包

爬虫可以用的包还是蛮多的，我这里就只用requests包进行测试了
如果没有requests包的话，就进入想要用的虚拟环境，键入

pip install requests

获得了requests包以后，我们就可以简单的实现一下爬虫了

获得所需要的信息

首先我们需要先获取需要向哪个路径发送请求，我们找到自己需要获取的网页，我这里用皮卡丘的百度图片搜索来进行测试
在这里插入图片描述
至于怎么进去就不要我说了吧，然后我们进入页面后点击检查元素，找到network块

里面的request URL就是我们需要发送信息的地址了，注意这里所有的信息将来我们都可能会用的到，可以用来伪装自己发送信息等。
现在我们来模拟发送一个请求吧

获得URL信息
first_level_url='https://image.baidu.com/search/index?tn=baiduimage&ct=201326592&lm=-1&cl=2&ie=gb18030&word=%C6%A4%BF%A8%C7%F0&fr=ala&ala=1&alatpl=adress&pos=0&hs=2&xthttps=111111'

import requests
import re
写个头部，模拟谷歌浏览器发送
header={
    'User-Agent': 'Moz