- 博客(2)
- 收藏
- 关注
RSS订阅原创 用Scrapy抓取英雄联盟所有皮肤
部署scrapy 在命令行中输入： scrapy startproject lolskinSpider cd lolskinSpider scrapy gensipder lolskin lol.qq.com 然后进入文件夹开始构造任务 设置scrapy 首先要分析爬取的网站，观察英雄联盟官网 英雄联盟游戏资料，利用scrapy shell scrapy shell "https://lol.qq.com/data/info-heros.shtml" hero=response.xpath('//*[
2020-08-14 14:14:32
526
原创 使用Scrapy爬取图片
使用Scrapy爬取图片分析网址配置Scrapy配置items.py设置pipelines.py设置settings.py运行scrapy 分析网址 网址地址：美食杰-川菜. 我们需要爬取网站上的菜谱图片，分析网址结构如下： #在命令行中运行 scrapy shell "https://www.meishij.net/china-food/caixi/chuancai/" #可以发现我们想要爬取的图片src地址位于： picture_src = response.xpath('/html/body/div[
2020-08-13 14:37:09
563
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人