解决Scrapy报错: Unknown Command ‘crawl‘

最新推荐文章于 2022-05-25 17:40:26 发布
原创 最新推荐文章于 2022-05-25 17:40:26 发布 · 4.8k 阅读 · 9 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#python #爬虫 #经验分享

当尝试在VS Code中使用main.py运行Scrapy项目时，遇到'unknow command: crawl'错误。原因是VS Code工作区未设置为Scrapy项目的根目录。解决方法包括在集成终端中直接进入项目根目录运行，或在main.py中添加切换工作区路径的代码。这两种方法已验证有效。

问题描述：

编写好的项目(douban)在终端cmd运行 scrapy crawl douban可以运行。但通过vs code创建main.py却无法运行，出现报错’unknow command: crawl’ 。

在vs code中创建main.py运行douban

from scrapy import cmdline
cmdline.execute(['scrapy','crawl','douban'])

在这里插入图片描述

在终端cmd运行
在这里插入图片描述

<
最低0.47元/天 解锁文章
解锁scrapy报错：Unknown command: crawl
明而决之
09-21 1387
一、报错 报错的界面截图： 报错解析：该报错是找不到配置文件，无法执行douban 项目。可能原因如下： 路径不对：没有切换路径到douban 项目下或没有把douban 文件夹添加到一个sys路径； 少了配置文件scrapy.cfg； 待补充…… 二、解决方法 第1点报错是比较常见的，有两种解决方法： 在终端切换路径，具体切换方式，可以查看前面发的一篇文章：https://blog.youkuaiyun.com/qq_45476428/article/details/108707622 在m.
如何在django中运行scrapy框架
09-17
在Django中运行Scrapy框架是一项实用的技术，它允许开发者结合两个强大的Python工具，以便在一个统一的环境中进行数据抓取和Web应用开发。下面将详细解释如何实现这一目标。 首先，你需要创建一个新的Django项目。...
scrapy 出现Unknown command: crawl Use "scrapy" to see available commands错误
wayne1000的博客
10-29 1万+
在终端使用scrapy出现以下错误： Unknown command: crawl Use "scrapy" to see available commands 原因是没有切换到要crawl的项目目录下:比如 C:\Users\Administrator\PycharmProjects>scrapy crawl douban 是错误的！ 得进入到douban项目里面才可以！ C:\U...
Scrapy运行错误：Unknown command: crawl Use "scrapy" to see available commands
陈起之快乐的皮皮的博客
11-02 7338
在终端使用cd进入指定的爬虫文件目录下运行：scrapy crawl xxx
Unknown command: crawl（爬虫框架Scrapy遇到的常见错误）
System.out.println(“菜鸟的升级之路”）
03-03 2万+
前言序锦 今天在用scrapy框架运行多爬虫的时候，遇到了一个比较棘手的问题，刚开始进行了各种尝试，却还是不行，最后终于还是找到了原因！ 正文 当我们在cmd中或者PyCharm中使用Terminal输入scrapy crawl lieping（lieping是我项目里的爬虫的名字，name = “lieping”，爬取猎聘网的职位信息），总会报如下的错误： E:\Study...
scrapy遇到的常见错误-Unknown command: crawl
热门推荐
u012490863的博客
01-26 3万+
1、在cmd中输入scrapy crawl mySpider 提示如下 原因： 没有cd到项目根目录，因为crawl会去搜搜cmd目录下的scrapy.cfg 而且在官方文档中也说明了：http://scrapy-chs.readthedocs.io/zh_CN/0.24/topics/commands.html
Scrapy 2.9.0 - no active project Unknown command: crawl Use "scrapy" to see available commands
08-01
我们正在解决Scrapy运行时报错"no active project"和"Unknown command: crawl"的问题。根据引用[2]和引用[3]，这个错误通常是因为Scrapy无法识别当前项目，即没有找到scrapy.cfg文件或者该文件配置不正确。 用户...
Scrapy 2.11.2 - no active project Unknown command: crawl Use "scrapy" to see available commands
09-29
</think>### Scrapy 2.11.2 "no active project" 和 "Unknown command: crawl" 错误解决方案 #### 根本原因分析 该错误表示 Scrapy **未检测到有效项目结构**，通常由以下原因导致： 1. **目录位置错误**：未在项目...
Unknown command: crawl
Mo's Blog
04-03 775
在执行 scrapy 时，报如下错误： Unknown command: crawl Use "scrapy" to see available commands 解决方法： 1、创建 scrapy 项目，并进入项目 scrapy startproject tutorial cd tutorial 2、在项目根目录下的 tutorial/spiders/ 下新建爬虫文件quot...
scrapy框架爬虫遇到的问题：Unknown command: crawl
qq_45829428的博客
05-25 820
使用Scrapy框架爬取百度的标题‘百度一下，你就知道’时遇到的问题Unknown command: crawl 在cmd可以正常运行scrapy crawl baidu（爬虫名），如下图： 在VS code 中运行代码时报错如下： 报错内容，如下图： 错误原因：未在正确的路径下运行 正确操作：在终端把路径改到项目名目录下，再点击运行即可成功运行 输入cd+目录(spider)(这里是我把scrapy框架都放到了E盘下的22_2_17文件夹下的spider文件夹中) 再输入cd+项
scrapy : Unknown command: crawl
m0_57055881的博客
07-04 437
这个问题挺简单啊 看看上面两张图的区别， 一下只就懂了吧 只要在terminal中加个 cd ‘文件位置’ 就好了吧 这样子的目的是确定你文件的位置，pycharm才会去执行 不然是找不到对象的 has no attitude ‘one’ 我的爬虫文件名是one，每个人不同啊，别照抄！！！ ...
Scrapy遇到的常见错误-Unknown command: crawl
成功唯有积累，没有奇迹。
11-05 1884
在cmd中输入scrapy crawl mySpider 提示如下： 原因是因为： 没有cd到项目根目录，因为crawl会去搜搜cmd目录下的scrapy.cfg 解决方法： 在scrapy.cfg的路径下打开cmd，运行爬虫即可 ...
Scrapy周期性爬取（解决Unknown command: crawl报错）
呆萌的代Ma
05-14 1608
Scrapy框架（1.2.0）并没有直接周期性爬取的命令，而且如果配置不当，会导致Unknown command: crawl的报错，配置周期执行并不简单，因此这篇博客解决这个问题，一劳永逸。 思路是：调用linux的定时任务定时执行一个启动框架的python文件 目录： 1使用python程序启动scrapy 2使用Linux脚本启动python并配置定时任务 1使用pyt...
如何查看scrapy 爬取过程中的报错（附解决方法及运行结果解读）
明而决之
09-21 5350
文末有彩蛋~~ 常见报错及解决方法 2.1 缺请求头的报错，请求403 在setting文件加上请求头即可，修改完记得保存。 这个会在检查完环境之后，开启爬虫准备爬取时显示出错误，看到403，一般就是被反爬了，先检查一下请求头。 2.2 items没传、少传值或者不对应 报错：KeyError: 'DoubanItem does not support field: title1' 对应的，在items文件中，加上或修改相关的变量即可。 2.3 没有项目 ...
% Unknown command报错
最新发布
11-15
### Scrapy 报错 “Unknown Command ‘crawl’” 编写好的 Scrapy 项目，在终端 `cmd` 中运行 `scrapy crawl douban` 可以正常运行，但通过 VS Code 创建 `main.py` 运行时出现 “unknow command: crawl” 报错。这...
评论 4
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值