scrapy 在 pycharm 中调试

最新推荐文章于 2025-04-14 19:57:03 发布

木下瞳

最新推荐文章于 2025-04-14 19:57:03 发布

阅读量262

点赞数

分类专栏： Scrapy框架

Scrapy框架专栏收录该内容

21 篇文章

订阅专栏

博客介绍在项目文件夹中创建与scrapy.cfg文件同级的main.py文件，将其作为启动文件进行运行和断点调试，如同普通项目一样操作。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

https://www.cnblogs.com/weixuqin/p/9074448.html

在项目文件夹中建一个 main.py 文件，与 scrapy.cfg 文件在同级目录

输入：

#!/usr/bin/env python
#-*- coding:utf-8 -*-

from scrapy.cmdline import execute
import os
import sys

#添加当前项目的绝对地址
sys.path.append(os.path.dirname(os.path.abspath(__file__)))
#执行 scrapy 内置的函数方法execute，  使用 crawl 爬取并调试，最后一个参数jobbole 是我的爬虫文件名
execute(['scrapy', 'crawl', 'books'])

运行，断点调试就以它为启动文件。就和普通项目一样了