安装pyspider步骤及遇到的坑和解决方案

pyspider安装步骤及问题解决

1、 在anaconda prompt中输入pip install --user pyspider
2、 下载phantomjs(对应系统版本)##用户界面localhost:5000
3、 解压后将phantomjs.exe复制到python的Scripts文件夹下
4、 在cmd中启动pyspider all
坑一:python3.7不兼容pyspider问题(出现占用关键字的问题)
在这里插入图片描述
解决方案:Python 3.5中引入了async和await,它们在Python 3.7中成为关键字。
所以需要替换一下关键字。
分别在run.py、fetcher /tornado_fetcher.py、webui/app.py,ctrl+f查找async替换掉就可以了
坑二:关键字替换过多,在文件tornado_fetcher.py中替换了类名中的async
在这里插入图片描述
解决方法:改回文件中的四处async注意大小写
在这里插入图片描述
坑三:wsgidav3.X版本不支持,改成2X版本
在这里插入图片描述
解决方法:在cmd中输入:
pip uninstall wsgidav
python -m pip install wsgidav==2.4.1

### 如何使用 Git 命令删除本地仓库中的多余文件 为了清理本地 Git 仓库中不再需要的文件,可以采用以下方法: #### 使用 `git clean` 清理未跟踪文件 对于那些从未被提交到仓库的新创建或下载的文件(即处于工作目录但不在暂存区也不在版本库),可以通过 `git clean` 来移除这些文件。 - `-f` 参数用于强制执行操作;默认情况下,Git 不允许清除任何东西除非指定了此选项。 - 如果只想删除未追踪的文件而不影响子模块或其他特定路径,则应加上 `-d` 标志来同时处理空目录[^1]。 ```bash # 删除所有未跟踪的文件和目录 git clean -fd ``` #### 移除已跟踪文件并更新索引 如果某些文件已经被加入过 `.gitignore` 文件但是仍然存在于历史记录里,那么就需要先将其从项目的历史中彻底消除再忽略它们。这通常涉及到两步走策略: 1. **停止跟踪指定文件/模式**:通过 `rm --cached` 可以让 Git 停止跟踪某个文件而不会实际物理上删掉它; ```bash # 停止跟踪名为example.log的日志文件 git rm --cached example.log ``` 2. **应用更改并将修改推送到远程分支** 推送前记得添加新的改动至缓存(`add`) 并 提交 (`commit`) 这些变化: ```bash git add . git commit -m "Stop tracking sensitive or large files" git push origin main ``` 另外值得注意的是,在多分支环境中操作时要小心谨慎,因为上述命令只会影响当前检出的工作树副本以及关联的索引状态。如果有多个活跃的工作区域或者使用了 `git worktree` 功能,则可能还需要考虑其他因素[^3]。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值