myfancysky的博客

linux系统中： pyspider+rabbitmq+mongodb环境下启动pyspider时出现socket.error: [Errno 104] Connection reset by peer 的错误信息。

什么也不说，先上图！在pyspider，抓到的数据是这样的而查看数据库却是这样！去查看爬虫代码，debug一下，结果是这样：我只能说**网站这坑货！！哥，冒险不用代理爬的11万数据，你居然给我来这限制！还好发现得早，不然等被你禁了ip才发现，那我去不是亏大发了唉，总结一下，抚慰我受伤的心，希

下面是安装pyspider的详细过程及相关指令【纪实】-----------------------------------------------------------------------------------------------------------------------------------------------------********************

折腾了好久终于把pyspider在Linux上面安装了，有时间再去折腾一下win7上面的安装，也是一大堆问题啊！