glovenone的专栏

scrapy在crontab（计划任务）中不执行，不爬取，无数据的问题

问题：使用append为list添加object的时候，有时候会出现后面的object将前面的几个给覆盖的情况原因：当在list中append一个对象的时候，并没有创建新的内存地址，而是将该对象的地址引用了过来，这就导致当该对象变化的时候，前面append进来的对象也会跟着变化。例子代码：结果：[{'item': {1: 2}}, {'item': {1: 2}}, {'item': {1: 2}}]解决方式：使用深度拷贝 deepcopy ，复制出一个新的对象并使用。 例子代码：结果：[

本文来自：scrapy提供接口服务 – 自我的进化http://www.shanxing.top/?p=166将scrapy发布为服务并提供接口服务，以便其他项目调用：[settings]default = compass.settings[deploy]url = http://localhost:6800/project = compass[settings]...

查看当前版本：pip show numpy安装指定版本pip install -U numpy==1.12.0卸载numpypip uninstall Numpy

pip更改国内源

转自：http://www.jb51.net/article/51942.htm说明：python的urllib2获取网页(urlopen)会自动重定向（301,302）。但是，有时候我们需要获取302,301页面的状态信息。就必须获取到转向前的调试信息。下面代码将可以做到避免302重定向到新的网页#!/usr/bin/python# -*- coding:

python 遍历list方式一：app_list = [1234, 5677, 8899]for app_id in app_list: print app_id输出： 1234 5677 8899方式二：app_list = [1234, 5677, 8899]for index,app_id in enumerate(app_list)