loguat的博客

我yum，安装MySQL-python模块很简单： # yum install MySQL-python -y 可是执行Scrapy爬虫时依然报 No module named MySQLdb经过一番搜索终于找到问题： 没有安装Python连接MySQL的模块# easy_install MySQL-python完美解决！

用PHP写爬虫时，会遇到浏览器能打开URL，爬虫却返回不了数据。 这时候就可能是该URL有手机端版本，而PHP默认是不带浏览器信息的，就可能返回的是手机端页面。 可以在程序头部加入： ini_set(‘user_agent’,’Mozilla/4.0 (compatible; MSIE 8.0; Windows NT 5.1; Trident/4.0; 4399Box.560; .NET4.0