- 博客(4)
- 收藏
- 关注
原创 scrapy 报错:ModuleNotFoundError: No module named 'twisted.persisted'
pip安装scrapy后运行:scrapy version 报错:ModuleNotFoundError: No module named 'twisted.persisted'1.尝试安装twisted,发现twisted已经安装。可能是版本不对。参考:链接卸载当前twisted:pip uninstall twisted安装17.9版本的twisted:pip install tw...
2018-12-28 07:52:55
1046
原创 python 爬取百度搜索图片
爬取百度“街拍”前两页的图片,本人新手,如果你有更好的方法,希望能多多交流!1.爬取数据,分析url。百度的图片加载是通过滚动条动态加载。每页30条数据,通过pn参数控制页数:第二页pn=30,第三页pn=60,以此类推。2.解析数据,返回的数据有五个图片地址,分别是:fromURL,hoverURL,middleURL,objURL,thumbURL。据说是只有objURL可...
2018-12-27 21:33:49
1227
原创 python爬取,响应状态正确,但是解析不出内容
爬取的是58同城租房信息,执行程序后,只是光标在闪烁,长时间不显示结果。由于状态码为200,所以考虑正则表达式是否合理。由于网页源代码中有大量的换行符,一开始匹配用的是[\s\S]*?,并没有考虑所要获取的内容基本都是独一行,所以精简后的正则在获取内容时用(.*?)。再次执行程序,结果就出来了。本人初学爬虫,如有更好的解决方法,欢迎评论交流!原来的正则表达式为:pat = r'<...
2018-12-15 18:33:50
7569
原创 启动MySQL时:ERROR 2003 (HY000): Can't connect to MySQL server on 'localhost' (10061 "Unknown error")
1.从错误的提示中可以看出MySQL服务没有启动,因此只需要启动MySQL服务就可以了。 2.我用的是XAMPP,打开软件启动MySQL即可。
2018-08-01 17:17:36
1350
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人