- 博客(4)
- 收藏
- 关注
原创 Scrapy框架的使用
Scrapy框架创建scrapy项目使用命令scrapy starproject [爬虫项目名称]创建基础爬虫文件scrapy genspider [爬虫名字] [爬虫作用域] //默认使用basic模板创建crawl爬虫文件scrapy genspider -t crawl [爬虫名字] [爬虫作用域] //使用crawl模板创建数据清洗xpath获取到response.xpath() --直接获取xpath对象定义ItemItem 是保存爬取到的数据的容器;其使用方法和
2020-07-09 22:55:03
187
1
原创 CSS3
CSS3网页分成三个部分结果(HTML)表现(CSS)行为(javascript)CSS层叠样式表网页实际上是一个多层的结果,通过CSS可以分别为王爷的每一层设置样式最终我们能看到的只是网页最上面一层总之一句好,CSS用于来设置网页中元素的样式CSS基础使用使用CSS来修改元素的样式第一种样式(内联样式,行内样式):在标签内部通过style属性来设置元素的样式问题:使用内联样式,样是只能对一个标签生效如果虚妄影响到多个元素必须在每一个元素中都复制一遍并且当样式发
2020-07-09 22:52:27
695
原创 Uwsgi+Nginx+Django部署
Django+Uwsgi+Nginx部署这几天一直在捣腾Django部署,一只菜鸡的上山路如果什么不对,还请多多指教。参考:如何使用Django与uWSGI,Uwsgi文档Linux使用的是ubuntu18版本,自带python3.6更新Linux资源sudo apt-get updatesudo apt-get upgrade安装pip3sudo apt install py...
2020-02-24 11:52:19
273
原创 使用Scrapy中的response打印不输出中文
运行爬虫中显示中文在自定义Spider中的parse函数,使用response.body_as_unicode(),输出就可以。保存爬取的html在本地with open("XXXX.html",'w',encoding='utf-8') as f: f.write(response.body_as_unicode())即可解决使用scrapy不显示中文、...
2019-07-26 10:14:49
1480
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人