
python
王者再次归来
这个作者很懒,什么都没留下…
展开
-
python模拟浏览器爬取数据
在爬取某财经网站数据时由于没有设置Header信息,直接被封掉了ip 后来设置了Accept、Connection、User-Agent三个参数后换了个ip登录,成功请求到几次数据后又被封掉ip 最后老老实实把所有header信息都加上后请求(其实还少了一个cookie),现在请求了几十次还没被封 (ಥ﹏ಥ) 代码如下#coding=utf-8impor...转载 2018-07-25 08:55:50 · 1144 阅读 · 0 评论 -
Python爬虫请求头、请求代理以及cookie操作
·爬虫程序urllib2模块底层操作;·请求头的设置和添加;·请求代理的种类和类型;·关于cookie的操作(手动添加/程序自动获取)一、爬虫底层操作和请求头的设置1.demo01_爬虫底层操作虽然urllib2模块是爬虫的底层操作,但并不是程序的底层操作,在其内部的urlopen函数也是有自己封装的内容,实则参数为一个request即请求对象。 # -*- co...转载 2018-07-25 08:58:39 · 8997 阅读 · 0 评论 -
Python爬虫:一些常用的爬虫技巧总结
用python也差不多一年多了,python应用最多的场景还是web快速开发、爬虫、自动化运维:写过简单网站、写过自动发帖脚本、写过收发邮件脚本、写过简单验证码识别脚本。爬虫在开发过程中也有很多复用的过程,这里总结一下,以后也能省些事情。1、基本抓取网页get方法import urllib2url "http://www.baidu.com"respons = urllib2...转载 2019-01-27 16:09:37 · 151 阅读 · 0 评论 -
jumpserver
https://blog.youkuaiyun.com/my_bai/article/details/62226474https://mp.weixin.qq.com/s/FgVlpnbW-FQR-8ZoG-6muQ转载 2019-01-27 16:12:58 · 1171 阅读 · 0 评论 -
Python Django框架
1、Django简介Python下有多款不同的 Web 框架,Django是最有代表性的一种。许多成功的网站和APP都基于Django。Django是一个开源的Web应用框架,由Python写成。Django采用了MVC的软件设计模式,即模型M,视图V和控制器C。 2、Django的特点1) 强大的数据库功能:用python的类继承,几行代码就可以拥有一个动态的数据库操作...转载 2019-02-14 09:14:58 · 11583 阅读 · 2 评论