python
关注
分享
扫一扫
达大大
这个作者很懒，什么都没留下…
展开
-
python 关键字
逻辑判断类 ------ and,or,not,is,in,if,elif,elseis用于判断对象内存地址，==用于判断值，is用于判断字符串和数值，不可用于判断列表，元组，字典，集合循环类 ------ for,while,break,continuebreak终止循环，continue终止当次循环后执行下次循环文件管理类 ------ w...原创 2019-11-19 20:55:39 · 269 阅读 · 0 评论 -
爬虫基础
requests库import requests#get请求及常用参数#status_code 返回码#reason 响应结果#text 响应内容#json() json响应内容headers = {'User-Agent':'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko)...原创 2019-09-12 11:14:43 · 2533 阅读 · 0 评论 -
scrapy框架
架构图ENGINE：引擎，框架的核心部分，负责在SPIDERS,ITEMPIPELINES,DOWNLOAD,SCHEDULER中间通信，传送数据 SPIDERS：自己写的爬虫 SCHEDULER：调度器，把请求按照一定的方式排列和整理，存放到队列 DOWNLOAD：下载器，到internet下载页面数据 ITEMPIPELINES：管道，保存数据到本地 DOWNLOAD MID...原创 2019-09-12 11:14:28 · 2653 阅读 · 0 评论 -
app爬虫
一.fiddler基础使用优点：可以查看所有浏览器、客户端应用或服务之间的web数据流 手动或自动修改任意的请求和响应 可以解密HTTPS数据流以便查看和修改缺点：只是支持http、https、ftp、websocket数据流等相关的协议 无法监测或修改其他数据，如SMTP、POP3等 fidder无法处理请求和响应超过2GB的数据常用功能：edit修改数据...原创 2019-09-12 11:13:19 · 996 阅读 · 0 评论 -
virtualenvwrapper和conda虚拟环境管理
更新下载源conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/free/conda config --set show_channel_urls yesconda config --remove channels defaults #删除了默认源，不然总是从官网下载然后超时c...原创 2019-09-12 11:14:08 · 1425 阅读 · 0 评论