QYmufeng的博客

安装内容： python3 pycharm pyton3 2018分布式爬虫视频+源码下载地址（崔庆才）：https://download.youkuaiyun.com/download/qymufeng/10842007 1.安装python3 （1）windows下安装python3          下载python3          官方网址： https://www.python.o...

1.urllib 库 安装命令： pip install urllib  urllib :Python内置的HTTP请求库 # Python2 import urllib2 response = urllib2.urlopen('http://www.baidu.com') # Python3 import urllib.request response = urllib.reque...

2.requests 库 2018分布式爬虫视频（崔庆才）+源码+电子书下载：https://download.youkuaiyun.com/download/qymufeng/10842007 安装命令： pip install requests requests： 基于 urllib，采⽤ Apache2 Licensed 开源协议的 HTTP 库。它⽐ urllib 更加⽅便。 获取状态码、...

1.正则表达式常见匹配模式: 模式 描述 \w 匹配字母数字及下划线 \W 匹配非字母数字下划线 \s 匹配任意空白字符，等价于 [\t\n\r\f]. \S 匹配任意非空字符 ...

1.什么是爬虫？ 请求网站并提取数据的自动化程序 2.爬虫基本流程 （1）发起请求 通过HTTP库向目标站点发起请求，即发送一个Request，请求可以包含额外的headers等信息，等待服务器响应。 （2）获取响应内容 如果服务器能正常响应，会得到一个Response，Response的内容便是所要获取的页面内容，类型可能有HTML，Json字符串，二进制数据（如图片视频）等类型。 ...