- 博客(4)
- 收藏
- 关注
RSS订阅原创 python爬虫学习笔记二（3):编写第一个简单的爬虫
参考书目 《python网络爬虫从入门到实践》唐松 2.4 编写第一个简单的爬虫 2.4.1 第一步：获取页面 import requests url = "http://www.santostang.com/" headers = {'User-Agent' : 'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/70.0.3538.25 Safari/537.36 Core/1.70.37
2020-07-21 10:00:35
368
原创 python爬虫学习笔记二（2):面向对象编程（创建类、封装和继承、程序错误的处理）
参考书目 《python网络爬虫从入门到实践》唐松 2.3 面向对象编程 简单举例 class People: #创建类 #__init__()方法为类的构造方法，左右各有两个下划线 def __init__(self, name, age,gender): self.name = name self.age = age self.gender = gender def detail(self):#通过self调用被封装的内容 print(self.name)
2020-06-15 13:20:10
286
原创 python爬虫学习笔记二（1)：python的基本命令
参考书目 《python网络爬虫从入门到实践》唐松 2.1 python的选择 （1）anaconda自带的Jupyter Notebook编辑器 （2）anaconda自带的Spyder编辑器 打开方式：官网下载anaconda，打开cmd命令提示符输入编辑器的名称再点击换行即可 2.2 python的基本命令 （1)字符串（string） 字符串用来存储类似句子的类型，放在单引号(’)或双引号(")中，字符串可以用加号加起来 string1 = 'python web scraping' string2
2020-06-15 11:19:04
264
原创 python爬虫学习笔记一：网络爬虫入门
参考书目 《python网络爬虫从入门到实践》唐松 第一章 网络爬虫入门 1.1 robots协议 举例：查看京东的robots协议 京东robots协议地址 User-agent: * （代表所有用户必须遵守下面的规定） Disallow: /（/代表根目录，不可获取） 1.2 python爬虫的流程 （1）获取网页 获取网页的基础技术：requests、urllib和selenium 获取网页的进阶技术：多进程多线程抓取、登录抓取、突破IP封禁和使用服务器抓取 （2）解析网页 解析网页的基础技
2020-06-13 16:54:22
506
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人