weixin_43758551的博客

HTML

beautifulsoup 使用方法

请求库 ：requests selenium chromedriver phantomjs aiohttp 解析库 ：解释式要懂 re 和其他另外一个，beautifulsoup pyquery tesserocr 框架：pyspider scrapy scrapy-splash scrapy-redis ...

抓取页面、分析页面和存储数据。

抓取始终是一个很大的需求，小到单个页面，某个站点，大到搜索引擎（百度、谷歌）的全网抓取。只要人能看到的东西，理论上都是爬虫可以获取的。不论静态页面还是动态页面。也不论pc端的页面还是移动端的app。话有点大，但这就是本系列的目的。爬虫编程，有很多语言可选，python、php、go、java···甚至是c。这里我们选择python作为爬虫的编程语言，因为它简单易上手，并且节约生命。 python爬...

https://www.cnblogs.com/zhaof/p/6930955.html from bs4 import BeautifulSoup 方法选择器 find_all find_all(name,attrs,recursive,text,**kwargs) 可以根据标签名，属性，内容查找文档 find（） select（） ...