、Lu的博客

1.安装环境(1) requests库(负责数据爬取)：pip install requests(2) beautifulsoup(负责数据解析)：pip install bs4(3) pyecharts(负责数据可视化)： pip install pyecharts【补充】pyecharts在github上的仓库地址为：https://github.com/pyecharts/pyecharts ，需要的可以自行去学习，很容易上手。以安装以上环境的可忽略2.爬虫代码# .

1.下行遍历(1).contents :子节点的列表，将所有儿子节点存入列表(2).children :子节点的迭代类型，与.contents类似,用于循环遍历儿子节点(3).descendants :子孙节点的迭代类型，包含所有子孙节点,用于循环遍历for child in soup.body.children: print(child) # 遍历儿子节点 for child in soup.body.descendants: print(child) # 遍历子孙节点2.上行遍历

.contents 返回的是一个 (子节点)的列表，将<tag>所有儿子节点存入列表 。.children返回的是一个 遍历 (子节点)的迭代器，与.contents类似，用于循环遍历儿子节点。.descendants 返回的是一个 (子孙节点)的迭代器，包含所有子孙节点，用于循环遍历。...

1. find和find_all方法：搜索文档树，一般用得比较多的就是两个方法，一个是find，一个是find_all。find方法是找到第一个满足条件的标签后就立即返回，只返回一个元素。find_all方法是把所有满足条件的标签都选到，然后返回回去。使用这两个方法，最常用的用法是出入name以及attr参数找出符合要求的标签。soup.find_all("a",attrs={"id":"link2"})或者是直接传入属性的的名字作为关键字参数：soup.find_all("a",id

BeautifulSoup获取标签内的文本信息通常有以下几种方式：1. string：获取某个标签下的非标签字符串，返回的是一个字符串。2. strings：获取某个标签下的子孙非标签字符串，返回的是一个生成器。3. stripped_strings：获取某个标签下的子孙非标签字符串，会去掉空白字符，返回的是一个生成器。4. get_text：获取某个标签下的子孙非标签字符串，返回的是普通字符串。...