牛人叫你用python爬取百度贴吧-excel存储

原创

于 2020-10-15 13:17:19 发布 · 1.2k 阅读

13 ·

CC 4.0 BY-SA版权

本文介绍如何使用Python爬取百度贴吧的旅游信息，通过分析页面结构，利用requests和BeautifulSoup库抓取数据，并最终将结果存储到Excel表格中，便于分析热门旅游地点。

让我们爬取百度贴吧旅游信息，看看哪些地方是大家旅游关注的热点。

不要问我这个十一去哪儿旅游了，我还在家没日没夜的码代码。

这次我们用 urllib 爬取页面，再用 BeautifulSoup 提取有用信息，最后用 xlsxwriter 把获取的信息写入到excel表

一、用到技术

python 基础
xlsxwriter
urllib
BeautifulSoup
加python学习qq群：10667510 送python零基础入门学习资料+99个源码

二、目标页面

https://tieba.baidu.com/f?kw=%E6%97%85%E6%B8%B8&ie=utf-8&pn=0

三、结果

四、安装必要的库

win+R 打开运行
输出cmd 进入控制台
分别安装 beautifulsoup4 , lxml , xlsxwriter
pip install   lxml
pip install   beautifulsoup4
pip install   xlsxwriter
加python学习qq群：10667510 送python零基础入门学习资料+99个源码