Python案例学习：抓取网页表格数据解析并写入Excel

原创

已于 2022-05-02 16:54:02 修改 · 1.3w 阅读

168 ·

CC 4.0 BY-SA版权

文章标签：

#学习 #python #爬虫

于 2022-05-02 16:20:09 首次发布

三年多没写博客了，原因是因为我转行了，经历了很长的低谷，那段时间从不看博客，今天打开来看，回复了一些评论，很抱歉，有些网友的评论没有及时回复。最近开始想写代码了~

最近看基金股票，想抓取一些行业当天的涨幅数据，尝试能不能在行业的波动下发现一些什么，所以想实现一个功能，就是抓取数据，然后将当天涨幅居前的行业提取出来，至于如何挖掘，这里不展开讨论。

程序很简单：

第一步：

抓取网页数据

  import requests


  #加入headers不会出现报错
    headers = {
        'User-Agent': 'Mozilla/5.0 (Windows NT 6.3; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/63.0.3239.132 Safari/537.36',
        'Accept': 'text/html, application/xhtml+xml, application/xml;q = 0.9, image/webp, image/apng, */*;    q = 0.8, application/signed-exchange;v = b3;q = 0.9',
        'Accept-Encoding': 'gzip, deflate, br'
    }
    strHtml = requests.get(url, headers=headers)
    html=strHtml.text

第二步：抓到的是Html的数据，数据如下，我这里使用BeautifulSoup进行解析，首先需要查找Table标签，然后再遍历th表头标签，再遍历td表格内容标签

解析Html数据，代