Python爬虫入门（五）股票案例

最新推荐文章于 2025-03-10 12:19:36 发布

咸鱼hao

最新推荐文章于 2025-03-10 12:19:36 发布

阅读量1.3k

点赞数

CC 4.0 BY-SA版权

分类专栏： Python 文章标签： Python 爬虫

本文链接：https://blog.youkuaiyun.com/weixin_43868436/article/details/89706850

这篇博客介绍了Python爬虫在股票数据抓取方面的应用，包括基础的股票案例及其实现，还探讨了如何进行改进提升爬虫的效率和准确性。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

一、股票案例

import requests
from bs4 import BeautifulSoup
import traceback
import re


def get_html_text(url):
    try:
        r = requests.get(url)
        r.raise_for_status()
        r.encoding = r.apparent_encoding
        return r.text
    except:
        return ""


def ge_stock_list(lst, stockURL):
    html = get_html_text(stockURL)
    soup = BeautifulSoup(html, 'html.parser')
    a = soup.find_all('a')
    for i in a:
        try:
            href = i.attrs['href']
            lst.append(re.findall(r"[s][hz]\d{6}", href)[0])
        except:
            continue


def ge_stock_info(lst, stockURL, fpath):
    for stock in lst:
        url = stockURL + stock + ".html"
        html = get_html_text(url)
        try:
            if html == "":
                continue
            infoDict = {