数据分析系列之python中便捷数据的获取(数据获取补充)

最新推荐文章于 2025-06-30 10:24:41 发布

原创最新推荐文章于 2025-06-30 10:24:41 发布 · 193 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#python #大数据 #数据挖掘 #正则表达式 #便捷数据获取

数据分析专栏收录该内容

26 篇文章

订阅专栏

本文介绍了如何使用Python的pandas库来读取和写入CSV及Excel文件，并演示了简单的数据处理方法，如数据加总等。此外，还提供了一个从网页抓取数据的例子。

1 怎样读取/写入csv文件数据？

import pandas as pd
#读取
df = pd.read_csv('c/test/test.csv')
#帮助信息
help(pd.read_csv)
#写入
df.to_csv('...')

#excel同理
#读取
df = pd.read_excel('c/test/test.xlsx', sheet_name = 'scores')
#计算
df['sum'] = df['Python'] + df['Math']
#写入
df.to_excel('c/test/scores.xlsx', sheet_name = 'scores')

2 读取网页中的数据？

# -*- coding: utf-8 -*-
import requests
import re
import pandas as pd

def retrieve_dji_list():
    r = requests.get('https://money.cnn.com/data/markets/nasdaq/')
    #正则表达式
    search_pattern = re.compile()
    #正则表达式模块的findall()
    dji_list_in_text = re.findall()
    #存入dji_list中
    dji_list = []
    for item in dji_list_in_text:
    	dji_list.append()
    return dji_list

#调用
dji_list = retrieve_dji_list()
djidf = pd.DataFrame(dji_list)
print(djidf)

补充资料：
数据集获取：
kaggle.com/datasets
sklearn模块的datasets
NLTK语料库
参考资料：
https://www.icourse163.org/learn/NJU-1001571005?tid=1463102441&from=study#/learn/content?type=detail&id=1240380188&cid=1261816417 用python玩转数据