csv json文件写入MongoDB & Python读取数据库

最新推荐文章于 2022-01-22 17:55:22 发布

原创最新推荐文章于 2022-01-22 17:55:22 发布 · 597 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#python #csv

Python 同时被 3 个专栏收录

5 篇文章

订阅专栏

Data Analysis

2 篇文章

订阅专栏

MongoDB

1 篇文章

订阅专栏

本文介绍如何使用命令行工具mongoimport将CSV数据导入MongoDB，并通过Python的pymongo库读取数据，最后利用json_normalize进行数据规范化。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

写入MongoDB

我比较习惯用cmd写入数据，直接进入数据所在根目录/在file后面导到数据所在根目录

mongoimport --db taobao --collection consumer --type csv --headerline --ignoreBlanks --file tianchi_mobile_recommend_train_user.csv

Python读取数据库

导入包

from pymongo import MongoClient
from pandas.io.json import json_normalize

读取指令

conn = MongoClient(host='localhost', port=27017)  # 实例化MongoClient
db = conn.get_database('douban')  # 连接到名为douban的数据库

douban_movie = db.get_collection('douban_movie3') # 连接到集合下的数据名称douban_movie3
data = douban_movie.find()  # 查询这个集合下的所有记录

数据规范化
data = json_normalize([line for line in data])
读取完成