mongodb从文件导入数据

原创于 2017-12-08 11:39:03 发布 · 1.1w 阅读

2 ·

CC 4.0 BY-SA版权

mongodb 专栏收录该内容

6 篇文章

订阅专栏

本文介绍如何使用mongoimport命令将来自五个不同平台的约200万条年终盘点数据导入单一数据库的过程。具体包括命令参数详解及多线程提高导入效率的方法。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

【背景】公司提供年终盘点的数据，数据分别来自5个不同的平台，导入到同一个数据库查询

【数据量】数据量大概在200万

【命令】 linux下执行

mongoimport --db xxx --host localhost --port 27017 --username xxx --password xxx --collection summary2017 --type csv --headerline --file /data/summary2017/tangyunguo180w.csv --numInsertionWorkers 8

【详解】

--db 数据库名称

--host 主机ip

--port 端口

--username 用户名

--password 密码

--collection 集合

--type 数据格式

--headerline 忽略首行

--file 文件路径

--numInsertionWorkers N条线程执行