10、数据的获取、存储与检索：导入与导出全解析

数据的获取、存储与检索：导入与导出全解析

1. 数据导入概述

在处理数据时，我们常常需要从各种数据源导入数据。之前我们学习了从文本文件加载和解析数据，主要涉及了两种常见格式：CSV 和 JSON。但实际上，还有其他数据格式可能需要我们处理，如 XML、YAML 等。接下来，我们将重点学习如何从数据库导入数据到核心数据表示（CDR），并以 MongoDB 和 MySQL 这两种常见数据库为例进行讲解。

1.1 从数据库导入数据

数据库在数据处理中非常重要，是数据管道的重要组成部分，能帮助我们高效地处理大量数据。通常，我们会使用第三方访问库通过网络协议来访问数据库。下面是从数据库导入数据到 CDR 的流程：

graph LR
    A[数据库] -->|网络协议| B[第三方访问库]
    B --> C[核心数据表示（CDR）]

1.2 从 MongoDB 导入数据

1.2.1 MongoDB 简介

MongoDB 是一种流行的 NoSQL 数据库，具有便捷性、灵活性和高性能的特点。它是无模式的，不需要预先定义数据库结构，这在处理尚未完全理解的数据时非常有用。

1.2.2 准备工作

• 安装 promised - mongo ：如果使用 GitHub 仓库并执行了 npm install ，则已安装 promised - mongo ；否则，在新