使用 Dedoc 结合 LangChain 进行文档加载的实战示例

在文档处理领域，Dedoc 是一个强大的开源工具，它能够从各种格式的文件中提取文本、表格、附加文件及文档结构。本文将详细介绍如何将 Dedoc 与 LangChain 集成使用，展示其在文档加载中的应用。

技术背景介绍

Dedoc 支持的文件格式非常广泛，包括 DOCX、XLSX、PPTX、EML、HTML、PDF 以及图像等。通过 Dedoc，我们可以有效地解析这些格式的文件，并将其内容加载到 LangChain 的文档对象中进行进一步处理。

核心原理解析

Dedoc 提供了不同的 Loader，用于处理不同格式的文件。例如，DedocFileLoader 用于通用文件加载，DedocPDFLoader 专用于 PDF 文件加载。此外，通过 DedocAPIFileLoader，我们可以将 Dedoc 作为服务运行，而无需安装 Dedoc 库本身。

代码实现演示

下面，我们将着重展示如何使用 Dedoc 进行文档加载操作。

使用 DedocFileLoader 加载文档

from langchain_community.document_loaders import DedocFileLoader

# 初始化 DedocFileLoader 用于加载文本文件
loader = DedocFileLoader("./example_data/state_of_the_union.txt")

# 加载文档
docs = loader.load()

# 输出文档的前 100 个字符
print(docs