21、谷歌 Vertex AI 与 Document AI：生成式 AI 与文档处理的强大工具

谷歌 Vertex AI 与 Document AI：生成式 AI 与文档处理的强大工具

在当今数字化时代，生成式 AI 和文档处理技术在各个领域都发挥着至关重要的作用。谷歌的 Vertex AI GenAI 提供了一套强大的生成式 AI 工具，而 Document AI 则是处理文档的端到端解决方案。下面将详细介绍这两个工具的相关内容。

一、Vertex AI GenAI：定制预训练语言模型与安全保障

Vertex AI GenAI 拥有易于使用的界面和丰富的预训练模型库，能让不同技能水平的开发者快速上手生成式 AI 应用开发。

（一）向量数据库选择

对于小规模数据，可使用简单的方法计算余弦相似度分数来查找匹配向量，如在 pandas DataFrame 中操作。但对于需要存储数十亿嵌入向量且匹配延迟低于 5 毫秒的实际应用，建议使用托管向量数据库，如 Vertex AI Vector Search（以前称为 Matching Engine），或开源选项，如 PostgreSQL 的 pgvector 扩展。

（二）模型调优提升 GenAI 性能

基础预训练模型在通用任务上表现出色，但在特定任务上可能不足，仅靠提示调优无法完全弥补性能差距。在 Vertex AI 上进行模型调优可显著提升模型的特定任务性能。

1. 调优大语言模型的原因
   • 性能提升 ：调优可显著提高大语言模型输出的准确性、流畅性和相关性。
   • 领域适应