引言
在现代数据分析和AI应用中,Databricks Lakehouse Platform提供了一个整合数据、分析和AI的平台。本文将带您快速了解如何在LangChain应用中使用DatabricksLLM模型,并讨论一些常见的挑战及其解决方案。
主要内容
DatabricksLLM概述
DatabricksLLM类用于包装一个托管在以下两种终端类型之一的完成端点:
- Databricks模型服务:推荐用于生产和开发。
- 集群驱动代理应用:推荐用于交互式开发。
这些工具可以帮助开发者将LLM端点集成到LangChain应用程序中。
限制
目前,DatabricksLLM类属于旧实现,具有以下限制:
- 仅支持同步调用。
- 不支持流式或异步API。
- 不支持批量API。
要使用这些功能,请转而使用新的ChatDatabricks类,该类支持所有的ChatModel API,包括流式、异步、批量等。
设置步骤
要访问Databricks模型,您需要:
- 创建一个Databricks账户。
- 设置凭据(如果您在Databricks工作区外)。
- 安装必要的软件包。
凭据设置
如果您在Databricks工作区内运行LangChain应用,可以跳过此步骤。否则,需要手动设置Databricks工作区主机名和个人访问令牌到DATABRICKS_HOST和DATABRICKS_TOKEN环境变量。

最低0.47元/天 解锁文章

被折叠的 条评论
为什么被折叠?



