
AI
sjm_csdn
Learn and share together
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
DeepSeek本地部署全攻略
DeepSeek模型本地部署指南摘要:部署需准备RTX3090+(24GB显存)或64GB内存CPU环境。安装Python3.10、CUDA12.1及transformers等依赖后,通过HuggingFace获取模型。创建推理脚本加载模型,支持自动设备分配和8bit量化。显存不足时可启用梯度检查点或内存优化。建议使用vLLM加速框架生产部署,详细配置参考官方文档。注意首次运行需下载分词器文件,推荐用虚拟环境隔离依赖。(149字)原创 2025-06-18 16:32:20 · 303 阅读 · 0 评论 -
.NET集成DeepSeek:API调用与本地部署
DeepSeek通常指深度求索公司的大模型API或开源模型。以下是两种集成方式:API调用和本地模型部署。这两种方法分别适用于不同场景:API调用适合快速集成且无需本地硬件,本地部署适合数据隐私要求高的场景。在DeepSeek官网注册账号,创建API密钥,通常会有免费试用额度或按量计费选项。从HuggingFace或DeepSeek官方仓库获取GGUF格式模型文件(如。原创 2025-06-18 16:27:47 · 306 阅读 · 0 评论 -
.NET集成OpenAI全流程详解
摘要:本文提供了在.NET中集成OpenAI服务的分步指南,包括:1)安装Betalgo.OpenAI SDK;2)配置API密钥;3)实现基础文本生成和聊天对话功能;4)异常处理建议;5)关键注意事项(密钥安全、性能优化、费用监控和模型选择)。还介绍了最新SDK支持的异步流式响应功能,帮助开发者高效集成OpenAI的AI服务到.NET应用中。原创 2025-06-18 16:24:47 · 195 阅读 · 0 评论