- 博客(7)
- 收藏
- 关注
原创 服务整体请求延迟排查方案
本文介绍了两种监控服务性能的方法:1) 使用curl命令测量域名请求各阶段耗时,包括DNS解析、TCP握手、SSL握手和总传输时间;2) 服务内部打点监控方案,涵盖函数整体耗时、组件调用耗时以及第三方接口耗时统计,并建议通过构建业务看板进行问题分析。两种方法可单独使用或结合落盘数据处理,实现对服务性能的全面监控。
2026-01-30 19:39:41
41
原创 模型调优-准备数据集
本文介绍了大模型训练数据集的相关要求和处理方法。训练数据集需为高质量数据,包括验证集分割、JSONL格式化、数据规模(SFT需上千条,DPO需上百条)等要求。强调数据质量的重要性,如答案准确性、指令多样化,避免模型过拟合。数据处理包括清洗、增强、去重等步骤,可借助阿里云、腾讯云等平台工具完成。建议先从100个示例开始验证效果,再逐步扩展数据规模。同时混入辅助数据集可提升模型效果,缓解领域训练导致的通用能力下降问题。
2025-06-16 18:47:42
855
原创 模型调优-调优简介
在自然语言处理(NLP)领域,Supervised Finetuning(SFT)是一种至关重要的技术手段,用来提升大模型在某一特定领域的表现。通过精细的策划和实施,SFT 能够指导模型的学习过程,确保其学习成果与既定目标高度吻合。SFT 指的是,用户提供一份标注好的数据集,即,包含输入的 prompt 和预期输出的 response。然后,在已有的某个基座模型上继续调整参数,来达到和下游任务对齐的目的。全面微调会更新模型的所有参数,它适合用来调整模型以适应高度复杂的任务,同时尽可能提高任务完成质量。
2025-06-09 20:57:55
1166
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人
RSS订阅
1