模型监控框架调研(上)

本文是关于Whylabs模型监控框架的调研,介绍了数据传输、监控的异常分类、模型性能指标、集成情况以及监控功能。框架支持数据质量、漂移、模型性能的监控,并提供丰富的可定制化功能,适用于Python、Java、Spark等环境,可扩展至Flink、Kafka等。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

引言

  • 背景:本文为个人调研现有主流模型监控框架的总结,其中对一些不满足工作需要的模型框架并未深入研究,总结仅供参考。
  • 参考连接:监控框架
  • 关于模型监控框架的参考文章貌似都是上面参考连接中那个作者写的,内容大致都是相关,有所偏重,可酌情搜索查看,本文调研的中心点与模型监控调研部分内容重合,可搭配使用。
  • 内容较多且是个人总结手稿,酌情参考,有问题可一起探讨。
  • 本文为 Whylabs 框架详情总结。

框架调研方向介绍:

  • 是否开源,因为业务需要只能内网使用
  • 获取数据的方式是什么样的,因为业务真实数据不能脱离指定环境
  • 对数据的监控有哪些方面?使用的什么原理;
  • 对模型的监控有哪些指标?哪些指标可以覆盖满足
  • 框架有无可采用的特色功能,整体流程是什么样的。
  • 框架扩展性如何,告警方式有哪些等等相关问题

框架 1:Whylabs:可以自己注册账号试用

  • 官方文档:文档
  • 简单操作介绍:
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

矮人三等

秀儿,是你吗秀儿?

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值