返回课程列表
Day 19
Week 3数据工程与 MLOps

模型监控与可观测性

20 分钟安排: 1. 5 分钟:写出"模型上线后可能坏掉"的 3 种方式。 2. 10 分钟:设计三个指标: • 线上精度(或替代指标) • 延迟 • 错误率 3. 5 分钟:想想数据漂移该如何检测。

🎯学习目标

  • 1写出"模型上线后可能坏掉"的 3 种方式
  • 2设计三个指标:线上精度(或替代指标)、延迟、错误率
  • 3想想数据漂移该如何检测

💡核心概念

数据漂移检测:输入数据分布变化,导致模型性能下降模型性能监控:实时跟踪准确率、召回率等指标异常检测:识别异常请求、异常输出可观测性工具链:日志、指标、追踪(Logging, Metrics, Tracing)

🛠实战提示

实现一个模型监控系统,包含性能指标、数据漂移检测、异常告警。建立监控仪表板,实时了解模型健康状态。

20 分钟安排

1. 5 分钟:
2. 10 分钟:
线上精度(或替代指标)
延迟
错误率
3. 5 分钟:

📚学习资源

📝学习笔记

还没有笔记,开始记录你的学习心得吧