返回课程列表
Day 19
Week 3数据工程与 MLOps
模型监控与可观测性
20 分钟安排: 1. 5 分钟:写出"模型上线后可能坏掉"的 3 种方式。 2. 10 分钟:设计三个指标: • 线上精度(或替代指标) • 延迟 • 错误率 3. 5 分钟:想想数据漂移该如何检测。
🎯学习目标
- 1写出"模型上线后可能坏掉"的 3 种方式
- 2设计三个指标:线上精度(或替代指标)、延迟、错误率
- 3想想数据漂移该如何检测
💡核心概念
数据漂移检测:输入数据分布变化,导致模型性能下降模型性能监控:实时跟踪准确率、召回率等指标异常检测:识别异常请求、异常输出可观测性工具链:日志、指标、追踪(Logging, Metrics, Tracing)
🛠实战提示
实现一个模型监控系统,包含性能指标、数据漂移检测、异常告警。建立监控仪表板,实时了解模型健康状态。
✅20 分钟安排
1. 5 分钟:
2. 10 分钟:
线上精度(或替代指标)
延迟
错误率
3. 5 分钟:
📚学习资源
📝学习笔记
还没有笔记,开始记录你的学习心得吧