一句话说清楚
数据漂移分两类:特征漂移(输入分布变了,如用户群从年轻人变成中老年)和概念漂移(输入与输出的关系变了,如疫情改变了消费模式)。不检测漂移的模型会「安静地变笨」——没有任何报错,指标却持续下滑。
这对你选工具意味着什么
有标签的场景直接监控线上指标(准确率/转化率);无标签场景监控输入分布(PSI/KL 散度)。电商大促、政策变化这类已知事件后主动触发评估。
常见误区
阈值一刀切——把漂移告警设得太灵敏会天天狼来了,太迟钝又错过真退化;按特征重要性分级设阈值更实际。
AI 百科词条
监控线上数据分布是否偏离训练时假设,模型退化的早期预警器。
数据漂移分两类:特征漂移(输入分布变了,如用户群从年轻人变成中老年)和概念漂移(输入与输出的关系变了,如疫情改变了消费模式)。不检测漂移的模型会「安静地变笨」——没有任何报错,指标却持续下滑。
有标签的场景直接监控线上指标(准确率/转化率);无标签场景监控输入分布(PSI/KL 散度)。电商大促、政策变化这类已知事件后主动触发评估。
阈值一刀切——把漂移告警设得太灵敏会天天狼来了,太迟钝又错过真退化;按特征重要性分级设阈值更实际。