第 3 章阅读地图：推荐系统评价体系

章节主线

离线指标用于快速筛选，在线指标回答真实业务增益，A/B 实验建立因果比较，监控体系保障结论可信且系统可运行。

节	PDF 页	核心问题	常见误区
3.1 离线指标	1–4	分类、排序、校准指标分别测什么？	用单一离线指标替代业务目标。
3.2 在线指标	5	如何连接用户行为与长期业务价值？	只看均值，不看分群和护栏。
3.3 A/B 实验	6–7	怎样保证分流、日志和迭代结论可信？	污染分桶、口径变化、提前停止。
3.4 监控体系	8	数据、召回、排序、服务和降级如何分层监控？	只有系统指标，没有漏斗与质量指标。
3.5 小结	9–10	如何构造完整证据链？	把相关性误作因果性。

为一个排序模型写“离线准入—在线实验—长期护栏—回滚条件”四段式评估协议。

本书依据：第三章 PDF 第 1–10 页。