02
离线评估方法论
离线实验设计、数据集划分(时间片、留出法)、历史回放。
05
排序质量指标
AUC、GAUC、NDCG、MRR 的计算与业务含义。
06
覆盖率与多样性
覆盖率(Coverage)、多样性(Diversity)、新颖性(Novelty)的定义与度量。
07
用户满意度指标
显式反馈(评分、点赞)与隐式反馈(停留时长、点击率)的量化。
08
业务核心指标
CTR、CVR、GMV、留存率(Retention)在推荐系统中的角色。
09
A/B 测试框架
分流原理、实验周期、统计显著性(p-value、置信区间)。
12
冷启动评估
用户冷启动、物品冷启动、系统冷启动的评估策略。
17
可解释性评估
可解释性维度、用户理解度测试、解释质量评分。
18
长期价值指标
用户生命周期价值(LTV)、长期留存、用户活跃度。
19
多目标评估
帕累托前沿、加权和法、约束优化下的指标权衡。
20
评估工具与平台
TensorFlow Model Analysis、RecBole、离线评估 Pipeline 搭建。
21
数据集与基准
MovieLens、Amazon Reviews、Criteo、公开 Benchmark 的使用。
28
前沿评估方法
因果推断在推荐评估中的应用、反事实评估。