核心概念 第 12 章
MMoE任务门控专家
mmoe-task-gates
定义
MMoE为各预测任务单独学习专家混合门控,使共享表征按任务重组。
核心判断
任务间相关性不同,固定共享底层可能造成负迁移;门控有效性需按目标分别判断。
工程检查
检查每个任务的专家使用分布、梯度冲突和长尾目标效果。
本书依据
《第十二章-精排模型.pdf》,PDF 第 30–33 页(12.4.2 节)。
扩展说明
将方法收益与同等候选预算、特征可用性和实际在线资源成本共同核验。
核心概念 第 12 章
mmoe-task-gates
MMoE为各预测任务单独学习专家混合门控,使共享表征按任务重组。
任务间相关性不同,固定共享底层可能造成负迁移;门控有效性需按目标分别判断。
检查每个任务的专家使用分布、梯度冲突和长尾目标效果。
《第十二章-精排模型.pdf》,PDF 第 30–33 页(12.4.2 节)。
将方法收益与同等候选预算、特征可用性和实际在线资源成本共同核验。