多模态兴趣与语义融合

定义

多模态兴趣建模把文本、图像等内容语义融入历史表示、量化检索与多阶段融合。

核心判断

PSRQ 的语义码本、MISS 的树检索与 MUSE 的阶段性模态融合解决不同问题，不宜统称多模态 SIM。

工程检查

区分模态缺失、语义码本版本、检索召回与线上融合成本，做分模态消融。

本书依据

《第二十章-用户兴趣与序列建模.pdf》，PDF 第 66–77 页（20.6 节）。

扩展说明

多模态 SIM 是本节另一条路径，但没有单独的论文方法节点。