核心概念 第 15 章
冗余特征分组剪枝
feature-pruning
定义
冗余特征分组剪枝是把表达相近信息的特征组织为组,考察移除整组后模型还失去多少有效信息,再缩减特征集合的方法。
核心判断
高度相关的特征不必全部保留,但单一特征的重要性低不等于可直接删除;应在现有特征集合上测量边际收益,成组评估冗余后再按效果与成本决定剪枝。
工程检查
按来源、业务语义或相关性分组做消融,比较删组前后的离线指标、在线分群及计算、存储、传输开销;先小流量再全量验证,并检查长尾物品或稀疏用户是否受损。
本书依据
《第十五章-特征工程.pdf》,PDF 第 34–35 页(15.6.2 特征冗余与分组消融);第 35 页(15.6.3 特征成本)。
扩展说明
若线上存在特征复用,删特征前还需盘点其他模型的消费者与回滚依赖。