推荐系统学习笔记(十六)LHUC(PPNet)
参考文献:Learning Hidden Unit Contributions for Unsupervised Acoustic Model Adaptation
LHUC
简单讲,就是将重要的一些bias特征embedding,作为其他所有特征的"gate"——即特征的重要性embedding,和特征原始embedding 做hadamard 积,生成加权后的embedding,后面就是mlp层。
PPnet
PPNet的网络结构由基础的DNN结构和Gate NN结构组层。两种结构的融合方式是LHUC(Learning Hidden Unit Contributions)结构。