1. Motivation

Embedding层参数量往往极大,且由于输入为稀疏特征,导致模型训练困难。DeepFM将FM的隐向量作为Embedding初始化参数,加快模型收敛。

2. DeepFm

1. 特点

  1. - Wide&Deep相比,Deep&CrossDeepFM均是针对Wide不具备自动的特征组合能力的缺陷进行改进
  2. - Deep&Cross利用多层Cross网络特征组合(最大![](https://cdn.nlark.com/yuque/__latex/4c2df7b9c383dfaa506f102407c99d0b.svg#card=math&code=%28l%2B1%29&height=20&width=47)阶),DeepFM利用FM进行特征组合(最大2阶)

2. FM层

截屏2021-03-20 下午2.36.34.png
DeepFM网络结构
左边加法部分表达式:
DeepFM - 图2
右边embedding两两交叉部分表达式为:
DeepFM - 图3
合并即为FM表达式:
DeepFM - 图4