FTRL的FM公式推导和实现

注解:

FTRL的FM公式推导和实现

如上是针对y的取值为-1或者1.

当y的取值为0或者1时,公式为:(后续添加)

 

、y平 是sigmoid的输出值,即预测值。针对不同的算法,该值对应的X的表达式步一样。

如果是LR,后期优化,算法就是最简单的LR+FTRL

如果是FM,后期优化,算法就是FM+FTRL。

FTRL是框架,如上这一步,针对所有的算法都相同。不同之处在于y平的表达式,再求W的导数的时候不同。

 

FTRL的FM公式推导和实现FTRL的FM公式推导和实现

 转载:http://castellanzhang.github.io/2016/10/16/fm_ftrl_softmax/

https://blog.csdn.net/imgxr/article/details/80126245