开发者社区> 问答> 正文

为什么负梯度的值可以作为梯度提升算法中残差的近似值呢?

已解决

对于一般损失函数而言,为什么可以利用损失函数的负梯度在当前模型的值作为梯度提升算法中残差的近似值呢?

展开
收起
游客llxrrk2i3nlwa 2022-04-02 14:38:41 1622 0
1 条回答
写回答
取消 提交回答
  • 推荐回答

    我们发现,在提升树算法中,残差是一个负的梯度,因而可以扩展到其它非二次错误(类别或排序问题)的损失函数。即,该方法是一种基于梯度的递减算法,它可以通过改变损失函数和计算它的负值来扩展。也就是说,该结论可以被推广成用损耗函数的负梯度来逼近一般损失函数。

    2022-04-02 14:52:36
    赞同 展开评论 打赏
问答分类:
问答标签:
问答地址:
问答排行榜
最热
最新

相关电子书

更多
数据+算法定义新世界 立即下载
袋鼠云基于实时计算的反黄牛算法 立即下载
Alink:基于Apache Flink的算法平台 立即下载