开发者社区 > 大数据与机器学习 > 人工智能平台PAI > 正文

机器学习PAI中DeepRec 的 PS有针对梯度的延迟更新做一些功能吗?

请问一下,机器学习PAI中DeepRec 的 PS有针对梯度的延迟更新做一些功能吗?(比如某个 worker 太慢了,导致回传的梯度 out of date,PS是否会做一些过滤)。感觉应该是跟 StarServer 相关?但是看文档感觉不是很明确

展开
收起
冰激凌甜筒 2023-05-02 20:31:47 136 0
1 条回答
写回答
取消 提交回答
  • 是和optimizer相关的功能,其中adagraddecay就是针对这种场景的,大家很容易通过embeddingvariable来扩展实现自己的过期梯度的打折策略,embeddingvariable中记录着每个特征的version,此回答整理自钉群“DeepRec用户群”

    2023-05-02 20:36:24
    赞同 展开评论 打赏

相关产品

  • 人工智能平台 PAI
  • 热门讨论

    热门文章

    相关电子书

    更多
    微博机器学习平台架构和实践 立即下载
    机器学习及人机交互实战 立即下载
    大数据与机器学习支撑的个性化大屏 立即下载