开发者社区 问答 正文

动态加权采样的设计目的是什么?

动态加权采样的设计目的是什么?

展开
收起
夹心789 2024-06-24 20:31:21 29 分享 版权
1 条回答
写回答
取消 提交回答
  • 动态加权采样的设计目的在于扩大不同标记之间的采样权重差异,进一步提高罕见标记的采样概率。在预训练的每个迭代中,权重字典会更新为每个标记的最新采样权重,以便在下一个迭代中使用。

    2024-06-24 21:01:22
    赞同 4 展开评论
问答地址: