开发者社区 > 大数据与机器学习 > 人工智能平台PAI > 正文

请教一下机器学习PAI,easyrec中这个样本权重的用法,这里面是什么意思吗?

请教一下机器学习PAI,easyrec中这个样本权重的用法,这里面是什么意思吗?我想调高一部分训练样本的权重是怎么操作吗?e4394a756eefaa353eb2af6f2acc9665.png

展开
收起
真的很搞笑 2023-10-22 18:26:41 77 0
2 条回答
写回答
取消 提交回答
  • 增加一个权重input_fied,然后sample_weight是你新增的输入就行了10月17日 09:40鑫民,此回答整理自钉群“【EasyRec】推荐算法交流群”

    2023-10-23 08:05:47
    赞同 展开评论 打赏
  • 公众号:网络技术联盟站,InfoQ签约作者,阿里云社区签约作者,华为云 云享专家,BOSS直聘 创作王者,腾讯课堂创作领航员,博客+论坛:https://www.wljslmz.cn,工程师导航:https://www.wljslmz.com

    在阿里云机器学习PAI的EasyRec中,样本权重是一个非常重要的概念。样本权重用于调整模型训练过程中每个样本的重要性。比如,某些样本可能由于其代表的业务场景或用户行为更具代表性,因此我们希望在模型训练时给予它们更高的权重。

    具体来说,样本权重的用法主要体现在以下两个方面:

    1. 处理类别不平衡问题:如果数据集存在类别不平衡问题(某些类别样本数量较多,而其他类别样本数量较少),则可以通过调整样本权重来解决这个问题。例如,我们可以增加少数类别的样本权重,使其在模型训练过程中的影响力提升。

    2. 加权采样:除了解决类别不平衡问题外,还可以通过设置权重列来进行加权采样。权重列的类型必须是DOUBLE或BIGINT类型,按照该列值的大小进行采样。比如所选权重列的值是1.2和1.0,则值为1.2所属样本的被采样的概率就会大于值为1.0的样本。

    2023-10-22 19:07:20
    赞同 展开评论 打赏

人工智能平台 PAI(Platform for AI,原机器学习平台PAI)是面向开发者和企业的机器学习/深度学习工程平台,提供包含数据标注、模型构建、模型训练、模型部署、推理优化在内的AI开发全链路服务,内置140+种优化算法,具备丰富的行业场景插件,为用户提供低门槛、高性能的云原生AI工程化能力。

相关产品

  • 人工智能平台 PAI
  • 热门讨论

    热门文章

    相关电子书

    更多
    大规模机器学习在蚂蚁+阿里的应用 立即下载
    基于Spark的面向十亿级别特征的 大规模机器学习 立即下载
    基于Spark的大规模机器学习在微博的应用 立即下载