开发者社区 > 大数据与机器学习 > 人工智能平台PAI > 正文

想问下用户多个embedding时,hit_rate怎么算呢?

想问下用户多个embedding时,hit_rate怎么算呢?

展开
收起
JWRRR 2023-04-03 16:17:42 422 0
2 条回答
写回答
取消 提交回答
  • 公众号:网络技术联盟站,InfoQ签约作者,阿里云社区签约作者,华为云 云享专家,BOSS直聘 创作王者,腾讯课堂创作领航员,博客+论坛:https://www.wljslmz.cn,工程师导航:https://www.wljslmz.com

    当用户有多个embedding时,可以通过将这些embedding进行拼接(Concatenate)的方式来得到用户的综合embedding。对于这种情况,可以使用以下方法来计算hit rate:

    1、对于每个用户,将所有的embedding进行拼接,得到用户的综合embedding。

    2、对于每个用户,将其综合embedding与所有的item embedding进行相似度计算,得到一个分数列表。

    3、将分数列表按照从大到小排序,取前K个分数对应的item作为推荐结果。

    4、如果推荐结果中包含用户真实交互过的item,则认为推荐命中,否则认为推荐未命中。

    5、统计所有用户的命中次数和总次数,计算hit rate。

    2023-04-23 23:42:26
    赞同 展开评论 打赏
  • 随心分享,欢迎友善交流讨论:)

    当用户有多个embedding时,hit_rate(命中率)可以通过以下计算方式来计算:

    1、对于每个用户,先将多个embedding求和或求平均得到一个表示用户的embedding。

    2、对于每个测试项,计算其与每个用户embedding的相似度,选择最高的相似度来判断这个测试项是否与用户匹配。

    3、计算所有测试项中被正确匹配的数量,除以测试项总数即可得到命中率。 例如,假设有10个用户,每个用户有3个不同的embedding表示,总共有30个embedding表示。对于每个用户,可以将3个embedding求平均得到一个表示这个用户的embedding。对于每个测试项,可以计算其与每个用户embedding的相似度,选择最高的相似度来判断这个测试项是否与用户匹配。最后计算所有测试项中被正确匹配的数量,除以测试项总数即可得到命中率。

    需要注意的是,相似度的计算方式可以根据具体情况选择,例如可以使用余弦相似度、欧几里得距离等。此外,如果有多个测试项与多个用户匹配,可以使用其他指标如F1-score、准确率等来评估模型的性能。

    2023-04-03 16:48:36
    赞同 展开评论 打赏

人工智能平台 PAI(Platform for AI,原机器学习平台PAI)是面向开发者和企业的机器学习/深度学习工程平台,提供包含数据标注、模型构建、模型训练、模型部署、推理优化在内的AI开发全链路服务,内置140+种优化算法,具备丰富的行业场景插件,为用户提供低门槛、高性能的云原生AI工程化能力。

热门讨论

热门文章

相关电子书

更多
低代码开发师(初级)实战教程 立即下载
冬季实战营第三期:MySQL数据库进阶实战 立即下载
阿里巴巴DevOps 最佳实践手册 立即下载