带你读《2022技术人的百宝黑皮书》——生成式重排在内容推荐中的应用实践(4)

简介: 带你读《2022技术人的百宝黑皮书》——生成式重排在内容推荐中的应用实践(4)

带你读《2022技术人的百宝黑皮书》——生成式重排在内容推荐中的应用实践(3) https://developer.aliyun.com/article/1246843?groupCode=taobaotech



序列价值由列表中内容的相关度和相似度共同衡量,考虑到序列中不同位置的内容对序列的影响程度不同[14] ,使用每个位置被浏览到的概率与内容价值进行加权来计算最终的序列价值:


image.png

image.png 为第i个位置内容的相关度分, image.png位置i内容的相似度分, image.png为平衡因子。


image.png 为第i个位置被浏览到的概率,具体地:

image.png

image.png


image.png为从位置 image.png跳转到下一个位置的概率,该概率使用真实的曝光日志数据进行计算近似得到。


image.png 衡量了位置i内容与前序k个位置内容的局部相似度,我们实验了以下几种不同的方法,最终采取了k=3的间隔相似度进行计算。


image.png


序列评估


在序列评估环节,需要对序列生成阶段产生的若干组候选序列进行统一的价值评估,价值评估方法需要满足:


1. 上下文感知,充分考虑列表中内容的相互影响

2. 能够对列表的整体收益进行评估


我们利用线上真实的曝光点击数据训练了一个带有上下文感知结构的打分模型。对于列表中每个位置的内容,模型能够考虑前后其他位置内容对其的影响并给出其预估价值。最终以列表中所有位置内容的预估价值之和作为列表的整体预估价值。



带你读《2022技术人的百宝黑皮书》——生成式重排在内容推荐中的应用实践(5) https://developer.aliyun.com/article/1246840?groupCode=taobaotech

相关文章
|
10月前
|
数据采集 测试技术
SPAR:融合自对弈与树搜索的高性能指令优化框架
SPAR框架通过自对弈和树搜索机制,生成高质量偏好对,显著提升了大语言模型的指令遵循能力。实验表明,SPAR在指令遵循基准测试中表现优异,尤其在模型规模扩展和判断能力方面展现出显著优势。
228 5
|
机器学习/深度学习 算法 搜索推荐
带你读《2022技术人的百宝黑皮书》——生成式重排在内容推荐中的应用实践(2)
带你读《2022技术人的百宝黑皮书》——生成式重排在内容推荐中的应用实践(2)
236 0
带你读《2022技术人的百宝黑皮书》——生成式重排在内容推荐中的应用实践(2)
|
搜索推荐 测试技术
淘宝粗排问题之在粗排模型中引入交叉特征如何解决
淘宝粗排问题之在粗排模型中引入交叉特征如何解决
|
搜索推荐 测试技术 流计算
承上启下:基于全域漏斗分析的主搜深度统一粗排
文章首先介绍了淘宝搜索的多阶段检索系统,包括召回、粗排和精排阶段。粗排模型的目标是优化商品的排序,以提高在召回集合中选择优质商品的能力。文章提到,粗排模型与精排模型的目标有所不同,粗排更注重腰部商品的排序,而精排更注重头部商品的排序。 此外,文章还探讨了模型的损失函数形式,发现原始的softmax损失函数在处理多正样本时存在问题,提出了改进的损失函数,使得模型在粗排阶段的表现更佳。最后,作者们总结了优化工作的进展,以及优化样本对齐,以实现更好的整体效果。
|
Java API 开发者
Spring Cloud Gateway中的GlobalFilter:构建强大的API网关过滤器
Spring Cloud Gateway中的GlobalFilter:构建强大的API网关过滤器
963 0
|
机器学习/深度学习 监控 搜索推荐
深度粗排模型的GMV优化实践:基于全空间-子空间联合建模的蒸馏校准模型
随着业务的不断发展,粗排模型在整个系统链路中变得越来越重要,能够显著提升线上效果。本文是对粗排模型优化的阶段性总结。
1953 0
深度粗排模型的GMV优化实践:基于全空间-子空间联合建模的蒸馏校准模型
|
算法 搜索推荐
带你读《2022技术人的百宝黑皮书》——生成式重排在内容推荐中的应用实践(3)
带你读《2022技术人的百宝黑皮书》——生成式重排在内容推荐中的应用实践(3)
243 0
|
机器学习/深度学习 存储 算法
Faiss为啥这么快?原来是量化器在做怪!1
Faiss为啥这么快?原来是量化器在做怪!
889 0
|
搜索推荐 算法
带你读《2022技术人的百宝黑皮书》——生成式重排在内容推荐中的应用实践(1)
带你读《2022技术人的百宝黑皮书》——生成式重排在内容推荐中的应用实践(1)
257 0
|
机器学习/深度学习 自然语言处理 API
文档翻译有哪些开源的工具
文档翻译有哪些开源的工具