</div>《千亿特征流式学习在大规模推荐排序场景的应用》电子版地址
2022-12-12
45
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《
阿里云开发者社区用户服务协议》和
《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写
侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
简介：
千亿特征流式学习在大规模推荐排序场景的应用
目录
相关文章
|
4天前
|
机器学习/深度学习
SQL
人工智能
人工智能平台PAI产品使用合集之如何通过机器学习PAI 的Alink实现大量数据两两计算相关性
阿里云人工智能平台PAI是一个功能强大、易于使用的AI开发平台，旨在降低AI开发门槛，加速创新，助力企业和开发者高效构建、部署和管理人工智能应用。其中包含了一系列相互协同的产品与服务，共同构成一个完整的人工智能开发与应用生态系统。以下是对PAI产品使用合集的概述，涵盖数据处理、模型开发、训练加速、模型部署及管理等多个环节。
16
0
0
|
2月前
|
自然语言处理
搜索推荐
算法
【一文读懂】基于Havenask向量检索+大模型，构建可靠的智能问答服务
Havenask是阿里巴巴智能引擎事业部自研的开源高性能搜索引擎，深度支持了包括淘宝、天猫、菜鸟、高德、饿了么在内的几乎整个阿里的搜索业务。本文针对性介绍了Havenask作为一款高性能的召回搜索引擎，应用在向量检索和LLM智能问答场景的解决方案和核心优势。通过Havenask向量检索+大模型可以构建可靠的垂直领域的智能问答方案，同时快速在业务场景中进行实践及应用。
110139
63
72
|
8月前
|
数据挖掘
|
索引
|
人工智能
搜索推荐
算法
|
SQL
分布式计算
自然语言处理
通过Z-Order技术加速Hudi大规模数据集分析方案
多维分析是大数据分析的一个典型场景，这种分析一般带有过滤条件。对于此类查询，尤其是在高基字段的过滤查询，理论上只我们对原始数据做合理的布局，结合相关过滤条件，查询引擎可以过滤掉大量不相关数据，只需读取很少部分需要的数据。例如我们在入库之前对相关字段做排序，这样生成的每个文件相关字段的min－max值是不存在交叉的，查询引擎下推过滤条件给数据源结合每个文件的min－max统计信息，即可过滤掉大量不相干数据。 上述技术即我们通常所说的data clustering 和 data skip。直接排序可以在单个字段上产生很好的效果，如果多字段直接排序那么效果会大大折扣的，Z-Order可以较好的解决多
438
0
0
|
机器学习/深度学习
算法
搜索推荐
|
存储
JSON
算法
基于HBase构建千亿级文本数据相似度计算与快速去重系统
前言
随着大数据时代的到来，数据信息在给我们生活带来便利的同时，同样也给我们带来了一系列的考验与挑战。本文主要介绍了基于 Apache HBase 与 Google SimHash 等多种算法共同实现的一套支持百亿级文本数据相似度计算与快速去重系统的设计与实现。该方案在公司业务层面彻底解决了多主题海量文本数据所面临的存储与计算慢的问题。
一. 面临的问题
1. 如何选择文本的相似度计算或去重算法？
常见的有余弦夹角算法、欧式距离、Jaccard 相似度、最长公共子串、编辑距离等。这些算法对于待比较的文本数据不多时还比较好用，但在海量数据背景下，如果每天产生的数据以千万计算，我们如何对于这些海
664
0
1
热门文章
最新文章
1
订票系统不再瘫痪 阿里云确认与12306合作
2
29.4. Maatkit Essential command-line utilities for MySQL
3
hdu 2051 Bitset （java）
4
sqlplus格式的使用
5
想上威胁情报？先搞明白这五个问题吧
6
kbmmw 中XML 操作入门
7
kotlin 语言入门指南(一)--基础语法
8
LINUX 硬连接和软连接
9
Android常用工具类封装---SharedPreferencesUtil
10
What are TCHAR, WCHAR, LPSTR, LPWSTR, LPCTSTR (etc.)?
1
如何本地安装AFFiNE并将服务发布至公网实现团队远程访问协作
23
2
【Linux-14】进程地址空间＆虚拟空间＆页表——原理＆知识点详解
18
3
如何在CentOS7一键安装宝塔面板并实现固定地址访问内网宝塔进行管理
19
4
【Mysql】在多表查询过程中如果已经起了别名，就不能通过表名限定字段
18
5
Windows文件搜索神器Everything安装配置结合内网穿透实现公网查询本地文件
18
6
【Web 前端】 jQuery 里的 ID 选择器和 class 选择器有何不同？
15
7
CentOS安装MeterSphere并实现无公网IP远程访问本地测试平台
13
8
【Web 前端】网页上有 5 个div元素，如何使用JQ来选择它们？
15
9
本地MinIO存储服务通过Java程序结合cpolar实现远程连接上传文件
11
10
【Web 前端】jQuery 库中的 $() 是什么？
16