智能引擎搜索-基于问天引擎的智能搜索推荐算法开发|学习笔记

简介: 快速学习智能引擎搜索-基于问天引擎的智能搜索推荐算法开发

开发者学堂课程【第八届大学生创新创业大赛阿里命题智能弓|擎搜索命题解析智能引擎搜索-基于问天引擎的智能搜索推荐算法开发】学习笔记,与课程紧密联系,让用户快速学习知识。  

课程地址:https://developer.aliyun.com/learning/course/1014/detail/15075


智能引擎搜索-基于问天引擎的智能搜索推荐算法开发

 

1、命题背景

分别介绍整体的行业背景和问题引擎产品。

(1)行业背景

受疫情催化影响,全球资讯越发依赖线上渠道进行传播,人们通过互联网接决定用户文娱站点获取娱乐信息的诉求相比往年更加强烈。在各大线上文娱站点的入口,用户的搜索行为背后代表着观看内容的倾向,搜索质量的高低将直留存的时间,因此在 AI 时代,如何通过构建智能搜索能力,提升线上用户的平台粘性,成为了众多文娱厂商的重要研究课题。

为了解决这些问题,推出了问天引擎产品

(2)引擎产品介绍

"问天引擎"是阿里巴巴自主研发的大规模分布式搜索引整,支持了淘宝,天猫,菜鸟,优酷等在内的整个阿里巴巴集团搜索业务,也是阿里云开放搜索的基石。问天引擎经过多年的发展,在满足业务高可用、高时效性、低成本等需求的同时,沉淀出自动化运维系统。云上问天引擎作为一站式的搜索开发运维中台,提供基于大数据深度学习在线服务体系( AIOS )生态的灵活定制开发能力、自动化集群管控和运维能力,用户可以根据业务特点,方便地构建搜索服务。

2、命题内容

本次题目围绕文娱网站场景的搜索算法,参赛者们可以通过基于阿里巴巴集团自研的高性能分布式搜索引擎问天引擎(提供高工程性能的文娱智能搜索平台),可以快速迭代搜索算法,无需自主建设检索全链路环境,完成用户检索内容的搜索推荐。

参赛者可从以下方向进行算法模型比拼,更鼓励参赛者基干基础模型做出更多的探索与创新:

(1)基于问天引擎提供的环境,实现文娱领域高质量向量召回模型,通过将 Doc  Query 转换为 embeddina 进行索引构建、搜索查询

(2)基于问天引擎与 PAI 平台,完成文娱领域搜索场景的精排模型,构建完整的搜索链路,输出最优的搜索效果

具体的算法模型比拼会分成两个部分,第一部分是基于问题引擎实现向量召回模型,需要对全部的 Doc 和测试的 Query 做向量化,提交 embedding 结果到问题引擎。第二部分是基于问题引擎和 PAI 平台完成精排模型,是对召回阶段的 topk 做重排序,提交排序模型到问题引擎

3、答题要求

1边界要求:基于问天引擎架构的应用,符合问天引擎 应用规范

2交付要求:参赛者需要根据获取的 Doc  Query-Doc 相关训练集,自行训练向量召回模型及精排模型,我们通过回流数据,建向量索引查询测试(该阶段会做超时限制,防止选手无限制扩大模型复杂度),给出评测指标

3提前学习的技术文档或视频:基于实际作品开发需求,熟悉阿里云问天引擎及 PAI 产品

4、阿里云技术支持社区

https://developer.aliyun.com/learning/topic/internetplus

图片1.png

命题解读

5分钟命题解读:包含命题解读、命题要求、考察要点、解题思路等

学习资料

为赛题提供相匹配技术课程、体系化学习路线提,供参赛者学习

场景动手体验

提供赛题所涉及的云产品试用与云端实验沙箱 环境供参赛者动手实操

提赛前训练营

供针对赛题的专项培训,阿里云专家讲解助力参赛者取得好成绩

如果想了解更多信息可以加入阿里云技术支持社区获取更多的学习资料,或者参加技术训练营。

相关文章
|
2天前
|
算法
基于SOA海鸥优化算法的三维曲面最高点搜索matlab仿真
本程序基于海鸥优化算法(SOA)进行三维曲面最高点搜索的MATLAB仿真,输出收敛曲线和搜索结果。使用MATLAB2022A版本运行,核心代码实现种群初始化、适应度计算、交叉变异等操作。SOA模拟海鸥觅食行为,通过搜索飞行、跟随飞行和掠食飞行三种策略高效探索解空间,找到全局最优解。
|
1月前
|
存储 监控 算法
剖析基于Java算法驱动的智能局域网管控之道
本文探讨了基于Java语言的局域网控制方案,结合链表数据结构与令牌桶算法,解决设备管理和流量调度难题。通过链表灵活存储网络设备信息,实现高效设备管理;令牌桶算法则精准控制流量,确保网络平稳运行。二者相辅相成,为校园、企业等局域网提供稳固高效的控制体系,保障业务连续性和数据安全。
|
2月前
|
机器学习/深度学习 前端开发 算法
婚恋交友系统平台 相亲交友平台系统 婚恋交友系统APP 婚恋系统源码 婚恋交友平台开发流程 婚恋交友系统架构设计 婚恋交友系统前端/后端开发 婚恋交友系统匹配推荐算法优化
婚恋交友系统平台通过线上互动帮助单身男女找到合适伴侣,提供用户注册、个人资料填写、匹配推荐、实时聊天、社区互动等功能。开发流程包括需求分析、技术选型、系统架构设计、功能实现、测试优化和上线运维。匹配推荐算法优化是核心,通过用户行为数据分析和机器学习提高匹配准确性。
177 3
|
3月前
|
机器学习/深度学习 算法 数据挖掘
C语言在机器学习中的应用及其重要性。C语言以其高效性、灵活性和可移植性,适合开发高性能的机器学习算法,尤其在底层算法实现、嵌入式系统和高性能计算中表现突出
本文探讨了C语言在机器学习中的应用及其重要性。C语言以其高效性、灵活性和可移植性,适合开发高性能的机器学习算法,尤其在底层算法实现、嵌入式系统和高性能计算中表现突出。文章还介绍了C语言在知名机器学习库中的作用,以及与Python等语言结合使用的案例,展望了其未来发展的挑战与机遇。
77 1
|
3月前
|
算法 搜索推荐 数据库
二分搜索:高效的查找算法
【10月更文挑战第29天】通过对二分搜索的深入研究和应用,我们可以不断挖掘其潜力,为各种复杂问题提供高效的解决方案。相信在未来的科技发展中,二分搜索将继续发挥着重要的作用,为我们的生活和工作带来更多的便利和创新。
81 1
|
3月前
|
算法 测试技术 开发者
在Python开发中,性能优化和代码审查至关重要。性能优化通过改进代码结构和算法提高程序运行速度,减少资源消耗
在Python开发中,性能优化和代码审查至关重要。性能优化通过改进代码结构和算法提高程序运行速度,减少资源消耗;代码审查通过检查源代码发现潜在问题,提高代码质量和团队协作效率。本文介绍了一些实用的技巧和工具,帮助开发者提升开发效率。
67 3
|
4月前
|
存储
基于遗传算法的智能天线最佳阵列因子计算matlab仿真
本课题探讨基于遗传算法优化智能天线阵列因子,以提升无线通信系统性能,包括信号质量、干扰抑制及定位精度。通过MATLAB2022a实现的核心程序,展示了遗传算法在寻找最优阵列因子上的应用,显著改善了天线接收功率。
|
4月前
|
算法 决策智能
基于禁忌搜索算法的VRP问题求解matlab仿真,带GUI界面,可设置参数
该程序基于禁忌搜索算法求解车辆路径问题(VRP),使用MATLAB2022a版本实现,并带有GUI界面。用户可通过界面设置参数并查看结果。禁忌搜索算法通过迭代改进当前解,并利用记忆机制避免陷入局部最优。程序包含初始化、定义邻域结构、设置禁忌列表等步骤,最终输出最优路径和相关数据图表。
|
4月前
|
存储 算法 C++
【搜索算法】 跳马问题(C/C++)
【搜索算法】 跳马问题(C/C++)
|
4月前
|
人工智能 算法 Java
【搜索算法】数字游戏(C/C++)
【搜索算法】数字游戏(C/C++)

热门文章

最新文章