场景化构建与核心价值|学习笔记

简介: 快速学习场景化构建与核心价值

开发者学堂课程【搜索与推荐技术实战训练营场景化构建与核心价值】学习笔记,与课程紧密联系,让用户快速学习知识。

课程地址https://developer.aliyun.com/learning/course/919/detail/14486


场景化构建与核心价值


 基本内容

一、以手机淘宝为例,浅谈场景画的搜索与推荐技术

二、如何从01构建场景化的推荐业务

三、基于开放搜索实现场景化的搜索业务

 

本课主题对搜索推荐在目前的一个业务形态的发展下,它更趋向于常理化构建在这种场景化构建里,做推荐技术本身是发生哪些变化?应该去承担的核心价值是什么?

 

一、以手机淘宝为例,浅谈场景画的搜索与推荐技术

1、丰富的搜索场景

1667029872485.jpg

这个是手机淘宝的一个界面,从界面上可以看出,场景是非常丰富的,从搜索框里面,有推荐底纹,在右边有一个拍立淘”,一个图片搜索,文本搜索之外的另一搜索,最下边儿语音搜索,在这个现在业界经常会称之为多模态搜索。

除了搜索这个,还有很多搜索的附加的外延功能去丰富、总结,比如说根据用户的历史搜索情况,能快捷地去推荐用户更快的找到曾经的一些喜好的产品,可以去挖掘用户最可能去了解和搜索的一些词。

搜索热词,包括通过对全网的一个热搜的挖掘,去引导更多人去了解热搜的状况,还有很多其他所场景。

2、丰富的推荐场景

推荐场景是非常丰富的,对于手机淘宝,作为流量分发的一个体系,搜索是站在一个比较大的比重,另外一个比较大的体重是推荐,搜索是用户已经有比较明确的意图,或者说至少是半个明确的意图,推荐是用户并不太一个有明确的意图。

3、多场景捕捉意图,最大化用户价值

1667029903198.jpg

购物决策周期

需求探索>信息获取>购买决策>下单

权据用户购物状态采取应推荐策略

时效性

相同需求激活活,生命同期

实时计算和在线推律,实时捕获和预计用户兴趣

人群结构复杂

登陆,新户、流久用户等

分人群推荐策略

多场景

上百个搜索推荐场景

高频场景深度优化,经过技术迁移平台化支持中低频场景

多目标

点击率、停留时长,成交等。多目标联

多物种

品,视频,直播、内容等

多学习,异构图表示学习

4、场景化所要解决的业务痛点

1667029930311.jpg

业务痛点在哪?在电商这个领域来讲,主要是货场的未匹配,在这个里面搜索推荐本身也是作为一个重要的核心点,最重要的是怎么把流量去通过策略工程实践去达到一个结果、目标,目标可能会有分配冷启动,这是一方面;另一方面的话是会有很多用户体验,只是推荐,茧房效应这样概念,用户喜欢这个东西,用户就一直看那个 APP 一直给用户推东西,导致用户困在这个APP”,没有发现性、核心性

5、痛点举例实时交互&互动

举几个例子来展开,要做到用户沉浸式浏览,实时交互是一个必备的基础功能,需要通过实施学习终端用户当前表达,并在每一次生成的推荐结果中,从而实现互动式推荐功能,根据用户的一个长期兴趣的行为,以及短期的一个损失的捕捉去进行用户实时的交互互动,所成立的技术要求是比较高的,可能会用到一些实时计算,在内容里边,这就是一个痛点

6、痛点举例多目标

image.png

多目标,比如在内容这个平台上,除了 CTR 停留市场目标以外,还有一个点是要去抑制质量比较差的标题党的内容,实际一个 场景是拿着一个比较复杂的算法架构去抑制标题党内容。

 

二、如何从0到1构建场景化的推荐业务

1、推荐系统简述

1667029980138.jpg 

分为三部分第一部分是前台的产品形态,产品形态,现在去打开一个另一个电商或者内容的短视频的 APP,可以看到有信息流的卡片式的设计,会有一些相关的文案、图片,用户体验、推荐理由,或者用户反馈等等,这些都属于前台呈现给用户的一个形态。

第二部分:推荐系统的一个基础,一个基石,需要去采集用户行为日志,所有的一些算法都是作用,在这些数据上面的,基本上可以分为三大类:物品本身的信息、用户的信息以及用户行为相关一些数据,

推荐算法系统,它本身是有算法策略加上去实现算法的工程系统来实现的,这是比较需要比较多的一些技术投入去实现的,所以这三个环节去组成了一个闭环来使用,来实现推荐系统。

2、搭建工程技术框架

1667030002811.jpg

推荐工程技术框架需要哪些部分?

以阿里云智能推荐的一个底层的一个技术价格为例进行说明,可以看到收集到用户物品及行为之后,把数据灌入到计算平台中,底层的计算资源,各种数据计算出结果之后推送出来,

最后计算过程,靠推荐模型去不断的去迭代去实现,同时推荐,背后模型跟策略是分不开的,需要通过业务或者产品保证策略包装起来去,用推荐的模型去实现,当里面有外延的一些技术诉求,

最后会产生一个推荐结果的 API 的形式,推出了用户侧,根据对用户推荐结果的一个正向行为,或者做回馈优惠,去推动改变策略,去改变推荐模型,从而再一次去迭代推荐系统。

3、设计埋点方案

image.png

在推荐系统里面所要做一些基础工作,首先要设计一些方案去收集用户的一些认知行为以视频业务为例,需要关注的一些行为,包括点击曝光模仿停留赞品关注等等,用户有异议的话,很多视频网站会在用户推荐物品后边,有一个叉号,或者一个小提示“你对这个感兴趣吗?”

“不感兴趣”或者“希望不要再推荐”等等负反馈这样的行为收集是非常重要的,另外在运营的一个业务逻辑里,它会是有分厂去匹配的,比如做一个大促的活动,可能有产品标签,或者针对某一个新人群,最后把行为收集汇总,越丰富越高质量的一个日志收集会有助于最终推荐效果的产生。

4、设计算法架构

1667030049538.jpg

考虑怎么去搭建一个合理的一个算法框架?首先大政策的框架需要考虑目标,用户体验生态设置,怎么去帮助中小商家,或者说怎么去利用平台,怎么抑制垃圾文章;

算法也有目标,商业目标、知识、CTR、API,看到整个是方法,一个场景的算法、一个链条。首先需要做过滤,去除一些重复的认知、一些延迟上的处理;过滤之后,会从百万里面,留下万上级别去做召回召回之后根据之前的特性,推荐的一些模板:个性化、相关推荐、热门等等,也会考虑时效性、新品主推各种策略,最后去做展示 ABS,流量的效果进行监控和复盘,来优化一些算法的逻辑。

5、猜你喜欢场景下的策略设计

策略设计是怎么去做?可能会关注这样几个问题。

(1如何去区分投放推荐的具体位置,确定了在猜你喜欢产业下去做。

(2是否支持区分投放位置的个性化建设?比如需要每个位置都要设置不同的策略,不同的个性化去快速去呈现。

(3如何支持多样化的商品呈现?

(4是否可以去实现类型多类型的一个混合展示,这些很具体的业务的需求,这是设计上的一个诉求。

6、相关推荐场景下的策略设计

在相关场景下,设计可能更多的需要关注这三个问题,

(1猜你喜欢和相关推荐的区别在哪里?

(2在相关推荐的相关度怎么去体

(3怎么保证相关推荐的相关性啊?涉及到用户的实际情况算法本身的耦合度

7、混排场景下的策略设计

排场景下的一个策略设计,如果单一的一个类型的推送,可能会导致用户的审美的疲劳性,所以会需要一个丰富多彩展现形式,推送给用户,唤起用户对多样性的点击欲望,接下来用策略设计出来,但是如果背后用技术去呈现,是比较复杂的。

阿里云智能推荐灵魂的配置界面是文章品牌不同的流量比例分配进行配置,统一进行发布,达到混排场景下的策略设计

8、推荐场景下的效果监测

做到策略配置之后,需要对一个推荐产品进行监测,需要去通过渠道以及场景去看,一定周期的某一个指标 CTR、点击率等等,需要合理划分,分头测试、迭代找到适应场景的可以投放的策略。

9、01构建场景化的推荐业务

1667030089433.jpg

  • 首先人才的基础,需要有比较扎实的沉淀,比如说工程的实现以及算法的实现;
  • 工程系统,它其一个不断迭代、不断成长的过程,没有谁的系统最开始就完美匹配所需求的,是可能通过对业务的不断理解、加深,去反推技术、改变、提升

智能算法,基于协同过滤,后续高级的算法,甚至会加一些前医学比较难的高级的模型,需要比较长时间的去尝试

10、基于阿里云智能推荐的快速搭建业务场景

阿里智能推荐的怎么可以去搭建?

有一个好处,基于它是一个推荐服务,如果定好业务的场景之后,推导出针对每个业务场景需要的策略是什么,那接下来就可以接触智能推荐平台,然后去快速搭建一个性化场景的搭建;

以淘宝具体的场景为例,淘宝有一个新势力周,主要针对大促活动的搭建,首先会去做选品、做招商,比如说选品,连衣裙这一类新势力周,必须要有报名的商家,还有一些普通的商家等等,通过这种推荐的选品加权把这部商品选出来。

需要策略的话,推荐过后不能再多次去推荐注意商品推荐的多样性,推荐这个商品之外,推荐其他商家的,最后要进行一些数据收集,通过 access 去观察效果,小规模投放到大规模的投放迭代过程

11、灵活的业务适配度赋能运营

体现了产品逻辑,可以灵活的业务进行适配,能不能运营必须要做的是持续迭代的一运营体系,能够用产品做出来。以场景为中心,而且关切到用户的全生命周期,智能推荐也针对背后的产品逻辑提供一系列的一个产品手段。

 

三、基于开放搜索实现场景化的搜索业务

1、开放搜索简介

1667030131145.jpg

开放搜索是阿里巴巴自己研发的一款搜索引擎,是一个注重高效果,一步到位的引擎,它内部是集成阿里巴巴二批的智能分词,综合了阿里内部搜索的强大能力,上图是整个基础架构的图。

提高很多灵活的配置工具,自定义排序结果,还有分词以及最后匹配到场景中去;

2、接下来介绍几个比较典型的场景

海淘场景商品搜索

 LBS 场景搜索

鞋服场景商品搜索

相关文章
|
存储 搜索推荐
知识体系化的必要性及构建通用体系的方法
知识体系化的必要性及构建通用体系的方法
336 0
|
5月前
|
数据采集 机器学习/深度学习 SQL
如何构建高效的数据分析流程:从技术视角出发
【7月更文挑战第22天】构建高效的数据分析流程是一个持续迭代的过程,需要技术团队与业务团队的紧密合作。通过不断优化流程,企业可以更加高效地利用数据资源,为业务决策提供有力支持。
|
16天前
|
存储 数据可视化 数据挖掘
设计团队高效运作的核心:任务可视化管理
团队协作低效?试试看板管理,让信息同步和流程更清晰,高效提升团队协作!
34 0
设计团队高效运作的核心:任务可视化管理
|
7月前
|
开发框架 网络安全 数据库
典型应用集成技术
【1月更文挑战第11天】典型应用集成技术。
40 0
|
XML 开发框架 安全
C#学习核心知识总结
C#学习核心知识总结
54 1
|
机器学习/深度学习 自然语言处理 Cloud Native
探索在云原生环境中构建的大数据驱动的智能应用程序的成功案例,并分析它们的关键要素。
大数据索引: Google使用大数据索引来构建其搜索引擎,并实时处理全球各种语言的文本数据。 云原生基础设施: Google Cloud提供了强大的云原生基础设施,支持大规模数据存储和处理。 自然语言处理: Google使用自然语言处理技术来理解和索引文本数据,从而提供高质量的搜索结果。 实时搜索: Google的
170 0
|
存储 SQL 分布式计算
核心能力介绍|学习笔记
快速学习核心能力介绍
470 0
核心能力介绍|学习笔记
|
存储 SQL 人工智能
谈谈企业如何构建现代数据平台
数据平台是一组集成的技术,它们共同满足组织的端到端数据需求。
谈谈企业如何构建现代数据平台
|
数据采集 监控 Oracle
谈谈如何构建基于业务价值驱动的数据治理运营模式
成功的组织有各种各样的规模。这些公司的共同特点是,在优化业务流程执行的同时,通过最大化客户服务来挖掘其全部潜力。
谈谈如何构建基于业务价值驱动的数据治理运营模式
|
数据采集 运维 监控
谈谈典型的数据治理体系框架
以规范的方式来管理企业的数据资产已经被广泛接受和认可,但还需要组织架构、原则、过程和规则,以确保数据管理的各项职能得到正确的履行。
谈谈典型的数据治理体系框架