接上篇:https://developer.aliyun.com/article/1225869?spm=a2c6h.13148508.setting.23.595d4f0eudDbz0
四、 可度量的策略解决方案
1. 开放平台下的生态运营-混排策略层
闲鱼为什么需要单独的策略层?这和闲鱼自身的定位和特性强相关。
• 闲鱼是一个足够开放的平台,面临的问题非常多且复杂。
• 足够开放的平台之下闲鱼还是一个C2C市场,流量的分发需要回归C2C本质。
比如闲鱼面临着以下命题,因此在服务之上,架了一层策略层,来实现流量分发的全局最优。
2. 生态治理解决方案
我们把闲鱼面临的一些问题从调控对象和范围两个维度划分来六个象限。
基于这六个象限,设计了一套流量调控系统。
3. 分层架构下的置信实验体系
到现在,闲鱼推荐的分层架构基本就已经很清晰了,如下所示:
这里面每一层都会进行独立的实验迭代,也就意味着每一层都可能对大盘产生影响,无论是正向的还是负向的。因此在闲鱼经常会面临着一些下面的灵魂拷问。
为了回答这些灵魂拷问,我们对实验体系进行了重构,主要重构点包括:
• 新增空白层。每个实验域新增一层不做任何实验的空白层。由于每一层的流量都会均匀分布在空白层,因此该层的指标可以体现所有层的实验叠加后的效果。
• 新增空桶。每个实验域新增一个贯穿每一层的空桶。空白层vs.空桶,可以得到每个域的实验叠加后对指标的提升效果。
• 全局空桶。新增一个全局空桶贯穿每个实验域,用来衡量业务大盘的一些指标情况。
五、 总结与展望
综上,未来仍有很多优化手段可以关注:指标自动归因,推荐链路白盒化;模型可解释;大规模负样本采样等。