解密双十一、618电商大促数据大屏指标实现原理

本文涉及的产品
云原生大数据计算服务MaxCompute,500CU*H 100GB 3个月
云原生大数据计算服务 MaxCompute,5000CU*H 100GB 3个月
简介: 数据分析,大数据应用的一个主要场景,通过数据分析指标监控企业运营状态,及时调整运营和产品策略。大数据平台上运行的绝大多数大数据计算都是关于数据分析的,各种统计、关联分析、汇总报告,都需要大数据平台。

数据分析,大数据应用的一个主要场景,通过数据分析指标监控企业运营状态,及时调整运营和产品策略。大数据平台上运行的绝大多数大数据计算都是关于数据分析的,各种统计、关联分析、汇总报告,都需要大数据平台。


运营监控


那些运营数据指标,老板需要全面快速了解这些指标,以发现公司运营问题。


公司角度,运营数据是公司运行发展的管理基础,既可通过运营数据了解公司目前发展的状况,又可以通过调节这些指标对公司进行管理,即数据驱动运营。


而运营数据的获得,需要在应用程序中大量埋点采集数据,从数据库、日志和其他第三方采集数据,对数据清洗、转换、存储,利用SQL进行数据统计、汇总、分析,才能最后得到需要的运营数据报告。而这都需大数据平台支持。


互联网运营常用数据指标


不同互联网行业关注不同运营数据。但有些指标是常用的,基本反映了运营的核心状态。


1. 新增用户数


网站增长性的关键指标,指新增加的访问网站的用户数(或新下载App的用户数),对一个爆发期网站,新增用户数会在短期内出现倍增走势,是网站的战略机遇期,很多大型网站都经历过一个甚至多个短期内用户暴增阶段。


新增用户数有日新增用户数、周新增用户数、月新增用户数等几种统计口径。


2. 用户留存率


新增用户并不一定总是对网站满意,在使用网站后感到不满意,可能会注销账户(卸载App),这些辛苦获取来的用户就流失了。网站把经过一段时间依然没有流失的用户称作留存用户,留存用户数比当期新增用户数就是用户留存率。


用户留存率 = 留存用户数 / 当期新增用户数


计算留存有时间窗口,即和当期数据比,3天前新增用户留存的,称作3日留存;相应的,还有5日留存、7日留存等。新增用户可以通过广告、促销、病毒营销等手段获取,但是要让用户留下来,就必须要使产品有实打实的价值。用户留存率是反映用户体验和产品价值的一个重要指标,一般说来,3日留存率能做到40%以上就算不错了。和用户留存率对应的是用户流失率。


用户流失率 = 1 - 用户留存率


3. 活跃用户数


用户下载注册,但是很少打开产品,表示产品缺乏黏性和吸引力。活跃用户数表示打开使用产品的用户数,根据统计口径不同,有日活跃用户数、月活跃用户数等。提升活跃是网站运营的重要目标,各类App常用推送优惠促销消息给用户的手段促使用户打开产品。


4. PV


打开产品就算活跃,打开以后是否频繁操作,就用PV这个指标衡量,用户每次点击,每个页面跳转,被称为一个PV(Page View)。PV是网页访问统计的重要指标,在移动App上,需要进行一些变通来统计。


5. GMV


GMV即成交总金额(Gross Merchandise Volume),是电商网站统计营业额(流水)、反映网站营收能力指标。配合的还有订单量(用户下单总量)、客单价(单个订单的平均价格)等。


6. 转化率


电商网站产生购买行为的用户与访问用户之比。


转化率 = 有购买行为的用户数 / 总访问用户数


用户从进入网站到最后购买成功,可能需要经过复杂的访问路径,每个环节都有可能会离开:进入首页想了想没什么要买的,然后离开;搜索结果看了看不想买,然后离开;进入商品详情页面,看看评价、看看图片、看看价格,然后离开;放入购物车后又想了想自己的钱包,然后离开;支付的时候发现不支持自己喜欢的支付方式,然后离开…一个用户从进入网站到支付,完成一笔真正的消费,中间会有很大概率流失,网站必须要想尽各种办法:个性化推荐、打折促销、免运费、送红包、分期支付,以留用户,提高转化率。


具体到不同的网站根据自身特点,会有自己的指标。比如百度可能会关注“广告点击率”这样的指标,游戏可能会关注“付费玩家数”指标。每个产品都应该根据自身特点寻找能够反映自身运营状况的数据指标。


为了便于分析决策,这些指标通常会以图表的方式展示,即数据可视化。


数据可视化图表与数据监控

数据以图表方式展示,可以更直观展示和发现数据的规律,互联网运营常用可视化图表有如下几种。


1. 折线图


横轴为时间,展示在时间维度上的数据变化规律。

7.png


2. 散点图


可有效帮助分析师快速发现数据分布上的规律与趋势,可谓肉眼聚类算法。

6.png



3. 热力图


分析网站页面被用户访问的热点区域,以更好进行页面布局和视觉展示。


5.png


在地图上展示的热力图表示该地区的拥堵和聚集状态,方便用户出行规划。

4.png



4. 漏斗图


表示在用户的整个访问路径中每一步的转化率。当重要的营收指标(GMV、利润、订单量)发生异常的时候,就必须要对整个的漏斗图进行分析,判断是网站的入口流量发生了问题,还是中间某一步的转化发生了问题;是内容的问题还是系统的问题,需要逐个进行分析排查。除了发现提升网站运营效率的关键点与方法,分析找出异常问题的根源也是数据分析工作之一。


3.png


可视化图形在数据分析时可以帮助分析师更准确、更快速做出趋势预判并发现问题,在汇报工作时使用图表更有说服力,决策时也更有依据和信心。


以上图表都来自ECharts,百度开源的前端可视化图表组件,只需几行代码,就可将运营数据以炫酷方式可视化展示。


小结

大数据技术最终落地必须要为企业带来实际价值,数据分析是其中最主要的应用场景之一。分析结果是最终的成果展示,在此之前,数据的采集、清洗、转换、存储、计算、分析,需要大量的工作。既然已经做了这么多工作,如何将最终的工作成果包装得更加直观、有科技感,技术人员需要换位思考,从用户角度、非技术角度去思考,争取让自己的工作更得到认可,实现更大价值。


监控大屏:


做展示用,在公司显眼的位置放一个大屏幕,显示主要的运营指标和实时的业务发生情况,给公众和参观者展示直观的公司商业运营情况。比如天猫每年双十一

2.png


实时展示业务运营状况,让我们对自己的工作成绩一目了然。如果数据突然出现波动,相关人员也可以快速响应,排查是技术问题还是运营市场问题,实现快速分析、快速解决。

如老板要做一个运营监控系统,要先跟老板确认清楚几个要点:

1、用户。给谁看的。只面向管理层还是老板、中层、普通员工甚至外部用户,这会涉及数据权限及功能权限

2、核心指标。不同业务有不同核心指标,确定需要的核心指标后,便于明确口径以、信息展示层级和具体展示方式

3、上线时间点。监控系统上游有指标体系数据来源、下游有数据分析和运营动作,明确时间点后便于拆解落地。

之后才到具体产品方案、系统架构、技术选型以及开发排期和跟踪。

PS,数据监控系统免不了对数,上线后还是要每日走查数据,被老板先发现问题就完蛋了

相关实践学习
基于MaxCompute的热门话题分析
本实验围绕社交用户发布的文章做了详尽的分析,通过分析能得到用户群体年龄分布,性别分布,地理位置分布,以及热门话题的热度。
SaaS 模式云数据仓库必修课
本课程由阿里云开发者社区和阿里云大数据团队共同出品,是SaaS模式云原生数据仓库领导者MaxCompute核心课程。本课程由阿里云资深产品和技术专家们从概念到方法,从场景到实践,体系化的将阿里巴巴飞天大数据平台10多年的经过验证的方法与实践深入浅出的讲给开发者们。帮助大数据开发者快速了解并掌握SaaS模式的云原生的数据仓库,助力开发者学习了解先进的技术栈,并能在实际业务中敏捷的进行大数据分析,赋能企业业务。 通过本课程可以了解SaaS模式云原生数据仓库领导者MaxCompute核心功能及典型适用场景,可应用MaxCompute实现数仓搭建,快速进行大数据分析。适合大数据工程师、大数据分析师 大量数据需要处理、存储和管理,需要搭建数据仓库?学它! 没有足够人员和经验来运维大数据平台,不想自建IDC买机器,需要免运维的大数据平台?会SQL就等于会大数据?学它! 想知道大数据用得对不对,想用更少的钱得到持续演进的数仓能力?获得极致弹性的计算资源和更好的性能,以及持续保护数据安全的生产环境?学它! 想要获得灵活的分析能力,快速洞察数据规律特征?想要兼得数据湖的灵活性与数据仓库的成长性?学它! 出品人:阿里云大数据产品及研发团队专家 产品 MaxCompute 官网 https://www.aliyun.com/product/odps 
目录
相关文章
|
22天前
|
监控 Java 双11
Sentinel底层如何计算京东双十一线上系统实时QPS
【10月更文挑战第19天】随着电子商务行业的快速发展,双十一已成为全球最大的购物狂欢节。京东作为中国领先的电商平台,每年的双十一活动都会迎来巨大的流量高峰。为了保障系统在高并发情况下的稳定运行,京东采用了多种技术手段来应对。
28 0
|
关系型数据库 MySQL 数据库
实现淘宝母婴订单实时查询和实时大屏
本场景中订单和婴儿信息存储在MySQL中,使用Flink实时把它写到Elasticsearch中;数据经过分组聚合后,计算出订单数量和婴儿出生的关系,实时展示到Kibana大屏中。
|
弹性计算 运维 监控
有效预警6要素:亿级调用量的阿里云弹性计算SRE实践
关注保持良好的预警处理,持续解决系统隐患,促进系统稳定健康发展。
有效预警6要素:亿级调用量的阿里云弹性计算SRE实践
|
SQL Java 数据处理
Pick!闲鱼亿级商品库中的秒级实时选品
作者:闲鱼技术-剑辛 一、业务背景 在电商运营工作中,营销活动是非常重要的部分,对用户增长和GMV都有很大帮助。对电商运营来说,如何从庞大的商品库中筛选出卖家优质商品并推送给有需要的买家购买是每时每刻都要思索的问题,而且这个过程需要尽可能快和实时。
10682 0
|
SQL 存储 关系型数据库
PolarDB IMCI助力聚水潭数据中台极致体验,实现百亿级订单实时分析
聚水潭成立于2014年,以电商SaaS ERP切入市场,凭借出色的产品和服务,快速获得市场领先地位。
PolarDB IMCI助力聚水潭数据中台极致体验,实现百亿级订单实时分析
|
存储 NoSQL 调度
双11实时物流订单最佳实践
随着双11的开启,物流业也迎来了年度大考。2021年双11期间,递四方作为物流仓储服务方,布局仓库和分拣点超40+个,50w+平米作业场地,单日订单峰值达千万级别,海量购物订单由递四方配送到家,消费者由尾款人秒变收货人。
双11实时物流订单最佳实践
|
6月前
|
云安全 安全 网络安全
【看案例】完美日记:保障电商大促活动平稳运行
完美日记在“双11”电商大促、“双12”购物节期间,依靠阿里云DDoS高防IP、云安全中心、Web应用防火墙基础安全三件套,从容面对业务高峰、安全压力,提升大促活动期间系统的快速响应能力和安全性。
174 0
|
Cloud Native 架构师 测试技术
双11全链路压测最佳实践 | 在线直播
双11大促活动场景下,如何通过全链路压测轻松应对流量洪峰?
4451 6
双11全链路压测最佳实践 | 在线直播
|
机器学习/深度学习 缓存 自然语言处理
高德全链路压测——精准控压的建设实践
本文会重点介绍高德TestPG压测平台在发压能力精准调控方面的建设实践。
高德全链路压测——精准控压的建设实践
|
SQL 分布式计算 数据可视化
Hologres助力飞猪双11实时数据大屏秒级响应
本文重点介绍Hologres如何落地阿里巴巴飞猪实时数仓场景,并助力飞猪双11实时数据大屏3秒起跳,全程0故障。
28958 0
Hologres助力飞猪双11实时数据大屏秒级响应