DataQuotient画像分析产品体验报告

本文涉及的产品
大数据开发治理平台 DataWorks,不限时长
简介: DataQuotient画像分析产品试用与体验报告,可用于提升数据分析能力,简化定制开发工作。

画像分析体验总结

整体分为两个部分

标签管理

1、配置对应的数据源,将数据源表定义为“实体”,字段定义为标签 
2、配置同步计划和任务,进行数据的同步管理
3、类似于数据的映射,将技术语言与业务语言通过实体,关系,标签进行映射。

群体画像

1、主要是关注业务上每个字段的筛选,过滤条件,组合出满足业务要求的分析场景
2、提供了群体计算、群体分析、群体对比、相似度分析,使得从业务的角色能更快速、更灵活、更主观的操作数据
3、通过多种图表方式展现圈定的结果。

体验前后的差异对比

没有使用阿里产品前的实现方式

每一次业务规则的调整,都需要修改代码,重新执行,才能得到最新的结果

使用阿里产品的实现方式

只需要在界面上重新配置过滤规则,然后执行筛选,就能得到最新的结果,并能通过多种图表方式直观 的呈现出来。

特点

省去了重新修改代码的环节,从业务的角度调整规则即可实现画像分析。随着多种图表展现形式对结果的反馈,可以不断的完善规则,从而提高了画像分析的准确性和时效性。

适用场景

基础的标签(指标)数据生成好后,提供给业务人员,进行业务角度的数据分析使用,可以快速的将群体方案直接发布为API对外提供。

目标与操作过程

本次目标

1、尝试用这份数据找分析出,高压力中年油腻男,单身带娃,无父母补贴,低学历,高年龄
2、尝试用这份数据找分析出,单身女强人,单身无娃,有父母补贴,高学历,中低年龄

前提条件 -- 数据准备

一、准备数据源

1、建立数据表

CREATE TABLE `test_data_quotient_person_info` (
  `person_id` varchar(32) DEFAULT NULL COMMENT '人员ID',
  `id_card_number` varchar(32) DEFAULT NULL COMMENT '身份证号',
  `person_name` varchar(32) DEFAULT NULL COMMENT '姓名',
    `person_sex` varchar(32) DEFAULT NULL COMMENT '性别: 1-男 2-女 3-不详',
  `marry_tag` int(10) DEFAULT NULL COMMENT '婚姻标签:0-未婚 1-已婚',
  `children_number_tag` int(10) DEFAULT NULL COMMENT '孩子个数标签',
  `education_tag` int(10) DEFAULT NULL COMMENT '学历标签:0-初等学历 1-中等学历 2-高等学历',
    `person_age` int(10) DEFAULT NULL COMMENT '年龄',
    `parent_number_tag` int(10) DEFAULT NULL COMMENT '父母存活个数标签'
) ENGINE=InnoDB DEFAULT CHARSET=utf8;

2、配置数据
1.png

二、配置dataworks数据同步

1、按照数据源的方式建表,然后选择对应的同步信息
2.png

2、配置调度
与本文描述内容无关,此处省略

画像分析 -- 标签管理

三、云计算资源

1、配置外部的云计算资源,类似于“数据集成”中的数据源管理。
3.png

2、配置好外部云计算资源后可以查看对应的库表信息
4.png

四、标签中心

1、新建标签模型实体

** 关系模型还未体验 **

2、实体绑定标签数据表

绑定表的时候需要先”更新缓存表“更新成功后,才能看到新加入的源数据表。
5.png

3、选择绑定表后,先点击主字段,绑定为主标签,再绑定所有字段
6.png

4、我的标签--快查功能
7.png

任务同步成功后,才能使用到画像分析的云计算资源分析引擎,对标签数据进行探查与分析
8.png

可灵活的选择标签字段,查看数据,通过图表(柱状图、饼图、折线图)展现,数据的聚合(最大、最新、均
值、求和、次数)情况
9.png

五、标签同步

1、配置同步计划

不能配置已经上线的标签,标签需要先下线,才能配置同步
目标云计算资源需要选择,mysql;选择odps,在群体画像--群体列表中将无法找到云计算资源

10.png

2、同步计划配置完成后点击启动,将数据同步到画像云计算资源中
11.png

3、可在同步任务中查看同步状态,和进行重跑操作,以及查看错误日志
12.png

六、API服务

与dataworks的数据服务功能类似

画像分析 -- 群体画像

七、配置群体

1、新建群体
21.png

2、选定实体后可以添加标签的逻辑
22.png

3、目标场景的圈定条件为

一、中低学历奶爸
    性别:男 : 1
    孩子个数 : 大于0 :  1-2  或者 >0 
    学历: 中、低学历 :    0-1  或者 <2
二、高年龄奶爸
    性别:男 : 1
    孩子个数 : 大于0 :  1-2  或者 >0 
    年龄: 大于30 :    >30

23.png

4、圈群完成后,可以查看圈选结果,对结果不满意可以重新圈定,确认结果后必须发布群体,才能生效
24.png
26.png

5、发布成功后可以在群体列表中看到发布的群体
27.png

6、群体计算,可以将圈定的群体再次通过(交、并、差)的计算发布成一个全新的群体
28.png

使用交集发布成新的群体“高龄低学历奶爸”
29.png

八、分析

1、群体分析
选择分析对象(群体)和度量方式,分析维度(每个维度对应一幅图)后,可展现多种类型(柱状图、饼图、折
线图、面积图)的图形报表
31.png

2、对比分析
对比分析:可以选择两个群体,按照不同的度量方式,选择不同的分析维度,展现不同的图表
32.png
相似性分析:可以查看两个群体的相似度,以及每个标签的覆盖人数
33.png

九、全流程体验

源数据中的样本数据无满足“单身女强人”标签的用户,从源数据中新增一个,然后看出如何同步的画像分析中

1、配置目标群体
41.png

2、源数据中增加一条“单身女强人”用户
42.png

3、执行dataworks同步数据到ODPS中,在运维中心使用重跑调度,重跑成功后日志中显示的记录数位101。

4、在同步任务中选择任务,进行重跑调度,重新更新数据。
43.png

5、同步任务执行成功后,即可在群体列表中,单击指定群体,看到群体的详情
44.png

大环节的操作流程:1、修改源数据;2、执行dataworks重跑调度;3、执行画像分析同步任务;4、群体 画像中看结果。

相关实践学习
简单用户画像分析
本场景主要介绍基于海量日志数据进行简单用户画像分析为背景,如何通过使用DataWorks完成数据采集 、加工数据、配置数据质量监控和数据可视化展现等任务。
一站式大数据开发治理平台DataWorks初级课程
DataWorks 从 2009 年开始,十ー年里一直支持阿里巴巴集团内部数据中台的建设,2019 年双 11 稳定支撑每日千万级的任务调度。每天阿里巴巴内部有数万名数据和算法工程师正在使用DataWorks,承了阿里巴巴 99%的据业务构建。本课程主要介绍了阿里巴巴大数据技术发展历程与 DataWorks 几大模块的基本能力。 课程目标 &nbsp;通过讲师的详细讲解与实际演示,学员可以一边学习一边进行实际操作,可以深入了解DataWorks各大模块的使用方式和具体功能,让学员对DataWorks数据集成、开发、分析、运维、安全、治理等方面有深刻的了解,加深对阿里云大数据产品体系的理解与认识。 适合人群 &nbsp;企业数据仓库开发人员 &nbsp;大数据平台开发人员 &nbsp;数据分析师 &nbsp;大数据运维人员 &nbsp;对于大数据平台、数据中台产品感兴趣的开发者
目录
相关文章
|
2月前
|
搜索推荐 数据可视化 数据挖掘
产品服务数据分析与报告
产品服务数据分析与报告
39 3
|
4月前
|
数据采集 数据挖掘 UED
物流产品体验诊断与优化
物流产品体验诊断与优化
|
2月前
|
移动开发 小程序 前端开发
质量洞察产品FAQ
质量洞察产品FAQ
22 0
|
4月前
|
搜索推荐 API
京东商品详情数据在数据分析行业中的重要性
京东商品详情数据在数据分析行业中的重要性
24 0
|
11月前
|
开发者
《中国开发者画像洞察报告2022》——03 开发者人群特征洞察——3.1 学习驱动
《中国开发者画像洞察报告2022》——03 开发者人群特征洞察——3.1 学习驱动
|
11月前
|
存储 Kubernetes 架构师
《中国开发者画像洞察报告2022》——04 基于开发者人群的趋势预测(下)
《中国开发者画像洞察报告2022》——04 基于开发者人群的趋势预测(下)
102 0
|
11月前
|
BI 开发者
《中国开发者画像洞察报告2022》——04 基于开发者人群的趋势预测(上)
《中国开发者画像洞察报告2022》——04 基于开发者人群的趋势预测(上)
103 0
|
11月前
|
机器学习/深度学习 人工智能 移动开发
《中国开发者画像洞察报告2022》——03 开发者人群特征洞察——3.4 进阶路径
《中国开发者画像洞察报告2022》——03 开发者人群特征洞察——3.4 进阶路径
|
11月前
|
开发者
《中国开发者画像洞察报告2022》——03 开发者人群特征洞察——3.5 ⽣活状态
《中国开发者画像洞察报告2022》——03 开发者人群特征洞察——3.5 ⽣活状态
|
11月前
|
开发者
《中国开发者画像洞察报告2022》——03 开发者人群特征洞察——3.6开发者眼中的企业
《中国开发者画像洞察报告2022》——03 开发者人群特征洞察——3.6开发者眼中的企业