北京云栖大会 Tech Insight 爆场论坛-云数据·大计算:快速搭建互联网在线运营分析平台

简介: 2月19日上午9点,Tech Insight·北京峰会,在2017北京云栖大会国家会议中心准时拉开帷幕。做为年内压轴之作, 吸引了大量技术决策者,和一线的工程师、运维工程师等前来交流学习。

阿里巴巴集团首席技术官王坚在《在线》一书中指出“大数据“的叫法应该叫‘在线数据’。‘在线’远比‘大’更能揭示本质。数据不在线,体量再大,价值也有限。数据在线,即数据实时更新、数据共享、极易获得。”王坚博士提到的数据在线也可以理解为数据应该像钢铁一样标准化能够流转,达到数据共享,产生更大的价值。只有彼此隔离的数据能够打通能够发生化学反应,才能去谈大规模计算,所以和以往我们理解的“云计算,大数据”有些错位。
435f015b_b3a8_47bb_90db_923133cab87b

本次北京云栖大会TI·workshop我们选择了《云数据·大计算:快速搭建互联网在线运营分析平台》为分享主题,展示阿里云对大数据的独到理解,只有数据云化,数据在线,使用大规模计算技术,促使其发生化学反应产生更大的业务价值。搭建互联网在线运营分析平台,我们也选择了现在炙手可热的话题,如何去分析APP的日活、月活以及相关设备分布情况,以提高个性化运营的效果。
29152595_ac01_4cff_9ab9_303f996aef06

本次workshop共包含3个环节,由TableStore表格存储、MaxCompute大数据计算服务以及Quick BI报表分析三个团队的产品及技术专家共同出品。
dee6a52e_1b91_4179_b8a5_b7991258679b

数据接入:海量数据存储及实时访问
在实际业务场景中,我们会有大量从移动设备如IOT还有一些在线服务如即时聊天工具等大量的数据高并发写入存储系统中,一方面这些数据还需要提供给后台或者用户进行在线的实时访问,另一方便这些海量数据的沉睡存储并不能发挥其最大价值,也有相关专家夸张到“如果数据不流通,就相当于存储垃圾”。
首先阿里云表格存储TableStore其解决了历史数据实时访问以及海量数据的高并发写入问题(单表10PB级数据量、万亿条记录数以及千万级别的TPS能力),并有相关成熟应用,包括金融风控行业、车联网行业以及互联网社交Feed流等。在workshop现场,TableStore也将深刻解读其产品特性及让各位参会嘉宾现场体验产品的强大功能。
表格存储(Table Store)是构建在阿里云飞天分布式系统之上的分布式NoSQL数据存储服务,根据99.99%的高可用以及11个9的数据可靠性的标准设计。表格存储通过数据分片和负载均衡技术,实现数据规模与访问并发上的无缝扩展,提供海量结构化数据的存储和实时访问。

数据处理:数据建模与加工
如王坚博士所言,数据需要在线更需要流通与共享,这样数据才能发挥更大的价值,驱动业务创新。如何能够快速的针对TableStore中存储的历史数据进行分析与挖掘?在MaxCompute2.0中支持非结构化数据的处理,可以直接通过创建外表的方式对TableStore中的数据进行读取和写入,拓展了传统结构化数据处理的边界。而在以往的解决方案中,需要用户通过编写脚本方式进行,开发成本大大增加,且不容易满足业务需求。
MaxCompute 2.0的SQL直读直写,极大提供了针对TableStore、OSS等半结构化、非结构化存储系统中的历史数据分析。如下视图,如何在MaxCompute2.0创建TableStore外部表和OSS外部表。
cf67b538_ed9d_4401_8186_cb683f465a76
b62ca992_a1c2_4266_9365_3ad04c6dbfcf

通过MaxCompute2.0这一特性,我们可以高效的分析结构化、半结构化以及非结构化的数据,而无需更多额外开发工作量,再结合DataWorks(MaxCompute原生态IDE开发工具)进行数据清洗、数据加工以及数据调度来完成企业级大数据仓库的建设,完成APP用户行为数据指标的清洗和加工。在这一环节,由MaxCompute技术专家为大家深刻解读这一特性。

数据分析:构建可视化报表服务
在以往业务场景中,我们更多的需要来构建分析报表来体现或者展示业务发展趋势,在本workshop是刻画APP用户行为分析,如何快速的构建可视化的即席分析报表,满足运营同学对业务的洞察,解决大数据应用“最后一公里”的问题?这些种种疑惑都可以在Quick BI中找到答案,他通过拖拽式操作、丰富的可视化效果助推企业的数字化运营。
d30bf0b9_5002_47be_a587_4a95d74a8a5a

至此,细心的读者发现,北京云栖大会·TI Workshop《云数据·大计算:快速搭建互联网在线运营分析平台》是真实模拟现实业务场景,帮助大家理解并动手实数据存储及实时访问、再到如何对这些数据进行加工与分析刻画APP用户画像,再到最终通过可视化报表的方式来展现APP运营情况,其实端到端的解决方案。现场也会有实操教学,让在现场的所有嘉宾都能够构建自己的在线运营分析平台,发挥数据的最大价值。

相关实践学习
基于MaxCompute的热门话题分析
Apsara Clouder大数据专项技能认证配套课程:基于MaxCompute的热门话题分析
相关文章
|
前端开发 云栖大会
零售企业如何通过数智化加速增长? 云栖大会专场圆桌论坛深度解密
零售企业如何通过数智化加速增长? 云栖大会专场圆桌论坛深度解密
523 0
|
5月前
|
人工智能 搜索推荐 云栖大会
2024云栖大会阿里云百炼产品发布论坛邀请您的参与和见证
云栖大会始于2009年,2015年正式更名,至今已成功举办15届,见证了中国云计算发展的关键时刻。大会汇聚全产业链,展示云计算及相关领域的趋势与创新。2024年9月19日,阿里云百炼专场将在云栖小镇D场馆2-2厅举行,探讨多端融合与开放架构,加速AI创新应用落地,共建繁荣生态。欢迎扫码注册参会,共筑智能化未来。
260 7
|
5月前
|
云安全 人工智能 安全
|
5月前
|
存储 人工智能 安全
2025云栖大会数据智能论坛|门票申领
2025云栖大会数据智能论坛将于9月25日09:30-12:20 云栖小镇国际会展中举办,汇聚阿里云数据库、计算平台、存储及安全产品线的多位技术专家及客户代表,共同探讨数据技术如何加速AI创新与发展。
|
5月前
|
人工智能 Cloud Native 中间件
划重点|云栖大会「AI 原生应用架构论坛」看点梳理
本场论坛将系统性阐述 AI 原生应用架构的新范式、演进趋势与技术突破,并分享来自真实生产环境下的一线实践经验与思考。
|
5月前
|
人工智能 Cloud Native 中间件
【云栖大会】AI原生、AI可观测、AI Serverless、AI中间件,4场论坛20+议题公布!
2025 年 9 月 24 日至 26 日,杭州·云栖小镇,4 大论坛、20+ 主题分享,从云原生到 AI 原生,我们诚邀您共赴企业智能化升级浪潮之巅。
|
人工智能 安全 专有云
2024云栖大会专有云产品技术论坛开放报名
飞天企业版是阿里云为政企客户构建的企业级专有云平台,与阿里云公共云同根同源。面向智能时代,飞天企业版再次升级。本论坛将系统介绍飞天企业版在一云多芯、一云多算等方面的最新能力升级,并围绕智算场景,分享底层平台支撑能力和上层智能应用实践,为政企打造新一代稳定安全、开放智能的大规模AI基础设施,助力智能化应用在政企全面落地。
334 8
|
12月前
|
人工智能 架构师 云栖大会
2024云栖大会 | 产品生态伙伴专场论坛暨产品生态伙伴颁奖典礼
2024云栖大会 | 产品生态伙伴专场论坛暨产品生态伙伴颁奖典礼

热门文章

最新文章