【云栖大会】行在:6年大数据实践中我们所踩过的坑

简介:

云栖大会将在2016年1月20日登陆上海。云栖大会上海峰会提供六大分论坛(包括金融、平台构建、创业与生态、互联网+、大数据、政务云安全等)、46+场高浓度演讲、4场开放实验室,近百位一线技术专家现场互动。

了让大家更多了解云栖大会上海峰会情况,我们对相关分论坛出品人进行了系列采访。本期采访嘉宾——阿里云数加工场的张金银(花名行在),云栖大会上海峰会《大数据》出品人。
7f1ca503c37257c1332ea0e64ec542014cf57089
阿里云大数据资深专家 张金银

云栖社区:请简单介绍下工作经验,以及策划《大数据》论坛的初衷是什么?

行在:来阿里之前,是软件研发、DBA和数仓。来到阿里已经11年,从中文站事业部的数仓、B2B dw到CDO,到数据事业部,主要都是从事和数据相关的工作。作为云栖大会上海峰会《大数据》出品人,希望普惠大数 据,让大数据为人人可用。

云栖社区:大数据是DT时代的核心。在你看来,大数据技术发展与行业实践的困难和挑战在哪些方面?

行在:主要有两大类挑战,其一是大数据的底层技术掌握在巨头手里;并且很多巨头不愿意分享,普通的创业团队无法使用这些核心技术;其二是现在行业内大数据喊的比较多,但成功案例不多,人人都知道数据有 价值,但还有几方面的问题,比如缺少核心的加工技术,无法把石油变成汽油;缺少掌握加工技术的人才;数据的融合、交易、分享还存在一些核心需要解决的问题,如:安全问题;定价问题;所有权和使用权问题 等。

云栖社区:阿里的演讲中,有什么亮点可以提前分享?

行在:有四大亮点,大家可以提前关注下:数加的使命:普惠大数据;数加实际上是集阿里6年在大数据的领域经验和技术之大成;我们会分享6年来踩过的坑,走过的弯路,帮助其他企业避免同样的问题;三年1万亿的合作伙 伴计划。

云栖社区:大数据行业属性明显。《大数据》论坛还包括音乐、物流、水利、金融、娱乐等多方面行业实践的分享,哪些会是共性技术需求?哪些是个性应用场景?

行在:数加底层的平台都是共性需求,但只解决这些共性需求是远远不能满足企业需求的,所以我们必须联合行业内的TOP服务商,发挥双方的共同优势,一起服务好最终用户。在我看来,共性需求如计算能力;存储 能力;安全;数据加工能力;展现和分析能力;数据挖掘能力等。个性场景则比较明确,场景众多,比如:交通预测;城市积水深度预测;充电桩选址;风力发电站选址;智慧水利,智能客服等。

云栖社区:从大数据产业发展来说,你认为有哪些新的技术趋势值得关注?

行在:大数据产业迅猛,数据技术已经平民化,业务人员可以任意对数据进行分析,挖掘,让这些不是数据工程师的专利,而是平民可用。此外,还有四个方面:
  1. 数据自动关联,建模自动化,减少人工建模等;
  2. 数据连接的技术;大数据的核心在于连接;
  3. 可视化展示的技术;
  4. 数据安全,系统安全。

云栖社区:如果企业想构建优秀大数据团队,你有什么建议?

行在:优秀大数据团队由三类成员组成:
  1. 技术人员:关键是能把问题转化成技术方案的能力;
  2. 行业专家:核心能力是能了解行业和客户痛点,并且能从数据的角度提出解决方案;
  3. 产品经理:能了解问题,沉淀出好的数据产品;
要构建好团队,这三类人的成长必不可少。
 
云栖社区:哪些听众最应该了解这些话题?《大数据》论坛可以帮助听众解决哪些问题?

行在:以后每个生意都是数据生意,所以我认为大家都要了解。我希望通过这个论坛,能普惠和普及大数据,揭开大数据的神秘面纱,让人人皆可以了解,使用,受惠于大数据。

云栖大会上海峰会官网(含报名链接): http://yunqi.aliyun.com/
《大数据》论坛议程:
2aa3002d0326bad422230d5b636bb8d94b614a5e


相关实践学习
简单用户画像分析
本场景主要介绍基于海量日志数据进行简单用户画像分析为背景,如何通过使用DataWorks完成数据采集 、加工数据、配置数据质量监控和数据可视化展现等任务。
SaaS 模式云数据仓库必修课
本课程由阿里云开发者社区和阿里云大数据团队共同出品,是SaaS模式云原生数据仓库领导者MaxCompute核心课程。本课程由阿里云资深产品和技术专家们从概念到方法,从场景到实践,体系化的将阿里巴巴飞天大数据平台10多年的经过验证的方法与实践深入浅出的讲给开发者们。帮助大数据开发者快速了解并掌握SaaS模式的云原生的数据仓库,助力开发者学习了解先进的技术栈,并能在实际业务中敏捷的进行大数据分析,赋能企业业务。 通过本课程可以了解SaaS模式云原生数据仓库领导者MaxCompute核心功能及典型适用场景,可应用MaxCompute实现数仓搭建,快速进行大数据分析。适合大数据工程师、大数据分析师 大量数据需要处理、存储和管理,需要搭建数据仓库?学它! 没有足够人员和经验来运维大数据平台,不想自建IDC买机器,需要免运维的大数据平台?会SQL就等于会大数据?学它! 想知道大数据用得对不对,想用更少的钱得到持续演进的数仓能力?获得极致弹性的计算资源和更好的性能,以及持续保护数据安全的生产环境?学它! 想要获得灵活的分析能力,快速洞察数据规律特征?想要兼得数据湖的灵活性与数据仓库的成长性?学它! 出品人:阿里云大数据产品及研发团队专家 产品 MaxCompute 官网 https://www.aliyun.com/product/odps 
目录
相关文章
|
机器学习/深度学习 存储 人工智能
云栖大会推出阿里灵杰,大数据+AI一体化平台 6 大重磅发布
10月20日2021杭州云栖大会上,阿里巴巴集团副总裁、阿里云计算平台事业部负责人贾扬清发布大数据+AI一体化平台新品牌“阿里灵杰”,提供从“生产-采集-存储-分析-开发-治理-价值体现”整套云原生技术架构和产品体系,配套智能化运维平台和强大的数据资产安全管控能力。
1313 0
云栖大会推出阿里灵杰,大数据+AI一体化平台 6 大重磅发布
|
存储 人工智能 分布式计算
2021云栖大会 — 大数据&AI 线上参会指南
一年一度的数字科技盛会—— 2021云栖大会将于10月19日-22日在杭州云栖小镇举办。阿里云大数据&AI邀您线上参会,领略数字新篇章。
2021云栖大会 — 大数据&AI 线上参会指南
|
大数据 分布式计算 MaxCompute
【最全合集】一文看尽 2019杭州云栖大会 MaxCompute 技术分享
本文汇集2019杭州云栖大会上MaxCompute的主题分享,内容涵盖MaxCompute技术关键进展及展望,超大规模企业级计算引擎,分布式智能调度执行框架,列式存储引擎,MaxCompute生态,大数据平台的安全风控以及混合云模式下 MaxCompute + Hadoop 混搭大数据架构实践等内容,从底层技术到最佳实践,内容广泛而深入,希望能让读者有所收获。
10633 0
【最全合集】一文看尽 2019杭州云栖大会 MaxCompute 技术分享
|
人工智能 大数据 流计算
阿里云,Facebook,英特尔,Databricks, Flink 大数据&AI前沿技术一文看尽—2019杭州云栖大会 “大数据&AI” 峰会全集
本次大数据&AI峰会围绕 “大数据和AI” 主题,深入讨论大数据及AI发展的新形势、新挑战和新机遇。主题演讲内容涉及大数据*AI各个方面,广泛且深入。从阿里巴巴 “AI加持的飞天大数据平台、AI at Facebook、英特尔在数据分析和人工智能技术方面的创新,到广受开发者关注的Flink和Spark,通过数据,算力,算法深入阐述数据为本,智能为用,将大数据与AI深度融合,呈现了业界最前沿技术。
2471 0
阿里云,Facebook,英特尔,Databricks, Flink 大数据&AI前沿技术一文看尽—2019杭州云栖大会 “大数据&AI” 峰会全集
|
分布式计算 大数据 云栖大会
赢取9月杭州云栖大会单日免费票—快来参加大数据计算直播就对了
想要获得杭州云栖大会9月19日单日免费门票,快来参加直播就对了~~
3380 0
|
机器学习/深度学习 人工智能 大数据
「深圳云栖大会」大数据时代以及人工智能推动下的阿里云异构计算
最近几年,在大数据和人工智能的推动下,异构计算有了长足的发展。无论是在产品形态上,还是在应用领域上,阿里云异构计算都取得了累累硕果。
3163 0
|
分布式计算 测试技术 MaxCompute
北京云栖大会MaxCompute又出大招,Python UDF抢先体验!
2017/12/20 北京云栖大会上阿里云MaxCompute发布了最新的功能Python UDF。 小编第一时间申请到了公测资格,下面就为大家做个简单演示,通过DataWorks注册MaxCompute Python UDF(字符串大小写转换),完成数据处理。
8861 0
|
人工智能 分布式计算 大数据
2017云栖大会北京峰会 阿里云大数据计算服务MaxCompute 划重点!
大数据计算服务MaxCompute不仅是阿里巴巴内部和阿里云的大数据旗舰平台,更是全新一代的人工智能计算引擎。12.19日-20日的北京云栖大会上,MaxCompute有哪些值得期待的内容,小编带你先行划重点。
3099 0
|
分布式计算 大数据 测试技术
2017云栖大会压轴大戏:大数据计算服务MaxCompute持续挑战极限,国家会议中心全球首次现场完成基于公共云的BigBench评测,令人期待!
2017年12月19 -20日,引发全球科技共振的云栖大会在国家会议中心举办2017年的压轴场—北京峰会。在本次大会上,阿里云主力计算平台MaxCompute将全球首次现场完成基于公共云的BigBench评测,并由阿里云总裁胡晓明在20日上午的主论坛宣布最终结果,令人期待。
4182 0

热门文章

最新文章