看行业观察家和技术专家对大数据在2017年的发展预测

本文涉及的产品
云原生大数据计算服务MaxCompute,500CU*H 100GB 3个月
云原生大数据计算服务 MaxCompute,5000CU*H 100GB 3个月
简介:

又到了年终岁尾时,业界权威市场研究和咨询机构Ovum公司日前估计,大数据市场规模将从2016年的17亿美元增长到2020年的94亿美元。随着市场的增长,企业的挑战正在转变,对人们的技能需求正在改变,而大数据服务供应商的景观也在风云变幻。2017年将是大数据专业人士更为忙碌的时刻。以下是一些来自相关行业观察家和技术专家对大数据在2017年的发展预测。

看行业观察家和技术专家对大数据在2017年的发展预测

1.对数据科学家的需求将减弱

组织对数据科学家的需求正在减弱,Ovum公司在其关于大数据趋势的报告中表示。该研究公司引用了来自Indeed.com的数据,显示了组织在过去四年对数据科学家的需求。同时,大学正在培养更多的拥有数据科学证书的大学毕业生。

“谁招募这些潜在客户?很可能,排除在线数字业务,在全球2000强以外的一些少数企业会招募他们,但却很少有人会想到如何使用数据科学家。”Ovum公司指出,“对于大量依赖于打包分析的组织来说,不需要数据科学家本身,而是需要应用数据科学的应用程序或工具。

2.使数据科学成为团队运动将成为重中之重

Ovum公司警告,数据科学家和数据工程师在企业中扮演不同的角色:数据科学家关注数据形成和测试假设,而数据工程师选择数据集,提供集群,并优化他们的生产算法。没有协作,数据科学家开发的模型和假设就会遇到陷入风险之中。

“真正的需要是让数据科学家和数据工程师更好地连接,以确保数据科学家在他或她的笔记本电脑上编写和测试的模型正确地部署在集群上合适的数据集。”Ovum写道。

同时,机器学习正在嵌入企业软件和工具,用于整合和准备数据,这也给企业带来压力,确保他们的数据科学家和业务分析师密切合作。“如果模型仍然在数据科学家的领导下,企业将无法获得机器学习的全部价值。”Ovum公司表示,“重叠的趋势将是协作环境,其中业务分析师和数据科学家可以在计划,部署,以及执行机器学习模型中共享工作流。”

3.将会有更多的压力来保持数据本地化

全球律师事务所Morrison&Foerster预测将加强隐私法,旨在将数据保存在各国境内。

Morrison&Foerster律师事务所全球隐私+数据安全小组主席MiriamWugmeister说,“预计将会出台更多的数据本地化法律,在最近的发展中,如俄罗斯数据本地化法律得到了俄罗斯法院支持,中国最近也通过自己的数据本地化法律。其他国家将在未来一年内采取行动。

4.企业将努力通过数据获利

研究机构IDC公司警告说,企业必须投入更多的生产资料产生数据,但它不会是容易做到,许多企业将错过机会。

IDC公司在名为“IDC Future Scape:全球CIO2017年议程预测”的报告中写道:“尽管商业领袖希望企业努力成功创造有意义的产品和收入来源。那些取得成功的企业将以坚实的IT战略和数据导向服务为基础:数据采集;运输,转型和储存;分析和仪表板;数据作为产品/服务;以及安全和访问控制。

而IDC提供的指导性建议是,IT领导者“建立一个由IT和业务人员组成的创新团队,审查现有和未来的应用程序/系统,以获得可能的结果数据货币化。”

5.数据湖将最终变得有用

“许多早期采用数据湖的企业花费了大量资金,不仅购买了低成本存储和流程,而且还收集了大量服务,以便汇总和提供大量数据相关和发现以获得更好的见解。”,数据管理供应商Reltio公司首席营销官RamonChen说。企业所面临的挑战一直在寻找有能力理解信息的人;使数据湖能够向操作应用程序提供输入,并从操作应用程序接收实时更新的数据;弥合主要数据管理和运行应用程序,分析数据仓库和数据湖之间的差距。

“现有的大数据项目意识到需要一个可靠的数据基础,而新的项目被整合到一个整体的数据管理战略中,数据湖可能会在2017年履行他们的承诺。”RamonChen预测。

6.并购活动将加快进程

Reltio公司首席营销官RamonChen说,“毫无疑问,人工智能、机器学习、深度学习等新技术得到了企业的关注。”所有交易的关键驱动因素是对人工智能专家的需求。“由于被收购的大多数初创公司的运营历史很短,这些举措是尽可能招募到数量有限的人工智能专家。”他说,并预计在未来一年,行业厂商将会开展更加积极的并购活动。

7.对物联网架构师的需求将飙升

根据研究机构IDC公司的数据,到2020年,物联网(IoT)市场规模预计将达到1.46万亿美元。因为规模激增,因此也将需要大量熟练的物联网专家。

“物联网架构师的作用将使数据科学家们成为人力资源部门最有价值的独角兽。物联网的浪潮将会让边缘计算和物联网操作设计激增。”数据和分析供应商Teradata公司物联网技术营销专家DanGraham预测,届时,数以千计的简历将在一夜之间更新。“此外,不到10%的企业意识到他们需要一个物联网分析架构师,而物联网系统架构师将成为一个独特的物种。因此,能够为物联网设计分布式和中央分析的软件架构师的市场价值将飙升。”

8.流式分析将会获得重生

“分析运动中的数据并不是什么新鲜事,因为事件处理程序已经存在了近20年。”Ovum公司表示。但是有很多因素正在将实时流技术从利基技术转变为更具广泛吸引力的技术。例如,开源技术使实时流更加容易访问,也为可扩展的商品基础设施带来可用性,Ovum公司指出。在需求方面,物联网正在加强企业对可以实时感测,分析和响应的流应用程序的兴趣。

Ovum公司预测,其市场整合不会立即发生。“如今,企业有越来越多的选择,竞争新的工作负载。最终,我们预计市场会下降到三到四个流媒体平台。”但是SparkStreaming和AmazonKinesisAnalytics等平台及其竞争对手的市场竞争仍在进行中。“鉴于市场早期状况,我们预计2017年市场不会下跌;我们预计流式引擎将需要2-3年才能成熟,物联网的实施将达到临界质量。”Ovum公司指出。


本文作者:佚名

来源:51CTO

相关实践学习
基于MaxCompute的热门话题分析
本实验围绕社交用户发布的文章做了详尽的分析,通过分析能得到用户群体年龄分布,性别分布,地理位置分布,以及热门话题的热度。
SaaS 模式云数据仓库必修课
本课程由阿里云开发者社区和阿里云大数据团队共同出品,是SaaS模式云原生数据仓库领导者MaxCompute核心课程。本课程由阿里云资深产品和技术专家们从概念到方法,从场景到实践,体系化的将阿里巴巴飞天大数据平台10多年的经过验证的方法与实践深入浅出的讲给开发者们。帮助大数据开发者快速了解并掌握SaaS模式的云原生的数据仓库,助力开发者学习了解先进的技术栈,并能在实际业务中敏捷的进行大数据分析,赋能企业业务。 通过本课程可以了解SaaS模式云原生数据仓库领导者MaxCompute核心功能及典型适用场景,可应用MaxCompute实现数仓搭建,快速进行大数据分析。适合大数据工程师、大数据分析师 大量数据需要处理、存储和管理,需要搭建数据仓库?学它! 没有足够人员和经验来运维大数据平台,不想自建IDC买机器,需要免运维的大数据平台?会SQL就等于会大数据?学它! 想知道大数据用得对不对,想用更少的钱得到持续演进的数仓能力?获得极致弹性的计算资源和更好的性能,以及持续保护数据安全的生产环境?学它! 想要获得灵活的分析能力,快速洞察数据规律特征?想要兼得数据湖的灵活性与数据仓库的成长性?学它! 出品人:阿里云大数据产品及研发团队专家 产品 MaxCompute 官网 https://www.aliyun.com/product/odps 
相关文章
|
12天前
|
存储 机器学习/深度学习 分布式计算
大数据技术——解锁数据的力量,引领未来趋势
【10月更文挑战第5天】大数据技术——解锁数据的力量,引领未来趋势
|
12天前
|
存储 数据采集 监控
大数据技术:开启智能决策与创新服务的新纪元
【10月更文挑战第5天】大数据技术:开启智能决策与创新服务的新纪元
|
13天前
|
存储 分布式计算 druid
大数据-149 Apache Druid 基本介绍 技术特点 应用场景
大数据-149 Apache Druid 基本介绍 技术特点 应用场景
39 1
大数据-149 Apache Druid 基本介绍 技术特点 应用场景
|
27天前
|
机器学习/深度学习 运维 分布式计算
大数据技术专业就业前景
大数据技术专业就业前景广阔,广泛应用于互联网、金融、医疗等众多行业,助力企业数字化转型。岗位涵盖大数据开发、分析、运维及管理,如大数据工程师、分析师和系统运维工程师等。这些岗位因专业性和稀缺性而享有优厚薪资,尤其在一线城市可达20万至50万年薪。随着技术进步和经验积累,从业者可晋升为高级职位或投身数据咨询、创业等领域,发展空间巨大。
36 5
|
1月前
|
人工智能 编解码 搜索推荐
大模型、大数据与显示技术深度融合 加速智慧医疗多元化场景落地
大模型、大数据与显示技术深度融合 加速智慧医疗多元化场景落地
|
12天前
|
存储 数据采集 分布式计算
大数据技术:开启智能时代的新引擎
【10月更文挑战第5天】大数据技术:开启智能时代的新引擎
|
2月前
|
分布式计算 搜索推荐 物联网
大数据及AI典型场景实践问题之通过KafKa+OTS+MaxCompute完成物联网系统技术重构如何解决
大数据及AI典型场景实践问题之通过KafKa+OTS+MaxCompute完成物联网系统技术重构如何解决
|
2月前
|
存储 人工智能 算法
AI与大数据的结合:案例分析与技术探讨
【8月更文挑战第22天】AI与大数据的结合为各行各业带来了前所未有的机遇和挑战。通过具体案例分析可以看出,AI与大数据在电商、智能驾驶、医疗等领域的应用已经取得了显著成效。未来,随着技术的不断进步和应用场景的不断拓展,AI与大数据的结合将继续推动各行业的创新与变革。
|
2月前
|
大数据 数据处理 分布式计算
JSF 逆袭大数据江湖!看前端框架如何挑战数据处理极限?揭秘这场技术与勇气的较量!
【8月更文挑战第31天】在信息爆炸时代,大数据已成为企业和政府决策的关键。JavaServer Faces(JSF)作为标准的 Java Web 框架,如何与大数据技术结合,高效处理大规模数据集?本文探讨大数据的挑战与机遇,介绍 JSF 与 Hadoop、Apache Spark 等技术的融合,展示其实现高效数据存储和处理的潜力,并提供示例代码,助您构建强大的大数据系统。
40 0
|
2月前
|
SQL 存储 分布式计算
神龙大数据加速引擎MRACC问题之RDMA技术帮助大数据分布式计算优化如何解决
神龙大数据加速引擎MRACC问题之RDMA技术帮助大数据分布式计算优化如何解决
48 0