汲取Linux灵感 Pivotal开源大数据套件

本文涉及的产品
云原生大数据计算服务 MaxCompute,5000CU*H 100GB 3个月
云原生大数据计算服务MaxCompute,500CU*H 100GB 3个月
简介:

Pivotal公司将把旗下大数据套件中的主要组成部分加以开源,而这正是从Linux发展概念中汲取到的灵感。

此次决策将把HAWQ、Greenplum数据库以及Pivotal GemFire的“核心”代码发布给任何一位有意愿将时间投入相关开发工作的技术人士。虽然个人的力量看似微不足道,但众志成城之下项目将迎来极为积极的发展趋势。根据目前的情况分析,相关工作似乎会由名为Open Data Platform(即开放数据平台,简称ODP)的新部门负责。

ODP的白金成员中包括Pivotal、通用电气、Hortonworks、IBM、Infosys、SAS以及某家“大型国际化电信企业”。除此之外,AltiScale、Capgemini、CenturyLink、EMC、Splunk、Verizon企业解决方案、Teradata以及VMware则以金牌成员身份列席。

Pivotal公司CTO兼移动事务副总裁SundeepMadra指出,ODP计划将努力在Hadoop领域重现Linux当初在Unix领域所完成的壮举:汇聚起一股统一化力量,从而以更为便捷的方式帮助企业客户实现方案采纳。

为了实现这一目标,ODP方面将创建“一套面向Apache Hadoop、Apache Ambari以及其它相关Apache源成果的、经过测试的参考核心”,此举旨在帮助客户更轻松地了解该从哪里开始逐步部署Hadoop。

Madra同时补充称,对旗下产品进行开源将确保Pivotal公司抢在市场需求出现变化之前、提早对其现有产品作出针对性调整。

企业客户往往会在新闻机构的引导下作出技术采纳决策,他表示,正如博文往往是创新活动的直观指标一样。

追究将自身工具进行开源的背后思维方式,我们似乎可以把该举措归功于上世纪七十年代广为流传的一条格言:“如果你爱它,就要学会放手。如果它回到你身边,就证明它归属于你。如果它一去不返,那么无论抓得多紧都是徒劳。”在Pivotal公司看来,前面提到的各类开源应用方案都将回归其身边,并向其寻求咨询帮助以及商用化产品。

当然,Pivotal方面并没有给出相关方案的全部代码——前面提到的各类产品所使用的具体语言自此以后将“基于一套开源核心”。因此相关销售与支持服务还将普遍存在。而且如果ODP社区能够为上述产品“核心”提供部分新的实用性功能,那么Pivotal公司也将负责起归纳整理的工作。

Madra指出,ODP向每一位新成员开放。正如从业者一直在Hadoop领域所使用的相关语,巨象身处房内(Hadoop项目的标志正是一头活泼的大象),这是因为英特尔与Cloudera目前尚未被列入该组织的名单当中。Cloudera公司的目的与ODP非常相似,其号称将建立一套大多数人能够认同的Hadoop发展轨道,即以基金会形式指导大数据技术的未来走向。

Cloudera方面已经成功拉拢到了英特尔公司的资金支持。ODP目前的成员名单在重量级方面与前者可谓不相伯仲,这可能意味着势均力敌的支持者阵营将让未来的市场走向变得更加有趣。

而在大数据风起云涌的时代背景下,以下事件尤其值得关注:谷歌公司于2014年年中决定放弃作为Hadoop基础性技术的Map Reduce,转而寻求新的替代性方案。

原文发布时间为:  2015年2月19日
本文来自云栖社区合作伙伴至顶网,了解相关信息可以关注至顶网。
相关实践学习
基于MaxCompute的热门话题分析
本实验围绕社交用户发布的文章做了详尽的分析,通过分析能得到用户群体年龄分布,性别分布,地理位置分布,以及热门话题的热度。
SaaS 模式云数据仓库必修课
本课程由阿里云开发者社区和阿里云大数据团队共同出品,是SaaS模式云原生数据仓库领导者MaxCompute核心课程。本课程由阿里云资深产品和技术专家们从概念到方法,从场景到实践,体系化的将阿里巴巴飞天大数据平台10多年的经过验证的方法与实践深入浅出的讲给开发者们。帮助大数据开发者快速了解并掌握SaaS模式的云原生的数据仓库,助力开发者学习了解先进的技术栈,并能在实际业务中敏捷的进行大数据分析,赋能企业业务。 通过本课程可以了解SaaS模式云原生数据仓库领导者MaxCompute核心功能及典型适用场景,可应用MaxCompute实现数仓搭建,快速进行大数据分析。适合大数据工程师、大数据分析师 大量数据需要处理、存储和管理,需要搭建数据仓库?学它! 没有足够人员和经验来运维大数据平台,不想自建IDC买机器,需要免运维的大数据平台?会SQL就等于会大数据?学它! 想知道大数据用得对不对,想用更少的钱得到持续演进的数仓能力?获得极致弹性的计算资源和更好的性能,以及持续保护数据安全的生产环境?学它! 想要获得灵活的分析能力,快速洞察数据规律特征?想要兼得数据湖的灵活性与数据仓库的成长性?学它! 出品人:阿里云大数据产品及研发团队专家 产品 MaxCompute 官网 https://www.aliyun.com/product/odps 
目录
相关文章
|
5月前
|
人工智能 分布式计算 大数据
Linux操作系统:开源力量的崛起与影响###
一场技术革命的火种,如何燎原? 本文将带您深入探索Linux操作系统的诞生背景、核心特性及其对现代科技世界的深远影响。从1991年芬兰学生Linus Torvalds的一个小众项目,到如今成为支撑全球无数服务器、超级计算机及物联网设备的基石,Linux的发展既是一部技术创新史,也是开源文化胜利的见证。通过剖析其设计哲学、安全性、灵活性等关键优势,结合实例展示Linux在云计算、大数据处理等领域的广泛应用,本文旨在揭示Linux为何能在众多操作系统中脱颖而出,以及它如何塑造了我们今天的数字生活。 ###
|
1月前
|
Linux 网络安全 iOS开发
Metasploit Framework 6.4.49 (macOS, Linux, Windows) - 开源渗透测试框架
Metasploit Framework 6.4.49 (macOS, Linux, Windows) - 开源渗透测试框架
37 0
Metasploit Framework 6.4.49 (macOS, Linux, Windows) - 开源渗透测试框架
|
2月前
|
安全 Linux 测试技术
Intel Linux 内核测试套件-LKVS介绍 | 龙蜥大讲堂104期
《Intel Linux内核测试套件-LKVS介绍》(龙蜥大讲堂104期)主要介绍了LKVS的定义、使用方法、测试范围、典型案例及其优势。LKVS是轻量级、低耦合且高代码覆盖率的测试工具,涵盖20多个硬件和内核属性,已开源并集成到多个社区CICD系统中。课程详细讲解了如何使用LKVS进行CPU、电源管理和安全特性(如TDX、CET)的测试,并展示了其在实际应用中的价值。
|
7月前
|
数据可视化 大数据 定位技术
GIS:开源webgl大数据地图类库整理
GIS:开源webgl大数据地图类库整理
208 0
|
4月前
|
运维 监控 Linux
服务器管理面板大盘点: 8款开源面板助你轻松管理Linux服务器
在数字化时代,服务器作为数据存储和计算的核心设备,其管理效率与安全性直接关系到业务的稳定性和可持续发展。随着技术的不断进步,开源社区涌现出众多服务器管理面板,这些工具以其强大的功能、灵活的配置和友好的用户界面,极大地简化了Linux服务器的管理工作。本文将详细介绍8款开源的服务器管理面板,包括Websoft9、宝塔、cPanel、1Panel等,旨在帮助运维人员更好地选择和使用这些工具,提升服务器管理效率。
|
5月前
|
分布式计算 大数据 Serverless
云栖实录 | 开源大数据全面升级:Native 核心引擎、Serverless 化、湖仓架构引领云上大数据发展
在2024云栖大会开源大数据专场上,阿里云宣布推出实时计算Flink产品的新一代向量化流计算引擎Flash,该引擎100%兼容Apache Flink标准,性能提升5-10倍,助力企业降本增效。此外,EMR Serverless Spark产品启动商业化,提供全托管Serverless服务,性能提升300%,并支持弹性伸缩与按量付费。七猫免费小说也分享了其在云上数据仓库治理的成功实践。其次 Flink Forward Asia 2024 将于11月在上海举行,欢迎报名参加。
362 6
云栖实录 | 开源大数据全面升级:Native 核心引擎、Serverless 化、湖仓架构引领云上大数据发展
|
4月前
|
边缘计算 人工智能 运维
Linux操作系统:开源力量的崛起与影响###
一场技术革命的回顾 回溯至1991年,当Linus Torvalds宣布Linux操作系统的诞生时,世界或许并未意识到这一举措将如何深刻地改变技术领域的面貌。本文旨在探讨Linux操作系统的发展历程、核心特性、以及它如何引领了一场开源运动,重塑了软件行业的生态。从最初的个人爱好项目成长为全球最广泛采用的服务器操作系统之一,Linux的故事是技术创新与社区精神共同推动下的辉煌篇章。 ###
|
5月前
|
存储 关系型数据库 Linux
2024 年 16 个适用于 Linux 的开源云存储软件 (上)
2024 年 16 个适用于 Linux 的开源云存储软件 (上)
325 2
2024 年 16 个适用于 Linux 的开源云存储软件 (上)
|
5月前
|
关系型数据库 MySQL Linux
基于阿里云服务器Linux系统安装Docker完整图文教程(附部署开源项目)
基于阿里云服务器Linux系统安装Docker完整图文教程(附部署开源项目)
1108 3