IBM Platform Computing:云计算与大数据的智慧粘合剂

本文涉及的产品
云原生大数据计算服务 MaxCompute,5000CU*H 100GB 3个月
云原生大数据计算服务MaxCompute,500CU*H 100GB 3个月
简介:
ZDNet至顶网软件频道消息: 对于大数据战略,IBM一直把它看做公司整体战略极其重要组成部分,不久前更是与苹果公司达成一项排他性合作,把大数据和分析能力引入苹果的iPhone和iPad。在IBM大数据战略及解决方案中,Platform Computing处于什么地位?它的特点和优势对于IBM大数据战略的影响是什么?ZDNet记者近日采访了IBM大中华区系统与科技部研发中心总监谢东。

谢东表示,IBM的大数据理念是提供一个完整的解决方案,其中包括硬件系统、硬件管理、大数据运算平台、大数据分析软件。Platform一如它的名字——平台,核心任务是负责对资源进行整合、调度,确保上层应用能够访问底层资源,Platform Computing处于中间层。

作为一个平台,Platform Computing实际上跨越了好几个环节,包括数据的采集、数据的存储以及在这之上的大数据运算。在这之中,Platform Computing要充当管理职能,为这些系统提供快速响应以及合理、高效的应用。

Platform助力大数据与云计算结合
对于Platform Computing应用来说,哪里数据多、对大数据需求旺盛,哪里就是Platform Computing的用武之地。金融、电信、气象、公共安全都是Platform Computing迅速发展的领域。在应用方面谢东特别强调,大数据与云计算的结合是Platform Computing非常显著的一个应用场景。大数据和云计算并不是割裂开的,很多用户需要的,是在云上构建一个大数据解决方案,而Platform Computing提供多租户的概念,使得客户可以在云的平台上构建几个大数据集群,不仅灵活使用,而且可以更高效地利用硬件资源。

为进一步介绍大数据与云计算结合的典型应用,谢东还列举了Platform Computing与SoftLayer的结合实例。如果某一个用户用Platform Computing建立了大数据方案,但是它在某一个阶段运算资源不够,不需要额外购买硬件。实际上IBM的Platform Computing可以给用户提供一个与SoftLayer结合的解决方案,使运算资源无缝扩展,不需要对应用、体验进行任何修改,用完以后还可以退租回来。

Platform成为软硬件优化调和剂
在IBM收购Platform之后,其实已经改变了Platform Computing单纯作为一个软件产品的产业形态,IBM把Platform Computing并入硬件部门,这也就意味着Platform Computing在软硬件优化方面有着极大的优势,也被赋予重大的责任。

对于此,谢东提到了几个月前IBM发布的Power 8服务器。Power8有一个显著的特点,那就是从硬件平台的角度为大数据应用而设计,反过来思考,IBM也需要从软件平台的角度把硬件性能充分利用起来。为了实现这一目的,Platform Computing起到了关键作用,它对Power 8服务器与其他存储设备的资源整合进行了深度融合。

在这种融合当中,其实应用场景是不同的,有的是运算密集型,有的是存储密集型,有的要求高带宽,有的需要大内存和快速响应。针对不同的应用,实际有不同的优化方案,在这方面Platform Computing都可以根据用户不同的需求,根据应用所选用的硬件平台做出适当的优化,使整个系统在一个最优的状态下运行。

大数据平台与已有系统无缝对接
其实在国内,最近一两年已经出现众多Platform Computing的成功案例,对此,谢东也进行了详细介绍。以电信为例,话费详单查询的应用需要考虑不同的查询条件以及历史查询的需求,导致数据量很大,而且这些数据还处于快速增长的态势下,这时候可以采用IBM的大数据平台进行查询。解决方案可以跟电信部门当前业务系统进行连接,让业务系统得到实时数据,然后为用户提供实时的详单查询。

而气象领域更是一个非常典型的应用场景。气象领域需要做数据收集、转换、分析的工作,实际上就需要大数据的处理能力。比如从卫星上获取的数据,如何把这些数据进行更好的处理,同时更快为用户提供查询访问,并进行预报,这也是一个典型的大数据应用。

在这些应用场景中,IBM的大数据平台解决方案会尽量让用户采用已有的系统进行无缝连接,使用户在原有业务基础上拓展到大数据平台,这点已被IBM重点考虑。另外,当用户建立的大数据系统面对持续不断的数据量增长的时候,系统仍然能够无缝的随着业务需求扩展能力和能量。这也是谢东特别强调的一点。而因为同时具有与类似SoftLayer公有云结合的能力,谢东也表示,用户部署的大数据系统与自身的云系统也可以紧密结合。

在采访的最后,谢东也再一次强调了Platform Computing的三大优势:首先,完整性,整个大数据平台从设计开始是一套完整的系统,是集成化的;其次,性能。IBM的大数据平台在实时响应、快速处理等方面有严苛的要求;最后,是容易被大家所忽略的,那就是整个系统的开放性和兼容性。Platform Computing的设计理念就是一个跨平台的、面向不同应用的产品,既有IBM的应用,众多应用场景、分析软件都跑在Platform Computing平台上,系统的开放性、兼容性非常好。
原文发布时间为:2014年07月31日
本文作者:张晓楠
本文来自云栖社区合作伙伴至顶网,了解相关信息可以关注至顶网。
相关实践学习
基于Hologres轻松玩转一站式实时仓库
本场景介绍如何利用阿里云MaxCompute、实时计算Flink和交互式分析服务Hologres开发离线、实时数据融合分析的数据大屏应用。
SaaS 模式云数据仓库必修课
本课程由阿里云开发者社区和阿里云大数据团队共同出品,是SaaS模式云原生数据仓库领导者MaxCompute核心课程。本课程由阿里云资深产品和技术专家们从概念到方法,从场景到实践,体系化的将阿里巴巴飞天大数据平台10多年的经过验证的方法与实践深入浅出的讲给开发者们。帮助大数据开发者快速了解并掌握SaaS模式的云原生的数据仓库,助力开发者学习了解先进的技术栈,并能在实际业务中敏捷的进行大数据分析,赋能企业业务。 通过本课程可以了解SaaS模式云原生数据仓库领导者MaxCompute核心功能及典型适用场景,可应用MaxCompute实现数仓搭建,快速进行大数据分析。适合大数据工程师、大数据分析师 大量数据需要处理、存储和管理,需要搭建数据仓库?学它! 没有足够人员和经验来运维大数据平台,不想自建IDC买机器,需要免运维的大数据平台?会SQL就等于会大数据?学它! 想知道大数据用得对不对,想用更少的钱得到持续演进的数仓能力?获得极致弹性的计算资源和更好的性能,以及持续保护数据安全的生产环境?学它! 想要获得灵活的分析能力,快速洞察数据规律特征?想要兼得数据湖的灵活性与数据仓库的成长性?学它! 出品人:阿里云大数据产品及研发团队专家 产品 MaxCompute 官网 https://www.aliyun.com/product/odps 
目录
相关文章
|
2月前
|
存储 大数据 云计算
大数据与云计算
大数据与云计算
81 2
|
2月前
|
存储 大数据 数据挖掘
云计算与大数据:从基础设施到实际应用
云计算与大数据:从基础设施到实际应用
467 0
|
26天前
|
机器学习/深度学习 存储 算法
云计算和大数据处理
云计算和大数据处理
23 1
|
13天前
|
存储 资源调度 大数据
云计算在大数据分析中的弹性资源调度策略
云计算在大数据分析中的弹性资源调度策略
|
2月前
|
存储 机器学习/深度学习 大数据
云计算与大数据:合作与创新
本文探讨了大数据技术与云计算的背景和发展,大数据的5V特征(量、速度、多样、复杂、不确定)及云计算的3S特点(服务、共享、可扩展)。两者相互依赖,云计算为大数据提供计算与存储资源。核心算法涉及分布式计算、数据挖掘和机器学习,如线性回归、逻辑回归等。通过代码示例展示了Hadoop的MapReduce、Scikit-learn的KNN和TensorFlow的线性回归应用。未来趋势包括数据量增长、实时处理、AI与ML集成及数据安全挑战。附录解答了大数据、云计算等相关问题。
384 3
|
2月前
|
存储 大数据 数据挖掘
python数据分析——大数据和云计算
大数据和云计算作为当代信息技术的两大核心驱动力,正在以前所未有的速度改变着我们的生活、工作和思维方式。它们不仅为各行各业的创新提供了强大的技术支持,更是推动了整个社会的数字化转型。 从大数据的角度来看,它的核心价值在于通过对海量数据的收集、存储、分析和挖掘,发现其中的关联性和趋势,从而为决策提供更为科学、精准的依据。无论是商业领域的市场预测、消费者行为分析,还是公共服务领域的城市规划、交通管理,大数据都发挥着不可或缺的作用。同时,随着物联网、传感器等技术的普及,大数据的来源和种类也在不断扩展,这使得我们能够更全面地认识世界,把握规律。
65 1
|
2月前
|
监控 物联网 大数据
智慧工地管理平台系统源码基于物联网、云计算、大数据等技术
智慧工地平台APP通过对施工过程人机料法环的全面感知、互联互通、智能协同,提高施工现场的生产效率、管理水平和决策能力,实现施工管理的数字化、智能化、精益化。
75 0
|
4天前
|
存储 安全 网络安全
云计算与网络安全:现状、挑战与前景
随着信息技术的快速发展,云计算作为一种革命性的计算模式,极大地推动了现代社会的数字化转型。然而,随之而来的是网络安全面临的新挑战,特别是在云服务和信息安全领域。本文将探讨云计算在网络安全中的关键作用,分析当前面临的挑战,并展望未来的发展前景。
16 1
|
4天前
|
机器学习/深度学习 安全 网络安全
云计算与网络安全的融合之路
在数字时代的浪潮中,云计算以其高效、灵活的特性成为企业数字化转型的重要推手。然而,随着云服务的广泛应用,网络安全问题亦日益凸显。本文从数据导向的角度出发,结合最新的科研研究和权威统计数据,深入探讨了云计算环境下的网络安全挑战和信息安全策略。通过逻辑严密的分析,揭示了云服务中的安全威胁,并提出了相应的防护措施,旨在为读者提供一条清晰的云计算与网络安全融合之路。
|
2天前
|
云安全 安全 网络安全
云计算与网络安全的博弈:探索云服务中的信息安全挑战与对策
在数字化时代,云计算作为推动企业创新和效率的关键力量,正面临着前所未有的网络安全威胁。本文通过深入分析云计算环境下的安全挑战,探讨了如何构建一个更加安全、可靠的云服务平台。结合最新的研究成果和行业报告,文章详细讨论了数据加密、访问控制、网络隔离等技术手段在提升云服务安全性中的应用,并提出了未来云计算安全的发展趋势。
10 1