大数据和移动化如何满足开放云架构需求?

简介:

分析和解析数据的能力能够为服务提供商、科研院校、企业、出船工公司以及小型企业带来数不清的成长机会。然而这些机会并非绝无挑战而存在。

管理TB、PB乃至EB的数据将会逐渐成为一种规范,而且云提供商需要考虑这些数据如何使用以及如何授权访问。对于任何寻求在大数据分析上进行掘金的云提供商而言,不管是内部使用,还是构建面向客户的服务,开发出这样的战略都是必须的。

不管从什么时候开始处理不断增加的数据,这些数据如何存储会成为通用的问题。谁可以访问这个数据,期望转移多少数据都会成为主要的问题。开放云架构通过更加有效地扩展存储,以及集成企业存储平台提供了可能的解决方案,而这二者也是大数据时代两个主要的需求。

作为一种用例,移动化已经成为云如何解决大数据挑战最好的案例。对于刚开始从事这项工作的人,移动设备上有限的存储意味着平板电脑和智能手机应用通常需要从云端“借用”传统存储和计算资源。

还有一个领域云计算解决了一个更大的问题:交互性。尽管跨移动设备的用户行为是类似的,但是收集关于这种行为的数据架构和流却差异很大。此外,每一种移动分析服务提供商都有自己的方法来存储用户行为数据。

此外,用户在其移动设备上同各种内置应用交互,而且他们需要一定程度上的交互性,从而将数据在不同的平台之间转移,这个问题在多种具有竞争管理的移动应用平台和生态系统中急剧增加。移动用户希望任何公开有效的内容或者应用,而不用关心移动平台。无线载体的用户希望对于应用得到同样的访问,他们想要从 Windows台式机应用商店购买音乐,然后同步播放列表到移动设备上,或者是安卓或者iOS上运行的音乐播放器。

这就需要在数据驱动的世界的平台无关性,这种需求加速了开放云的发展,不仅仅是给用户提供了转移数据的权利,也推进了联合性,为基础架构环境提供了一个完整的视图,创建了开发者社区的协作。回到刚才的例子上,移动应用需要同服务保持一致地工作,不用考虑所运行的移动操作系统,或者在其背后的云提供商。在云提供商之间还是会存在紧张感,他们可能会尝试通过专属平台锁定用户。

开放云这个术语经常使用,却鲜少定义,引入了广泛的架构特征、特性和功能。开放云拥有开放应用程序接口。开放云为用户提供了按需转移数据的能力。开放云具有联合性,能够让企业在不同的云环境之间转移相同的数据。而且开放云具有基础架构的完整视图。最后,开放云还拥有一个协作的开发者社区,而非基于托管的遗留软件。

随着企业面临的经济压力、资源限制以及技能短板不断增加,对于云计算的兴趣,尤其是开放云的兴趣也逐渐增长。在私有云和公有云之间的探讨将企业推向了混合云的方向,一种更加灵活的云计算模型,但厂商锁定依然存在。然而开放云提供了减轻这些担忧的互操作性。


本文作者:张培颖

来源:51CTO

相关实践学习
简单用户画像分析
本场景主要介绍基于海量日志数据进行简单用户画像分析为背景,如何通过使用DataWorks完成数据采集 、加工数据、配置数据质量监控和数据可视化展现等任务。
SaaS 模式云数据仓库必修课
本课程由阿里云开发者社区和阿里云大数据团队共同出品,是SaaS模式云原生数据仓库领导者MaxCompute核心课程。本课程由阿里云资深产品和技术专家们从概念到方法,从场景到实践,体系化的将阿里巴巴飞天大数据平台10多年的经过验证的方法与实践深入浅出的讲给开发者们。帮助大数据开发者快速了解并掌握SaaS模式的云原生的数据仓库,助力开发者学习了解先进的技术栈,并能在实际业务中敏捷的进行大数据分析,赋能企业业务。 通过本课程可以了解SaaS模式云原生数据仓库领导者MaxCompute核心功能及典型适用场景,可应用MaxCompute实现数仓搭建,快速进行大数据分析。适合大数据工程师、大数据分析师 大量数据需要处理、存储和管理,需要搭建数据仓库?学它! 没有足够人员和经验来运维大数据平台,不想自建IDC买机器,需要免运维的大数据平台?会SQL就等于会大数据?学它! 想知道大数据用得对不对,想用更少的钱得到持续演进的数仓能力?获得极致弹性的计算资源和更好的性能,以及持续保护数据安全的生产环境?学它! 想要获得灵活的分析能力,快速洞察数据规律特征?想要兼得数据湖的灵活性与数据仓库的成长性?学它! 出品人:阿里云大数据产品及研发团队专家 产品 MaxCompute 官网 https://www.aliyun.com/product/odps 
相关文章
|
25天前
|
存储 分布式计算 Hadoop
大数据处理架构Hadoop
【4月更文挑战第10天】Hadoop是开源的分布式计算框架,核心包括MapReduce和HDFS,用于海量数据的存储和计算。具备高可靠性、高扩展性、高效率和低成本优势,但存在低延迟访问、小文件存储和多用户写入等问题。运行模式有单机、伪分布式和分布式。NameNode管理文件系统,DataNode存储数据并处理请求。Hadoop为大数据处理提供高效可靠的解决方案。
49 2
|
3月前
|
存储 数据可视化 数据管理
基于阿里云服务的数据平台架构实践
本文主要介绍基于阿里云大数据组件服务,对企业进行大数据平台建设的架构实践。
739 2
|
8天前
|
存储 运维 监控
|
27天前
|
消息中间件 大数据 Kafka
Kafka与大数据:消息队列在大数据架构中的关键角色
【4月更文挑战第7天】Apache Kafka是高性能的分布式消息队列,常用于大数据架构,作为实时数据管道汇聚各类数据,并确保数据有序传递。它同时也是数据分发枢纽,支持多消费者订阅,简化系统集成。Kafka作为流处理平台的一部分,允许实时数据处理,满足实时业务需求。在数据湖建设中,它是数据入湖的关键,负责数据汇集与整理。此外,Kafka提供弹性伸缩和容错保障,适用于微服务间的通信,并在数据治理与审计中发挥作用。总之,Kafka是现代大数据体系中的重要基础设施,助力企业高效利用数据。
35 1
|
4月前
|
架构师 NoSQL Java
阿里巴巴新产“Java架构核心宝典”,全是流行技术,限时开放
什么是架构师?对于程序员来说,聊架构是一个永不过时的话题。实际上,每一家公司都有自己对架构师不同的定位,因为不同的公司,所处的阶段、业务模式以及应用场景都不一样,因此对架构师的要求不一样,所以定位也就不同。
|
5月前
|
监控 物联网 大数据
助力工业物联网,工业大数据之服务域:AirFlow的架构组件【三十二】
助力工业物联网,工业大数据之服务域:AirFlow的架构组件【三十二】
49 0
|
5月前
|
存储 分布式计算 大数据
首批!阿里云MaxCompute完成中国信通院基于无服务器架构大数据平台测试
近日,阿里云计算有限公司MaxCompute产品顺利完成中国信通院首批无服务器架构(Serverless)大数据平台测试。
228 0
|
5月前
|
存储 数据采集 大数据
大数据必知必会系列——数仓分层架构及三层架构流程[新星计划]
大数据必知必会系列——数仓分层架构及三层架构流程[新星计划]
147 0
|
5月前
|
分布式计算 算法 搜索推荐
阿里巴巴内部:全技术栈PPT分享(架构篇+算法篇+大数据)
我只截图不说话,PPT大全,氛围研发篇、算法篇、大数据、Java后端架构!除了大家熟悉的交易、支付场景外,支撑起阿里双十一交易1682亿元的“超级工程”其实包括以下但不限于客服、搜索、推荐、广告、库存、物流、云计算等。 Java核心技术栈:覆盖了JVM、锁、并发、Java反射、Spring原理、微服务、Zookeeper、数据库、数据结构等大量知识点。 大数据:Spark、Hadoop
|
1天前
|
监控 负载均衡 数据安全/隐私保护
探索微服务架构下的服务网格(Service Mesh)实践
【5月更文挑战第6天】 在现代软件工程的复杂多变的开发环境中,微服务架构已成为构建、部署和扩展应用的一种流行方式。随着微服务架构的普及,服务网格(Service Mesh)作为一种新兴技术范式,旨在提供一种透明且高效的方式来管理微服务间的通讯。本文将深入探讨服务网格的核心概念、它在微服务架构中的作用以及如何在实际项目中落地实施服务网格。通过剖析服务网格的关键组件及其与现有系统的协同工作方式,我们揭示了服务网格提高系统可观察性、安全性和可操作性的内在机制。此外,文章还将分享一些实践中的挑战和应对策略,为开发者和企业决策者提供实用的参考。

热门文章

最新文章