云计算和大数据的标准化需求和标准化组织有哪些?

本文涉及的产品
云原生大数据计算服务 MaxCompute,5000CU*H 100GB 3个月
云原生大数据计算服务MaxCompute,500CU*H 100GB 3个月
简介:

大数据与云计算

云计算标准化需求分析:

从技术角度看

概念和定义:通过标准化统一云计算的概念、定义及内容;

互操作:需要制定分布式计算资源、存储资源之间的接口标准,以便更好地解决互操作问题;

虚拟化:需要制定网络、硬件等各种资源虚拟化的格式规范,解决资源的虚拟化、调度和流转问题;

应用开发和部署:需要制定虚拟资源池应用开发接口规范,为上层应用的开发部署及应用提供更好的支撑;

相关产品:需要制定分布式文件系统、分布式数据库、资源虚拟化系统等产品的功能、性能要求等标准,为提高产品质量提供支持。

从运营和安全管理角度看

服务能力:需要制定标准规范提供云计算服务应具备的条件和能力

服务质量评价:需要制定云计算服务质量的评价标准,保证服务质量

运行维护:需要针对云计算相关的计算资源、存储资源的运行维护制定相关的标准,为提高运营提供支持;

安全管理:需要制定数据的存储安全和传输安全,跨云的安全管理等监管、如跨云的身份鉴别、访问控制、安全审计等;

能效管理:需要制定针对绿色数据中心建设的标准,为实现节能减排、低碳提供标准支撑。

大数据标准化需求分析:

从技术角度看

数据准备技术:通过标准规范化数据表示、元数据类型和操作方式,为数据的统一存储提供基础。

数据存储技术:需要制定关于分布式文件系统、数据仓库的相关标准,解决多类型数据的可靠存储问题。

数据平台技术:数据平台涉及到面向服务的体系结构(SOA)、数据并行处理(MapReduce)等技术,我国在SOA标准化方面已研制了系列标准,具备了支撑大数据发展的良好基础。在数据并行处理技术发面,需要制定接口规范,为上层应用的开发部署提供更好的互操作性支撑。

数据处理技术:需要制定大数据分析技术要求、分析过程模型、可视化工具要求等标准,以提高大数据处理产品的质量。

从市场角度看

大数据改变经济社会管理方式。可以提高企业经营决策水平和效率,推动创新,给企业、行业领域带来价值。

促进行业融合发展。在技术和业务的促进下,跨领域、跨系统、跨地域的数据共享成为可能,大数据支持着机构业务决策和管理决策的精准性与科学性,社会整体层面的业务协同效率提高。

推动产业转型升级。大数据环境下,ICT产业面临着有效存储、实时分析、高性能计算等挑战,这将对软件产业、芯片以及存储产业产生重要影响。

助力智慧城市建设。大数据与智慧城市是信息化建设的内容与平台,两者互为推动力量。智慧城市是大数据的源头,大数据是智慧城市的内核。

通过研制大数据的质量评价指标、数据管理技术要求、数据访问接口规范、数据查询语言等标准,为大数据的市场化应用提供支撑。

国内外标准化组织:

大数据与云计算

大数据与云计算

大数据与云计算

大数据与云计算

国内标准化组织:

1、全国信标委(TC28)
云计算、ITSS、非结构化工作组、数据管理、SOA等

2、全国信安标委(TC 260)

参加的国际标准化组织

JTC1、ITU-T、DMTF、SNIA、OASIS、W3C等


本文作者:佚名

来源:51CTO

相关实践学习
基于MaxCompute的热门话题分析
本实验围绕社交用户发布的文章做了详尽的分析,通过分析能得到用户群体年龄分布,性别分布,地理位置分布,以及热门话题的热度。
SaaS 模式云数据仓库必修课
本课程由阿里云开发者社区和阿里云大数据团队共同出品,是SaaS模式云原生数据仓库领导者MaxCompute核心课程。本课程由阿里云资深产品和技术专家们从概念到方法,从场景到实践,体系化的将阿里巴巴飞天大数据平台10多年的经过验证的方法与实践深入浅出的讲给开发者们。帮助大数据开发者快速了解并掌握SaaS模式的云原生的数据仓库,助力开发者学习了解先进的技术栈,并能在实际业务中敏捷的进行大数据分析,赋能企业业务。 通过本课程可以了解SaaS模式云原生数据仓库领导者MaxCompute核心功能及典型适用场景,可应用MaxCompute实现数仓搭建,快速进行大数据分析。适合大数据工程师、大数据分析师 大量数据需要处理、存储和管理,需要搭建数据仓库?学它! 没有足够人员和经验来运维大数据平台,不想自建IDC买机器,需要免运维的大数据平台?会SQL就等于会大数据?学它! 想知道大数据用得对不对,想用更少的钱得到持续演进的数仓能力?获得极致弹性的计算资源和更好的性能,以及持续保护数据安全的生产环境?学它! 想要获得灵活的分析能力,快速洞察数据规律特征?想要兼得数据湖的灵活性与数据仓库的成长性?学它! 出品人:阿里云大数据产品及研发团队专家 产品 MaxCompute 官网 https://www.aliyun.com/product/odps 
相关文章
|
1月前
|
机器学习/深度学习 存储 大数据
云计算与大数据技术的融合应用
云计算与大数据技术的融合应用
|
1月前
|
存储 弹性计算 分布式计算
云计算在大数据处理中的优势与挑战
云计算在大数据处理中的优势与挑战
|
1月前
|
存储 人工智能 大数据
物联网、大数据、云计算、人工智能之间的关系
物联网、大数据、云计算、人工智能之间的关系是紧密相连、相互促进的。这四者既有各自独立的技术特征,又能在不同层面上相互融合,共同推动信息技术的发展和应用。
478 0
|
2月前
|
算法 大数据 数据库
云计算与大数据平台的数据库迁移与同步
本文详细介绍了云计算与大数据平台的数据库迁移与同步的核心概念、算法原理、具体操作步骤、数学模型公式、代码实例及未来发展趋势与挑战。涵盖全量与增量迁移、一致性与异步复制等内容,旨在帮助读者全面了解并应对相关技术挑战。
54 3
|
4月前
|
分布式计算 并行计算 大数据
【数据挖掘】百度2015大数据云计算研发笔试卷
百度2015年大数据云计算研发笔试卷的题目总结,涵盖了Hadoop、Spark、MPI计算框架特点、TCP连接建立过程、数组最大和问题、二分查找实现以及灯泡开关问题,提供了部分题目的解析和伪代码。
56 1
|
6月前
|
机器学习/深度学习 存储 算法
云计算和大数据处理
云计算和大数据处理
110 1
|
6月前
|
存储 资源调度 大数据
云计算在大数据分析中的弹性资源调度策略
云计算在大数据分析中的弹性资源调度策略
|
17天前
|
存储 安全 网络安全
云计算与网络安全:技术融合的双刃剑
在数字化浪潮中,云计算如同一股不可阻挡的力量,推动着企业和个人用户步入一个高效、便捷的新时代。然而,随之而来的网络安全问题也如影随形,成为制约云计算发展的阿喀琉斯之踵。本文将探讨云计算服务中的网络安全挑战,揭示信息保护的重要性,并提供实用的安全策略,旨在为读者呈现一场技术与安全的较量,同时指出如何在享受云服务带来的便利的同时,确保数据的安全和隐私。
25 6
|
16天前
|
存储 人工智能 安全
云计算与网络安全:技术融合与挑战
在数字化时代的浪潮中,云计算和网络安全已成为推动社会进步的两大关键技术。本文将探讨云计算服务的发展,网络安全的重要性,以及信息安全技术的演进。我们将通过实例分析,揭示云服务如何增强数据保护,网络安全措施如何应对新兴威胁,以及信息安全技术的创新如何为企业带来竞争优势。文章旨在为读者提供对云计算和网络安全领域的深入理解,并展示它们如何共同塑造我们的未来。
|
15天前
|
监控 安全 网络安全
云计算与网络安全:技术挑战与解决方案
随着云计算技术的飞速发展,其在各行各业的应用越来越广泛。然而,随之而来的网络安全问题也日益凸显。本文将从云服务、网络安全和信息安全等技术领域出发,探讨云计算面临的安全挑战及相应的解决方案。通过实例分析和代码示例,旨在帮助读者更好地理解云计算与网络安全的关系,提高网络安全防护意识。
下一篇
DataWorks