云计算和大数据的标准化需求和标准化组织有哪些?

本文涉及的产品
云原生大数据计算服务MaxCompute,500CU*H 100GB 3个月
云原生大数据计算服务 MaxCompute,5000CU*H 100GB 3个月
简介:

大数据与云计算

云计算标准化需求分析:

从技术角度看

概念和定义:通过标准化统一云计算的概念、定义及内容;

互操作:需要制定分布式计算资源、存储资源之间的接口标准,以便更好地解决互操作问题;

虚拟化:需要制定网络、硬件等各种资源虚拟化的格式规范,解决资源的虚拟化、调度和流转问题;

应用开发和部署:需要制定虚拟资源池应用开发接口规范,为上层应用的开发部署及应用提供更好的支撑;

相关产品:需要制定分布式文件系统、分布式数据库、资源虚拟化系统等产品的功能、性能要求等标准,为提高产品质量提供支持。

从运营和安全管理角度看

服务能力:需要制定标准规范提供云计算服务应具备的条件和能力

服务质量评价:需要制定云计算服务质量的评价标准,保证服务质量

运行维护:需要针对云计算相关的计算资源、存储资源的运行维护制定相关的标准,为提高运营提供支持;

安全管理:需要制定数据的存储安全和传输安全,跨云的安全管理等监管、如跨云的身份鉴别、访问控制、安全审计等;

能效管理:需要制定针对绿色数据中心建设的标准,为实现节能减排、低碳提供标准支撑。

大数据标准化需求分析:

从技术角度看

数据准备技术:通过标准规范化数据表示、元数据类型和操作方式,为数据的统一存储提供基础。

数据存储技术:需要制定关于分布式文件系统、数据仓库的相关标准,解决多类型数据的可靠存储问题。

数据平台技术:数据平台涉及到面向服务的体系结构(SOA)、数据并行处理(MapReduce)等技术,我国在SOA标准化方面已研制了系列标准,具备了支撑大数据发展的良好基础。在数据并行处理技术发面,需要制定接口规范,为上层应用的开发部署提供更好的互操作性支撑。

数据处理技术:需要制定大数据分析技术要求、分析过程模型、可视化工具要求等标准,以提高大数据处理产品的质量。

从市场角度看

大数据改变经济社会管理方式。可以提高企业经营决策水平和效率,推动创新,给企业、行业领域带来价值。

促进行业融合发展。在技术和业务的促进下,跨领域、跨系统、跨地域的数据共享成为可能,大数据支持着机构业务决策和管理决策的精准性与科学性,社会整体层面的业务协同效率提高。

推动产业转型升级。大数据环境下,ICT产业面临着有效存储、实时分析、高性能计算等挑战,这将对软件产业、芯片以及存储产业产生重要影响。

助力智慧城市建设。大数据与智慧城市是信息化建设的内容与平台,两者互为推动力量。智慧城市是大数据的源头,大数据是智慧城市的内核。

通过研制大数据的质量评价指标、数据管理技术要求、数据访问接口规范、数据查询语言等标准,为大数据的市场化应用提供支撑。

国内外标准化组织:

大数据与云计算

大数据与云计算

大数据与云计算

大数据与云计算

国内标准化组织:

1、全国信标委(TC28)
云计算、ITSS、非结构化工作组、数据管理、SOA等

2、全国信安标委(TC 260)

参加的国际标准化组织

JTC1、ITU-T、DMTF、SNIA、OASIS、W3C等


本文作者:佚名

来源:51CTO

相关实践学习
基于MaxCompute的热门话题分析
本实验围绕社交用户发布的文章做了详尽的分析,通过分析能得到用户群体年龄分布,性别分布,地理位置分布,以及热门话题的热度。
SaaS 模式云数据仓库必修课
本课程由阿里云开发者社区和阿里云大数据团队共同出品,是SaaS模式云原生数据仓库领导者MaxCompute核心课程。本课程由阿里云资深产品和技术专家们从概念到方法,从场景到实践,体系化的将阿里巴巴飞天大数据平台10多年的经过验证的方法与实践深入浅出的讲给开发者们。帮助大数据开发者快速了解并掌握SaaS模式的云原生的数据仓库,助力开发者学习了解先进的技术栈,并能在实际业务中敏捷的进行大数据分析,赋能企业业务。 通过本课程可以了解SaaS模式云原生数据仓库领导者MaxCompute核心功能及典型适用场景,可应用MaxCompute实现数仓搭建,快速进行大数据分析。适合大数据工程师、大数据分析师 大量数据需要处理、存储和管理,需要搭建数据仓库?学它! 没有足够人员和经验来运维大数据平台,不想自建IDC买机器,需要免运维的大数据平台?会SQL就等于会大数据?学它! 想知道大数据用得对不对,想用更少的钱得到持续演进的数仓能力?获得极致弹性的计算资源和更好的性能,以及持续保护数据安全的生产环境?学它! 想要获得灵活的分析能力,快速洞察数据规律特征?想要兼得数据湖的灵活性与数据仓库的成长性?学它! 出品人:阿里云大数据产品及研发团队专家 产品 MaxCompute 官网 https://www.aliyun.com/product/odps 
相关文章
|
10天前
|
存储 人工智能 大数据
物联网、大数据、云计算、人工智能之间的关系
物联网、大数据、云计算、人工智能之间的关系是紧密相连、相互促进的。这四者既有各自独立的技术特征,又能在不同层面上相互融合,共同推动信息技术的发展和应用。
93 0
|
19天前
|
算法 大数据 数据库
云计算与大数据平台的数据库迁移与同步
本文详细介绍了云计算与大数据平台的数据库迁移与同步的核心概念、算法原理、具体操作步骤、数学模型公式、代码实例及未来发展趋势与挑战。涵盖全量与增量迁移、一致性与异步复制等内容,旨在帮助读者全面了解并应对相关技术挑战。
31 3
|
6月前
|
存储 大数据 云计算
大数据与云计算
大数据与云计算
197 2
|
3月前
|
分布式计算 并行计算 大数据
【数据挖掘】百度2015大数据云计算研发笔试卷
百度2015年大数据云计算研发笔试卷的题目总结,涵盖了Hadoop、Spark、MPI计算框架特点、TCP连接建立过程、数组最大和问题、二分查找实现以及灯泡开关问题,提供了部分题目的解析和伪代码。
52 1
|
5月前
|
机器学习/深度学习 存储 算法
云计算和大数据处理
云计算和大数据处理
94 1
|
5月前
|
存储 资源调度 大数据
云计算在大数据分析中的弹性资源调度策略
云计算在大数据分析中的弹性资源调度策略
|
6月前
|
存储 机器学习/深度学习 大数据
云计算与大数据:合作与创新
本文探讨了大数据技术与云计算的背景和发展,大数据的5V特征(量、速度、多样、复杂、不确定)及云计算的3S特点(服务、共享、可扩展)。两者相互依赖,云计算为大数据提供计算与存储资源。核心算法涉及分布式计算、数据挖掘和机器学习,如线性回归、逻辑回归等。通过代码示例展示了Hadoop的MapReduce、Scikit-learn的KNN和TensorFlow的线性回归应用。未来趋势包括数据量增长、实时处理、AI与ML集成及数据安全挑战。附录解答了大数据、云计算等相关问题。
508 3
|
4天前
|
存储 安全 网络安全
云计算时代的网络安全挑战与策略
【10月更文挑战第34天】在数字化转型的浪潮中,云计算作为一项关键技术,正深刻改变着企业的运营方式。然而,随着云服务的普及,网络安全问题也日益凸显。本文将探讨云计算环境下的安全挑战,并提出相应的防护策略。
|
1天前
|
安全 网络安全 数据库
云计算与网络安全:技术融合的未来之路
【10月更文挑战第37天】本文将探讨云计算与网络安全的交汇点,揭示它们如何共同塑造信息安全的未来。我们将深入了解云服务的核心组件、网络安全的关键策略以及两者如何相互增强。通过分析当前的挑战和未来的趋势,本文旨在为读者提供一条清晰的路径,以理解并应对这一不断发展的技术领域。
|
2天前
|
云安全 安全 网络安全
云计算与网络安全:挑战与应对策略####
云计算作为信息技术的一场革命,为数据存储和计算提供了前所未有的便利和效率。然而,随着云计算的广泛应用,其带来的网络安全问题也日益凸显。本文将探讨云计算环境下的主要网络安全挑战,包括数据泄露、网络攻击、身份和访问管理等问题,并分析云服务提供商和企业用户如何通过技术手段和管理策略来应对这些挑战。此外,还将讨论云计算与信息安全领域的最新发展趋势,旨在为读者提供一个全面的理解和实用的指导。通过深入剖析云计算的工作原理和安全机制,我们可以更好地理解如何保护我们的网络和信息安全。只有云计算提供商和用户共同努力,才能建立一个安全可靠的云计算环境。 ####