近日,国家市场监督管理总局、国家标准化管理委员会正式发布大数据领域首个批流融合国家标准 GB/T 44216-2024《信息技术 大数据 批流融合计算技术要求》,该标准由阿里云牵头起草,并将于2025年2月1日起正式实施。
《信息技术 大数据 批流融合计算技术要求》对批流融合技术作了清晰定义,规定了批流融合系统需能同时支持实时和离线计算模型,并应具备统一资源管理、统一计算框架、统一API、统一SQL接口、统一作业管理、统一权限管理及弹性拓展等关键能力。批流融合是大数据领域重要的新兴技术趋势。随着互联网的发展,企业在电商推荐、交通物流、金融交易监控等众多场景对大规模实时数据计算的需求不断攀升,传统批量计算范式在时延方面难以满足要求,将实时处理数据的流式计算与批量计算在统一技术框架下融合成为行业必经之路。作为国内大数据领域领导者,阿里云在2019年发起了批流融合计算技术的国家标准立项和编制工作,并联合行业内各单位共同起草完善。融合了阿里云实时计算Flink版的打造经验和丰富的行业实践,国家标准《信息技术 大数据 批流融合计算技术要求》将更好地推动批流融合计算的技术发展,指导国内批流融合计算系统的设计、开发和部署,并进一步帮助批流融合技术在各行业中落地应用。阿里云已在大数据领域积累了深厚技术实力。目前,阿里云不仅拥有从大数据处理分析、数据仓库到AI工程化服务的全栈技术能力,自主研发的 MaxCompute、Dataworks、Hologres 等旗舰产品可提供业界最高水平的数据处理性能、伸缩弹性和稳定性。同时,阿里云还积极贡献并维护了一系列顶级开源项目,包括Apache Flink、Apache Paimon 等,为开发者提供丰富的工具选择,并提供全托管式云服务。