批量计算

首页 标签 批量计算
# 批量计算 #
关注
189内容
一个批量计算的调度系统的设计与实现
如果需要对成千上万的网络抓包数据文件,在规定的时间内进行解析,应该怎么做?
| |
来自: 云存储
阿里云文件存储产品说明
  背景介绍 云端存储最早的发展是在对象存储、块存储、分布式数据库等方面,在基于NFS和SMB协议的共享文件存储方面则发展缓慢。原因主要在于传统基于Posix的文件系统协议设计的过于复杂,引用计数、锁、数据冗余等要求在分布式环境中挑战较多,不利于大规模集群的scale-out。
一分钟了解阿里云产品:批量计算概述
  阿里云有很多产品,今天让我们来了解下批量计算(BatchCompute)这款产品吧。   什么是批量计算呢?   批量计算是一种适用于大规模并行批处理作业的分布式云服务。BatchCompute可支持海量作业并发规模,系统自动完成资源管理,作业调度和数据加载,并按实际使用量计费。Bat
结构化数据存储,如何设计才能满足需求?
阿里妹导读:任何应用系统都离不开对数据的处理,数据也是驱动业务创新以及向智能化发展最核心的东西。数据处理的技术已经是核心竞争力。在一个完备的技术架构中,通常也会由应用系统以及数据系统构成。应用系统负责处理业务逻辑,而数据系统负责处理数据。
双11媒体大屏背后的数据技术与产品
【本文转载自双11媒体大屏背后的数据技术与产品】 作者:罗金鹏(藏六),阿里巴巴数据技术与产品部的高级技术专家。 本次为大家分享《双11媒体大屏背后的数据技术与产品》。阿里巴巴从2009年开始双11产品大促,从最初5千万的产品成交额,到2016年的1207亿的产品成交额,可能逍遥子自己也想不到,居然一不小心把事情搞这么大。 在2014年,也就是IPO元年的时候,我们数
74期:涂鸦科技A轮获千万美元,无专职运维!
《云周刊》74期:涂鸦科技A轮获千万美元,无专职运维!
标准流程描述语言 WDL 阿里云最佳实践
WDL 作为全球基因组与健康联盟 (Global Alliance for Genomics and Health)支持的工作流描述语言,已经被越来越多的客户所采用。通过阿里云的 Cromwell 方案,用户可以本地开发测试WDL流程,再使用云计算强大的计算能力,来完成基因组学数据分析工作。
【云栖号案例 | 医疗健康】华大基因上云 打造精准医疗应用云平台日志方案
基因数据产生的体量越来越大,超出了原有计算能力所能支持的范围。通过使用Maxcompute加速对人群结构的分析速度的进展,计算成本大幅降低至1000美金以内。
免费试用