• 《深入理解数据:数据处理与编程实践》一一导读

    培训班结束后,在Google中国公司大学合作部精品课程计划资助下,由本人负责在南京大学建设了MapReduce大规模数据并行处理技术课程,并自2011年开始为南京大学计算机系研究生开设了该课程,使我们成为国内最早系统性...
    文章 2017-07-04 1570浏览量
  • 数据的关键技术

    MapReduce适合进行数据分析、日志分析、商业智能分析、客户营销、大规模索引等业务,并具有非常明显的效果。通过结合MapReduce技术进行实时分析,某家电公司的信用计算时间从33小时缩短到8秒,而MKI的基因分析时间从...
    文章 2015-03-05 1442浏览量
  • GPU服务器计算原理

    CPU 由专为顺序串行处理而优化的几个核心组成,而 GPU 则拥有一个由数以千计的更小、更高效的核心(专为同时处理多重任务而设计)组成的大规模并行计算架构。GPU 拥有数以千计的核心,可高效地处理并行任务 那么,...
    文章 2020-03-26 1349浏览量
  • 模数转换器(ADC)的基本原理【转】

    积分型ADC工作原理是将输入电压转换成时间或频率,然后由定时器/计数器获得数字值。其优点是用简单电路就能获得高分辨率,但缺点是由于转换精度依赖于积分时间,因此转换速率极低。初期的单片ADC大多采用积分型,现在...
    文章 2017-11-22 3627浏览量
  • 模数转换器(ADC)的基本原理【转】

    积分型ADC工作原理是将输入电压转换成时间或频率,然后由定时器/计数器获得数字值。其优点是用简单电路就能获得高分辨率,但缺点是由于转换精度依赖于积分时间,因此转换速率极低。初期的单片ADC大多采用积分型,现在...
    文章 2017-11-07 883浏览量
  • 《新编计算机科学概论》一本章习题

    并行处理指的是在同一时刻或是在同一时间间隔内完成两种或两种以上性质相同或不同的工作,它们在时间上能互相重叠,并行处理有两个不同特征:和。并行处理计算机结构通常包括、和 三种形式。CPU 执行时间决定了处理...
    文章 2017-08-01 1248浏览量
  • 《Hadoop MapReduce性能优化》一导读

    Hadoop MapReduce性能优化MapReduce是一个重要的并行处理模型,用于大规模、数据密集型应用,比如数据挖掘和Web索引。Hadoop作为MapReduce的一个开源实现,广泛用于支持对响应时间要求很严苛的集群计算作业。多数...
    文章 2017-05-02 2527浏览量
  • MapReduce原理与设计思想

    例如假设有一个巨大的2维数据需要处理(比如求每个元素的开立方)其中对每个元素的处理是相同的,并且数据元素间不存在数据依赖关系,可以考虑不同的划分方法将其划分为子数组,由一组处理器并行处理 2.构建抽象模型-Map...
    文章 2016-04-21 2952浏览量
  • MapReduce原理与设计思想(转载:...

    如果把外存价格除外,低端服务器性价比大约提高12倍对于大规模数据处理由于有大量数据存储需要显而易见基于低端服务器的集群远比基于高端服务器的集群优越这就是为什么MapReduce并行计算集群会基于低端服务器实现 ...
    文章 2017-06-02 1869浏览量
  • 模数转换器(ADC)的基本原理【转】

    积分型ADC工作原理是将输入电压转换成时间或频率,然后由定时器/计数器获得数字值。其优点是用简单电路就能获得高分辨率,但缺点是由于转换精度依赖于积分时间,因此转换速率极低。初期的单片ADC大多采用积分型,现在...
    文章 2016-07-21 1172浏览量
  • 《伟大的计算原理》一第2章

    通过运行在大规模并行超级计算机上的新型算法,工程师已经可以在不经过风洞试验的情况下设计出可以安全飞行的飞机。波音777是第一种完全通过数字化设计产生的飞机。航空专家和计算机专家紧密合作,产生了一个新的...
    文章 2017-06-26 1334浏览量
  • 《Hadoop实战第2版》——1.4节Hadoop与分布式开发

    MapReduce计算模型非常适合在大量计算机组成的大规模集群上并行运行。图1-4中的每一个Map任务和每一个Reduce任务均可以同时运行于一个单独的计算节点上,可想而知,其运算效率是很高的,那么这样的并行计算是如何...
    文章 2017-08-01 1077浏览量
  • 《Hadoop MapReduce性能优化》一1.3 ...MapReduce的工作原理

    Hadoop MapReduce性能优化经过一个或者多个步骤,MapReduce编程模型可以用来处理许多大规模数据问题,还可以更高效地实现MapReduce编程模型来支持使用大量机器处理大量数据的问题。在大数据的背景下,可以处理的数据...
    文章 2017-05-02 1415浏览量
  • 《伟大的计算原理》一数据

    Tony Chan和Yousef Saad(1986)的研究工作表明,hypercube(一种早期出现的并行计算架构)对于多重网格算法(一类重要的数字计算方法)具有最优的效果,而多重网格算法能够对大规模数据空间的数学模型进行求解。...
    文章 2017-06-26 1201浏览量
  • 关于分布式计算的一些概念

    Actor之间仅通过发送消息进行通信,所有的操作都是异步的,不同的Actor可以同时处理各自的信息,使整个系统获得大规模的并发能力。1.3 Actor模型原理简单介绍 Actor模型简单原理图: 根据上图,每个Actor都有一个...
    文章 2018-06-03 4123浏览量
  • CMU 15-721 15-查询执行和处理过程 Query Execution&...

    通过允许同时执行多个查询来改进整个的性能,通过并发控制方案去提供一个隔离的错觉,很难提供一个并发的方案不去极的影响数据库的处理模型。INTRA-QUERY并行 通过并行执行操作符来改进单查询的性能。1:Intra-...
    文章 2019-09-08 901浏览量
  • 为科学创新插上模型的翅膀,MindSpore「昇思」正在...

    Mindspore1.5 版本在处理大规模预训练网络时&xff0c;可以通过优化器异构将优化器指定到 CPU 上&xff0c;以减少优化器状态量显存占用开销&xff0c;进而扩展可训练模型规模。如下图所示&xff0c;将 FP32 的 Adam 优化器放置于...
    文章 2021-12-06 1浏览量
  • 多天线及波束赋形技术发展概述|带你读《大规模天线...

    正是由于波束赋形技术在 TD-SCDMA 系统中的标准化以及大规模 网络部署中的成功应用,利用信道互易性对多天线传输系统进行空域优化处理 的思想从此便深深地植根于移动通信系统的标准化与产业化发展过程之中,对 于 ...
    文章 2020-01-03 2960浏览量
  • ODPS—MPI机器学习编程框架

    ODPS作为一个大数据处理服务,有着得天独厚的优势去承载大规模机器学习,PAI就是这样一个孕育在ODPS之上的大规模机器学习平台。在PAI平台上,为了支持亿级的数据量、千万级的特征,所有机器学习算法都是分布式的。你...
    文章 2016-02-20 11015浏览量
  • 数据中台建设方法论实践之技术选型

    数据查询满足处理大规模的数据结果集,同时又需要提供一些快速计算的能力,如条件过滤筛选、在线检索等能力,快速从大规模结果中得到筛选、检索结果信息,并且支持高并发、低延迟的快速响应。这种能力批计算、流计算...
    文章 2020-03-09 1065浏览量
  • 趋势:服务器架构正处于变革的边缘

    这些数据中心工作负载的另一个属性是在大规模服务器与服务器间通信(也称为数据中心开销)时,对于所有数据传输和闲置数据进行集中操作(如压缩和加密)所产生的处理开销。这些下一代云工作负载正在推动对有效地托管这种...
    文章 2017-07-05 1600浏览量
  • 《新编计算机科学概论》一本章小结

    这组处理单元通过相互之间的通信与协作,以更快的速度共同完成一项大规模的计算任务。按照著名的弗林计算机分类模型,根据计算机的指令和数据流的并行性,可以把所有的计算机分为4类:SISD?SIMD、MISD和MIMD。计算机...
    文章 2017-08-01 1180浏览量
  • 《Hadoop数据分析与挖掘实战》——2.3节Hadoop原理

    2.3.2 Hadoop MapReduce原理Hadoop MapReduce是一个快速、高效、简单用于编写并行处理大数据程序并应用在集群上的编程框架。其前身是Google公司的MapReduce。MapReduce是Google公司的核心计算模型,它将复杂的、...
    文章 2017-05-02 1710浏览量
  • 【Coursera课程笔记】Web智能和数据Week3_MapReduce

    此方法最初来自Google的一篇论文[1],现在用来指代一种编程方式,主要作用与大规模数据集(通常在1T以上)的并行计算(很多算法都可以用MR方式实现)。本周课程主要内容介绍了MR的编程模型(结合Mincemeat[2]和...
    文章 2017-09-13 1155浏览量
  • 《伟大的计算原理》一导读

    如今,通过支持大规模合作,计算技术使得知识工作能够自动化,同时也在不断扩大生产力。第二次机器革命正扑面而来1。这是如何实现的?是什么样的伟大思想使这一切成为可能?计算机给我们带来好处的同时也带来忧虑。...
    文章 2017-05-02 1813浏览量
  • 新疆石油勘探领域Bladmin存储系统应用案例

    新疆石油地物所肩负的石油勘探地震资料处理工作的主要原理是,通过人工的方式产生地震信号(放炮),然后将地下地质的地震信号,通过地面感应器提取后,利用大型计算机或机群(Cluster)(包括刀片服务器集群和普通...
    文章 2017-08-09 1408浏览量
  • 新疆石油勘探领域Bladmin存储系统应用案例

    新疆石油地物所肩负的石油勘探地震资料处理工作的主要原理是,通过人工的方式产生地震信号(放炮),然后将地下地质的地震信号,通过地面感应器提取后,利用大型计算机或机群(Cluster)(包括刀片服务器集群和普通...
    文章 2017-08-09 1336浏览量
  • [转载]聊聊Greenplum的那些事

    笔者有幸从04年就开始从事大规模数据计算的相关工作,08年作为Greenplum 早期员工加入Greenplum团队(当时的工牌是“005”,哈哈),记得当时看了一眼Greenplum的架构(嗯,就是现在大家耳熟能详的那个好多个X86框框...
    文章 2016-07-11 7181浏览量
  • 量子十问之六:量子计算,这可是一个颠覆性的新技术

    量子计算机工作原理(图片来源于网络) 此外,量子计算的信息处理过程是幺正变换,幺正变换的可逆性使得量子信息处理过程中的能耗较低,能够从原理上解决现代信息处理的另一个关键技术-高能耗的问题。因此,量子计算...
    文章 2018-05-03 873浏览量
  • 《伟大的计算原理》一导读

    如今,通过支持大规模合作,计算技术使得知识工作能够自动化,同时也在不断扩大生产力。第二次机器革命正扑面而来1。这是如何实现的?是什么样的伟大思想使这一切成为可能?计算机给我们带来好处的同时也带来忧虑。...
    文章 2017-06-26 1809浏览量
1 2 3 4 ... 23 >

云产品推荐

视频直播 大数据计算服务 MaxCompute 国内短信套餐包 ECS云服务器安全配置相关的云产品 开发者问答 阿里云建站 新零售智能客服 万网 小程序开发制作 视频内容分析 视频集锦 代理记账服务 阿里云AIoT 阿里云科技驱动中小企业数字化