• 关于

    海量磁盘存储器怎么用

    的搜索结果
  • 清华计算机系舒继武 CCF-ADL 讲习班上篇:闪存存储系统的软件

       雷锋网注:舒继武,现任清华大学教授、 博士生导师。近年来主要从事网络存储、存储安全、网络服务器、并行算法、并行处理技术及并行应用软件技术等方面的研究工作。他还是清华大学计算机科学与技术系分学位委员会委员, SNIA China(全球网络存储工业协会(中国))专家委员会委员,“高效能服务器...

    文章 boxti 2017-08-02 681浏览量

  • hbase 学习(十四)Facebook针对hbase的优化方案分析

    使用hbase的目的是为了海量数据的随机读写,但是在实际使用中却发现针对随机读的优化和gc是一个很大的问题,而且hbase的数据是存储在Hdfs,而Hdfs是面向流失数据访问进行设计的,就难免带来效率的下降。下面介绍一下Facebook Message系统在HBase online storage...

    文章 岑玉海 2016-09-11 2151浏览量

  • 淘宝应对"双11"的技术架构分析

    原文地址:http://kb.cnblogs.com/page/193670/     双“11”最热门的话题是TB ,最近正好和阿里的一个朋友聊淘宝的技术架构,发现很多有意思的地方,分享一下他们的解析资料:   淘宝海量数据产品技术架构   数据产品的一个最大特点是数据的非实时写入,正因为如此,...

    文章 孤剑 2015-12-02 847浏览量

  • 阿里云爆款特惠专场,精选爆款产品低至0.95折!

    爆款ECS云服务器8.1元/月起,云数据库低至1.5折,限时抢购!

    广告

  • No.1 - Apache IoTDB 随笔 - Time Series DBMS 综述(文末彩蛋)

    “这是一篇无法一口气读完的、文字过万[正文字数14390]的长文,这是一个无法中途不上厕所就看完的、关于时序数据库的视频[时长111分钟]分享...” 观看视频 大家好,很开心能够和大家一起交流时序数据库的相关的内容:) 【文末有彩蛋】 首先还是简单自我介绍一下,我是 孙金城,花名 金竹。我是20...

    文章 6ypzuriaojqge 2020-12-17 430浏览量

  • 阿里云Elasticsearch日志增强版介绍

    本文由阿里云社群直播整理而来。讲师:洪阳,阿里云产品专家和阿里云技术专家,志宸 全链路云上Elasticsearch——阿里云Elasticsearch一站式云托管服务 到今天为止我们在云上已经有Elasticsearch、Kibana、Logstash和Beats, 生态下的全部开源的组件。同时...

    文章 琛琛轴子 2020-05-13 7301浏览量

  • 带你读《企业私有云建设指南》之二:企业云计算涉及的技术选型和管理

    点击查看第一章点击查看第三章 第2章 企业云计算涉及的技术选型和管理在以AWS、Google、阿里等为代表的公有云发展的同时,很多大型企业出于数据安全性、系统稳定性、软硬件自主权、对自主可控以及TCO(Total Cost of Ownership,总体拥有成本)低的考虑,更加倾向于建设企业私有云...

    文章 温柔的养猫人 2019-10-31 2286浏览量

  • 未来计算是什么样的?张晓东、丛京生等六大教授这样说

    10 月 29 日,一年一度的未来科学大奖颁奖典礼暨未来论坛年会在北京举办。雷锋网(公众号:雷锋网)了解到,今年的大奖颁奖典礼上,颁发了 2017 年未来科学大奖“物质科学”奖、“生命科学”奖,并首度颁发了“数学与计算机科学”奖。用四组数据来看,包括了 1 场主旨开幕全会,3 场未来科学大奖获奖人...

    文章 玄学酱 2017-11-03 879浏览量

  • 腾讯看点基于 Flink 的实时数仓及多维实时数据分析实践

    当业务发展到一定规模,实时数据仓库是一个必要的基础服务。从数据驱动方面考虑,多维实时数据分析系统的重要性也不言而喻。但是当数据量巨大的情况下,拿腾讯看点来说,一天上报的数据量达到万亿级的规模,要实现极低延迟的实时计算和亚秒级的多维实时查询是有技术挑战的。 本文将介绍信息流场景下,腾讯看点的实时数据...

    文章 阿里云实时计算Flink 2020-09-16 2195浏览量

  • 观点 | 阿里资深技术专家:优秀的数据库存储引擎应具备哪些能力?

    导读 本文作者是阿里巴巴OLTP数据库团队资深技术专家——曲山。作为自研高性能、低成本存储引擎X-Engine的负责人,曲山眼中的优秀关系型数据库存储引擎应该具备哪些能力呢? 正文 数据库内核按层次来分,就是两层:SQL & Storage。SQL Layer负责将你输入的SQL stat...

    文章 七幕 2019-01-25 11653浏览量

  • 迁云架构实践

    本文着笔介绍IT互联网化为传统企业带来的技术挑战,并对上云架构最佳实践进行了深入介绍,首发于阿里云&《程序员》联合出品的《凌云》杂志。 作者: 王宇德,张文生 云计算作为信息技术领域的一种创新应用模式,自其诞生以来一直备受关注。由于其具备低成本、弹性、易用、高可靠性、按需服务等特点,近年来...

    文章 sheeta 2016-02-16 8178浏览量

  • No.1-时序数据库随笔 - Time Series DBMS 综述

    大家好,很开心能够和大家一起交流时序数据库的相关的内容首先还是简单自我介绍一下,我是 孙金城,花名 金竹。我是2011年加入阿里,在2016年之前一直做公司内部的研发工作,包括阿里郎,Blink等平台。从2016年...

    文章 孙金城 2021-03-09 540浏览量

  • 深入分析 Java I/O 的工作机制

    简介: I/O 问题可以说是当今互联网 Web 应用中所面临的主要问题之一,因为当前在这个海量数据时代,数据在网络中随处流动。这个流动的过程中都涉及到 I/O 问题,可以说大部分 Web 应用系统的瓶颈都是 I/O 瓶颈。本文的目的正是分析 I/O 的内在工作机制,你将了解到:Java 的 I/O...

    文章 rollenholt 2016-05-06 1310浏览量

  • 一个小型数据库的核心组件

    如果想要了解存储,我比较推荐的方式还是从了解数据库开始。从目前来看,数据库发展了这么多年,各种理论相对的比较完善,面对各种应用场景,其核心处理模式也已经非常的成熟了,在新的海量数据的时代,人们只是对扩展性提出了更高的要求,而对数据存储的其他方面却仍然希望能保持之前的水平。   而从目前实际的发展来...

    文章 中间件小哥 2016-04-08 1375浏览量

  • CSDN专访:大数据时代下的商业存储

    原文地址:http://www.csdn.net/article/2014-06-03/2820044-cloud-emc-hadoop 摘要:EMC公司作为全球信息存储及管理产品方面的领先公司,不久前,EMC宣布收购DSSD加强和巩固了其在行业内的领导地位,日前我们有幸采访到EMC中国的张安站...

    文章 anzhsoft 2014-07-05 1848浏览量

  • 数据湖架构,为什么需要“湖加速”?

    在开源大数据领域,存储/计算分离已经成为共识和标准做法,数据湖架构成为大数据平台的首要选择。基于这一范式,大数据架构师需要考虑三件事情: 第一,选择什么样的存储系统做数据湖(湖存储)? 第二,计算和存储分离后,出现了性能瓶颈,计算如何加速和优化(湖加速)? 第三,针对需要的计算场景,选择什么样的...

    文章 茶什i 2020-09-15 1210浏览量

  • mapreduce运行机制

     谈mapreduce运行机制,可以从很多不同的角度来描述,比如说从mapreduce运行流程来讲解,也可以从计算模型的逻辑流程来进行讲解,也许有些深入理解了mapreduce运行机制还会从更好的角度来描述,但是将mapreduce运行机制有些东西是避免不了的,就是一个个参入的实例对象,一个就是计...

    文章 ghost丶桃子 2016-05-19 1744浏览量

  • 数据湖架构,为什么需要“湖加速”?

    作者:郑锴,花名铁杰,阿里巴巴高级技术专家,Apache Hadoop PMC,Apache Kerby 创立者。深耕分布式系统开发和开源大数据多年,目前专注于在阿里云上提供更好用更有弹性的 Hadoop/Spark 大数据平台。 在开源大数据领域,存储/计算分离已经成为共识和标准做法,数据湖架...

    文章 阿里云E-MapReduce团队 2020-09-28 8874浏览量

  • 高可用的大数据计算平台如何持续发布和演进

    2016年11月18-20日SDCC 2016中国软件开发者大会,阿里巴巴大数据计算平台首席架构师林伟给我们带来了“高可用的大数据计算平台如何持续发布和演进”的演讲。本文主要谈及大数据系统如何做系统迭代,以及大规模系统因为其大规模没有可能搭建对等的测试环境,需要进行在线测试方面的内容,更有在线测试...

    文章 大数据史记 2016-12-29 4005浏览量

  • 女孩子学Linux之硬盘分区篇

    前言 本文在上篇《让女孩子更快学会Linux的方法与建议》基础上,笔者将着重为女孩子们介绍硬盘分区的知识,以及如何在Linux系统安装中如何进行手动分区(以虚拟机安装为例)。 Windows的硬盘分区 日常生活中,我们常常听到有C盘,D盘这样的说法。现在请打开你的Windows桌面上"计算机"或...

    文章 知与谁同 2017-05-02 1065浏览量

  • MapReduce原理与设计思想

    简单解释 MapReduce 算法 一个有趣的例子 你想数出一摞牌中有多少张黑桃。直观方式是一张一张检查并且数出有多少张是黑桃 MapReduce方法则是 给在座的所有玩家中分配这摞牌 让每个玩家数自己手中的牌有几张是黑桃然后把这个数目汇报给你 你把所有玩家告诉你的数字加起来...

    文章 wuyudong 2016-04-21 2865浏览量

  • 从数砖开源 Delta Lake 说起

    作者:郑锴,花名铁杰,阿里巴巴高级技术专家,Apache Hadoop PMC,Apache Kerby 创立者。深耕分布式系统开发和开源大数据多年,先后专注在安全,存储和计算领域。之前在 Intel,目前转战阿里云上,致力于提供更好用更有弹性的 Hadoop/Spark 大数据平台。 Spar...

    文章 开源大数据EMR 2019-04-25 8848浏览量

  • Discord 公司如何使用 Cassandra 存储上亿条线上数据

    Discord 是一款国外的类似 YY 的语音聊天软件。Discord 语音聊天软件及我们的 UGC 内容的增长速度比想象中要快得多。随着越来越多用户的加入,带来了更多聊天消息。2016 年 7 月,每天大约有 4 千万条消息;2016 年 12 月,每天超过亿条。当写这篇文章时(2017 年 1...

    文章 明惠 2019-05-07 3841浏览量

  • 含PPT下载 | 李飞飞:如何看待数据库的未来?

    本文内容根据演讲嘉宾视频以及PPT整理而成,文末有直播全程的 PDF 下载链接。 视频地址:https://developer.aliyun.com/live/2031 本次分享将主要围绕以下四个方面展开: 云原生分布式数据库系统的发展历程 数据库系统架构的对比及趋势 云数据库技术高速发展的现...

    文章 开发者社区 2020-02-25 7672浏览量

  • 从数砖开源 Delta Lake 说起

    作者:郑锴,花名铁杰,阿里巴巴高级技术专家,Apache Hadoop PMC,Apache Kerby 创立者。深耕分布式系统开发和开源大数据多年,先后专注在安全,存储和计算领域。之前在 Intel,目前转战阿里云上,致力于提供更好用更有弹性的 Hadoop/Spark 大数据平台。 Spark...

    文章 阿里云E-MapReduce团队 2019-04-25 5613浏览量

  • 分布式系统架构,回顾2020年常见面试知识点梳理(每次面试都会问到其中某一块知识点)

    分布式分为分布式缓存(Redis)、分布式锁(Redis 或 Zookeeper)、分布式服务(Dubbo 或 SpringCloud)、分布式服务协调(Zookeeper)、分布式消息队列(Kafka 、RabbitMq)、分布式 Session 、分布式事务、分布式搜索(Elasticsear...

    文章 程序员白楠楠 2020-12-30 145浏览量

  • 从需求出发来看关系模型与非关系模型--时代的变革1

    上次我们谈到,因为互联网应用的实际需求与传统数据库之间出现了不匹配的情况。   于是,破坏与重构就成为了新时代的主音。   对互联网应用而言,最急需的需求,就是处理大量用户输入的海量数据,进行一些逻辑处理后再将结果返回给用户。因此,对于在线数据处理来说,可水平扩展的容量指标,可无限增长的写入tps...

    文章 中间件小哥 2016-04-08 1064浏览量

  • 数据中心日均 CPU 利用率 45% 的运行之道--阿里巴巴规模化混部技术演进

    今天给大家带来关于混部技术的分享,将从以下四方面阐述,重点在前面两个章节: 第一,阿里巴巴混部探索简介,混部技术在业界还尚属于较少研究的领域,该技术只有在资源及成本的体量达到一定规模时,才会显现出其可观的技术红利,我会介绍下阿里巴巴关于混部技术的探索历程; 第二,混部方案及架构,本次分享将更侧重于...

    文章 技术小能手 2018-10-11 4301浏览量

  • Spark初窥

    标签(空格分隔): Spark [toc] intro dataset和operation Spark对数据集合的基本抽象叫做Dataset。Dataset可以从文件直接创建,也可以从其他dataset经过transform变换而来。具体变换操作比如: textFile.map(line =&g...

    文章 尊渊 2019-02-18 1152浏览量

  • 标准流程描述语言 WDL 阿里云最佳实践

    我们为什么需要标准的工作流描述语言 在构造生物信息工作流时,如果不使用标准工作流描述语言,我们一般是使用脚本语言来构造: 直接采用shell、R、Python 等编写脚本,封装基因计算软件的命令行 多个脚本组成一个工作流 执行时输入参数执行命令行 这种方式构造的工作流,在使用过程中可能面临下...

    文章 松凌 2019-08-30 3897浏览量

  • K8s 1.14 发布了,Release Note 该怎么读?

    本文由张磊、心贵、临石、徙远、衷源、浔鸣等同学联合撰写。 Kubernetes 1.14.0 Release 已经于 3 月 25 日正式发布。相信你也已经注意到,相比于1.13 和 1.12 版本,这次发布包含的重要变非常多,其对应的 Release Note 的篇幅长度也创下了“新高”。 面对...

    文章 s潘潘 2019-03-29 825浏览量

1 2 >

云产品推荐

上海奇点人才服务相关的云产品 小程序定制 上海微企信息技术相关的云产品 国内短信套餐包 ECS云服务器安全配置相关的云产品 开发者问答 阿里云建站 自然场景识别相关的云产品 万网 小程序开发制作 视频内容分析 视频集锦 代理记账服务 阿里云AIoT