• 关于

    分布式存储工作原理

    的搜索结果
  • 开发者看这里|OceanBaseDev Meetup#1 上海站「深入分布式数据库」

    近几年,越来越多的传统企业面临互联网化,IOT、区块链、AI、5G 等技术也在高速发展,任何一个技术的推广到成熟都会带来数据量的指数级增长,都会对存储带来巨大的冲击。相信随着这些技术的突破,未来越来越多的核心场景会走向分布式的领域。国内很多团队也在进行分布式数据库的探索与实践。 INCLUSION...

    文章 荔子liqi 2020-09-14 188浏览量

  • 阿里云存储团队招聘贴(技术岗位)【2020.07.28更新】

    简历投递邮箱:liemiko.lifang@alibaba-inc.com 一、Java技术专家(北京/杭州) 工作内容: 负责阿里云线上块存储系统功能研发,包括设计、开发、测试和发布; 负责阿里云线上块存储系统的维护; 负责阿里云线上块存储架构重构和演进。 职位要求 4年以上Java项目...

    文章 成全2020 2020-07-28 1352浏览量

  • Hadoop高级培训课程大纲-开发者版

    一、课程概述 本次培训课程主要面向大数据系统管理人员和开发设计人员,基于开源社区大数据应用最活跃的Hadoop和HBase技术框架,围绕分布式文件存储(HDFS)、分布式并行计算(Map/Recue)和非关系型数据库(NoSql)三个大数据核心应用展开,旨在帮助培训对象建立起完整的大数据理论基础框...

    文章 胖子哥 2016-04-19 1693浏览量

  • 阿里云爆款特惠专场,精选爆款产品低至0.95折!

    爆款ECS云服务器8.1元/月起,云数据库低至1.5折,限时抢购!

    广告

  • 【Offer 5000-基础产品事业部2-B】- 招聘职位详情

    部门介绍 阿里云智能基础产品事业部负责基础产品如弹性计算、存储、网络、安全、容器、中间件等产品设计、产品研发和产品业务。 团队介绍:阿里云混合云团队责基础产品中的混合云存储产品,致力于研发混合云存储,分布式软件定义存储,灾备以及数据管理产品,依托遍布全球的阿里云基础设施,构筑安全,可靠,高效的混合...

    文章 琛琛轴子 2020-06-18 1364浏览量

  • 西安社区 | Apache RocketMQ开发者沙龙

    活动流程: 嘉宾介绍: 演讲主题:《New Features in Apache RocketMQ》 厉启鹏 Apache RocketMQ中国社区发起人 厉启鹏 Apache RocketMQ中国社区发起人,Linux OpenMessaging Advisory Board...

    文章 周梦康 2019-10-18 1092浏览量

  • FastDFS分布式存储实战

    《FastDFS分布式存储实战》 一、技术选型二、FastDFS相关组件及原理 FastDFS介绍 FastDFS架构 FastDFS工作流程 上传 同步机制 下载 文件合并原理三、实验环境说明四、FastDFS部署 初始化系统 安装libfastcommon和fastdfs storage se...

    文章 技术小牛人 2017-11-12 864浏览量

  • 如何搞定技术面试?阿里大牛为你选了8本必备好书

    点击图片或戳我查看详情和投简历 当工作、生活的节奏越来越快,阅读充电似乎也成为了一件奢侈的事。为此,我们特地找来多位技术大牛为你精挑细选荐好书,相信有助你面试成功,获得心仪岗位。 面试攻略:掌握软件开发的“道”,让你在面试的时候,能够回答:“方案为什么要这么做?” UNIX编程艺术 推荐人:李运华...

    文章 KB小秘书 2019-07-26 2196浏览量

  • Java面试通关要点汇总集

    基础篇 基本功 面向对象的特征 final, finally, finalize 的区别 int 和 Integer 有什么区别 重载和重写的区别 抽象类和接口有什么区别 说说反射的用途及实现 说说自定义注解的场景及实现 HTTP 请求的 GET 与 POST 方式的区别 session 与 co...

    文章 java隋七哥 2018-07-27 1217浏览量

  • Hadoop高级培训课程大纲-管理员版

    一、课程概述 本次培训课程主要面向大数据系统管理人员和开发设计人员,基于开源社区大数据应用最活跃的Hadoop和HBase技术框架。围绕分布式文件存储(HDFS)、分布式并行计算(Map/Recue)和非关系型数据库(NoSql)三个大数据核心应用展开,旨在帮助培训对象建立起完整的大数据理论基础框...

    文章 胖子哥 2016-04-19 1587浏览量

  • 【转】分布式协调服务ZooKeeper工作原理

    申明:本文转自分布式协调服务ZooKeeper工作原理,来自yogoup公众号。解决了我关于zookeeper这个系统的认识,zookeeper主要解决分布式系统的一致性问题,实际应用场景包括:统一命名服务、分布式配置管理、集群管理、分布式锁、分布式队列等。在微服务架构中,也可以使用zookeep...

    文章 杜琪 2016-06-07 2699浏览量

  • 分布式网络文件系统--MooseFS

     一.介绍 1.简介   MooseFS是一个具备冗余容错功能的分布式网络文件系统,它将数据分别存放在多个物理服务器或单独磁盘或分区上,确保一份数据有多个备份副本。对于访问的客户端或者用户来说,整个分布式网络文件系统集群看起来就像一个资源一样。从其对文件操作的情况看,MooseFS就相当于一个类...

    文章 yaohong 2017-11-21 1330浏览量

  • 2.0 解析系列 | OceanBase负载均衡的魅力

    引言随着互联网业务的普及,海量数据的存储和访问成了应用架构设计常见的问题。业务高峰期,应用几百万几千万的请求落在数据库上时,数据库如何保持稳定和扩展性?通过数据拆分,加上负载均衡设计是首选方法。本文总结了关系数据库在负载均衡方面的架构经验,进而介绍OceanBase分布式数据库的负载均衡的独特魅力...

    文章 mq4096 2018-10-23 2813浏览量

  • 云存储的技术原理

    一、概念云存储(Cloud storage)是一种网络在线存储的模式,即把数据存放在通常由第三方托管的多台虚拟服务器,而非专属的服务器上。托管(hosting)公司营运大型的数据中心,需要数据存储托管的人,则透过向其购买或租赁存储空间的方式,来满足数据存储的需求。数据中心营运商根据客户的需求,在后...

    文章 vanessazhang 2019-09-26 1497浏览量

  • 分布式锁在存储系统中的技术实践

    1 背景 针对共享资源的互斥访问历来是很多业务系统需要解决的问题。在分布式系统中,通常会采用分布式锁这一通用型解决方案。本文将就分布式锁的实现原理、技术选型以及阿里云存储的具体实践进行论述。 图1 锁 2 从单机锁到分布式锁 在单机环境中,当共享资源自身无法提供互斥能力的时候,为了防止多线程/多...

    文章 阿里巴巴存储技术 2020-09-01 597浏览量

  • 数据库相关岗位面试准备建议

    标签 PostgreSQL , 数据库 , 面试准备 背景 本文同时适合用人方、闯关应聘方。 注意通过面试问题,发掘小伙伴的极限。找准小伙伴层级定位。 类目 至少应该包含如下,每一项应该包含范围,考察目的,评判标准,不同等级的差异化,对应的深度、广度。 外围能力考察 操作系统 比如 为...

    文章 德哥 2018-10-05 2140浏览量

  • 【Offer 5000-数据库产品事业部-B】- 招聘职位详情

    岗位1:云数据库(PolarDB)内核开发专家-北京/杭州 Base地点:北京岗位描述:数据库OLTP产品事业部承载着阿里巴巴及阿里云的所有事务型数据库产品,包括 MySQL RDS,及新一代OLTP数据库POLARDB等。我们在数据库存储引擎、分析引擎、新硬件运用和智能数据库方向处于业界领先位置...

    文章 琛琛轴子 2020-06-17 890浏览量

  • MinIO 分布式集群搭建

    MinIO 分布式集群搭建 分布式 Minio 可以让你将多块硬盘(甚至在不同的机器上)组成一个对象存储服务。由于硬盘分布在不同的节点上,分布式 Minio 避免了单点故障。 Minio 分布式模式可以搭建一个高可用的对象存储服务,你可以使用这些存储设备,而不用考虑其真实物理位置。 (1)数据保护...

    文章 耳东@Erdong 2019-11-10 2581浏览量

  • 还不懂HDFS的工作原理?快来扫扫盲

    Hadoop分布式文件系统(HDFS)是一种被设计成适合运行在通用硬件上的分布式文件系统。HDFS是一个高度容错性的系统,适合部署在廉价的 机器上。它能提供高吞吐量的数据访问,非常适合大规模数据集上的应用。要理解HDFS的内部工作原理,首先要理解什么是分布式文件系统。 1、分布式文件系统 多台计...

    文章 知与谁同 2017-08-01 761浏览量

  • ​我们的系统需要什么样的分布式锁?

    一 从单机锁到分布式锁 在单机环境中,当共享资源自身无法提供互斥能力的时候,为了防止多线程/多进程对共享资源的同时读写访问造成的数据破坏,就需要一个第三方提供的互斥的能力,这里往往是内核或者提供互斥能力的类库,如下图所示,进程首先从内核/类库获取一把互斥锁,拿到锁的进程就可以排他性的访问共享资源...

    文章 茶什i 2020-07-06 833浏览量

  • 总监课第三期|深入解析数据存储技术原理及发展演进

    从传统存储到云存储的转变,其中经历了哪些设计思考与系统架构演变?涵盖硬件与软件的存储系统科学,其中蕴含了哪些精妙的技术设计理念?从磁盘存储到闪存存储的发展,其中进行了哪些翻天覆地的技术革新?对于无价的数据资产,其中蕴含了哪些智慧的数据保护思想? 针对数据存储技术的原理与演进发展,阿里云存储资深专家...

    文章 云攻略小攻 2018-10-17 1529浏览量

  • 一致性哈希算法应用与分析

      一致性哈希算法主要使用在分布式数据存储系统中,按照一定的策略将数据尽可能均匀分布到所有的存储节点上去,使得系统具有良好的负载均衡性能和扩展性。感觉一致性哈希与数据结构中的“循环队列”还是有一点联系的。 1.简单哈希算法   哈希(hash)计箅是常见的数据分布技术,其通过求模运算来计算哈希值,...

    文章 旭东的博客 2013-09-02 659浏览量

  • Ceph分布式存储实战导读

    前言 随着信息化浪潮的到来,全球各行各业逐步借助信息技术深入发展。据悉,企业及互联网数据以每年50%的速率在增长。据权威调查机构Gartner预测,到2020年,全球数据量将达到35ZB,相当于80亿块4TB硬盘,数据结构的变化给存储系统带来了全新的挑战。那么有什么方法能够存储这些数据呢?我认为...

    文章 华章计算机 2017-05-02 3323浏览量

  • 专家汇 | 深入解析数据存储技术原理及发展演进

    1从传统存储到云存储的转变,其中经历了哪些设计思考与系统架构演变? 涵盖硬件与软件的存储系统科学,其中蕴含了哪些精妙的技术设计理念? 本期/专家汇/ 我们来聊聊关于数据存储技术的那些事儿 专注存储技术研发十多年,历经中科院计算所存储研究中心、EMC、Memblaze著名存储研发机构,从传统存...

    文章 阿里云头条 2018-10-22 1158浏览量

  • 《Hadoop实战第2版》——1.4节Hadoop与分布式开发

    1.4 Hadoop与分布式开发我们通常所说的分布式系统其实是分布式软件系统,即支持分布式处理的软件系统。它是在通信网络互联的多处理机体系结构上执行任务的系统,包括分布式操作系统、分布式程序设计语言及其编译(解释)系统、分布式文件系统和分布式数据库系统等。Hadoop是分布式软件系统中文件系统层的...

    文章 华章计算机 2017-08-01 983浏览量

  • 数据库必知词汇:HBase

    HBase是一个分布式的、面向列的开源数据库,也是高可靠性、高性能、面向列、可伸缩的分布式存储系统,该技术来源于 Fay Chang 所撰写的Google论文“Bigtable:一个结构化数据的分布式存储系统”,是谷歌BigTable的开源实现,主要用来存储非结构化和半结构化的松散数据。。HBas...

    文章 萌萌怪兽 2020-02-23 199浏览量

  • 分布式大数据系统巧实现,全局数据调度管理不再难

    背景 看到这个题目,我们会有很多疑问:什么是分布式大数据系统中的全局数据管理?为什么要从全局对数据进行管理?这种对数据从全局进行分布和调度的策略是在什么样的背景下产生的?如果我们不解决全局数据管理的问题,分布式大数据系统中将会面临一些什么样的风险? 总的来说:基于大数据,云计算的需求,加快了分布式...

    文章 大数据史记 2017-05-18 4280浏览量

  • 我们究竟什么时候可以使用Ehcache缓存(转)

    一、Ehcache是什么 EhCache是Hibernate的二级缓存技术之一,可以把查询出来的数据存储在内存或者磁盘,节省下次同样查询语句再次查询数据库,大幅减轻数据库压力。 二、Ehcache的使用场景是什么 1、首先最主要就是页面缓存。 网站页面的数据来源非常广泛的,大多数来自不同的对...

    文章 developerguy 2016-06-01 955浏览量

  • 学术界关于HBase在物联网/车联网/互联网/金融/高能物理等八大场景的理论研究

    引言 文末有交流群可以添加交流 **HBase在互联网领域有广泛的应用,比如:互联网的消息系统的存储、订单的存储、搜索原材料的存储、用户画像数据的存储等,除此之外,在其它领域也有非常多的应用。这得益于HBase海量的存储量及超高并发写入读取量。HBase在09年就开始在工业界大范围使用,在学术界,...

    文章 hbase小能手 2018-11-05 1214浏览量

  • 学术界关于HBase在物联网/车联网/互联网/金融/高能物理等八大场景的理论研究

    引言 文末有交流群可以添加交流 **HBase在互联网领域有广泛的应用,比如:互联网的消息系统的存储、订单的存储、搜索原材料的存储、用户画像数据的存储等,除此之外,在其它领域也有非常多的应用。这得益于HBase海量的存储量及超高并发写入读取量。HBase在09年就开始在工业界大范围使用,在学术界,...

    文章 封神 2017-09-22 8015浏览量

  • 分布式系统--Lease机制

    分布式系统的设计中会涉及到许多的协议、机制用来解决可靠性问题、数据一致性问题等,Quorum 机制就是其中的一种。我们通过分布式系统中的读写模型来简单介绍它。 分布式系统中的读写模型   分布式系统是由多个节点(指代一台服务器、存储设备等)构成,由于网络异常、宕机等节点并不能保证正常工作,特别是在...

    文章 技术小甜 2017-11-16 1035浏览量

1 2 3 4 ... 52 >

云产品推荐

上海奇点人才服务相关的云产品 小程序定制 上海微企信息技术相关的云产品 国内短信套餐包 ECS云服务器安全配置相关的云产品 开发者问答 阿里云建站 自然场景识别相关的云产品 万网 小程序开发制作 视频内容分析 视频集锦 代理记账服务 阿里云AIoT