• 关于

    容错分布系统有什么用

    的搜索结果
  • ElasticDL:蚂蚁金服开源基于TensorFlow的弹性分布式深度学习系统

    9 月 11 日,蚂蚁金服在2019谷歌开发者大会上海站上开源了 ElasticDL 项目,这是业界首个基于 TensorFlow 实现弹性深度学习的开源系统。 开源地址为:elasticdl.org 开源中国采访了ElasticDL项目负责人王益,对该深度学习系统的技术细节进行了全面介绍。 ...

    文章 缪克卢汉 2019-09-11 854浏览量

  • 通过Mesos、Docker和Go,使用300行代码创建一个分布式系统

    【摘要】虽然 Docker 和 Mesos 已成为不折不扣的 Buzzwords ,但是对于大部分人来说它们仍然是陌生的,下面我们就一起领略 Mesos 、Docker 和 Go 配合带来的强大破坏力,如何通过 300 行代码打造一个比特币开采系统。 时下,对于大部分 IT 玩家来说, Docke...

    文章 桃子红了呐 2017-11-08 911浏览量

  • ElasticDL: Kubernetes-native 弹性分布式深度学习系统

    9月11日,蚂蚁金服在 Google Developer Day Shanghai 2019 上宣布开源了基于 TensorFlow 2.0 eager execution 的分布式深度学习系统 ElasticDL。基于 TensorFlow 的支持弹性调度的深度学习系统,据我们所知,Elasti...

    文章 缪克卢汉 2019-09-12 6162浏览量

  • 阿里云试用中心,为您提供0门槛上云实践机会!

    100+款试用云产品,最长免费试用12个月!拨打95187-1,咨询专业上云建议!

    广告

  • 互联网 Java 工程师进阶知识完全扫盲

    高并发架构 消息队列 为什么使用消息队列?消息队列有什么优点和缺点?Kafka、ActiveMQ、RabbitMQ、RocketMQ 都有什么优点和缺点? 如何保证消息队列的高可用? 如何保证消息不被重复消费?(如何保证消息消费时的幂等性) 如何保证消息的可靠性传输?(如何处理消息丢失的问题) 如...

    文章 java隋七哥 2018-12-07 2084浏览量

  • HBase的引出

    行式存储和列式存储 如上图,第一个行式存储是以行为单位存储数据,三个颜色的代表三个不同行数据,而下面的是列式存储,以列为单位存储数据,四个颜色代表四个不同的列,箭头也是用来表示数据是如何存储的 在传统的RDBMS(关系型数据库)中,保存着一条完整的数据,如果查询数据的某列,需要将这行数据查询出...

    文章 期待l 2018-11-30 1223浏览量

  • 《Hadoop实战第2版》——1.1节什么是Hadoop

    1.1 什么是Hadoop 1.1.1 Hadoop概述Hadoop是Apache软件基金会旗下的一个开源分布式计算平台。以Hadoop分布式文件系统(Hadoop Distributed File System,HDFS)和MapReduce(Google MapReduce的开源实现)为核心的...

    文章 华章计算机 2017-08-01 1592浏览量

  • 大数据Hadoop入门需要填的坑

    1、Hadoop生态概况 Hadoop是一个由Apache基金会所开发的分布式系统集成架构,用户可以在不了解分布式底层细节情况下,开发分布式程序,充分利用集群的威力来进行高速运算与存储,具有可靠、高效、可伸缩的特点: 高可靠性:提供按位处理的存储和计算能力值得用户信赖。 高扩展性:可以轻松地从小量...

    文章 首席提问官 2018-09-04 1023浏览量

  • 表格存储如何实现高可靠和高可用

    系列文章 表格存储如何实现高可靠和高可用表格存储如何实现跨区域的容灾 前言 本文会介绍一款分布式NoSQL如何实现数据高可靠和服务高可用,这是一款云上的NoSQL服务,叫做表格存储。对于分布式NoSQL,大家可能会想到很多名字,比如HBase、Cassandra,AWS的DynamoDB等,这类N...

    文章 亦征 2017-11-08 7318浏览量

  • 为什么选择Cassandra

    cassandra概况 为什么选择Cassandra?cassandra到底有那些令人印象深刻的特点呢?不防我们先来看下cassandra目前的大体概况。 理论扎实,师出名门 cassandra不仅吸收了dynamo论文中的如何做分布式,如何做副本复制,故障容错等方面成功的经验,又吸取了googl...

    文章 陈江@阿里 2019-08-13 3225浏览量

  • 【ATF】钱正平:大规模实时计算及其在阿里的应用与创新

    2016 ATF阿里技术论坛于4月15日在清华大学举办,主旨是阐述阿里对世界创新做出的贡献。阿里巴巴集团技术委员会主席王坚,阿里巴巴集团首席技术官(CTO)张建锋(花名:行癫),阿里巴巴集团首席风险官(CRO)刘振飞(花名:振飞),蚂蚁金服首席技术官(CTO)程立(花名:鲁肃)以及来自阿里巴巴集团...

    文章 云篆 2016-04-16 6040浏览量

  • 构建springmvc+dubbo分布式平台-dubbo简介

    1. Dubbo是什么? Dubbo是一个分布式服务框架,致力于提供高性能和透明化的RPC远程服务调用方案,以及SOA服务治理方案。简单的说,dubbo就是个服务框架,如果没有分布式的需求,其实是不需要用的,只有在分布式的时候,才有dubbo这样的分布式服务框架的需求,并且本质上是个服务调用,说白...

    文章 it菲菲 2018-10-30 855浏览量

  • 构建springmvc+dubbo分布式平台-dubbo简介

    1. Dubbo是什么? Dubbo是一个分布式服务框架,致力于提供高性能和透明化的RPC远程服务调用方案,以及SOA服务治理方案。简单的说,dubbo就是个服务框架,如果没有分布式的需求,其实是不需要用的,只有在分布式的时候,才有dubbo这样的分布式服务框架的需求,并且本质上是个服务调用,说白...

    文章 壹玖 2018-10-30 888浏览量

  • HADOOP生态圈知识概述

    一. hadoop 生态概况 Hadoop是一个由Apache基金会所开发的分布式系统基础架构。用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分利用集群的威力进行高速运算和存储。具有可靠、高效、可伸缩的特点。 Hadoop的核心是YARN,HDFS和Mapreduce 下图是hado...

    文章 技术小甜 2017-11-15 1302浏览量

  • 到底什么是集群&分布式

    版权声明:本文为博主原创文章,转载注明出处http://blog.csdn.net/u013142781 对于楼主这样工作一年的菜鸟,偶尔会看到一些文章标题带有“分布式”“集群”关键字,然后就懵逼了。最近对这些概念进行了一定的了解,整理了一下思路,在这里分享给各位猿友。不足之处还望纠正,感谢...

    文章 ghost丶桃子 2016-05-26 2338浏览量

  • hadoop介绍

    以下内容是我的学习笔记,网络课程的笔记。出处 Hadoop实现了一个分布式文件系统(Hadoop Distributed File System),简称HDFS。 HDFS有高容错性的特点,并且设计用来部署在低廉的(low-cost)硬件上;而且它提供高吞吐量(high throu...

    文章 友弟 2018-08-30 2329浏览量

  • 《七周七并发模型》第一章概述

    并发编程虽不是新的概念,最近却逐渐热门起来。一些编程语言,如Erlang、Haskell、Go、Scala、Clojure,也因对并发编程提供了良好的支持,而受到广泛关注。 并发编程复兴的主要驱动力来自于所谓的“多核危机”。正如摩尔定律①所预言的那样,芯片性能仍在不断提高,但相比加快CPU的速度,...

    文章 青衫无名 2017-05-23 1248浏览量

  • 数据库必知词汇:高可用性(HA)

    高可用性(High Availability, HA)指的是通过尽量缩短因日常维护操作(计划)和突发的系统崩溃(非计划)所导致的停机时间,以提高系统和应用的可用性。它与被认为是不间断操作的容错技术有所不同。HA系统是企业防止核心计算机系统因故障停机的最有效手段。高可用性通常来描述一个系统经过专门的...

    文章 萌萌怪兽 2020-02-23 280浏览量

  • 分布式大数据系统巧实现,全局数据调度管理不再难

    背景 看到这个题目,我们会有很多疑问:什么是分布式大数据系统中的全局数据管理?为什么要从全局对数据进行管理?这种对数据从全局进行分布和调度的策略是在什么样的背景下产生的?如果我们不解决全局数据管理的问题,分布式大数据系统中将会面临一些什么样的风险? 总的来说:基于大数据,云计算的需求,加快了分布式...

    文章 大数据史记 2017-05-18 4290浏览量

  • 架构设计基础:单服务.集群.分布式,基本区别和联系

    一、分布式简介 1、架构简介 现在的互联网,几乎常见的复杂系统都会使用分布式架构,如果在不清楚概念之前,刚接触分布式架构这个名词会感觉十分的高大上,其实在对比单服务,集群服务之后,你就会发现本质上都是一样的。 絮叨一句:所谓Java架构师,基本就是看被单服务,集群,分布式不断暴打的频率,架构师因为...

    文章 知了一笑 2020-04-17 687浏览量

  • 盘古:阿里云飞天分布式存储系统设计深度解析

    在10月19日的云栖社区在线培训上,来自盘古团队的吴洋分享了《盘古:飞天分布式存储系统实践》。他主要从以下三个方面进行了分享:盘古是什么?盘古是用来解决什么问题的?盘古是怎么解决问题的?他主要介绍了盘古的分布式系统架构和设计理念。 回顾视频:https://yq.aliyun.com/edu/l...

    文章 场景研读 2016-11-17 36641浏览量

  • 分布式系统的理解

    1. 如何理解“分布式”?      经常听到”分布式系统“,”分布式计算“,”分布式算法“。分布式的具体含义是什么?狭义的分布是指,指多台PC在地理位置上分布在不同的地方。 2. 分布式系统     分布式系统:多个能独立运行的计算机(称为结点)组成。各个结点利用计算机网络进行信息传...

    文章 qq1413139134 2016-01-04 2923浏览量

  • 分布式系统的理解

    1. 如何理解“分布式”?      经常听到”分布式系统“,”分布式计算“,”分布式算法“。分布式的具体含义是什么?狭义的分布是指,指多台PC在地理位置上分布在不同的地方。 2. 分布式系统     分布式系统:多个能独立运行的计算机(称为结点)组成。各个结点利用计算机网络进行信息传...

    文章 李大嘴吧 2016-01-04 1469浏览量

  • 【转载】分布式系统的理解

    1. 如何理解“分布式”?      经常听到”分布式系统“,”分布式计算“,”分布式算法“。分布式的具体含义是什么?狭义的分布是指,指多台PC在地理位置上分布在不同的地方。 2. 分布式系统     分布式系统:多个能独立运行的计算机(称为结点)组成。各个结点利用计算机网络进行信息传递,从而实现...

    文章 摩云飞 2016-05-11 1373浏览量

  • 几个典型场景的系统设计解决方案

    一、分布式系统的GFS、MapReduce和Bigtable (1)GFS一致性模型 GFS一致性模型是一个可扩展的分布式文件系统,用于大型的、分布式的、对大量数据进行访问的应用。 它运行于廉价的普通硬件上,提供容错功能。现在开源界有HDFS(Hadoop Distributed File Sys...

    文章 邴越 2016-05-05 3658浏览量

  • Facebook的实时流处理技术——Scuba是Facebook的一个非常快速、分布式的内存数据库,用于实时分析和查询

    Scuba,Facebook的一个非常快速、分布式的内存数据库,用于实时分析和查询。是Facebook的回归分析代码、错误报告监控、广告收入监控和性能调试的背后主力。 Facebook的实时流处理技术 随着云计算大数据的发展,有越来越多的场景需要借助于实时数据处理技术,为此有很多公司开发了自己...

    文章 桃子红了呐 2017-11-15 1404浏览量

  • 高并发架构系列:分布式锁的由来、特点及Redis分布式锁的实现详解

    在很多场景中,我们为了保证数据的最终一致性,需要很多的技术方案来支持,比如分布式事务、分布式锁等。那具体什么是分布式锁,分布式锁应用在哪些业务场景、如何来实现分布式锁呢?今天来探讨分布式锁这个话题。 什么是分布式锁 要介绍分布式锁,首先要提到与分布式锁相对应的是线程锁、进程锁。 1.线程锁 主要用...

    文章 mikechen优知 2018-12-20 1488浏览量

  • 「镁客·请讲」鹏云网络陈靓:做完全自主可控的分布式存储,等待私有云存储市场爆发

    “开源的不代表自主可控。”当其他初创公司借助开源版本打开市场的时候,拥有自主核心技术的才能笑到最后。 云服务是什么?它又包括什么? 这个问题的答案写出来显得拗口又难以具象化。在知乎上,有人用烧烤举了个例子: 去店里吃烧烤就是向云服务厂商购买云服务,将烧烤摊换成计算资源以及提供的服务...

    文章 头条资讯 2018-12-17 238浏览量

  • Java B2B2C多用户商城 springcloud架构(一)

    首先讲一下我为什么要写这一系列的文章,现在网上大量的springcloud相关的文章,使用的springboot和springcloud的版本都相对比较老,很多还是在使用springboot1.x的版本,如果尝鲜想使用springboot2.x的版本,很多配置都和之前的不一样,有了大量的修改,很多...

    文章 游客wsej5q7ix6c6s 2019-09-06 1562浏览量

  • 《分布式系统:概念与设计》一第2节 练习

    练习 2.1 提供三个具体的、不同的例子,说明在2.2节定义的当代分布式系统中异构性的增加。2.2 在通信实体之间的直接耦合,你能预见到什么问题?这些问题在远程调用方案中是隐含的。你期望时空分离所提供的解耦合具有什么优势?注意,你可能需要在阅读第5章和第6章后再来寻求答案。2.3 描述一个或多个主...

    文章 华章计算机 2017-08-01 1221浏览量

  • 存储--盘古,阿里云飞天分布式存储系统设计深度解析

    本文依据盘古团队的吴洋分享了《盘古:飞天分布式存储系统实践》视频整理而成。 他主要从以下三个方面进行了分享:盘古是什么?盘古是用来解决什么问题的?盘古是怎么解决问题的?他主要介绍了盘古的分布式系统架构和设计理念。 上图列举了目前主流的云计算厂商,我们发现一个很有趣的事情:所有云计算厂商都是“...

    文章 山虫 2017-07-19 5748浏览量

1 2 3 4 ... 23 >

云产品推荐

上海奇点人才服务相关的云产品 小程序定制 上海微企信息技术相关的云产品 国内短信套餐包 ECS云服务器安全配置相关的云产品 开发者问答 阿里云建站 自然场景识别相关的云产品 万网 小程序开发制作 视频内容分析 视频集锦 代理记账服务 阿里云AIoT