• 关于

    容错处理

    的搜索结果
  • 什么是容错技术?容错技术是什么

    本文讲的是什么是容错技术?容错技术是什么,【IT168 资讯】简单地说,容错就是当由于种种原因在系统中出现了数据、文件损坏或丢失时,系统能够自动将这些损坏或丢失的文件和数据恢复到发生事故以前的状态,使系统能够连续正常运行的一种技术。  容错FT(Fault Tolerant)技术一般利用冗余硬件交...

    文章 轩墨 2017-09-08 1429浏览量

  • 第七章 vShpere新功能之容错(FT)的实现

    节选自策划:《虚拟化动手实验室》第3期手把手实现高可用           在VMware vSphere可用性解决方案中,相比着之前的VI3,在可用性解决方案上多了新的功能FT,也就是所谓的容错。接下来就介绍下容错的技术及如何实现(理论部分参考自官方文档)。 一、vSphere可用性的新功能 ...

    文章 技术小胖子 2017-11-14 972浏览量

  • java-框架-AKKA

    可扩展的实时事务处理 我们相信编写出正确的具有容错性和可扩展性的并发程序太困难了。这多数是因为我们使用了错误的工具和错误的抽象级别。Akka就是为了改变这种状况而生的。通过使用Actor模型我们提升了抽象级别,为构建正确的可扩展并发应用提供了一个更好的平台。在容错性方面我们采取了“let it ...

    文章 小金子 2016-07-23 1033浏览量

  • Spark通识

    在说Spark之前,笔者在这里向对Spark感兴趣的小伙伴们建议,想要了解、学习、使用好Spark,Spark的官网是一个很好的工具,几乎能满足你大部分需求。 同时,建议学习一下scala语言,主要基于两点:1.Spark是scala语言编写的,要想学好Spark必须研读分析它的源码,当然其他技术...

    文章 bigdatalearnshare 2020-06-26 237浏览量

  • Apache Spark 系列技术直播 - 从 Spark Streaming 到 Structured Streaming

    从 Spark Streaming 到 Structured Streaming Spark Streaming 介绍 数据模型 容错处理 扩展性、吞吐量分析 Google Dataflow 介绍 Dataflow 设计思想介绍 Structured Streaming 介绍 设计思想 编程...

    文章 开源大数据EMR 2018-12-05 1596浏览量

  • 阿里云Kubernetes SpringCloud 实践进行时(5): 弹性服务与容错处理

    简介 为了更好地支撑日益增长的庞大业务量,我们常常需要把服务进行整合、拆分,使我们的服务不仅能通过集群部署抵挡流量的冲击,又能根据业务在其上进行灵活的扩展。随着分布式的普及、服务的快速增长与云计算技术的进步,微服务架构也因其特有的优势而备受关注。微服务架构的本质,是把整体的业务拆分成很多有特定明确...

    文章 osswangxining 2018-05-25 4157浏览量

  • Spark Streaming

    1. Spark Streaming介绍 Spark Streaming 是Spark核心API的一个扩展,可以实现高吞吐量的、具备容错机制的实时流数据的处理。支持从多种数据源获取数据,包括Kafk、Flume、Twitter、ZeroMQ、Kinesis 以及TCP sockets,从数...

    文章 wsc449 2018-01-17 1215浏览量

  • Apache Flink 漫谈系列(02) - 概述

    Apache Flink 的命脉 "命脉" 即生命与血脉,常喻极为重要的事物。系列的首篇,首篇的首段不聊Apache Flink的历史,不聊Apache Flink的架构,不聊Apache Flink的功能特性,我们用一句话聊聊什么是 Apache Flink 的命脉?我的答案是:Apache F...

    文章 金竹 2018-11-08 9283浏览量

  • Apache Spark Streaming的优点

    Apache Spark Streaming的优点:  (1)优势及特点 1)多范式数据分析管道:能和 Spark 生态系统其他组件融合,实现交互查询和机器学习等多范式组合处理。 2)扩展性:可以运行在 100 个节点以上的集群,延迟可以控制在秒级。 3)容错性:使用 Spark 的 Lineag...

    文章 技术小哥哥 2017-11-03 1356浏览量

  • 开始写博客啦啦

    mapreduce1.0架构原理: jobtraker 单点故障只支持mapreducejobtraker性能瓶颈资源利用率不高 2.yarn产生的背景降低运维成本统一资源管理,数据共享 两级调度,resourceManager 做资源统一管理处理客户端请求监控applicationmaster ...

    文章 不信学不会 2018-01-09 959浏览量

  • 什么是高可用性(HA)?HA是什么

    本文讲的是什么是高可用性(HA)?HA是什么,【IT168 资讯】高可用性HA(High Availability)指的是通过尽量缩短因日常维护操作(计划)和突发的系统崩溃(非计划)所导致的停机时间,以提高系统和应用的可用性。它与被认为是不间断操作的容错技术有所不同。HA系统是目前企业防止核心计算...

    文章 轩墨 2017-09-21 1613浏览量

  • CAP定理

    CAP定理告诉我们:一个分布式系统不可能同时满足一致性(C:Consistency),可用性(A:Availability)和分区容错性(P:Partition tolerance)这三个基本要求,最多只能同时满足其中的两项。 一致性 在分布式的环境中,一致性是指数据在多个副本之间是否能...

    文章 soledad_lhc 2017-07-23 1120浏览量

  • Druid:一个用于大数据实时处理的开源分布式系统——大数据实时查询和分析的高容错、高性能开源分布式系统

    转自:http://www.36dsj.com/archives/28590 Druid 是一个用于大数据实时查询和分析的高容错、高性能开源分布式系统,旨在快速处理大规模的数据,并能够实现快速查询和分析。尤其是当发生代码部署、机器故障以及其他产品系统遇到宕机等情况时,Druid仍能够保持100%正...

    文章 桃子红了呐 2017-11-15 1581浏览量

  • 《七周七并发模型》第一章概述

    并发编程虽不是新的概念,最近却逐渐热门起来。一些编程语言,如Erlang、Haskell、Go、Scala、Clojure,也因对并发编程提供了良好的支持,而受到广泛关注。 并发编程复兴的主要驱动力来自于所谓的“多核危机”。正如摩尔定律①所预言的那样,芯片性能仍在不断提高,但相比加快CPU的速度,...

    文章 青衫无名 2017-05-23 1248浏览量

  • 【ATF】钱正平:大规模实时计算及其在阿里的应用与创新

    2016 ATF阿里技术论坛于4月15日在清华大学举办,主旨是阐述阿里对世界创新做出的贡献。阿里巴巴集团技术委员会主席王坚,阿里巴巴集团首席技术官(CTO)张建锋(花名:行癫),阿里巴巴集团首席风险官(CRO)刘振飞(花名:振飞),蚂蚁金服首席技术官(CTO)程立(花名:鲁肃)以及来自阿里巴巴集团...

    文章 云篆 2016-04-16 6032浏览量

  • Hadoop学习(二)——HDFS简介

            Hadoop提供了一个被称为HDFS的分布式文件系统的实现。HDFS是Hadoop系统的基础层,主要负责数据的存储、管理和容错处理,设计思想来源于Google的GFS(Google File System)文件系统。HDFS是一个运行在普通的硬件之上的分布式文件系统,它和现有的分布...

    文章 jara0705 2015-10-07 832浏览量

  • 实时计算与SparkSteaming的对比

    以下为精彩视频内容整理: 实时计算概述 实时计算 阿里云实时计算(Alibaba Cloud Realtime Compute)是一套基于Apache Flink构建的一站式、高性能实时大数据处理平台,广泛适应于流式数据处理、离线数据处理等场景,最重要的一点是免运维,可以为企业节省了大量的成本。 ...

    文章 龙青云 2020-02-25 437浏览量

  • 理解Spark的核心RDD

    与许多专有的大数据处理平台不同,Spark建立在统一抽象的RDD之上,使得它可以以基本一致的方式应对不同的大数据处理场景,包括MapReduce,Streaming,SQL,Machine Learning以及Graph等。这即Matei Zaharia所谓的“设计一个通用的编程抽象(Unifie...

    文章 知与谁同 2017-08-01 966浏览量

  • Facebook的实时流处理技术

    随着云计算大数据的发展,有越来越多的场景需要借助于实时数据处理技术,为此有很多公司开发了自己的实时处理系统,Facebook就是其中的一员,他们构建的实时数据处理生态系统每秒钟能够处理数百GB的数据。本文介绍了Facebook在设计该系统时从易用性、性能、容错、可伸缩性以及正确性等方面考虑所做的重...

    文章 玄学酱 2017-07-05 1020浏览量

  • 分布式消息队列kafka

    kafka是Linkedin开源的分布式发布-订阅消息系统(消息队列) kafka特点 1 高吞吐率、低延迟,每秒处理几十万消息,延迟最低几毫秒 2 可扩展性,支持动态扩展节点数据 3 持久性与可靠性,数据被持久化磁盘,支持数据多副本防止数据丢失 4 高容错,允许节点失败 5 高并发,支持上千个客...

    文章 五维空间s 2019-03-12 994浏览量

  • Spark入门

    spark历史:伯克利实验室研究项目,基于Hadoop的Mapreduce机制,引入内存管理机制,提高了迭代式计算和交互式中的效率。 spark组件: spark core:spark基本功能,包括任务调度,内存管理,容错机制 内部定义了RDDs(弹性分布式数据集),提供多个APIs调用,为其他组...

    文章 daleychao 2017-12-02 1059浏览量

  • Spring Cloud构建微服务架构:服务容错保护(Hystrix断路器)【Dalston版】

    前言 在前两篇《Spring Cloud构建微服务架构:服务容错保护(Hystrix服务降级)》和《Spring Cloud构建微服务架构:服务容错保护(Hystrix依赖隔离)》中,我们对Hystrix提供的服务降级和依赖隔离有了基本的认识。下面我们将继续说说Hystrix的另外一个重要元件:断...

    文章 程序猿DD 2017-07-23 1092浏览量

  • Facebook的实时流处理技术——Scuba是Facebook的一个非常快速、分布式的内存数据库,用于实时分析和查询

    Scuba,Facebook的一个非常快速、分布式的内存数据库,用于实时分析和查询。是Facebook的回归分析代码、错误报告监控、广告收入监控和性能调试的背后主力。 Facebook的实时流处理技术 随着云计算大数据的发展,有越来越多的场景需要借助于实时数据处理技术,为此有很多公司开发了自己...

    文章 桃子红了呐 2017-11-15 1397浏览量

  • 实时处理大数据的分布式系统Druid-IO

    Druid 是一个用于大数据实时查询和分析的高容错、高性能开源分布式系统,旨在快速处理大规模的数据,并能够实现快速查询和分析。 Druid 具有以下主要特征: 为分析而设计——Druid 是为 OLAP 工作流的探索性分析而构建,它支持各种过滤、聚合和查询等类; 快速的交互式查询——Drui...

    文章 知与谁同 2017-08-01 1659浏览量

  • 掌握这几个秘籍,你的分布式系统绝对牛掰!!!

    前言 根据CAP理论,分布式环境系统需要尽量保证C 一致性 A 可用性 P 容错性。分布式系统,从本质上来讲,就是通过一些低廉的硬件来实现系统更好的吞吐、性能以及可用性。分布式系统,有一套通用的系统设计策略。大致上分为: 心跳检测 高可用保障 容错处理 重试机制 负载均衡 心跳检测 在分布式系...

    文章 huc_逆天 2020-05-29 215浏览量

  • nginx版本如何选择?

    nginx版本如何选择? Nginx的版本有: Mainline version:Mainline 是 Nginx 目前主力在做的版本,可以说是开发版。 Stable version:最新稳定版,生产环境上建议使用的版本。 Legacy versions:遗留的老版本的稳定版。 一般就选最新...

    文章 幸运券发放 2018-05-01 4711浏览量

  • Flink状态管理和容错机制介绍

    作者: 施晓罡 (花名:星罡)导读:本文来自8月11日在北京举行的 Flink Meetup会议,分享来自于施晓罡,目前在阿里大数据团队部从事Blink方面的研发,现在主要负责Blink状态管理和容错相关技术的研发 本文主要内容如下: 有状态的流数据处理; Flink中的状态接口; 状态管理和容...

    文章 赵慧 2018-10-15 2876浏览量

  • Apache Flink 零基础入门(一):基础概念解析

    作者:陈守元、戴资力 一、Apache Flink 的定义、架构及原理 Apache Flink 是一个分布式大数据处理引擎,可对有限数据流和无限数据流进行有状态或无状态的计算,能够部署在各种集群环境,对各种规模大小的数据进行快速计算。 1. Flink Application 了解 Flink ...

    文章 阿里云实时计算Flink 2019-08-05 4595浏览量

  • Apache Flink 零基础入门(一):基础概念解析

    作者:陈守元、戴资力 一、Apache Flink 的定义、架构及原理 Apache Flink 是一个分布式大数据处理引擎,可对有限数据流和无限数据流进行有状态或无状态的计算,能够部署在各种集群环境,对各种规模大小的数据进行快速计算。 1. Flink Application 了解 Flink ...

    文章 Ververica 2019-07-02 1774浏览量

  • Neha Narkhede: 借助Apache Kafka实现大规模流处理

    在QCon纽约2016大会上,Neha Narkhede在演讲“借助Apache Kafka实现大规模流处理”中介绍了Kafka Streams,这是Kafka用于处理流式数据的新特性。据Narkhede介绍,因为“无界(unbounded)”数据集随处可见,所以流处理越来越流行。那不再是一个像机...

    文章 沉默术士 2017-07-03 866浏览量

1 2 3 4 ... 74 >

云产品推荐

上海奇点人才服务相关的云产品 小程序定制 上海微企信息技术相关的云产品 国内短信套餐包 ECS云服务器安全配置相关的云产品 开发者问答 阿里云建站 自然场景识别相关的云产品 万网 小程序开发制作 视频内容分析 视频集锦 代理记账服务 阿里云AIoT