• 关于

    可扩展并行处理故障原因

    的搜索结果
  • 《多核与GPU编程:工具、方法及实践》----2.4 程序结构模式

    本节书摘来自华章出版社《多核与GPU编程:工具、方法及实践》一书中的第2章,第2.4节, 作 者 Multicore and GPU Programming: An Integrated Approach[阿联酋]杰拉西莫斯·巴拉斯(Gerassimos Barlas) 著,张云泉 贾海鹏 李...

    文章 华章计算机 2017-05-02 1142浏览量

  • [转载]聊聊Greenplum的那些事

    原文   http://dbaplus.cn/news-21-341-1.html 聊聊Greenplum的那些事 李巍 2016-04-01 14:15:00 1024   开卷有益——作者的话    有时候真的感叹人生岁月匆匆,特别是当一个IT人沉浸于某个技术领域十来年后,蓦然回首,...

    文章 德哥 2016-07-11 6937浏览量

  • 《Spark与Hadoop大数据分析》一一2.1 Apache Hadoop概述

    本节书摘来自华章计算机《Spark与Hadoop大数据分析》一书中的第2章,第2.1节,作者:文卡特·安卡姆(Venkat Ankam) 更多章节内容可以访问云栖社区“华章计算机”公众号查看。 2.1 Apache Hadoop概述 Apache Hadoop 是一个软件框架,可以在具有数千个节点...

    文章 华章计算机 2017-07-03 1928浏览量

  • 深度 | 每秒1.4亿次!再度刷新TPS记录的PolarDB如何应对双11“尖峰时刻”?

    2020年是云原生数据库PolarDB全面支撑天猫双十一的第二年,天猫交易、买家、卖家以及物流等系统在双十一期间基于PolarDB为亿万客户提供了顺滑的体验。同时,PolarDB还刷新了去年由自己创造的数据库处理峰值(TPS)纪录,今年TPS峰值高达1.4亿次/秒,较去年提升了60%。 Polar...

    文章 stromal 2020-11-20 5291浏览量

  • 分布式系统简介

      研究生阶段学习的分布式原理与泛型几乎忘完了,当初不怎么懂。。。现在工作中发现大数据技术的底层还是分布式系统,那么重新拾起,总结下~ 一、分布式系统简介   分布式系统是若干独立计算机的集合,这些计算机对于用户来说就像是单个相关系统。这个定义包含了两方面的内容,第一方面是硬件的:机器本身是独立的...

    文章 松伯 2016-06-10 597浏览量

  • 详解K-DB RAC集群下的锁机制管理(一) ——K-DB与锁技术的演进

    集群功能是数据库产品高可用性的重要一环,集群架构是保障业务连续性的核心架构,体现着数据产品的高可用性和技术水准。但在业界集群架构有多种方案和技术,其中最具稳定性、最能够保障业务连续性的架构当属于RAC集群,即Real Application Cluster。RAC集群特点是多个数据库节点共享存储,...

    文章 云栖大讲堂 2017-09-01 962浏览量

  • 详解K-DB RAC集群下的锁机制管理(一) ——K-DB与锁技术的演进

    集群功能是数据库产品高可用性的重要一环,集群架构是保障业务连续性的核心架构,体现着数据产品的高可用性和技术水准。但在业界集群架构有多种方案和技术,其中最具稳定性、最能够保障业务连续性的架构当属于RAC集群,即Real Application Cluster。RAC集群特点是多个数据库节点共享存储,...

    文章 晚来风急 2017-09-04 988浏览量

  • 《Spark与Hadoop大数据分析》——2.1 Apache Hadoop概述

    2.1 Apache Hadoop概述 Apache Hadoop 是一个软件框架,可以在具有数千个节点和 PB 级数据的大型集群上进行分布式处理。Apache Hadoop 集群可以使用故障率一般较高的低价通用硬件来构建。Hadoop 的设计能够在没有用户干预的情况下优雅地处理这些故障。此外,H...

    文章 华章计算机 2017-09-01 1387浏览量

  • 《Scala机器学习》一一第3章 使用Spark和MLlib

    第3章 使用Spark和MLlib 上一章介绍了在全局数据驱动的企业架构中的什么地方以及如何利用统计和机器学习来处理知识,但接下来不会介绍Spark和MLlib的具体实现,MLlib是Spark顶层的机器学习库。Spark是大数据生态系统中相对较新的成员,它基于内存使用而不是磁盘来进行优化。数据...

    文章 华章计算机 2017-07-03 1071浏览量

  • 《Scala机器学习》一一第3章 使用Spark和MLlib

    **第3章使用Spark和MLlib**上一章介绍了在全局数据驱动的企业架构中的什么地方以及如何利用统计和机器学习来处理知识,但接下来不会介绍Spark和MLlib的具体实现,MLlib是Spark顶层的机器学习库。Spark是大数据生态系统中相对较新的成员,它基于内存使用而不是磁盘来进行优化。数...

    文章 华章计算机 2017-08-02 731浏览量

  • 《Hadoop实战第2版》——1.2节Hadoop项目及其结构

    1.2 Hadoop项目及其结构现在Hadoop已经发展成为包含很多项目的集合。虽然其核心内容是MapReduce和Hadoop分布式文件系统,但与Hadoop相关的Common、Avro、Chukwa、Hive、HBase等项目也是不可或缺的。它们提供了互补性服务或在核心层上提供了更高层的服务。...

    文章 华章计算机 2017-08-01 1536浏览量

  • 上云技术解决方案

    传统到云端的挑战传统经典架构: 在从传统IT架构最终向云计算平台技术架构转移的过程中,主要面临以下几个技术挑战。 可用性:脱离小型机和高端存储的高冗余机制,采用基于PC服务器的分布式架构的云计算平台能否做到高可用。一致性:Oracle基于RAC和共享存储实现的物理级别一致性,云上ORACLE能否达...

    文章 javenzhen 2020-11-02 320浏览量

  • 《架构真经:互联网技术架构的设计原则(原书第2版)》一第3章 水平扩展

    本节书摘来自华章出版社《架构真经:互联网技术架构的设计原则(原书第2版)》一书中的第3章,第3节,作者 Scalability Rules: Principles for Scaling Web Sites,Second Edition[美] 马丁L. 阿伯特(Martin L. Abbott)迈...

    文章 华章计算机 2017-05-02 1187浏览量

  • 带你读《并发模式与应用实践》之一:并发简介

    华章程序员书库点击查看第二章并发模式与应用实践Concurrent Patterns and Best Practices [印度] 阿图尔·S.科德(Atul S. Khot) 著徐 坚 译第1章 并发简介什么是并发和并行?我们为什么要研究它们?本章将介绍并发编程领域的诸多方面。首先简要介绍并...

    文章 温柔的养猫人 2019-11-04 1052浏览量

  • 介绍一位分布式流处理新贵:Kafka Stream

    本文介绍了Kafka Stream的背景,如Kafka Stream是什么,什么是流式计算,以及为什么要有Kafka Stream。接着介绍了Kafka Stream的整体架构,并行模型,状态存储,以及主要的两种数据集KStream和KTable。并且分析了Kafka Stream如何解决流式系统...

    文章 行者武松 2017-10-10 2525浏览量

  • 云计算设计模式(四)——消费者的竞争模式

    云计算设计模式(四)——消费者的竞争模式 允许多个并发用户处理在同一个通讯通道接收的消息。这种模式使系统能够同时处理多个邮件,以优化吞吐量,提高可扩展性和可用性,以及平衡工作负载。 背景和问题 在云中运行的应用程序,可以预计,以处理大量的请求。而不是过程的每个请求同步地,一个常用的方法是通...

    文章 杨振平 2014-11-04 718浏览量

  • 深度学习与人工智能革命:part III

    首发地址:https://yq.aliyun.com/articles/407641 本篇是系列博客的第三部分,如果没有看过前面两部分内容的读者建议阅读一下。 在第I部分内容中,主要是讲解人工智能的历史以及它现在高速发展的原因; 在第II部分内容中,将讨论一下人工智能、机器学习和深度学习之间的...

    文章 uncle_ll 2018-03-11 1599浏览量

  • Ceph分布式存储实2.2 RADOS架构

    2.2 RADOS架构 RADOS系统主要由两个部分组成,如图2-2所示。 1)OSD:由数目可变的大规模OSD(Object Storage Devices)组成的集群,负责存储所有的Objects数据。 2)Monitor:由少量Monitors组成的强耦合、小规模集群,负责管理Cluste...

    文章 华章计算机 2017-05-02 1991浏览量

  • 双11个性化推荐背后,阿里云“舜天”如何应对百亿次挑战?

    2018天猫双11在技术世界,创下不少新记录,其中有一个记录是11日当天阿里全平台共为用户做个性化推荐453亿次,这些推荐的图片长度加起来可以绕地球70圈。 当你在天猫/手淘上买买买的时,图片会以不同格式或分辨率来转码呈现,这就要求后台系统需要强大的算力来保障数倍于平时的转码需求。FPGA是可...

    文章 阿里云头条 2018-11-15 1701浏览量

  • CIO:互联网IT系统和传统企业IT系统的异同

    打个比方,原先的大型企业系统架构,就好像一架大型的民航客机。作为出行来讲,飞机无疑是最舒适最快的交通工具,同时安全性也很好。但飞机却也不是人人都能坐的。首先:做飞机要经过换领登机牌,安检等若干道手续,乘客必须提前一个多小时到机场办理各种手续,而坐火车大巴则随到随买随上车,方便的多;其次:坐飞机很多...

    文章 玄学酱 2017-07-07 1143浏览量

  • 《云数据中心构建实战:核心技术、运维管理、安全与高可用》——2.4 云计算的发展历程与未来趋势

    本节书摘来自华章计算机《云数据中心构建实战:核心技术、运维管理、安全与高可用》一书中的第2章,第2.4节,作者:杨 欢 更多章节内容可以访问云栖社区“华章计算机”公众号查看。 2.4 云计算的发展历程与未来趋势 事物的发展不会一帆风顺,会经历发展过程中的种种质疑,各个角度的诸多排斥。云技术的发展也...

    文章 华章计算机 2017-07-03 1385浏览量

  • Hadoop不适合处理实时数据的原因剖析

    1.概述    Hadoop已被公认为大数据分析领域无可争辩的王者,它专注与批处理。这种模型对许多情形(比如:为网页建立索引)已经足够,但还存在其他一些使用模型,它们需要来自高度动态的来源的实时信息。为了解决这个问题,就得借助Twitter推出得Storm。Storm不处理静态数据,但它处理预计会...

    文章 smartloli 2016-04-19 1891浏览量

  • 云计算设计模式(二)——断路器模式

    云计算设计模式(二)——断路器模式处理故障连接到远程服务或资源时,可能需要耗费大量的时间。这种模式可以提高应用程序的稳定性和灵活性。 背景和问题 在分布式环境中,如在云,其中,应用程序执行访问远程资源和服务的操作,有可能对这些操作的失败是由于瞬时故障,如慢的网络连接,超时,或者被过度使用的...

    文章 杨振平 2014-11-04 655浏览量

  • 闪存普及推动技术进步!2016年存储行业五大热门技术回顾

     【51CTO.com原创稿件】对于存储行业来讲,2016年是至关重要的一年。在这一年里,软件定义存储技术逐渐成熟,超融合技术突破崛起,分布式技术持续升温等等。那么,在过去的一年里,存储行业有哪些热门技术备受用户关注呢?此篇文章,我们就对2016年存储行业的热门技术进行一下总结与盘点。 1)软件...

    文章 boxti 2017-08-09 1233浏览量

  • 想染指系统架构?你绝对不可错过的一篇

    本文讲的是想染指系统架构?你绝对不可错过的一篇。, 系统设计入门 翻译 有兴趣参与翻译? 以下是正在进行中的翻译: 巴西葡萄牙语 简体中文(已完成) 土耳其语 目的 学习如何设计大型系统。 为系统设计的面试做准备。 学习如何设计大型系统 学习如何设计可扩展的系统将会有助于你成为一个更...

    文章 玄学酱 2017-10-17 2243浏览量

  • MapReduce 不适合处理实时数据的原因剖析

    1.概述    Hadoop已被公认为大数据分析领域无可争辩的王者,它专注与批处理。这种模型对许多情形(比如:为网页建立索引)已经足够,但还存在其他一 些使用模型,它们需要来自高度动态的来源的实时信息。为了解决这个问题,就得借助Twitter推出得Storm。Storm不处理静态数据,但它处理预 ...

    文章 smartloli 2016-04-25 6461浏览量

  • [译] 系统设计入门 | 掘金翻译计划

    本文讲的是[译] 系统设计入门 | 掘金翻译计划, 原文地址:github.com/donnemartin… 译文出自:掘金翻译计划 译者:XatMassacrE、L9m、Airmacho、xiaoyusilen、jifaxu 这个 链接 用来查看本翻译与英文版是否有差别(如果你没有看...

    文章 玄学酱 2017-10-16 1766浏览量

  • 带你读《企业数据湖》之二:数据湖概念概览

    点击这里查看第一章:数据导论 点击这里查看第三章:Lambda架构:一种数据湖实现模式 第2章数据湖概念概览 数据湖概念的诞生,源自企业面临的一些挑战,如数据应该以何种方式处理和存储。最开始,企业对种类庞杂的应用程序的管理都经历了一个比较自然的演化周期。最开始的时候,每个应用程序会产生、存储大量数...

    文章 云迹九州 2019-10-19 1039浏览量

  • 撮合系统设计

    概述 随着信息技术的日新月异和金融业务的快速发展,金融交易领域对于核心技术的求也在不断增强,国内外金融交易模式已经从传统的人工叫价的方式变成了由高度电子化交易系统撮合订单的方式。传统的金融交易主要发生在有型金融市场中,金融交易的买卖双方通过叫价进行价格协商等方式最终达成一致,从而形成一笔交易,同...

    文章 jurassic_1 2016-09-16 22436浏览量

  • Hadoop不适合处理实时数据的原因剖析

    1.概述    Hadoop已被公认为大数据分析领域无可争辩的王者,它专注与批处理。这种模型对许多情形(比如:为网页建立索引)已经足够,但还存在其他一些使用模型,它们需要来自高度动态的来源的实时信息。为了解决这个问题,就得借助Twitter推出得Storm。Storm不处理静态数据,但它处理预计会...

    文章 技术mix呢 2017-11-22 895浏览量

1 2 3 4 ... 8 >

云产品推荐

上海奇点人才服务相关的云产品 小程序定制 上海微企信息技术相关的云产品 国内短信套餐包 ECS云服务器安全配置相关的云产品 开发者问答 阿里云建站 自然场景识别相关的云产品 万网 小程序开发制作 视频内容分析 视频集锦 代理记账服务 阿里云AIoT