• 关于

    数据块宕机的原因

    的搜索结果
  • 《Hadoop与大数据挖掘》一2.1.2 Hadoop存储—HDFS

    本节书摘来华章计算机《Hadoop与大数据挖掘》一书中的第2章 ,第2.1.2节,张良均 樊 哲 位文超 刘名军 许国杰 周 龙 焦正升 著 更多章节内容可以访问云栖社区“华章计算机”公众号查看。 2.1.2 Hadoop存储—HDFS Hadoop的存储系统是HDFS(Hadoop Distri...

    文章 华章计算机 2017-06-26 1473浏览量

  • SUN平台,光纤共享存储互斥失败导致的数据灾难恢复

    [数据恢复故障描述]   两台SPARC SOLARIS系统通过光纤交换机共享同一存储,本意是作为CLUSTER使用,但配置不当,两台SERVER并未很好地对存储互斥,设计意图为:平时A服务器正常工作,当A服务器宕掉后,关掉A,开启B接管服务。   偶然的机会,一位管理人员开启B服务器,查到B服务...

    文章 余二五 2017-11-29 744浏览量

  • mysql硬件优化

    导致宕机的原因:   1.      运行环境: 35%,运行环境可以看做是支持数据库服务器运行的系统和资源集合,包括操作系统,硬盘以及网络 2.      性能:35% 3.      复制 20% 4.      各种类型的数据库丢失或者损坏以及其他问题。 10% 导致宕机的事件排行...

    文章 技术小阿哥 2017-11-27 1139浏览量

  • Quick BI 数据可视化分析平台

    2020年入选全球Gartner ABI魔力象限,为中国首个且唯一入选BI产品

    广告

  • mysql硬件优化

    导致宕机的原因:   1.      运行环境: 35%,运行环境可以看做是支持数据库服务器运行的系统和资源集合,包括操作系统,硬盘以及网络 2.      性能:35% 3.      复制 20% 4.      各种类型的数据库丢失或者损坏以及其他问题。 10% 导致宕机的事件排行...

    文章 科技探索者 2017-11-06 786浏览量

  • MySQL优化

    导致宕机的原因: 1.      运行环境: 35%,运行环境可以看做是支持数据库服务器运行的系统和资源集合,包括操作系统,硬盘以及网络 2.      性能:35% 3.      复制 20% 4.      各种类型的数据库丢失或者损坏以及其他问题。 10% 导致宕机的事件排行 1.   ...

    文章 技术小阿哥 2017-11-27 666浏览量

  • MySQL优化

    导致宕机的原因: 1.      运行环境: 35%,运行环境可以看做是支持数据库服务器运行的系统和资源集合,包括操作系统,硬盘以及网络 2.      性能:35% 3.      复制 20% 4.      各种类型的数据库丢失或者损坏以及其他问题。 10% 导致宕机的事件排行 1.   ...

    文章 科技探索者 2017-11-14 597浏览量

  • 《Spark大数据分析:核心概念、技术及实践》一 第1章 大数据技术一览

     本节书摘来自华章出版社《Spark大数据分析:核心概念、技术及实践》一书中的第1章,第1.1节,作者[美] 穆罕默德·古勒(Mohammed Guller),更多章节内容可以访问云栖社区“华章计算机”公众号查看。 第1章 大数据技术一览 我们正处在大数据时代。数据不仅是任何组织的命脉,而且在指...

    文章 华章计算机 2017-05-02 1020浏览量

  • OceanBase高可用实践

    背景 高可用是构建分布式系统的基石。一方面,出于成本考虑, 分布式系统往往采取比较廉价的硬件,其可靠性相对于小型机、专有硬件有很大的不足, 而分布式系统的规模一般比较大,假如硬件的可靠性只有三个9(99.9%), 一个1000台机器规模的集群每天将面临1台机器宕机的风险,在如此大规模的情况下,存储...

    文章 KB小秘书 2019-07-28 1391浏览量

  • TFS分布式文件系统应用

    TFS是淘宝开源的一套高性能文件存储系统,在阿里广泛应用,除了自建文件系统,在应用上云的大趋势下,还可以使用阿里云的对象存储OSS服务:阿里云对象存储OSS首页 一、关于TFS TFS(Taobao File System)是一个高可扩展、高可用、高性能、面向互联网服务的分布式文件系统,主要针对海...

    文章 邴越 2017-10-13 5368浏览量

  • 基于Web应用的性能分析及优化案例

    一、 基于动态内容为主的网站优化案例 1.网站运行环境说明 硬件环境:1台IBM x3850服务器, 单个双核Xeon 3.0G CPU,2GB内存,3块72GB SCSI磁盘。 操作系统:CentOS5.4。 网站架构:Web应用是基于LAMP架构,所有服务都在一台服务器上部署。 2.性能问题现...

    文章 技术小甜 2017-11-08 1119浏览量

  • HDFS简单入门

    为什么我们需要HDFS 文件系统由三部分组成:与文件管理有关软件、被管理文件以及实施文件管理所需数据结构。 既然读取一块磁盘的所有数据需要很长时间,写入更是需要更长时间(写入时间一般是读取时间的3倍)。我们需要一个巨大文件难道得换传输速度10GB/S的磁盘(现在没有这样的磁盘),而且即使有文件为...

    文章 wuyudong 2016-04-21 4043浏览量

  • MySQL数据库的几种常见高可用方案

    随着人们对数据一致性的要求不断的提高,越来越多的方法被尝试用来解决分布式数据一致性的问题,如MySQL自身的优化、MySQL集群架构的优化、Paxos、Raft、2PC算法的引入等等,本文介绍MySQL数据库的几种常见高可用方案。 一、概述 我们在考虑MySQL数据库的高可用的架构时,主要要考虑...

    文章 云市场转载 2017-04-25 12232浏览量

  • 揭开数据库RPO等于0的秘密(下)

    前言 传统商业关系数据库都声称可以做到故障恢复后不丢数据(即RPO为0),跟故障前的数据状态是强一致的,实际是否一定如此? 开源数据库MySQL在金融核心业务都不敢用,最重要的一个原因是做不到不丢数据。但是有些基于MySQL修改的数据库为何又说自己是强一致的呢?新兴的分布式数据库OceanBase...

    文章 mq4096 2019-03-06 1566浏览量

  • 还不懂HDFS的工作原理?快来扫扫盲

    Hadoop分布式文件系统(HDFS)是一种被设计成适合运行在通用硬件上的分布式文件系统。HDFS是一个高度容错性的系统,适合部署在廉价的 机器上。它能提供高吞吐量的数据访问,非常适合大规模数据集上的应用。要理解HDFS的内部工作原理,首先要理解什么是分布式文件系统。 1、分布式文件系统 多台计...

    文章 知与谁同 2017-08-01 750浏览量

  • 分布式系统理论之租约机制学习

    一,租约机制介绍 在分布式系统中,往往会有一个中心服务器节点。该节点负责存储、维护系统中的元数据。如果系统中的各种操作都依赖于中心服务器上的元数据,那么中心服务器很容易成为性能瓶颈及存在单点故障。而通过租约机制,可以将中心服务器的“权力”下放给其他机器,就可以减轻中心服务器的压力。当然,租约机制还...

    文章 技术mix呢 2017-09-21 2015浏览量

  • 【分布式系统工程实现】GFS&Bigtable设计的优势

    目前,知名度比较高的通用存储系统包括:Google GFS&Bigtable,Amazon Dynamo,Microsoft Azure存储系统及Yahoo PNUTS。其中,GFS&Bigtable,Azure存储系统及Yahoo PNUTS都有总控节点,Amazon Dynam...

    文章 knuthocean 2016-04-11 1553浏览量

  • 分布式文件系统HDFS

    应用场景 当数据量达到PB,ZB级别,或者传统关系型数据库遇到难题的时候,那么采用HDFS来替代是最好不过的工具了。 操作步骤 1. 架构图 Hadoop是由Apache基金会所开发的分布式系统基础架构,组织架构如下图所示: 正如上图所示:Hadoop包...

    文章 wsc449 2018-01-10 867浏览量

  • 《Hadoop与大数据挖掘》——第2章 大数据存储与运算利器—Hadoop 2.1 Hadoop概述

    本节书摘来自华章计算机《Hadoop与大数据挖掘》一书中的第2章,第2.1节,作者 张良均 樊哲 位文超 刘名军 许国杰 周龙 焦正升,更多章节内容可以访问云栖社区“华章计算机”公众号查看。 第2章 大数据存储与运算利器—Hadoop 本章主要介绍了Hadoop框架的概念、架构、组件、生态系统以及...

    文章 华章计算机 2017-07-03 2088浏览量

  • Apache Flink 在快手的过去、现在和未来

    本文由快手大数据架构团队负责人赵健博分享,主要介绍 Apache Flink 在快手的过去、现在和未来。内容包括:为什么选 FlinkFlink 在快手的发展业务数据流技术创新未来计划一、为什么选 Flink大家好,我是赵健博,来自快手,目前负责快手大数据架构团队。今天很高兴可以和大家分享我们在 ...

    文章 阿里云实时计算Flink 2021-02-05 3546浏览量

  • 分布式系统工程实现:GFS&Bigtable设计的优势,互联网营销

      目前,知名度比较高的通用存储系统包括:Google GFS&Bigtable,Amazon Dynamo,Microsoft Azure存储系统及Yahoo PNUTS。其中,GFS&Bigtable,Azure存储系统及Yahoo PNUTS都有总控节点,Amazon Dyn...

    文章 狼人2007 1970-01-01 817浏览量

  • [数据恢复答疑]RAID真的安全吗?

    问题:     数据恢复既然是数据灾难的一种补救措施,那设计得绝对安全的RAID磁盘阵列系统也会出现数据灾难吗?为什么?在RAID数据恢复领域里常见的故障类型有哪些?   回答(北亚数据恢复中心张宇 [url]http://www.datahf.net[/url]):     RAID设计的初衷大...

    文章 余二五 2017-11-22 1096浏览量

  • IO提升10倍的SSD云盘开放免费公测啦!

    SSD云盘开放免费公测啦!点此申请SSD云盘是啥?有啥特点? SSD云盘基于全SSD存储介质、利用阿里云飞天分布式存储技术,提供数据可靠性99.999%的高性能存储;该产品具备以下特点: 高性能:单个SSD云盘最高提供10000随机读写IOPS、160MB/s吞吐量的存储性能; 高可靠性:SSD云...

    文章 阿里云柳璃 2015-05-15 3290浏览量

  • OceanBase实践入门:高可用原理和容灾方案

    本文内容是直播的文字稿,直播视频回放地址https://tech.antfin.com/community/live/773 OceanBase的高可用可以做到自动故障切换和不丢一点数据,即使是异地多机房部署也是如此。这是OceanBase的特性之一。OceanBase的高可用机制是数据库内核能力...

    文章 mq4096 2019-08-05 2741浏览量

  • HBase内部结构

    之前有一篇文章已经大概的说了一下HBase的基本的概念和内部的一些构成的意思,比如表啊,列族啊之类的,这一篇再简单的说一下HBase的架构 数据模型从大到小 namespace表空间:类似RDBMS中的库概念,当你想把一组表去统一的管理的时候可以使用得到,这种抽象为即将推出的多租户相关功能奠定...

    文章 期待l 2018-12-06 1255浏览量

  • Hbase 之 HBase 的整体架构

    HBase 系统架构图 组成部件说明   Client:  使用HBase RPC机制与HMaster和HRegionServer进行通信  Client与HMaster进行通信进行管理类操作  Client与HRegionServer进行数据读写类操作   Zookeeper:  Zookee...

    文章 技术小美 2017-11-12 679浏览量

  • Hbase 之 HBase 的整体架构

    HBase 系统架构图 组成部件说明   Client:  使用HBase RPC机制与HMaster和HRegionServer进行通信  Client与HMaster进行通信进行管理类操作  Client与HRegionServer进行数据读写类操作   Zookeeper:  Zookee...

    文章 技术小美 2017-11-12 585浏览量

  • 《循序渐进学Spark》一3.5 容错机制及依赖

    本节书摘来自华章出版社《循序渐进学Spark》一书中的第3章,第3.5节,作者 小象学院 杨 磊,更多章节内容可以访问云栖社区“华章计算机”公众号查看。 3.5 容错机制及依赖 一般而言,对于分布式系统,数据集的容错性通常有两种方式: 1) 数据检查点(在Spark中对应Checkpoint机...

    文章 华章计算机 2017-05-02 1674浏览量

  • hbase 学习(十六)系统架构图

    HBase 系统架构图 组成部件说明 Client:   使用HBase RPC机制与HMaster和HRegionServer进行通信    Client与HMaster进行通信进行管理类操作    Client与HRegionServer进行数据读写类操作    Zookeeper: ...

    文章 岑玉海 2016-09-11 2612浏览量

  • Greenplum在企业生产中的最佳实践(上)

    本文章转自Pivotal公众号,在此感谢任振中和Pivotal公司的分享,希望对更多的朋友有帮助~ 一、GP搭建过程当中硬件的选择和部署建议 GP是一个分布式X86架构,是把多台X86服务器组合成一起做一个大的集群。相比传统单机版的Oracle和MySQL,它的特点是使用比较多的服务器做海量数...

    文章 闻术苑 2017-07-29 4582浏览量

  • 独家 | 一文读懂Hadoop(二)HDFS(上)

    随着全球经济的不断发展,大数据时代早已悄悄到来,而Hadoop又是大数据环境的基础,想入门大数据行业首先需要了解Hadoop的知识。2017年年初apache发行了Hadoop3.0,也意味着一直有一群人在对Hadoop不断的做优化,不仅如此,各个Hadoop的商业版本也有好多公司正在使用,这也印...

    文章 行者武松 2017-08-01 1375浏览量

1 2 3 4 ... 7 >

云产品推荐

阿里云企业服务平台 陈四清的老板信息查询 上海奇点人才服务相关的云产品 爱迪商标注册信息 安徽华轩堂药业的公司信息查询 小程序定制 上海微企信息技术相关的云产品 国内短信套餐包 ECS云服务器安全配置相关的云产品 天籁阁商标注册信息 开发者问答 阿里云建站 自然场景识别相关的云产品 万网 小程序开发制作 视频内容分析 视频集锦 代理记账服务 北京芙蓉天下的公司信息查询