• 如何定位性能瓶颈

    后来经过排查,发现是存储集群的一个存储单元出现故障导致写入速度变慢致使出现大量等待。5、最后的大杀器:应用服务器监控及代码分析 如果没能在其他位置发现瓶颈,那么软件程序所运行的平台——应用服务器很可能是...
    文章 2017-03-19 1450浏览量
  • mapreduce运行机制

    它是map运算的后续操作,主要是在map计算出中间文件前做一个简单的合并重复key值的操作,例如我们对文件里的单词频率做统计,map计算时候如果碰到一个hadoop的单词就会记录为1,但是这篇文章里hadoop可能会出现n多次...
    文章 2016-05-19 1779浏览量
  • 走近华佗,解析自动化故障处理系统背后的秘密

    在磁盘进入SLOW或WARNING状态时,在线应用一般会选择不再使用此磁盘,因为此时磁盘可能已经出现损坏的迹象,会造成延时大规模增加,但对于理想的应用则可以继续使用。一旦磁盘进入ERROR状态,则表明此磁盘可能马上...
    文章 2016-12-18 4692浏览量
  • 阿里云InfluxDB® Raft HybridStorage实现方案

    在MemoryStorage的处理方式是:找到对应index位置的内存位置内存位置37),并抛弃从位置A以后的全部旧日志占用的内存数据(因为在Raft机制中,这种情况下内存位置37以后的那些旧日志都是无效的,无需保留),然后...
    文章 2019-07-09 14442浏览量
  • JVM内存管理机制&线上问题排查

    top(-H):top可以实时的观察cpu的指标状况,尤其是每个core的指标状况,可以更有效的来帮助解决问题,-H则有助于看是什么线程造成的CPU消耗,这对解决一些简单的耗CPU的问题有很大帮助。Sar:sar有助于查看历史指标...
    文章 2018-06-17 2502浏览量
  • AIX的vmstat命令详解(原创)

    po 表示每秒钟从内存置换到Paging Space的页数,无论什么时候窃取工作存储器的一页,如果它仍未驻留在调页空间中或已被修改,那它被写入调页空间。如果不被再次访问,它留在页面调度设备中直到进程终止或放弃...
    文章 2016-05-24 1819浏览量
  • SOFARPC 性能优化实践(下)|SOFAChannel#3 直播整理

    主要因为在堆上的话,IO 操作涉及到频繁的内存分配和销毁,这导致 GC 频繁,对性能有比较大的影响。注意:直接分配本身也并不见得性能有多好,所以还要有池的概念,减少频繁的分配。因此 JVM 中的直接内存,...
    文章 2019-03-01 1005浏览量
  • Facebook TSDB论文翻译

    大型互联网服务一般出现故障及时响应和保持高可用性为目标。为了提供正常稳定的服务,通常要每秒从大量系统中监控和分析数以千万计的数据(性能数据和业务数据)。一个特别高效的解决方案是用TSDB对这些数据进行...
    文章 2017-08-18 2177浏览量
  • VMware HA实战攻略之四VMware HA安装及配置

    (虚拟机放置,简单的说就是会为当前虚拟机选择较为适合此存放的ESX主机的过程,一般会依据CPU负载、内存多少、I/O读写、网络负载四个方面来衡量,并有星级评价,越好星级越高) 4、VMwareHA的工作原理和功能 A、...
    文章 2017-11-22 1201浏览量
  • linux系统启动过程详解-开机加电后发生了什么-linux...

    BIOS程序在内存最开始的位置(0x00000)用1KB的内存空间(0x00000~0x003FF)构建中断向量表,在紧挨着它的位置用256KB的内存空间构建BIOS数据区(0x00400~0x004FF),并在大约57KB以后得位置(0x0e05b)加载了8KB...
    文章 2016-05-18 2307浏览量
  • 《深入理解Java虚拟机》学习笔记

    第2章 垃圾收集器与内存分配策略 1.Java虚拟机在执行java程序时把它所管理的内存会分为若干个不同的数据区域, 这些区域都有各自的用途,以及创建和销毁的时间,有的区域随着虚拟机进程的启动而存在, 有些区域则...
    文章 2016-05-05 4819浏览量
  • Apache Flink 零基础入门教程(六):状态管理及容错...

    如果要做 24 小时的窗口计算,将 24 小时的数据都放到内存,可能会出现内存不足;另外,作业是 7*24,需要保障高可用,机器若出现故障或者宕机,需要考虑如何备份及从备份中去恢复,保证运行的作业不受影响;此外,...
    文章 2019-08-05 953浏览量
  • Apache Flink 零基础入门教程(六):状态管理及容错...

    如果要做 24 小时的窗口计算,将 24 小时的数据都放到内存,可能会出现内存不足;另外,作业是 7*24,需要保障高可用,机器若出现故障或者宕机,需要考虑如何备份及从备份中去恢复,保证运行的作业不受影响;此外,...
    文章 2019-08-05 5005浏览量
  • Linux之《荒岛余生》(三)内存

    顺便,瞧一下我们的JVM堆在什么位置。例子 jvm内存溢出排查 应用程序发布后,jvm持续增长。使用jstat命令,可以看到old区一直在增长。jstat-gcutil 28266 1000 在jvm参数中,加入-XX:+HeapDumpOnOutOfMemoryError,...
    文章 2019-04-26 1264浏览量
  • 使用Grab的实验平台进行混沌实验编排

    在运行混沌实验后,一般会有两种可能输出。你已经确认了在引入的故障中系统保持了足够的弹性,或你发现了需要修复的问题。如果混沌实验最初被运行在预发环境那么两种都是不错的结果。在第一种场景,你对系统的行为...
    文章 2019-03-05 5944浏览量
  • 《深入理解Java虚拟机》学习笔记

    为了多线程切换过程中能恢复到正确的执行位置,每条线程都需要有一个独立的程序计数器,各条线程之间的计数器互不影响,独立存储,成为“线程私有”的内存。并且,程序计数器是唯一一个在Java虚拟机规范中没有规定...
    文章 2017-11-14 1488浏览量
  • IBM P系列小型机故障的基本定位

    当AIX开始启动时,显示面板上的代码为 0xxx,同时位置会出现在第二行。当AIX的登录窗口出现在控制台上时第四步骤结束同时显示面板上再无任何信息出现。Error Code 当系统运行有错误发现时,一个8位码会显示在显示...
    文章 2017-11-16 1270浏览量
  • Linux运维(数据库专题)面试题

    未提交读(read uncommitted):会出现脏读、不可重复读和幻读。提交读(read committed):会出现不可重复读和幻读。重复读(repeatable read):会出现幻读。串行化(serializable):隔离级别最高,不允许出现脏读、不可...
    文章 2017-11-28 2103浏览量
  • 好程序员大数据培训分享之HDFS设计思想和相关概念

    一个过大的文件存储在一个节点磁盘上,当有并行处理时,每个线程都需要从这个节点磁盘上读取这个文件的内容,那么就会出现网络瓶颈,不利于分布式的数据处理。我们来看看HDFS的设计思想:以下图为例,来进行解释。...
    文章 2020-05-28 810浏览量
  • Oracle Memory Management and HugePage

    Oracle发展这么多年,提供了多种的内存管理方式,从最早SGA、PGA手工管理,到9I版本出现的PGA的自动管理,到10G版本出现的SGA自动管理(ASMM),再到11G版本出现的memory自动管理(AMM),Oracle基本是在朝着智能化、...
    文章 2017-05-02 1734浏览量
  • 面试官:你对Redis缓存了解吗?面对这11道面试题你...

    看看你到底有没有全面的了解 redis 有哪些功能,一般怎么来用,啥场景用什么,就怕你别就最简单的 KV 操作;看看你在实际项目里都怎么玩儿过 redis。要是你回答的不好,没说出几种数据类型,也没说什么场景,你...
    文章 2020-05-06 1345浏览量
  • DBA很忙—MySQL的性能优化及自动化运维实践

    如果把它设为0的话,可能就会出现内存溢出的现象,就是OOM。这不是我们DBA想看到的情况。所以我们一般把这个值设成10。第三就是关闭NUMA特性,我们公司一般是单实例的情况,所以这个时候NUMA的特性要关注,NUMA特性...
    文章 2018-11-16 4301浏览量
  • 《深入理解Hadoop(原书第2版)》——2.3Hadoop系统的...

    如果此时其访问的数据节点出现故障,就访问存放备份数据块的数据节点。3)读取数据块的时候计算该数据块的校验和,并将该校验和与写入文件时的校验和作比较。如果检验失败,则从其他数据节点获取备份数据块。...
    文章 2017-05-02 1399浏览量
  • ZGC内存管理

    在Linux上通过gcc编译后运行文件,得到的结果如下:这里使用的系统调用shm_open()函数,需要在编译时加上-lrt,否则可能会出现链接错误。示例中调用mmap两次返回两个地址变量,从结果我们可以发现,两个变量对应两个...
    文章 2019-11-06 1475浏览量
  • mongodb 持久化

    这个之后介绍,这也是为什么journal使用更多内存的原因,因为journal另外使用一个叫PrivateView的内存区域。4.总结: mongodb在使用journal之后,备份,容灾得到保障,批量提交也使得写入更加快速(不持久化的...
    文章 2015-11-17 1036浏览量
  • VMware vSphere虚拟机文件介绍

    【.vswp file】在启动虚拟机时,如果ESX主机由于过量使用而消耗光其物理内存时,创建一个内存交换文件代替物理主机内存。这些文件的大小等于分配给虚拟机的内存大小,再减去任何内存预留(默认是0),例如,4GB...
    文章 2017-11-14 897浏览量
  • Spark项目故障总结

    2、看log log一般会报是在你的哪一行代码,导致了OOM异常;或者呢,看log,看看是执行到了第几个stage!我们这里不会去剖析stage的划分算法 方案一:聚合源数据 将导致数据倾斜的一些shuffle操作,比如,groupbykey,...
    文章 2017-11-08 1079浏览量
  • 2020年最全面的78道JVM面试题总结(含答案解析和思维...

    自己实现堆载的数据结构时有可能会出现内存泄露。2、64 位 JVM 中,int 的长度是多数?Java 中,int 类型变量的长度是一个固定值,与平台无关,都是 32 位。意思就是说,在 32 位 和 64 位 的 Java 虚拟机中,int ...
    文章 2020-06-21 1037浏览量
  • HBase底层存储原理——我靠,和cassandra本质上没有...

    另外,Hbase自动的调节Region处在的位置,如果一个RegionServer变得Hot(大量的请求 落在这个Server管理的Region上),Hbase就把Region移动到相对空闲的节点,依次保证集群环境被充分利用。二、存储模型 有了...
    文章 2017-11-16 1584浏览量
  • 基于超大规模集群的本地存储系统优化

    在应用需要这部分内存空间时,Page Cache根据精心设计的内存回收算法释放内存页。技术痛点 在超大规模集群中,单个DN多则承担千万个Block,在这样的极端场景下,Buffer和Cache的加速效果越来越差。主要原因是内存...
    文章 2018-10-18 12063浏览量
1 2 3 4 ... 12 >

云产品推荐

视频直播 大数据计算服务 MaxCompute 国内短信套餐包 ECS云服务器安全配置相关的云产品 开发者问答 阿里云建站 新零售智能客服 万网 小程序开发制作 视频内容分析 视频集锦 代理记账服务 阿里云AIoT 阿里云科技驱动中小企业数字化