掉线时限参数设置| 学习笔记

简介: 快速学习掉线时限参数设置

开发者学堂课程【Hadoop 分布式文件系统 HDFS掉线时限参数设置】学习笔记,与课程紧密联系,让用户快速学习知识。

课程地址https://developer.aliyun.com/learning/course/93/detail/1466


掉线时限参数设置


目录:

一、掉线时限参数设置

二、参数举例

 

一、掉线时限参数设置

1、DataNode 进程死亡或者网络故障造成 DataNode 无法与 NameNode 通信

2、NameNode 不会立即把该节点判定为死亡,要经过一段时间,这段时间暂称作超时时长。 3HDFS 默认的超时时长为10分钟+30秒。

4、如果定义超时时间为 TimeOut,则超时时长的计算公式为:

TimeOut=2*dfsnamenodeheartbeat.recheckinterval+10*dfs.heartbeatinterval。

而默认的dfs.namenodeheatbeatrecheck-interval大小为5分钟,dfsheartbeatinterval默认为3秒。

图片1.png

参数举例

需要注意的是 hdfs-site.xml 配置文件中的 heartbeat.recheck.interval 的单位为毫秒,dfs.heartbeat.interval 的单位为秒。

图片2.png

在系统配置里面查找到的是

图片3.png

也就是说300000毫秒进化为分钟就是5分钟

图片4.png

在配置系统里面找到的是

图片5.png

相关文章
|
存储 SQL 数据库
超时时间已到。超时时间已到,但是尚未从池中获取连接。出现这种情况可能是因为所有池连接均在使用,并且达到了最大池大小。
超时时间已到。超时时间已到,但是尚未从池中获取连接。出现这种情况可能是因为所有池连接均在使用,并且达到了最大池大小。
534 0
如何检查视频画面延迟的时间
做视频通讯的朋友,画面延迟,就是要经常测试的事情。那么怎样测试延迟呢?
454 0
解决、鼠标间歇性、自动断开、又重连(有图)
解决、鼠标间歇性、自动断开、又重连(有图)
358 0
解决、鼠标间歇性、自动断开、又重连(有图)
|
Java Android开发
Andoroid 11 开机广播处理超时导致第三方应用启动延迟
Andoroid 11 开机广播处理超时导致第三方应用启动延迟
497 0
Andoroid 11 开机广播处理超时导致第三方应用启动延迟
心跳 —— 超时机制分析
在C/S模式中,有时我们会长时间保持一个连接,以避免频繁地建立连接,但同时,一般会有一个超时时间,在这个时间内没发起任何请求的连接会被断开,以减少负载,节约资源。并且该机制一般都是在服务端实现,因为client强制关闭或意外断开连接,server端在此刻是感知不到的,如果放到client端实现,在上述情况下,该超时机制就失效了。本来这问题很普通,不太值得一提,但最近在项目中看到了该机制的一种糟糕的实现,故在此深入分析一下。
895 0
心跳 —— 超时机制分析
|
域名解析 SQL Oracle
监听连接时间过长如何解决
当我们用PL/SQL Developer或用SQLlplus (sqlplus user/password@orcl)连接数据库的时候非常缓慢,连接有时需要30秒 左右才能正常登录到数据库,连接之后数据库一切正常。 为了能更好的解决上面的问题,我们需要有如下的一些Oracle的网络基础知识,我们一起来讨论!
监听连接时间过长如何解决
|
存储 消息中间件 SQL
一种低延迟的超时中心实现方式
在很多产品中都存在生命周期相关的设计,时间节点到了之后需要做对应的事情。超时中心(TimeOutCenter,TOC)负责存储和调度生命周期节点上面的超时任务,当超时任务设置的超时时间到期后,超时中心需要立即调度处理这些超时任务。对于一些需要低延迟的超时场景,超时中心调度延迟会给产品带来不可估量的影响。
一种低延迟的超时中心实现方式
|
SQL 容灾 关系型数据库
一次DTS同步延时过高的排错过程
业务场景: 秒级数据同步要求的容灾场景,通过阿里云数据库同步工具DTS实时将阿里云上RDS的数据实时同步至自建MySQL数据库故障现象: DTS同步延时高达2小时,造成主备数据不一致,无法满足业务的容灾需求排查经过: 首先,联系阿里云DTS后台,后台同学反馈,目标数据库RT(响应时间)过高。
1589 0
一次DTS同步延时过高的排错过程
|
监控 API
为什么系统越简单,宕机时间越少?
当新的需求出现时,我们总是倾向于通过其它方式或在现有系统上集成添加新功能。实际上,我们应考虑是否可以通过改变核心系统来满足新的需求。