掉线时限参数设置| 学习笔记

简介: 快速学习掉线时限参数设置

开发者学堂课程【Hadoop 分布式文件系统 HDFS掉线时限参数设置】学习笔记,与课程紧密联系,让用户快速学习知识。

课程地址https://developer.aliyun.com/learning/course/93/detail/1466


掉线时限参数设置


目录:

一、掉线时限参数设置

二、参数举例

 

一、掉线时限参数设置

1、DataNode 进程死亡或者网络故障造成 DataNode 无法与 NameNode 通信

2、NameNode 不会立即把该节点判定为死亡,要经过一段时间,这段时间暂称作超时时长。 3HDFS 默认的超时时长为10分钟+30秒。

4、如果定义超时时间为 TimeOut,则超时时长的计算公式为:

TimeOut=2*dfsnamenodeheartbeat.recheckinterval+10*dfs.heartbeatinterval。

而默认的dfs.namenodeheatbeatrecheck-interval大小为5分钟,dfsheartbeatinterval默认为3秒。

图片1.png

参数举例

需要注意的是 hdfs-site.xml 配置文件中的 heartbeat.recheck.interval 的单位为毫秒,dfs.heartbeat.interval 的单位为秒。

图片2.png

在系统配置里面查找到的是

图片3.png

也就是说300000毫秒进化为分钟就是5分钟

图片4.png

在配置系统里面找到的是

图片5.png

相关文章
|
6月前
|
消息中间件 Arthas 监控
消息队列 MQ产品使用合集之每次重置reconsumeTimes就无法达到死信阈值,重试次数是否就要应用方控制
消息队列(MQ)是一种用于异步通信和解耦的应用程序间消息传递的服务,广泛应用于分布式系统中。针对不同的MQ产品,如阿里云的RocketMQ、RabbitMQ等,它们在实现上述场景时可能会有不同的特性和优势,比如RocketMQ强调高吞吐量、低延迟和高可用性,适合大规模分布式系统;而RabbitMQ则以其灵活的路由规则和丰富的协议支持受到青睐。下面是一些常见的消息队列MQ产品的使用场景合集,这些场景涵盖了多种行业和业务需求。
消息队列 MQ产品使用合集之每次重置reconsumeTimes就无法达到死信阈值,重试次数是否就要应用方控制
|
7月前
|
移动开发 小程序 JavaScript
mPaas 问题之参数收不到如何解决
mPaaS小程序是阿里巴巴移动平台服务(mPaaS)推出的一种轻量级应用解决方案,旨在帮助开发者快速构建跨平台的小程序应用;本合集将聚焦mPaaS小程序的开发流程、技术架构和最佳实践,以及如何解决开发中遇到的问题,从而助力开发者高效打造和维护小程序应用。
|
存储 SQL 数据库
超时时间已到。超时时间已到,但是尚未从池中获取连接。出现这种情况可能是因为所有池连接均在使用,并且达到了最大池大小。
超时时间已到。超时时间已到,但是尚未从池中获取连接。出现这种情况可能是因为所有池连接均在使用,并且达到了最大池大小。
615 0
解决、鼠标间歇性、自动断开、又重连(有图)
解决、鼠标间歇性、自动断开、又重连(有图)
373 0
解决、鼠标间歇性、自动断开、又重连(有图)
|
Java Android开发
Andoroid 11 开机广播处理超时导致第三方应用启动延迟
Andoroid 11 开机广播处理超时导致第三方应用启动延迟
513 0
Andoroid 11 开机广播处理超时导致第三方应用启动延迟
|
网络协议 Windows
【错误集】不定时更新
文章目录 前言 一、内容 二、服务(配置文件) 2.1 DNS服务无效(文件无权
156 0
【错误集】不定时更新
|
存储 安全 网络协议
WCF服务调用超时错误:套接字连接已中止。这可能是由于处理消息时出错或远程主机超过接收超时或者潜在的网络资源问题导致的。本地套接字超时是“00:05:30”(已解决)
WCF服务调用超时错误:套接字连接已中止。这可能是由于处理消息时出错或远程主机超过接收超时或者潜在的网络资源问题导致的。本地套接字超时是“00:05:30”(已解决)
700 0
心跳 —— 超时机制分析
在C/S模式中,有时我们会长时间保持一个连接,以避免频繁地建立连接,但同时,一般会有一个超时时间,在这个时间内没发起任何请求的连接会被断开,以减少负载,节约资源。并且该机制一般都是在服务端实现,因为client强制关闭或意外断开连接,server端在此刻是感知不到的,如果放到client端实现,在上述情况下,该超时机制就失效了。本来这问题很普通,不太值得一提,但最近在项目中看到了该机制的一种糟糕的实现,故在此深入分析一下。
916 0
心跳 —— 超时机制分析
|
域名解析 SQL Oracle
监听连接时间过长如何解决
当我们用PL/SQL Developer或用SQLlplus (sqlplus user/password@orcl)连接数据库的时候非常缓慢,连接有时需要30秒 左右才能正常登录到数据库,连接之后数据库一切正常。 为了能更好的解决上面的问题,我们需要有如下的一些Oracle的网络基础知识,我们一起来讨论!
监听连接时间过长如何解决