掉线时限参数设置| 学习笔记

简介: 快速学习掉线时限参数设置

开发者学堂课程【Hadoop 分布式文件系统 HDFS掉线时限参数设置】学习笔记,与课程紧密联系,让用户快速学习知识。

课程地址https://developer.aliyun.com/learning/course/93/detail/1466


掉线时限参数设置


目录:

一、掉线时限参数设置

二、参数举例

 

一、掉线时限参数设置

1、DataNode 进程死亡或者网络故障造成 DataNode 无法与 NameNode 通信

2、NameNode 不会立即把该节点判定为死亡,要经过一段时间,这段时间暂称作超时时长。 3HDFS 默认的超时时长为10分钟+30秒。

4、如果定义超时时间为 TimeOut,则超时时长的计算公式为:

TimeOut=2*dfsnamenodeheartbeat.recheckinterval+10*dfs.heartbeatinterval。

而默认的dfs.namenodeheatbeatrecheck-interval大小为5分钟,dfsheartbeatinterval默认为3秒。

图片1.png

参数举例

需要注意的是 hdfs-site.xml 配置文件中的 heartbeat.recheck.interval 的单位为毫秒,dfs.heartbeat.interval 的单位为秒。

图片2.png

在系统配置里面查找到的是

图片3.png

也就是说300000毫秒进化为分钟就是5分钟

图片4.png

在配置系统里面找到的是

图片5.png

相关文章
|
机器学习/深度学习 存储 缓存
mPaaS扫码速度过快导致出错的问题
mPaaS扫码速度过快导致出错的问题
138 1
|
4月前
|
消息中间件 监控 安全
服务Down机了,线程池中的数据如何保证不丢失?
在分布式系统与高并发应用开发中,服务的稳定性和数据的持久性是两个至关重要的考量点。当服务遭遇Down机时,如何确保线程池中处理的数据不丢失,是每一位开发者都需要深入思考的问题。以下,我将从几个关键方面分享如何在这种情况下保障数据的安全与完整性。
84 2
|
存储 缓存 API
案例23-服务出现频繁掉线情况
服务出现频繁掉线情况
253 0
|
存储 SQL 数据库
超时时间已到。超时时间已到,但是尚未从池中获取连接。出现这种情况可能是因为所有池连接均在使用,并且达到了最大池大小。
超时时间已到。超时时间已到,但是尚未从池中获取连接。出现这种情况可能是因为所有池连接均在使用,并且达到了最大池大小。
724 0
解决、鼠标间歇性、自动断开、又重连(有图)
解决、鼠标间歇性、自动断开、又重连(有图)
383 0
解决、鼠标间歇性、自动断开、又重连(有图)
|
Java Android开发
Andoroid 11 开机广播处理超时导致第三方应用启动延迟
Andoroid 11 开机广播处理超时导致第三方应用启动延迟
531 0
Andoroid 11 开机广播处理超时导致第三方应用启动延迟
|
算法 数据挖掘 C++
怎样解决坐席进线慢的问题?
怎样解决坐席进线慢的问题?
|
存储 NoSQL
3.10.0-693.5.2内核nfs客户端租约过期挂死问题分析
## 现象 1. 边缘存储两个节点fileserver,glance挂载物理机上的挂载点均出现挂住无法访问 2. 从客户端抓包看,客户端内核间隔5s向服务端发送renew租约请求,服务端返回NFS4ERR_EXPIRED,即租约过期错误,从抓包现象看客户端一直向服务端发送相同的clientid renew请求,服务端一直返回租约过期错误,导致挂载点无法恢复 ![](https://ata2-img
1718 1
3.10.0-693.5.2内核nfs客户端租约过期挂死问题分析
|
域名解析 SQL Oracle
监听连接时间过长如何解决
当我们用PL/SQL Developer或用SQLlplus (sqlplus user/password@orcl)连接数据库的时候非常缓慢,连接有时需要30秒 左右才能正常登录到数据库,连接之后数据库一切正常。 为了能更好的解决上面的问题,我们需要有如下的一些Oracle的网络基础知识,我们一起来讨论!
监听连接时间过长如何解决
|
SQL 容灾 关系型数据库
一次DTS同步延时过高的排错过程
业务场景: 秒级数据同步要求的容灾场景,通过阿里云数据库同步工具DTS实时将阿里云上RDS的数据实时同步至自建MySQL数据库故障现象: DTS同步延时高达2小时,造成主备数据不一致,无法满足业务的容灾需求排查经过: 首先,联系阿里云DTS后台,后台同学反馈,目标数据库RT(响应时间)过高。
1611 0
一次DTS同步延时过高的排错过程

热门文章

最新文章