今天上班发现跨省线路带宽被占满,影响了业务数据传送,排除过程如下:
1. 查看监控系统,跨省端口从半夜一直占满带宽。
2. 查看流量系统,找到高流量应用是rsync
3. 找到rsync应用的主机和对端服务器,发现是业务系统A
4. 至此确定是A系统数据备份传送造成的。
5. 联系工程师手动停掉备份作业,故障消除。
分析:
1.检查内部流量,发现本地备份服务器也在半夜出现流量,持续5分钟左右
2.依据备份策略,在此期间应该是A服务器的备份数据上传
3.检查备份数据,A服务器总计在5分钟内上传了4GB到本地服务器
4.按照跨省线路带宽,传送4GB数据,大概需要4-5个小时
5.可以确定是备份数据量过大导致传送超期了
解决:
1.修改备份策略,将备份数量减少
2.修改备份时间,将备份时间往前挪,尽量在上班前完成上传
3.考虑升级带宽
本文转自 yab109 51CTO博客,原文链接:http://blog.51cto.com/active/1683238,如需转载请自行联系原作者