压榨SCP传输速度

简介:

 对于千兆网来说,带宽大致为125M/s,scp的速度约为40M/s,对于需要全量恢复数据库的时候(300G 左右的量),需要2个小时左右,很不能接受这种情况;

       加快SCP传输速度需要考虑以下几点:

       1、ssh加密算法的改变;(加密算法越弱速度越快在IDC内网间可以考虑使用)

       2、数据完整校验方式改变;(MACs Message authentication code

       3、是否启用压缩;

       4、磁盘性能问题;

       man scp 可调整速率的大多在算法上,(亲测-B batch mode 对传输影响不大)

       -c cipher  -o 完整性校验

       ssh -v 调试ssh连接

       关于以上问题的测试数据可参考:orczhou

       加密算法可以采用 scp -c  aes192-cbc

       数据完整性校验采用  scp -o 'MACs umac-64@openssh.com'   关于此哈希算法

       值得一提的是压缩,只要压缩后节省的传输时间大于压缩本身的时间;

       压缩往往适用于: 网速慢;数据中大量重复、空洞的; 而对于压缩比很低的数据不建议使用SSH的传输压缩方式;最好在本地进行并行压缩后再传输;

      加快压缩可以参考以下命令:

1
scp  -c aes192-cbc -o  "MACs umac-64@openssh.com"





本文转自 位鹏飞 51CTO博客,原文链接:http://blog.51cto.com/weipengfei/1350338,如需转载请自行联系原作者
目录
相关文章
|
2月前
|
存储 分布式计算 监控
如何提高Hadoop集群的网络传输速度?
【6月更文挑战第18天】如何提高Hadoop集群的网络传输速度?
41 3
|
3月前
|
网络架构
【专栏】网络技术:网速和带宽的区别,带宽是网络的最大传输能力,而网速是实际传输速率,受网络拥堵、硬件性能等因素影响
【4月更文挑战第28天】本文探讨了网速和带宽的区别,带宽是网络的最大传输能力,而网速是实际传输速率,受网络拥堵、硬件性能等因素影响。两者关系可比喻为道路车道数与车辆速度。了解这些有助于优化网络体验,如选择合适带宽、升级硬件、使用有线连接、管理带宽占用和连接时机。理解二者差异能帮助我们更好地评估网络服务并提升上网效率。
100 1
|
人工智能 固态存储 网络协议
持久内存+RDMA让远程数据不再远-总结
持久内存+RDMA让远程数据不再远-总结
170 0
|
Unix 网络安全
rsync超级光速传输脚本
rsync超级光速传输脚本
|
存储 缓存 固态存储
服务器硬件RAID性能横评(1)(上)
服务器硬件RAID性能横评(1)
服务器硬件RAID性能横评(1)(上)
|
存储 固态存储 测试技术
服务器硬件RAID性能横评(2)
服务器硬件RAID性能横评(2)
服务器硬件RAID性能横评(2)
|
存储 负载均衡 固态存储
服务器硬件RAID性能横评(4)
服务器硬件RAID性能横评(4)
服务器硬件RAID性能横评(4)
|
存储 固态存储 测试技术
服务器硬件RAID性能横评(3)
服务器硬件RAID性能横评(3)
服务器硬件RAID性能横评(3)
|
网络协议 网络虚拟化 Windows
测试vpn设备 带宽,丢包率windows使用iperf3
iPerf3是用于主动测试IP网络上最大可用带宽的工具。它支持时序、缓冲区、协议(TCP,UDP,SCTP与IPv4和IPv6)有关的各种参数。对于每次测试,它都会详细的带宽报告,延迟抖动和数据包丢失。
744 0
测试vpn设备 带宽,丢包率windows使用iperf3