机器间传输很慢
为了打比赛在云上搭建了spark集群，配置一开始是16核24G内存计算行ebs，8M带宽，3台主机；搭建完后，把本地（本地的意思已经在服务器上但不在hdfs上）10G左右数据，只先上传一个文件700多M测试。可是整整花了我半小时时间；另外由于开始的失误数据没有放到master节点，后面用scp传输数据到master发现速度只有100K秒。急了，临时调整了100M 4个小时带宽临时调整，调整完5分钟后重启服务器，可是。。。一开始很开心1M每秒，可是没几秒钟就又降到了100k没秒。。。搞笑啊么。。。。还是有啥问题
展开
收起
版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
相关问答
问答排行榜
最热
最新
推荐问答
