配置迁移文件单机版 迁移前要明确客户端的迁移体量和文件数量。目的是合理的配置 task 和线程数 量,以及 ossimport 的工作模型。 ● 一般迁移体量小于 30TB 的完全可以采用单机模式进行迁移,单机版可以配置 多线程的方式进行迁移,调节 workerTaskThreadNum 参数,需要注意的是 如果是高配,物理机的话,数量可以调大,可以参考 平均文件 size * 线程数 量,对比 memory 是否够用,同时也要参考 CPU 核心数量是否能否抗住这 种并发量。 ● 当高并发,且文件的 size 较大时,如果配置数量不合理,会出现设备 OOM 的情况,可以通过 /var/log/message 看到,这是要么选择降低并发线程数 量,要么是增大机器配置。 ● 如果是本地 ECS 或者第三方存储迁移到 OSS ,请注意源是否有限流,目前经 常会出现源发现有大流量流出后直接给限制住,导致迁移速度无法增长。关键 参数 workerMaxThroughput(KB/s),如果源没有限制,可以释放调大这数。 ● 其他 sys.properties 文件中的属性不要随意改动。
版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。