OSS高速通道跨国复制最佳实践

本文涉及的产品
对象存储 OSS,20GB 3个月
对象存储 OSS,内容安全 1000次 1年
对象存储 OSS,恶意文件检测 1000次 1年
简介: 原作者:阿里云飞天解决方案架构师,爅冉。本文告诉读者,怎样通过结合OSS、ossimport、高速通道,实现跨国文件的快速复制。

部署步骤:

1、在上海region部署VPC1,VPC下部署ECS作为代理机器

2、在ECS上部署 ossimport,或者osscmd/ossutil

3、开通上海至美西的高速通道,将美西的OSS VPC内网访问地址 加入到高速通道的路由配置中

4、配置ossimport ,详细步骤参照:https://help.aliyun.com/document_detail/32201.html?spm=5176.doc44075.6.1037.T83MB2 ,其中目标端oss endpoint 填写OSS VPC内网访问endpoint,参见 https://help.aliyun.com/document_detail/31837.html


架构图:

c551ca92fd442838346bd7d511688a251c8d76a6


注意事项:

1、ossimport适合大量多个文件传输,如果仅为单个文件同步,单线程无法将高速通道带宽打满

2、同步无法做到非常实时,可实现增量同步,目前工具中增量同步最小间隔为 900秒,文件大小限制为 1T

3、若是单个文件同步,可采用osscmd/ossutil下载至ECS中,再传输到美西OSS上

4、测试中采用10M 高速通道,可将带宽打满,同步速度完全取决于高速通道带宽


目录
相关文章
|
9月前
|
存储 安全 API
利用对象存储(OSS)实现内容分发加速 :高效可靠的解决跨境下载延迟问题
利用对象存储(OSS)实现内容分发加速 :高效可靠的解决跨境下载延迟问题
360 2
|
8月前
|
CDN 缓存 UED
【计算巢】内容分发网络(CDN):加速全球内容传输的技术
【6月更文挑战第3天】内容分发网络(CDN)是加速全球内容传输的关键技术,通过在全球建立节点服务器,缓存内容以减少传输延迟。CDN在电商、视频流媒体等领域提升用户体验,确保快速加载速度。示例代码展示了CDN基本逻辑。然而,构建高效CDN需解决缓存策略、节点管理等问题,并依据业务需求规划配置。随着技术演进,CDN将持续优化性能,为数字生活带来更多便利。
99 3
【计算巢】内容分发网络(CDN):加速全球内容传输的技术
|
存储 Linux API
如何经济高效使用云存储网关对接OSS存储
存储网关是一款可以为OSS存储提供文件访问接口的产品,从而用户可以像使用NAS一样在Windows/Linux操作系统里面直接挂载OSS进行使用。众所周知,OSS存储具有多种存储类型。那么对于所有的存储类型,云存储网关是否都适用呢?本文将围绕这一话题,展开一些探讨。
272 0
|
9月前
|
缓存 安全 API
对象存储OSS产品常见问题之多租户系统用程序统计每个租户的下行流量如何解决
对象存储OSS是基于互联网的数据存储服务模式,让用户可以安全、可靠地存储大量非结构化数据,如图片、音频、视频、文档等任意类型文件,并通过简单的基于HTTP/HTTPS协议的RESTful API接口进行访问和管理。本帖梳理了用户在实际使用中可能遇到的各种常见问题,涵盖了基础操作、性能优化、安全设置、费用管理、数据备份与恢复、跨区域同步、API接口调用等多个方面。
407 0
|
存储 大数据 Serverless
带你读《云存储应用白皮书》之28:1. 影视数据存储与传输加速方案
带你读《云存储应用白皮书》之28:1. 影视数据存储与传输加速方案
269 0
|
存储 容灾
《混合云存储开启企业上云新路径---阿里云混合云备份容灾方案发布》电子版地址
混合云存储开启企业上云新路径---阿里云混合云备份容灾方案发布
200 0
《混合云存储开启企业上云新路径---阿里云混合云备份容灾方案发布》电子版地址
|
存储 域名解析 边缘计算
一种跨境场景源站加速访问的存储解决方案设计探讨
随着全球一体化进程的加速,越来越多国内企业出海或者海外企业进驻国内市场,许多企业的IT架构都会遇到如何以最优的投入产出比同时满足海内外客户的数据存储和读写访问需求,让业务快速适应剧烈变化的市场需求。本文将结合实际客户服务案例,试图提供一套解决方案。
361 0
一种跨境场景源站加速访问的存储解决方案设计探讨
|
存储 弹性计算 对象存储
混合云存储网关跨境数据传输最佳实践
在之前的文章中,我介绍了混合云存储网关的传输加速功能。那么传输加速的实际效果到底如何?在跨境传输的时候值不值得使用传输加速?为了找到答案,我们做了一些测试,得到了一些结论,供大家参考。
623 0
混合云存储网关跨境数据传输最佳实践
|
存储 对象存储 数据中心
阿里云基于OSS的云上统一数据保护方案2.0技术解析
近年来,随着越来越多的企业从传统经济向数字经济转型,云已经渐渐成为数据经济IT新常态。核心业务系统上云,云上的业务创新,这些都产生了大量的业务数据,这些数据也成为了企业最重要的资产、资源。 阿里云基于OSS的云上统一数据保护方案2.0,针对业务上云后数据保护所面临的挑战,提供多层次、全方位的数据保护解决方案,让您业务上云,数据无忧。
10045 0