开发者社区> 云语科技> 正文

快速将企业海量文件数据迁移到阿里云OSS

简介: 对象云存储因为下面两个功能特性,得到了海量使用: 可以直接http调用 可靠、安全、按量使用阿里云OSS在各大云服务商中,通过可靠、高性价比的服务得到了大量用户的仁科。 企业用户在企业内部或者传统IDC机房中,累计了海量的文件数据,如何快速将TB级别甚至PB文件数据迁移到OSS,是一个IT挑战任务。
+关注继续查看

对象云存储因为下面两个功能特性,得到了海量使用:

  • 可以直接http调用
  • 可靠、安全、按量使用

阿里云OSS在各大云服务商中,通过可靠、高性价比的服务得到了大量用户的仁科。
企业用户在企业内部或者传统IDC机房中,累计了海量的文件数据,如何快速将TB级别甚至PB文件数据迁移到OSS,是一个非常挑战的任务。

方案介绍

下文介绍两种方案:

  • 方案1:在阿里云市场中购买阿里云OSS数据迁移服务

https://market.aliyun.com/products/52738004/cmfw000394.html?spm=5176.730005-52738004.0.0.MMvsLp#sku=90tb
这类服务公司具体实现技术方法是:
1)在公司机房拉一条专线通往阿里云机房;
2)给需要迁移数据的用户提供硬盘,用户把自己的数据拷贝到硬盘上,寄送给服务公司;
3)服务公司把硬盘上的数据导入阿里云OSS;
这种方法的优点是相对省事,缺点是硬盘快递实时性不够,另外还有数据安全上的风险。

  • 方案2:采用软件构建海量数据迁移系统

本文推荐使用 RaySync传输软件 + 阿里云CSG对象存储网关 组合方案来解决海量数据迁移问题,部署架构如下图:
screenshot

其中“RaySync传输软件”解决从企业公司或企业IDC到阿里云文件网络传输问题,“RaySync传输软件”对比“普通OSS文件”在网络传输速度上有巨大的优势,结合“CSG对象存储网关”可有效帮助企业简单、低成本构建1套快速迁移数据的IT系统。

安装配置

RaySync传输软件安装,可参考下面链接帖子描述:
https://bbs.aliyun.com/read/574561.html?spm=0.0.0.0.WQxTGZ
阿里云CSG对象存储网关配置使用,可参考
https://yq.aliyun.com/articles/399702?spm=a2c4e.11155435.0.0.632dcd91fchA6i

作者所在企业,采用“RaySync传输软件”+“CSG对象存储网关”,构建海量数据迁移系统,轻松完成数十TB的数据迁移工作。

版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。

相关文章
阿里云内存数据库Tair新一代集群无感数据迁移
本文将阐述社区开源版本集群数据迁移的技术,阿里云Tair for Redis集群早期对社区迁移数据的增强改进以及演进到新一代基于Slot复制的无感数据迁移原理。
220 0
Amazon Redshift数据迁移阿里云MaxCompute技术方案
本文将介绍如何通过公网环境迁移Amazon Redshift数据到阿里云MaxCompute服务当中。
1221 0
再出王牌:阿里云 Jindo DistCp 全面开放使用,成为阿里云数据迁移利器
此前 Jindo DistCp 仅限于E-MapReduce产品内部使用,此次全方位面向整个阿里云OSS/HDFS用户放开,并提供官方维护和支持技术,欢迎广大用户集成和使用。
2309 0
自建 Hadoop 数据迁移到阿里云EMR集群
客户在 IDC 或者公有云环境自建 Hadoop 集群,数据集中保存在 HDFS文件系统用于数据分析任务。客户在决定上云之后,会将自建 Hadoop 集群的数据迁移到阿里云自建 Hadoop 集群或者 EMR 集群。本实践方案提供安全和低成本的 HDFS 数据迁移方案。
1891 0
自建Hadoop数据迁移到阿里云EMR
客户在IDC或者公有云环境自建Hadoop集群,数据集中保存在HDFS文件系统用于数据分析任务。客户在决定上云之后,会将自建Hadoop集群的数据迁移到阿里云自建部署架构图 Hadoop集群或者EMR集群。本实践方案提供安全和低成本的HDFS数据迁移方案。
1239 0
从Mysql到阿里云时序数据库InfluxDB的数据迁移
作为阿里在APM和IOT领域的重要布局,时序数据库承载着阿里对于物理网和未来应用监控市场的未来和排头兵,作为业内排名第一的时序数据库InfluxDB,其在国内和国际都拥有了大量的用户,阿里适逢其时,重磅推出了阿里云 InfluxDB®。
6278 0
轻松上云系列之四:阿里云数据迁移至本地
本文档描述如何将阿里云数据迁移至本地,主要为您提供了云上数据库的迁移场景的实践方案。
5447 0
轻松上云系列之三:阿里云产品间数据迁移
本文档描述如何进行阿里云上跨产品的数据迁移,为您提供了多个场景的实践方案。12月27日新增阿里云ECS实例之间的数据迁移。
4517 0
轻松上云系列之二:其他云数据迁移至阿里云
本文档围绕如何将您其他云厂商上的数据迁移到阿里云,提供了多个场景的实践方案。12月27日新增各大云厂商数据迁移至阿里云ECS系列。
4416 0
+关注
云语科技
超过10年通信设备研发,精通网络传输,专注于跨国网络问题解决。
文章
问答
文章排行榜
最热
最新
相关电子书
更多
Elastic与阿里云合作宣传信息白皮书
立即下载
阿里云&信通院《Serverless数据库技术研究报告》
立即下载
降本增效,阿里云数据治理Workshop上海站
立即下载