线下 + 线上多种迁移方式,为115 提供最佳迁移方案

本文涉及的产品
对象存储 OSS,20GB 3个月
云备份 Cloud Backup,100GB 3个月
对象存储 OSS,内容安全 1000次 1年
简介: 线下 + 线上多种迁移方式,为115 提供最佳迁移方案

更多存储标杆案例
欢迎点击下方链接查看

阿里云存储标杆案例样板间

公司介绍
广东一一五科技股份有限公司(简称“115科技”),是国内最早一批从事云存储研发的高新技术企业 ,致力于为个人及组织提供高可靠性和高安全性的云服务,推动云计算技术与人们生活、工作的深度融合。115科技旗下核心产品之一“115个人”(原“115网盘”)是国内最早一批上线的云盘产品,目前也是国内用户量最庞大的网盘产品之一。

image.png

业务场景介绍
115科技在2018年,“115个人”就已积累了100PB的数据,由于业务发展快,基础建设追赶艰难,虽然多年来115个人的业务稳定运营,但却在IT基础架构运维上投入了大量的人力,不仅成本高,而且效率低、压力大。为了突破这样的瓶颈,115科技决定把专业的事情交给专业的人做,把精力都投入到业务上。

百PB数据迁移,业务不能中断

  1. 百PB级别的挑战:业务不中断,服务不停机

由于数据规模巨大,本次迁移遇到了前所未有的挑战,比如在迁移过程中,如何保证数据的一致性,让数据不丢失、不错乱;同时又能实现多通道并发迁移提升迁移效率;再比如,如何让整个迁移过程中整体服务不停机,客户无感知。

  1. 数据迁移路径长,确保数据的安全性是个难题

100PB数据迁移,涉及多样化数据类型,多种迁移方式并行,整个迁移方案复杂度极高。在迁移过程中,不仅要保证数据的一致性与迁移效率,同时数据安全也是迁移过程中的重中之重。

多种迁移方式,为115提供最佳迁移方案
1.多种迁移方式结合
于适合线上迁移的数据,阿里云采用了专线互连的传输方式,建立边界路由器和路由器接口来连接115的数据中心与阿里云VPC,采用400Gb/s的分布式在线数据传输服务OSSImport,将115的数据加密迁移到对象存储OSS中。对于不适合在线迁移的数据,阿里云提供离线数据迁移方案——闪电立方,它可防尘防水,抗震抗压。每套闪电立方可容纳480TB数据。同一时间多种迁移方式并行工作,帮助115从预计的4个月时长大幅缩短到了45天。

2.高效定制,只为快速迁移
为了提升传输效率,阿里云存储研发团队在10天内设计了11个功能,包括SHA-1校验边算边传、WORM(一写多读禁止覆盖))、HEIF与矢量图片转换支持等特性,用于承载115科技的非结构化数据如文档、图片、视频的业务,最终帮助115完成了100PB数据的迁移。

  1. 提供完善的数据安全保护机制

在数据迁移的过程中,阿里云针对每个文件都进行了数据加密,同时对每个文件都做端到端的SHA-1校验,确保迁移效率与数据安全的同时,还能很好地避免出现数据不可用或者不一致的情况,保证每一比特都有迹可循。

115.png

达到的效果
此次合作中,阿里云为115科技量身定制了高效、稳定的迁移方案,整体迁移仅耗时45天,创造了新的“中国速度”。 同时,充分保障用户数据安全,整个数据传输过程严格遵循“加密→解密→进库”规范,一步都没有省。现在115科技也正在深度使用阿里云的ECS、CDN、DTS、SLB、OSS、MongoDB等服务,基于阿里云优质的网络与分发等服务,不少用户反馈,访问网盘更加流畅,下载速度也更快了。

相关文章
|
5月前
|
运维 监控 UED
应用研发平台EMAS常见问题之设备在线状态一直在线突然变成离线状态如何解决
应用研发平台EMAS(Enterprise Mobile Application Service)是阿里云提供的一个全栈移动应用开发平台,集成了应用开发、测试、部署、监控和运营服务;本合集旨在总结EMAS产品在应用开发和运维过程中的常见问题及解决方案,助力开发者和企业高效解决技术难题,加速移动应用的上线和稳定运行。
|
3月前
|
运维 数据安全/隐私保护
跨租户发布期间不阻塞研发和运维,有效提高工作效率
Dataphin作为企业级的数据平台,用户来源于公司不同的团队。在之前版本的跨租户发布期间,非“跨租户发布使用人”的用户都无法正常进入当前租户,影响了工作效率。Dataphin在V4.2版本中缩减了跨租户发布的影响范围,在保障发布的稳定性时,允许进行研发和运维,帮助您提升工作效率。
|
3月前
|
SQL 运维 安全
Dataphin V4.2重大升级:上线敏捷版,打通数据资产管理和消费,开启数据价值放大新篇章
Dataphin 是阿里巴巴旗下的一个智能数据建设与治理平台,旨在帮助企业构建高效、可靠、安全的数据资产。在V4.2版本中,Dataphin敏捷版上线助力企业打造轻量版数据中台,打通数据资产管理和消费,陪伴企业迈入数据高价值应用新阶段。
1657 2
Dataphin V4.2重大升级:上线敏捷版,打通数据资产管理和消费,开启数据价值放大新篇章
|
3月前
|
运维 数据格式
实时数据同步的守护者:脏数据下载查看功能重磅上线
在复杂的数据同步过程中,难免会因为各种原因产生一些不准确、不完整或格式错误的脏数据。如果不能及时识别和处理这些脏数据,将可能影响数据的一致性和后续的业务分析。
|
5月前
|
存储 运维 关系型数据库
规划阿里云RDS跨区迁移业务需求业务影响分析
规划阿里云RDS跨区迁移业务需求业务影响分析
62 4
|
5月前
|
监控 Cloud Native 关系型数据库
记录一次云原生线上服务数据迁移全过程
记录一次云原生线上服务数据迁移全过程
记录一次云原生线上服务数据迁移全过程
|
10月前
|
存储 分布式计算 关系型数据库
Dataphin 提供公共云在线服务和线下独立部署(授权/订阅)两种服务模式。
Dataphin 提供公共云在线服务和线下独立部署(授权/订阅)两种服务模式。
231 2
|
容灾 关系型数据库 MySQL
使用DTS完成数据库从线下到线上的迁移(一)
使用DTS完成数据库从线下到线上的迁移(一)
362 0
|
数据库 数据安全/隐私保护 开发者
使用DTS完成数据库从线下到线上的迁移(二)
使用DTS完成数据库从线下到线上的迁移(二)
107 0
|
消息中间件 存储 运维
线上环境大规模RocketMQ集群不停机优雅升级实践
线上环境大规模RocketMQ集群不停机优雅升级实践
线上环境大规模RocketMQ集群不停机优雅升级实践
下一篇
无影云桌面