线下 + 线上多种迁移方式,为115 提供最佳迁移方案

本文涉及的产品
对象存储 OSS,20GB 3个月
对象存储 OSS,内容安全 1000次 1年
对象存储 OSS,恶意文件检测 1000次 1年
简介: 线下 + 线上多种迁移方式,为115 提供最佳迁移方案

更多存储标杆案例
欢迎点击下方链接查看

阿里云存储标杆案例样板间

公司介绍
广东一一五科技股份有限公司(简称“115科技”),是国内最早一批从事云存储研发的高新技术企业 ,致力于为个人及组织提供高可靠性和高安全性的云服务,推动云计算技术与人们生活、工作的深度融合。115科技旗下核心产品之一“115个人”(原“115网盘”)是国内最早一批上线的云盘产品,目前也是国内用户量最庞大的网盘产品之一。

image.png

业务场景介绍
115科技在2018年,“115个人”就已积累了100PB的数据,由于业务发展快,基础建设追赶艰难,虽然多年来115个人的业务稳定运营,但却在IT基础架构运维上投入了大量的人力,不仅成本高,而且效率低、压力大。为了突破这样的瓶颈,115科技决定把专业的事情交给专业的人做,把精力都投入到业务上。

百PB数据迁移,业务不能中断

  1. 百PB级别的挑战:业务不中断,服务不停机

由于数据规模巨大,本次迁移遇到了前所未有的挑战,比如在迁移过程中,如何保证数据的一致性,让数据不丢失、不错乱;同时又能实现多通道并发迁移提升迁移效率;再比如,如何让整个迁移过程中整体服务不停机,客户无感知。

  1. 数据迁移路径长,确保数据的安全性是个难题

100PB数据迁移,涉及多样化数据类型,多种迁移方式并行,整个迁移方案复杂度极高。在迁移过程中,不仅要保证数据的一致性与迁移效率,同时数据安全也是迁移过程中的重中之重。

多种迁移方式,为115提供最佳迁移方案
1.多种迁移方式结合
于适合线上迁移的数据,阿里云采用了专线互连的传输方式,建立边界路由器和路由器接口来连接115的数据中心与阿里云VPC,采用400Gb/s的分布式在线数据传输服务OSSImport,将115的数据加密迁移到对象存储OSS中。对于不适合在线迁移的数据,阿里云提供离线数据迁移方案——闪电立方,它可防尘防水,抗震抗压。每套闪电立方可容纳480TB数据。同一时间多种迁移方式并行工作,帮助115从预计的4个月时长大幅缩短到了45天。

2.高效定制,只为快速迁移
为了提升传输效率,阿里云存储研发团队在10天内设计了11个功能,包括SHA-1校验边算边传、WORM(一写多读禁止覆盖))、HEIF与矢量图片转换支持等特性,用于承载115科技的非结构化数据如文档、图片、视频的业务,最终帮助115完成了100PB数据的迁移。

  1. 提供完善的数据安全保护机制

在数据迁移的过程中,阿里云针对每个文件都进行了数据加密,同时对每个文件都做端到端的SHA-1校验,确保迁移效率与数据安全的同时,还能很好地避免出现数据不可用或者不一致的情况,保证每一比特都有迹可循。

115.png

达到的效果
此次合作中,阿里云为115科技量身定制了高效、稳定的迁移方案,整体迁移仅耗时45天,创造了新的“中国速度”。 同时,充分保障用户数据安全,整个数据传输过程严格遵循“加密→解密→进库”规范,一步都没有省。现在115科技也正在深度使用阿里云的ECS、CDN、DTS、SLB、OSS、MongoDB等服务,基于阿里云优质的网络与分发等服务,不少用户反馈,访问网盘更加流畅,下载速度也更快了。

相关文章
|
3月前
|
弹性计算 应用服务中间件 持续交付
阿里云应用方案
为拥有传统单体和微服务架构混合的电商企业提供阿里云应用方案。该方案利用阿里云服务器迁移中心(SMC)实现IDC服务器到ECS的快速自动迁移,并通过云效建立自动化部署流水线。微服务应用则采用企业级分布式应用服务EDAS进行无缝迁移。数据迁移方面,实施多租户隔离与统一管理规范,确保数据迁移的安全性与合规性。此方案旨在帮助企业平滑迁移上云,优化资源管理,加速业务响应,并保障数据安全与业务连续性,助力数字化转型。
|
4月前
|
运维 数据格式
实时数据同步的守护者:脏数据下载查看功能重磅上线
在复杂的数据同步过程中,难免会因为各种原因产生一些不准确、不完整或格式错误的脏数据。如果不能及时识别和处理这些脏数据,将可能影响数据的一致性和后续的业务分析。
|
6月前
|
监控 NoSQL 关系型数据库
Serverless 应用引擎常见问题之现象上是注册中心业务模块掉线了如何解决
Serverless 应用引擎(Serverless Application Engine, SAE)是一种完全托管的应用平台,它允许开发者无需管理服务器即可构建和部署应用。以下是Serverless 应用引擎使用过程中的一些常见问题及其答案的汇总:
|
6月前
|
存储 运维 关系型数据库
规划阿里云RDS跨区迁移业务需求业务影响分析
规划阿里云RDS跨区迁移业务需求业务影响分析
71 4
|
6月前
|
监控 Cloud Native 关系型数据库
记录一次云原生线上服务数据迁移全过程
记录一次云原生线上服务数据迁移全过程
记录一次云原生线上服务数据迁移全过程
|
容灾 关系型数据库 MySQL
使用DTS完成数据库从线下到线上的迁移(一)
使用DTS完成数据库从线下到线上的迁移(一)
387 0
|
数据库 数据安全/隐私保护 开发者
使用DTS完成数据库从线下到线上的迁移(二)
使用DTS完成数据库从线下到线上的迁移(二)
113 0
|
SQL 运维 安全
NineData x 阿里云 正式上线
3月8日,NineData 多云数据管理正式上线阿里云云市场,NineData 提供的主要能力包括 SQL 开发、企业级数据库访问管理、数据迁移与复制、数据库备份、数据对比等,它可以帮助企业和开发者,轻松完成日常数据库开发、数据安全访问、生产数据库变更与发布、数据库备份恢复、数据迁移、容灾多活、数据仓库及数据湖构建等核心应用场景。
304 0
NineData x 阿里云 正式上线
|
存储 Prometheus 监控
重磅!DIY的Prometheus主备方案,全网唯一。生产未上,测试先行。
重磅!DIY的Prometheus主备方案,全网唯一。生产未上,测试先行。
318 0
|
安全 Cloud Native 搜索推荐
淘宝首页serverless升级后的质量保障方案
本文主要介绍了serverless 架构升级在淘宝首页的应用,新架构对底层所依赖的容器、环境资源等与之前相比差异较大,并且对应的预发、安全生产、生产等环境,与旧架构的完全隔离。
226 0
淘宝首页serverless升级后的质量保障方案