阿里云ecs服务器之间大文件迁移利用阿里云oss通过内网传输解决方案

本文涉及的产品
对象存储 OSS,标准 - 本地冗余存储 20GB 3个月
对象存储 OSS,内容安全 1000 次 1年
对象存储OSS,敏感数据保护2.0 200GB 1年
简介: 阿里云ecs服务器之间大文件迁移利用阿里云oss通过内网传输解决方案

官方工具下载地址:https://help.aliyun.com/document_detail/44075.html


1.如果是windows的服务器直接下载阿里云官方图形界面工具ossbrowser,上传到oss,然后在从另外一台服务器下载oss里面大文件到服务器磁盘,需要注意通过内网上传下载,如果通过外网需要额外支付流量费用。


6.png

7.png

2.如果是linux服务器需要使用ossutil,文章以centos7详细举例说明


ossutil下载和安装


[root@iZ2zeab8t820b6yl5wbxk6Z ~]# wget http://gosspublic.alicdn.com/ossutil/1.6.9/ossutil64


[root@iZ2zeab8t820b6yl5wbxk6Z ~]# chmod 755 ossutil64


使用交互式配置生成配置文件


[root@iZ2zeab8t820b6yl5wbxk6Z ~]# ./ossutil64 config

The command creates a configuration file and stores credentials.

Please enter the config file name,the file name can include path(default /root/.ossutilconfig, carriage return will use the default file. If you specified this option to other file, you should specify --config-file option to the file when you use other commands):

No config file entered, will use the default config file /root/.ossutilconfig

For the following settings, carriage return means skip the configuration. Please try "help config" to see the meaning of the settings

Please enter language(CH/EN, default is:EN, the configuration will go into effect after the command successfully executed):EN

Please enter endpoint: http://oss-cn-beijing-internal.aliyuncs.com


Please enter accessKeyID:*****


Please enter accessKeySecret:****

Please enter stsToken:

[root@iZ2zeab8t820b6yl5wbxk6Z ~]# cat  /root/.ossutilconfig

[Credentials]

language=EN

endpoint= http://oss-cn-beijing-internal.aliyuncs.com

accessKeyID=*****

accessKeySecret=****


解释说明:


endpoint: http://oss-cn-beijing-internal.aliyuncs.com   必须要有http://,如果这个不填写默认是外网访问,而不是ECS 的经典网络访问(内网),将会花费流量费用。此外你的地址不一定是这个这是北京地域节点,看你的ecs和oss所在地域。


stsToken不用填写


language默认cn


accessKeyID:查看方式请参考创建AccessKey。

accessKeySecret:查看方式请参考创建AccessKey。第一步的配置文件路径,不填写,默认就行


至此ossutil下载安装配置完毕。


阿里云后台创建容器,读写权限公共读写,容器名字 我这里是qianyidata


8.png

8.png

开始上传下载文件


上传


./ossutil64   cp   ./plat.quanmindian.com_20191127_093133.zip      oss://qianyidata/plat.quanmindian.com_20191127_093133.zip    


下载


./ossutil64  cp    oss://qianyidata/plat.quanmindian.com_20191127_093133.zip     ./plat.quanmindian.com_20191127_093133.zip


9.png

9.png

说明 cp是拷贝  后面两个参数是从哪里拷贝到哪里,也就是oss和ecs本地路径,qianyidata是容器名字。

相关实践学习
通义万相文本绘图与人像美化
本解决方案展示了如何利用自研的通义万相AIGC技术在Web服务中实现先进的图像生成。
7天玩转云服务器
云服务器ECS(Elastic Compute Service)是一种弹性可伸缩的计算服务,可降低 IT 成本,提升运维效率。本课程手把手带你了解ECS、掌握基本操作、动手实操快照管理、镜像管理等。了解产品详情: https://www.aliyun.com/product/ecs
相关文章
|
6月前
|
安全 Linux 数据安全/隐私保护
CentOS中SELinux的禁用与关闭操作
在禁用SELinux时,你要时刻谨慎小心。SELinux提供了安全功能,并阻止了许多常见的网络攻击,关闭它可能会让你的系统置于风险之中。除非非常确定SELinux为你带来了不必要的麻烦,否则最好的选择往往是留着它,适当地调整和细化你的SELinux策略,来适应你的需求。
649 19
|
运维 安全 Linux
【超实用秘籍】Linux文件传输新高度:10个scp命令让你瞬间变身文件传输达人,从此告别繁琐操作!
【8月更文挑战第13天】文件传输是运维工作的核心部分,尤其对Linux用户来说,了解高效且安全的传输方法非常重要。本文介绍10种scp命令的应用技巧,涵盖基础文件传输、密钥认证、目录复制等场景,助你灵活运用这一基于SSH协议的安全工具。从简单的文件传输到复杂的多主机文件迁移,scp都能轻松应对。通过本文的学习,你将能更熟练地使用scp命令,提高工作效能。
650 6
|
存储 NoSQL MongoDB
【MongoDB 专栏】MongoDB 的 GridFS:存储与检索大文件
【5月更文挑战第10天】MongoDB's GridFS 是用于大规模数据和大文件存储的解决方案,它将文件分割成小块存储在不同文档中,以提升管理效率和避免性能问题。文件上传时记录元数据,通过唯一标识符实现快速检索。GridFS 提供高效存储、便捷检索和扩展性,适用于大文件管理。然而,应注意文件大小限制、数据一致性和性能优化。通过案例分析,展示了 GridFS 在实际应用中的优势和适用场景,为构建强大应用提供支持。
591 1
【MongoDB 专栏】MongoDB 的 GridFS:存储与检索大文件
|
缓存 Linux 网络安全
|
机器学习/深度学习 传感器 编解码
LFM信号的回波与脉冲压缩附Matlab代码
LFM信号的回波与脉冲压缩附Matlab代码
|
Linux Python
Centos7下更换python pip3源为阿里源
Centos7下更换python pip3源为阿里源
2188 0
|
数据采集 前端开发 JavaScript
计算机Java项目|Springboot师生健康信息管理系统
计算机Java项目|Springboot师生健康信息管理系统
159 0
|
JavaScript 前端开发 安全
【JavaScript 与 TypeScript 技术专栏】JavaScript 与 TypeScript 的对比与选择
【4月更文挑战第30天】本文对比了JavaScript和TypeScript在前端开发中的特点与差异。JavaScript以其灵活性和广泛支持成为Web开发基石,而TypeScript作为其超集,引入静态类型检查和面向对象概念,提升代码质量和开发效率。在项目选择中,考虑规模、团队协作和类型安全需求。两者可结合使用,逐步迁移或互操作,以适应不同场景。开发者应根据实际需求权衡利弊,发挥语言优势。
515 0
云大使绑定提现账号,兑换云气值操作攻略
活动优化:为了便于大使快速完成提现绑定,后续提现工作。云大使业务进行了活动优化现将云大使绑定淘宝账户提现至淘宝所对应的支付宝账户更改为直接绑定支付宝账户提现至对应支付宝,本期主要讲解电脑端和手机端两个版本绑定提现账号,兑换云气值的操作攻略 具体操作步骤如下
|
机器学习/深度学习 JSON 人工智能
HarmonyOS学习路之开发篇—AI功能开发(IM类意图识别)
IM类意图识别,是指利用机器学习技术,针对用户短信或聊天类APP等IM应用的文本消息进行内容分析,并识别出消息内容代表的用户意图。