OSS新特性:支持文件上传、复制时,指定Object的存储类型以及修改已有文件的存储类型

本文涉及的产品
对象存储 OSS,标准 - 本地冗余存储 20GB 3个月
日志服务 SLS,月写入数据量 50GB 1个月
对象存储 OSS,恶意文件检测 1000次 1年
简介: 用户在上传、复制文件时,可灵活地指定文件的存储类型为Standard、IA、Archive;用户也可以修改实时修改文件的存储类型,比如从低频型(IA)修改为标准型。

对象存储OSS发布新特性:文件上传、复制,支持指定Object的存储类型。用户在上传、复制文件时,可灵活地指定文件的存储类型为Standard、IA、Archive;用户也可以修改实时修改文件的存储类型,比如从低频型(IA)修改为标准型。


文件上传、复制操作,支持指定Object存储类型,用户可以用来做什么?

直接上传低频、归档类型的文件,而不需等待生命周期管理做类型转换

  • 之前:用户创建一个标准型的Bucket ,上传到该Bucket的文件都默认是标准型,需要等待生命周期将文件转换低频、归档类型。由于生命周期管理是定时异步操作,转换时间粒度在天级别。
  • 现在:用户在上传文件时,直接可指定文件类型为低频、归档类型。

实时改变文件的存储类型

  • 用户除了可设置生命周期管理规则,将符合规则的文件,自动按天级别,从标准转成低频、归档,或从低频转成归档。现在,可以通过覆写单个文件,实时改变文件的存储类型,并且可以在标准、低频、归档之间任意转换。

    说明:

    1. 此操作涉及到数据覆盖操作,如果“低频型”或“归档型”对象分别在创建后 30 和 60 天内被覆盖,则它们会产生“提前删除“费用。比如,低频型对象创建10天后,被覆写修改成归档型或标准型,则会产生20天的提前删除费用。
      2.低频、归档文件的读取,会涉及数据取回的费用,具体可参考OSS计费说明

哪些RESTFul API支持指定Object存储类型?

支持设置Object存储类型的API

在请求Head中,增加x-oss-storage-class的Head信息,取值为Standard、IA、Archive

  • 文件上传:PutObject, InitMultipartUpload, AppendObject
  • 文件复制:CopyObject、InitMultipartUpload(大文件拷贝,配合UploadpartCopy)

示例:RESTFul API 直接上传归档型文件

PUT /oss.jpg HTTP/1.1 
Host: oss-example.oss-cn-hangzhou.aliyuncs.com Cache-control: no-cache 
Expires: Fri, 19 Oct 2018 05:38:42 GMT 
Content-Encoding: utf-8
Content-Disposition: attachment;filename=oss_download.jpg 
Date: Fri, 19 Oct 2018 06:03:28 GMT 
Content-Type: image/jpg 
Content-Length: 344606 
x-oss-storage-class: Archive
Authorization: OSS n6qrrqxo2oawuk53otfjbyc:kZoYNv66bsmc10+dcGKw5x2PRrk=  

[344606 bytes of object data]

如何使用ossutil上传、复制是指定存储类型的文件或修改文件存储类型?

使用ossutil上传指定存储类型的文件

  • 示例:上传单个文件,指定存储类型。
    以下命令,上传一个低频型的文件。

    ossutil64.exe cp ./bigcsv_normal_1000.csv  oss://testosspicwhj/ --meta X-oss-Storage-Class:IA
    

    上传完成后,查看文件类型:

    ossutil64.exe ls oss://testosspicwhj/bigcsv_normal_1000.csv
    

    可以看到,文件类型是低频型(IA)
    image

  • 示例:上传文件夹,指定存储类型。
    以下命令,上传一个文件夹,其所有文件都指定为归档型。

    ossutil64.exe cp ./ossutil_output/  oss://testosspicwhj/ossutil_output/ -r --meta X-oss-Storage-Class:Archive
    

    上传完成后,查看文件类型:

    ossutil64.exe ls oss://testosspicwhj/ossutil_output/
    

    可以看到,该文件夹下所有文件都是Archive类型
    image

使用ossutil复制文件时,指定目标文件的存储类型

  • 示例1:复制某一个文件,且复制后的文件类型指定为归档型(Archive)
    ossutil64.exe cp oss://testosspicwhj/bigcsv_normal_1000.csv  oss://testosspicwhj/csv_copy.csv --meta X-oss-Storage-Class:Archive
    

使用ossutil覆写已有文件,以修改存储类型-使用cp命令

说明:此操作涉及到数据覆盖操作,如果“低频型”或“归档型”对象分别在创建后 30 和 60 天内被覆盖,则它们会产生“提前删除“费用。比如,低频型对象创建10天后,被覆写修改成归档型或标准型,则会产生20天的提前删除费用。

  • 示例1:覆写单个文件,修改文件的存储类型,如从标准型(Standard)修改为归档型(Archive)
    ossutil64.exe cp oss://testosspicwhj/pics/Koala.jpg oss://testosspicwhj/pics/Koala.jpg --meta X-oss-Storage-Class:Archive
    
  • 示例2:覆写文件夹,修改文件夹所有文件的存储类型,如从低频型(IA)修改为标准型(Standard)

    ossutil64.exe cp oss://testosspicwhj/pics/ oss://testosspicwhj/pics/ -r --meta X-oss-Storage-Class:Standard
    
  • 示例3:覆写文件夹,修改文件夹所有文件的存储类型,从归档型(Archive)修改为标准型(Standard)

    ossutil64.exe restore oss://testosspicwhj/pics/ -r
    ossutil64.exe cp oss://testosspicwhj/pics/ oss://testosspicwhj/pics/ -r --meta X-oss-Storage-Class:Standard
    

    首先,将Archive文件恢复为可读状态(执行命令后,1分钟生效);然后 ,修改存储类型。

其他说明:

  • 功能开放情况说明:OSS所有区域,上述OSS的相关RESTFul API都已支持x-oss-storage-class请求Head,可指定文件的存储类型,可参考API帮助文档
  • ossutil新版本发布: ossutil1.4.2版本已发布
  • OSS SDK、控制台、OSSBrowser,后续接口或操作会逐步支持指定文件的存储类型
相关实践学习
通义万相文本绘图与人像美化
本解决方案展示了如何利用自研的通义万相AIGC技术在Web服务中实现先进的图像生成。
目录
相关文章
|
20天前
|
存储 人工智能 Cloud Native
阿里云渠道商:OSS与传统存储系统的差异在哪里?
本文对比传统存储与云原生对象存储OSS的架构差异,涵盖性能、成本、扩展性等方面。OSS凭借高持久性、弹性扩容及与云服务深度集成,成为大数据与AI时代的优选方案。
|
3月前
|
存储 运维 安全
阿里云国际站OSS与自建存储的区别
阿里云国际站对象存储OSS提供海量、安全、低成本的云存储解决方案。相比自建存储,OSS具备易用性强、稳定性高、安全性好、成本更低等优势,支持无限扩展、自动冗余、多层防护及丰富增值服务,助力企业高效管理数据。
|
6月前
|
存储 人工智能 Kubernetes
AI 场景深度优化!K8s 集群 OSSFS 2.0 存储卷全面升级,高效访问 OSS 数据
阿里云对象存储OSS是一款海量、安全、低成本、高可靠的云存储服务,是用户在云上存储的高性价比选择…
|
5月前
|
Web App开发 监控 安全
OSS客户端签名直传实践:Web端安全上传TB级文件方案(含STS临时授权)
本文深入解析了客户端直传技术,涵盖架构设计、安全机制、性能优化等方面。通过STS临时凭证与分片上传实现高效安全的文件传输,显著降低服务端负载与上传耗时,提升系统稳定性与用户体验。
521 2
|
7月前
|
存储 Kubernetes 对象存储
StrmVol存储卷:如何解锁K8s对象存储海量小文件访问性能新高度?
如何提升海量文件的数据读取速率,对于AI训练集管理、量化回测、时序日志分析等场景尤为重要。阿里云容器服务(ACK))支持StrmVol类型存储卷,基于底层虚拟块设备及内核态文件系统,显著降低海量小文件访问延迟。
|
3月前
|
存储 安全 API
某网盘不好用?有没有类似某网盘的存储软件?阿里云国际站 OSS:云存储的全能助手,你 get 了吗?
在数据爆炸时代,阿里云国际站OSS提供海量、安全、低成本的云存储服务,支持多种数据类型存储与灵活访问,助力企业与个人高效管理数据,降低存储成本。开通简便,操作友好,是理想的云端数据解决方案。
|
7月前
|
存储 Kubernetes 对象存储
StrmVol 存储卷:解锁 K8s 对象存储海量小文件访问性能新高度
本文介绍了阿里云容器服务(ACK)支持的StrmVol存储卷方案,旨在解决Kubernetes环境中海量小文件访问性能瓶颈问题。通过虚拟块设备与内核态文件系统(如EROFS)结合,StrmVol显著降低了小文件访问延迟,适用于AI训练集加载、时序日志分析等场景。其核心优化包括内存预取加速、减少I/O等待、内核态直接读取避免用户态切换开销,以及轻量索引快速初始化。示例中展示了基于Argo Workflows的工作流任务,模拟分布式图像数据集加载,测试结果显示平均处理时间为21秒。StrmVol适合只读场景且OSS端数据无需频繁更新的情况,详细使用方法可参考官方文档。
748 144
|
7月前
|
存储 弹性计算 数据管理
阿里云对象存储oss怎么收费?存储费用+流量收费标准
阿里云对象存储OSS收费标准包含存储费、流量费及请求费等,支持按量付费与包年包月两种模式。标准型本地冗余存储按量付费价格为0.09元/GB/月,包年包月500GB预留空间优惠价118元/年。流量费仅收取公网出方向费用,忙时0.50元/GB,闲时0.25元/GB。更多详情可参考官方页面。
1436 91
|
6月前
|
存储 人工智能 测试技术
AI 场景深度优化!K8s 集群 OSSFS 2.0 存储卷全面升级,高效访问 OSS 数据
OSSFS 2.0通过轻量化协议设计、协程化技术及FUSE3低级API重构,实现大文件顺序读写与小文件高并发加载的显著提升,在实际测试中表现出高达数十倍的吞吐量增长。适用于机器学习训练、推理等对高带宽低延迟要求严苛的场景,同时支持静态和动态挂载方式,方便用户在ACK集群中部署使用。
637 34
|
5月前
|
存储 关系型数据库 MySQL
成本直降30%!RDS MySQL存储自动分层实战:OSS冷热分离架构设计指南
在日均订单量超500万的场景下,MySQL数据年增200%,但访问集中在近7天(85%)。通过冷热数据分离,将历史数据迁移至OSS,实现存储成本下降48%,年省72万元。结合RDS、OSS与Redis构建分层架构,自动化管理数据生命周期,优化查询性能与资源利用率,支撑PB级数据扩展。
314 3

相关产品

  • 对象存储