函数计算批量处理海量 OSS 文件自制脑图
OSS 简单的接口和卓越的可扩展性让不同场景的应用程序每天可以轻松存储几个到几十亿个对象文件。
简单的 key/value 数据访问结构极大地简化了数据的上传和读取。然而，除了上传和读取，很快就围绕 OSS 产生了一系列新的应用场景。
函数计算批量处理海量 OSS 文件
2023-02-02
213
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《
阿里云开发者社区用户服务协议》和
《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写
侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
本文涉及的产品
简介：
函数计算批量处理海量 OSS 文件自制脑图
目录
相关文章
|
5月前
|
Web App开发
监控
安全
OSS客户端签名直传实践：Web端安全上传TB级文件方案（含STS临时授权）
本文深入解析了客户端直传技术，涵盖架构设计、安全机制、性能优化等方面。通过STS临时凭证与分片上传实现高效安全的文件传输，显著降低服务端负载与上传耗时，提升系统稳定性与用户体验。
515
2
2
|
5月前
|
存储
编解码
Serverless
Serverless架构下的OSS应用：函数计算FC自动处理图片/视频转码（演示水印添加+缩略图生成流水线）
本文介绍基于阿里云函数计算（FC）和对象存储（OSS）构建Serverless媒体处理流水线，解决传统方案资源利用率低、运维复杂、成本高等问题。通过事件驱动机制实现图片水印添加、多规格缩略图生成及视频转码优化，支持毫秒级弹性伸缩与精确计费，提升处理效率并降低成本，适用于高并发媒体处理场景。
286
0
0
|
9月前
|
消息中间件
监控
数据挖掘
【有奖实践】轻量消息队列（原 MNS）订阅 OSS 事件实时处理文件变动
当你需要对对象存储 OSS（Object Storage Service）中的文件变动进行实时处理、同步、监听、业务触发、日志记录等操作时，你可以通过设置 OSS 的事件通知规则，自定义关注的文件，并将 OSS 事件推送到轻量消息队列（原 MNS）的队列或主题中，开发者的服务即可及时收到相关通知，并通过消费消息进行后续的业务处理。
201
95
109
|
消息中间件
存储
Serverless
函数计算产品使用问题之怎么访问网络附加存储（NAS）存储模型文件
函数计算产品作为一种事件驱动的全托管计算服务，让用户能够专注于业务逻辑的编写，而无需关心底层服务器的管理与运维。你可以有效地利用函数计算产品来支撑各类应用场景，从简单的数据处理到复杂的业务逻辑，实现快速、高效、低成本的云上部署与运维。以下是一些关于使用函数计算产品的合集和要点，帮助你更好地理解和应用这一服务。
192
2
3
|
JavaScript
Serverless
数据安全/隐私保护
函数计算产品使用问题之怎么动态设置.npmrc文件以配置私有仓库访问
函数计算产品作为一种事件驱动的全托管计算服务，让用户能够专注于业务逻辑的编写，而无需关心底层服务器的管理与运维。你可以有效地利用函数计算产品来支撑各类应用场景，从简单的数据处理到复杂的业务逻辑，实现快速、高效、低成本的云上部署与运维。以下是一些关于使用函数计算产品的合集和要点，帮助你更好地理解和应用这一服务。
334
2
2
|
9月前
|
SQL
分布式计算
Serverless
|
消息中间件
弹性计算
关系型数据库
体验函数计算：高效处理多媒体文件的真实感受与实战总结
该方案在引导和文档方面做得较为详尽，仅在事件驱动机制部分略显简略。部署和代码示例实用，但需注意内存配置以避免超时。使用体验方面，函数计算表现出色，尤其在高并发场景下，显著提升了应用稳定性和成本效益。云产品如OSS、MNS等与函数计算配合流畅，ECS和RDS表现稳健。总体而言，这套方案弹性好、成本低，特别适合应对高并发或流量不确定的场景，值得推荐。
154
26
29
|
文字识别
算法
API
视觉智能开放平台产品使用合集之上传素材文件不在同一地域的OSS，怎么上传多张图片
视觉智能开放平台是指提供一系列基于视觉识别技术的API和服务的平台，这些服务通常包括图像识别、人脸识别、物体检测、文字识别、场景理解等。企业或开发者可以通过调用这些API，快速将视觉智能功能集成到自己的应用或服务中，而无需从零开始研发相关算法和技术。以下是一些常见的视觉智能开放平台产品及其应用场景的概览。
150
2
2
|
存储
运维
Serverless
函数计算产品使用问题之OSS触发器是否可以只设置文件前缀
函数计算产品作为一种事件驱动的全托管计算服务，让用户能够专注于业务逻辑的编写，而无需关心底层服务器的管理与运维。你可以有效地利用函数计算产品来支撑各类应用场景，从简单的数据处理到复杂的业务逻辑，实现快速、高效、低成本的云上部署与运维。以下是一些关于使用函数计算产品的合集和要点，帮助你更好地理解和应用这一服务。
172
1
1
|
对象存储
API
访问 OSS 文件 404 分析
什么是 404
404 标准的 http code 状态码，代表用户请求的资源在服务端不存在， 404 并不是一个异常状态码？而是一个正常的响应。换句话说 404 已经成为了一个结果，这种响应常见在 client 端下载 OSS 的资源时出现。
4763
0
0
热门文章
最新文章
1
Serverless 应用引擎 SAE：为传统应用托底，为 AI 创新加速
2
加速智能体开发：从 Serverless 运行时到 Serverless AI 运行时
3
吉利汽车携手阿里云函数计算，打造新一代 AI 座舱推理引擎
4
阿里云渠道商：OSS与传统存储系统的差异在哪里？
5
聚焦 AI 应用基础设施，云栖大会 Serverless AI 全回顾
6
函数计算 × MSE Nacos : 轻松托管你的 MCP Server
7
阿里云函数计算 AgentRun 全新发布，构筑智能体时代的基础设施
8
函数计算进化之路：AI Sandbox 新基座
9
企业级 AI Agent 开发指南：基于函数计算 FC Sandbox 方案实现类 Chat Coding AI Agent
10
函数计算进化之路：AI 应用运行时的状态剖析
1
AI 场景深度优化！K8s 集群 OSSFS 2.0 存储卷全面升级，高效访问 OSS 数据
432
2
AI 场景深度优化！K8s 集群 OSSFS 2.0 存储卷全面升级，高效访问 OSS 数据
631
3
Linux单节点单硬盘部署MinIO：安装部署MinIO对象存储服务实战指南
2024
4
SpringBoot × MinIO 极速开发指南：对象存储服务高可用实战
601
5
StrmVol存储卷：如何解锁K8s对象存储海量小文件访问性能新高度？
203
6
StrmVol 存储卷：解锁 K8s 对象存储海量小文件访问性能新高度
743
7
阿里云对象存储（OSS）：企业数字化转型的核心存储引擎
2077
8
阿里云OSS对象存储收费标准价格表：流量包+存储包2025最新整理
3039
9
阿里云对象存储OSS收费标准：500G存储118元1年、
6644
10
阿里云对象存储oss怎么收费？存储费用+流量收费标准
1424