AI 助理
文档备案控制台
开发者社区 云存储 技术博文 文章 正文

SLS 数据投递 OSS 文章专栏

2022-02-22 901
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《 阿里云开发者社区用户服务协议》和 《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写 侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
简介： SLS 投递 OSS 功能介绍、使用帮助、场景实践合集

日志数据入湖的设计与实践

关键词：日志数据湖，全栈设计，场景介绍

https://developer.aliyun.com/article/855133

通过SLS十分钟完成数据入湖OSS

关键词：OSS 控制台入口，可视化接入日志

https://developer.aliyun.com/article/877592

SLS投递OSS功能升级：打造更顺畅的日志入湖体验

关键词：投递功能升级，新功能使用介绍

https://developer.aliyun.com/article/873022

基于实时ETL的日志存储与分析实践

关键词：日志清洗，日志分析，日志低成本存储

https://developer.aliyun.com/article/770648

服务器日志快速入湖实践

关键词：服务器上应用程序日志，无侵入采集到 OSS

https://developer.aliyun.com/article/863761

Kafka数据入湖OSS实践

关键词：Kafka 数据同步到 OSS，全托管采集

https://developer.aliyun.com/article/873053

通过日志服务实现数据库MySQL入湖OSS实践

关键词：MySQL 数据同步到 OSS，全托管采集

https://developer.aliyun.com/article/877043

降本增效——日志入湖OSS的存储格式选型

关键词：JSON/CSV/Parquet/ORC 格式怎么选，压缩格式支持哪些

https://developer.aliyun.com/article/877578


文章标签：
对象存储
日志服务
消息中间件
数据可视化
关系型数据库
监控
对象存储
MySQL
Kafka
数据格式
存储
JSON
相关实践学习
对象存储OSS快速上手——如何使用ossbrowser
本实验是对象存储OSS入门级实验。通过本实验，用户可学会如何用对象OSS的插件，进行简单的数据存、查、删等操作。
唐恺
目录
相关文章
阿里云基础设施.
|
存储 人工智能 Kubernetes
AI 场景深度优化！K8s 集群 OSSFS 2.0 存储卷全面升级，高效访问 OSS 数据
阿里云对象存储OSS是一款海量、安全、低成本、高可靠的云存储服务，是用户在云上存储的高性价比选择…
阿里云基础设施.
863 55
阿里云云原生
|
SQL 人工智能 监控
SLS Copilot 实践：基于 SLS 灵活构建 LLM 应用的数据基础设施
本文将分享我们在构建 SLS SQL Copilot 过程中的工程实践，展示如何基于阿里云 SLS 打造一套完整的 LLM 应用数据基础设施。
阿里云云原生
3672 126
阿里云云原生
|
数据采集 运维 监控
不重启、不重写、不停机：SLS 软删除如何实现真正的“无感数据急救”？
SLS 全新推出的「软删除」功能，以接近索引查询的性能，解决了数据应急删除与脏数据治理的痛点。2 分钟掌握这一数据管理神器。
阿里云云原生
977 68
云渠道商TG-yunshuguoji
|
存储 监控 调度
阿里云对象存储OSS之间进行数据转移教程
讲解如何在阿里云对象存储OSS之间进行跨账号、跨地域、以及同地域内的数据迁移，包括数据迁移之前的准备工作和实施数据迁移以及一些后续操作
云渠道商TG-yunshuguoji
2579 0
游客u7dljxi6kiud6
|
存储 缓存 Apache
StarRocks+Paimon 落地阿里日志采集：万亿级实时数据秒级查询
本文介绍了阿里集团A+流量分析平台的日志查询优化方案，针对万亿级日志数据的写入与查询挑战，提出基于Flink、Paimon和StarRocks的技术架构。通过Paimon存储日志数据，结合StarRocks高效计算能力，实现秒级查询性能。具体包括分桶表设计、数据缓存优化及文件大小控制等措施，解决高并发、大数据量下的查询效率问题。最终，日志查询耗时从分钟级降至秒级，显著提升业务响应速度，并为未来更低存储成本、更高性能及更多业务场景覆盖奠定基础。
游客u7dljxi6kiud6
1276 0
墨祤
|
存储 缓存 Apache
StarRocks+Paimon 落地阿里日志采集：万亿级实时数据秒级查询
A+流量分析平台是阿里集团统一的全域流量数据分析平台，致力于通过埋点、采集、计算构建流量数据闭环，助力业务提升流量转化。面对万亿级日志数据带来的写入与查询挑战，平台采用Flink+Paimon+StarRocks技术方案，实现高吞吐写入与秒级查询，优化存储成本与扩展性，提升日志分析效率。
墨祤
1748 1
蓝易云
|
存储 NoSQL MongoDB
Docker中安装MongoDB并配置数据、日志、配置文件持久化。
现在，你有了一个运行在Docker中的MongoDB，它拥有自己的小空间，对高楼大厦的崩塌视而不见（会话丢失和数据不持久化的问题）。这个MongoDB的数据、日志、配置文件都会妥妥地保存在你为它精心准备的地方，天旋地转，它也不会失去一丁点儿宝贵的记忆（即使在容器重启后）。
蓝易云
2065 4
翼龙云TG_yilongcloud
|
存储 安全 数据管理
服务器违规资源被删，数据定时备份OSS 云存储才是 “救命稻草”
在数字化时代，数据已成为企业与个人的核心资产。然而，服务器违规、硬件故障等问题频发，导致数据丢失、业务中断，甚至造成不可挽回的损失。为保障数据安全与业务连续性，定时备份至关重要。阿里云国际站OSS提供高效、可靠的云存储解决方案，支持自动定时备份，帮助用户轻松应对数据风险。本文详解OSS备份操作步骤与注意事项，助你为数据穿上“防护甲”，实现安全无忧存储。
翼龙云TG_yilongcloud
978 0
赵渝强老师
|
存储 关系型数据库 数据库
【赵渝强老师】PostgreSQL数据库的WAL日志与数据写入的过程
PostgreSQL中的WAL（预写日志）是保证数据完整性的关键技术。在数据修改前，系统会先将日志写入WAL，确保宕机时可通过日志恢复数据。它减少了磁盘I/O，提升了性能，并支持手动切换日志文件。WAL文件默认存储在pg_wal目录下，采用16进制命名规则。此外，PostgreSQL提供pg_waldump工具解析日志内容。
赵渝强老师
1236 0
云存储

技术博文

热门文章

最新文章

  • 1
    一条命令迁移，帮你实现 OpenClaw 与 Hermes Agent 记忆互通！
  • 2
    【推荐几款实用的网盘资源搜索引擎】
  • 3
    降低 AI 存储成本 69% 阿里云发布新一代全栈自研高性能存储 CPFS
  • 4
    AgenticFS 重磅发布：专为 AI Agent 打造的全新文件存储
  • 5
    揭秘千问 APP 千万级 AI 订单背后的记忆存储实践
  • 6
    大模型竞争进入下半场，存储正在成为 AI Infra 的决胜场
  • 7
    SMB协议基础篇
  • 8
    新一代全栈自研 CPFS 正式商业化： 为下一代 AI 训练集群设计
  • 9
    【qemu虚拟化】将img镜像文件转换为VMware虚拟机
  • 10
    银行卡归属地及开户行查询API查询实战指南
  • 1
    新一代全栈自研 CPFS 正式商业化： 为下一代 AI 训练集群设计
    482
  • 2
    降低 AI 存储成本 69% 阿里云发布新一代全栈自研高性能存储 CPFS
    585
  • 3
    内网带宽跑不满百 Gbps？OSS 三维调优实测帮你拉到位
    277
  • 4
    Catalog 多了无法统一管理？Gravitino 一个入口统管 OSS Tables【详解 OSS Tables 系列】
    259
  • 5
    当文件系统的用户从人变成 Agent，AgenticFS 如何重新定义存储的服务方式
    413
  • 6
    大模型竞争进入下半场，存储正在成为 AI Infra 的决胜场
    411
  • 7
    分析师想查数据湖？Trino 不用搬数据，直接查 OSS Tables【详解 OSS Tables 系列】
    219
  • 8
    AgenticFS 重磅发布：专为 AI Agent 打造的全新文件存储
    635
  • 9
    Flink 算完的数据存哪？写进 OSS Tables，实时离线读同一张表【详解 OSS Tables 系列】
    216
  • 10
    指纹、网络与存储三重隔离：链上身份独立性的工程实践
    207

    • 相关产品

  • 对象存储
    文档详情 产品详情
  • 日志服务
    文档详情 产品详情

    • 相关课程

    更多
  • 对象存储OSS的云上可观测能力最佳实践
  • 基于FC+NAS部署SD服务，并从OSS模型库下载模型文件
  • 日志服务SLS 构建可观测体系实战
  • 日志服务 SLS 可观测数据分析平台介绍
  • 大数据知识图谱系列—基于ELK+Flink日志全观测最佳实践
  • 场景实践-基于阿里云Quick BI 对MOOC网站日志分析

    • 相关电子书

    更多
  • OSS运维进阶实战手册
  • 《OSS运维基础实战手册》
  • OSS运维基础实战手册
    • 下一篇
    一条命令迁移，帮你实现 OpenClaw 与 Hermes Agent 记忆互通！