开发者社区云计算文章正文

某大型互联网企业用户上网行为日志分析系统——云计算项目实战

2013-09-21 620

版权

本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

本文涉及的产品

日志服务 SLS，月写入数据量 50GB 1个月

简介： http://sishuok.com/forum/blogPost/list/6768.html

http://sishuok.com/forum/blogPost/list/6768.html

文章标签：

日志服务

监控

云计算

关键词：

日志服务系统

企业日志服务

企业云计算

云计算企业

上网日志服务

相关实践学习

日志服务之使用Nginx模式采集日志

本文介绍如何通过日志服务控制台创建Nginx模式的Logtail配置快速采集Nginx日志并进行多维度分析。

cnbird

土木林森

22天前

运维安全 Linux

【揭秘】如何轻松掌控Linux系统命脉？——一场探索日志文件奥秘的旅程，带你洞悉系统背后的故事！

【8月更文挑战第21天】日志文件对Linux系统至关重要，记录着包括应用行为、组件状态和安全事件在内的系统活动，如同系统的“黑匣子”。掌握日志查看技巧是系统管理的基础技能，有助于快速诊断问题。常用命令包括`cat`、`tail`和`grep`等，可用于查看如`/var/log/messages`和`/var/log/auth.log`等系统日志文件，以及特定应用的日志。`journalctl`则用于查看systemd服务日志。此外，`logrotate`工具可管理日志文件的滚动和归档，确保系统高效运行。

土木林森

35 4 4

土木林森

19天前

存储数据采集数据处理

【Flume拓扑揭秘】掌握Flume的四大常用结构，构建强大的日志收集系统！

【8月更文挑战第24天】Apache Flume是一个强大的工具，专为大规模日志数据的收集、聚合及传输设计。其核心架构包括源（Source）、通道（Channel）与接收器（Sink）。Flume支持多样化的拓扑结构以适应不同需求，包括单层、扇入（Fan-in）、扇出（Fan-out）及复杂多层拓扑。单层拓扑简单直观，适用于单一数据流场景；扇入结构集中处理多源头数据；扇出结构则实现数据多目的地分发；复杂多层拓扑提供高度灵活性，适合多层次数据处理。通过灵活配置，Flume能够高效构建各种规模的数据收集系统。

土木林森

26 0 0

阿里云瑶池数据库SelectDB

20天前

存储消息中间件人工智能

AI大模型独角兽 MiniMax 基于阿里云数据库 SelectDB 版内核 Apache Doris 升级日志系统，PB 数据秒级查询响应

早期 MiniMax 基于 Grafana Loki 构建了日志系统，在资源消耗、写入性能及系统稳定性上都面临巨大的挑战。为此 MiniMax 开始寻找全新的日志系统方案，并基于阿里云数据库 SelectDB 版内核 Apache Doris 升级了日志系统，新系统已接入 MiniMax 内部所有业务线日志数据，数据规模为 PB 级，整体可用性达到 99.9% 以上，10 亿级日志数据的检索速度可实现秒级响应。

阿里云瑶池数据库SelectDB

343 14 14