iLogtail使用入门-主机环境日志采集到SLS

本文涉及的产品
对象存储 OSS,20GB 3个月
阿里云盘企业版 CDE,企业版用户数5人 500GB空间
文件存储 NAS,50GB 3个月
简介: iLogtail是阿里云中简单日志服务又名“SLS”的采集部分。 它用于收集遥测数据,例如日志、跟踪和指标,目前已经正是开源(https://github.com/alibaba/ilogtail)。本文通过介绍ilogtail如何在主机环境进行安装、配置、使用的最简流程,帮助用户使用预编译版本快速上手ilogtail日志采集。

使用前准备

  • 开通阿里云账号(仅依赖日志服务写入数据)
  • 准备一台具备公网访问权限的X86-64 Linux服务器

开通日志服务

提示: 日志服务为后付费功能,试用后若删除logstore即不再计费

  1. 登录阿里云后进入控制台(https://console.aliyun.com/),在搜索栏输入“SLS”,选择“控制台入口”-“日志服务SLS”,根据提示开通日志服务。

创建日志配置

  1. 日志服务开通后,跳转到控制台,点击创建project。填入project相关属性,本教程中所属地域选择“华北6(乌兰察布)”(注意若使用阿里云ECS请在选择“所属区域”时与ECS的保持一致)。

  1. project创建成功后,会提示创建logstore(project和logstore属于包含关系,一个project下可创建多个logstore),点击创建logstore并按照提示进行配置,输入logstore名称后,点击“确认”。

  1. logstore创建成功后,会提示接入数据,点击“确定”并在“快速数据接入”对话框中搜索“单行”然后选择“单行-文本日志”。

  1. 进入“极简单行”配置界面,选择自建机器,并将安装命令复制下来用于服务器ilogtail的安装。请保持页面打开。

安装ilogtail

  1. 以root身份登陆Linux服务器,并输入复制的安装命令。该安装命令使用的是预编译的ilogtail二进制包,适用于绝大多数X86-64架构的Linux发行版,安装脚本依赖bash请提前确认安装。(注意此处举例的命令仅适用于Project地域为乌兰察布并使用公网采集的情况)
$ wget http://logtail-release-cn-wulanchabu.oss-cn-wulanchabu.aliyuncs.com/linux64/logtail.sh -O logtail.sh; chmod755 logtail.sh; ./logtail.sh install cn-wulanchabu-internet

控制台应该打印出类似以下的消息,代表安装成功。

systemd startup doneilogtail is running
install logtail success
start logtail success
{
"UUID" : "A3412556-C126-4D38-8959-AC8BB628F00D",
"hostname" : "iZhp38z91mt9hkn2ubltn9Z",
"instance_id" : "BFB9BC78-68A5-11EC-8A7E-00163E00FF4E_172.18.108.207_1640782163",
"ip" : "172.18.108.207",
"logtail_version" : "1.0.25",
"os" : "Linux; 4.18.0-348.2.1.el8_5.x86_64; #1 SMP Tue Nov 16 14:42:35 UTC 2021; x86_64",
"update_time" : "2021-12-29 20:49:23"}
  1. 确认ilogtail正常运行。ilogtail在运行的时候会有两个进程,可通过ps -ef | grep ilogtail命令查看。同时可调用ilogtail自带的命令查看/etc/init.d/ilogtaild status。成功执行情况如下
$ ps-ef | grep logtail
root        15771020:49 ?        00:00:00 /usr/local/ilogtail/ilogtail
root        15791577020:49 ?        00:00:00 /usr/local/ilogtail/ilogtail
root        18311197021:09 pts/0    00:00:00 grep--color=auto logtail
$ ps-ef | grep ilogtail
root        15771020:49 ?        00:00:00 /usr/local/ilogtail/ilogtail
root        15791577020:49 ?        00:00:00 /usr/local/ilogtail/ilogtail
root        18331197021:09 pts/0    00:00:00 grep--color=auto ilogtail
$ /etc/init.d/ilogtaild status
ilogtail is running
  1. 从阿里云控制台复制帐号ID,创建用户标识文件。(注意不要使用子账号ID)

$ touch /etc/ilogtail/users/****************

完成日志配置

  1. 回到Web界面,单击页面右下角的“确认安装完毕”。

  1. 跳转到机器组配置界面,按照提示填写表格,其中IP地址栏填写Linux服务器的地址,配置完成后点击“下一步”。(若服务器有多个ip地址请填写安装ilogtail时回显的ip地址,也可以通过cat /usr/local/ilogtail/app_info.json获得)

  1. 跳转到选择机器组界面。勾选刚刚创建的机器组,点击“>”加入应用机器组,然后点击“下一步”进入ilogtail配置。

  1. 在ilogtail配置中仅修改“配置名称”和“日志路径”两个必填项,点击“下一步”确认。

  1. 完成索引配置。这一步不对任何选项进行修改,直接点击下一步完成配置。

此时,整个日志配置已经完成。请保持页面打开。

上报日志并查看

  1. 登陆Linux服务器,输入如下命令持续生成日志。
$ whiletrue; doecho$(date) >>/tmp/demo.log; sleep10; done
  1. 回到Web控制台,点击配置完成界面的“查询日志”跳转到日志查询界面。点击页面左侧的“放大镜”图标,选中logstore,点击“眼睛”图标,在左侧出现的“消费预览”侧边栏中尝试调整Shard和时间范围,点击预览查看上报的日志。

What's Next

你可以进入下一节学习《ilogtail使用入门-K8S环境日志采集到SLS

了解主机采集原理《Logtail采集原理

也可以学习ilogtail采集的更多用法:

相关实践学习
日志服务之使用Nginx模式采集日志
本文介绍如何通过日志服务控制台创建Nginx模式的Logtail配置快速采集Nginx日志并进行多维度分析。
相关文章
|
18天前
|
XML 安全 Java
【日志框架整合】Slf4j、Log4j、Log4j2、Logback配置模板
本文介绍了Java日志框架的基本概念和使用方法,重点讨论了SLF4J、Log4j、Logback和Log4j2之间的关系及其性能对比。SLF4J作为一个日志抽象层,允许开发者使用统一的日志接口,而Log4j、Logback和Log4j2则是具体的日志实现框架。Log4j2在性能上优于Logback,推荐在新项目中使用。文章还详细说明了如何在Spring Boot项目中配置Log4j2和Logback,以及如何使用Lombok简化日志记录。最后,提供了一些日志配置的最佳实践,包括滚动日志、统一日志格式和提高日志性能的方法。
152 30
【日志框架整合】Slf4j、Log4j、Log4j2、Logback配置模板
|
1月前
|
XML JSON Java
Logback 与 log4j2 性能对比:谁才是日志框架的性能王者?
【10月更文挑战第5天】在Java开发中,日志框架是不可或缺的工具,它们帮助我们记录系统运行时的信息、警告和错误,对于开发人员来说至关重要。在众多日志框架中,Logback和log4j2以其卓越的性能和丰富的功能脱颖而出,成为开发者们的首选。本文将深入探讨Logback与log4j2在性能方面的对比,通过详细的分析和实例,帮助大家理解两者之间的性能差异,以便在实际项目中做出更明智的选择。
243 3
|
1月前
|
存储 缓存 关系型数据库
MySQL事务日志-Redo Log工作原理分析
事务的隔离性和原子性分别通过锁和事务日志实现,而持久性则依赖于事务日志中的`Redo Log`。在MySQL中,`Redo Log`确保已提交事务的数据能持久保存,即使系统崩溃也能通过重做日志恢复数据。其工作原理是记录数据在内存中的更改,待事务提交时写入磁盘。此外,`Redo Log`采用简单的物理日志格式和高效的顺序IO,确保快速提交。通过不同的落盘策略,可在性能和安全性之间做出权衡。
1642 14
|
1月前
|
存储 数据采集 分布式计算
Hadoop-17 Flume 介绍与环境配置 实机云服务器测试 分布式日志信息收集 海量数据 实时采集引擎 Source Channel Sink 串行复制负载均衡
Hadoop-17 Flume 介绍与环境配置 实机云服务器测试 分布式日志信息收集 海量数据 实时采集引擎 Source Channel Sink 串行复制负载均衡
44 1
|
2月前
|
Kubernetes API Docker
跟着iLogtail学习容器运行时与K8s下日志采集方案
iLogtail 作为开源可观测数据采集器,对 Kubernetes 环境下日志采集有着非常好的支持,本文跟随 iLogtail 的脚步,了解容器运行时与 K8s 下日志数据采集原理。
|
1月前
|
Python
log日志学习
【10月更文挑战第9天】 python处理log打印模块log的使用和介绍
35 0
|
1月前
|
数据可视化
Tensorboard可视化学习笔记(一):如何可视化通过网页查看log日志
关于如何使用TensorBoard进行数据可视化的教程,包括TensorBoard的安装、配置环境变量、将数据写入TensorBoard、启动TensorBoard以及如何通过网页查看日志文件。
213 0
|
1月前
|
存储 分布式计算 NoSQL
大数据-136 - ClickHouse 集群 表引擎详解1 - 日志、Log、Memory、Merge
大数据-136 - ClickHouse 集群 表引擎详解1 - 日志、Log、Memory、Merge
42 0
|
1月前
|
缓存 Linux 编译器
【C++】CentOS环境搭建-安装log4cplus日志组件包及报错解决方案
通过上述步骤,您应该能够在CentOS环境中成功安装并使用log4cplus日志组件。面对任何安装或使用过程中出现的问题,仔细检查错误信息,对照提供的解决方案进行调整,通常都能找到合适的解决之道。log4cplus的强大功能将为您的项目提供灵活、高效的日志管理方案,助力软件开发与维护。
59 0
|
2月前
|
Java
日志框架log4j打印异常堆栈信息携带traceId,方便接口异常排查
日常项目运行日志,异常栈打印是不带traceId,导致排查问题查找异常栈很麻烦。

相关产品

  • 日志服务
  • 下一篇
    无影云桌面