Logstash 7.11安装配置

简介: Logstash 是免费且开放的服务器端数据处理管道,能够从多个来源采集数据,转换数据,然后将数据发送到您最喜欢的“存储库”中。Logstash 能够动态地采集、转换和传输数据,不受格式或复杂度的影响。利用 Grok 从非结构化数据中派生出结构,从 IP 地址解码出地理坐标,匿名化或排除敏感字段,并简化整体处理过程。数据往往以各种各样的形式,或分散或集中地存在于很多系统中。Logstash 支持各种输入选择,可以同时从众多常用来源捕捉事件。能够以连续的流式传输方式,轻松地从您的日志、指标、Web 应用、数据存储以及各种 AWS 服务采集数据。
Logstash 是免费且开放的服务器端数据处理管道,能够从多个来源采集数据,转换数据,然后将数据发送到您最喜欢的“存储库”中。Logstash 能够动态地采集、转换和传输数据,不受格式或复杂度的影响。利用 Grok 从非结构化数据中派生出结构,从 IP 地址解码出地理坐标,匿名化或排除敏感字段,并简化整体处理过程。数据往往以各种各样的形式,或分散或集中地存在于很多系统中。Logstash 支持各种输入选择,可以同时从众多常用来源捕捉事件。能够以连续的流式传输方式,轻松地从您的日志、指标、Web 应用、数据存储以及各种 AWS 服务采集数据。

在这里插入图片描述

1. 下载解压

这里大家可以去官网下载最新的版本:

https://www.elastic.co/cn/downloads/logstash

在这里插入图片描述
这里我们安装的是Linux系统,所以我们需要下载对应的包即可。

gzip -d logstash-7.11.1-linux-x86_64.tar.gz

tar -xvf logstash-7.11.1-linux-x86_64.tar

2. 配置

配置方面主要修改节点名称、文件自动加载和IP地址。

cd logstash-7.11.1/config
vim logstash.yml

# 修改:
# 结点名
node.name: node-01
# 开启配置文件自动加载
config.reload.automatic: true
# ip地址 
http.host:

在这里插入图片描述
:

vim logstash-sample.conf

这里配置的是输出到ElasticSearch里面,后期可以使用Kibana进行展示。
在这里插入图片描述

3. 启动

后期我们根据运行脚本更加方便,这里是直接使用命令启动。

# 进入安装目录
cd /home/elk/logstash-7.11.1
# 运行
./bin/logstash -f config/logstash-sample.conf

后台脚本运行:

#!/bin/sh

nohup ../bin/logstash -f ../config/logstash-sample.conf &
目录
相关文章
|
4月前
Elasticsearch安装配置文件
Elasticsearch安装配置文件
48 0
|
4月前
|
监控 数据安全/隐私保护
kibana安装部署
kibana安装部署
47 1
|
5月前
|
安全 数据可视化 Java
linux安装ElasticSearch7.1和 kibana 启动
linux安装ElasticSearch7.1和 kibana 启动
75 1
|
5月前
|
数据安全/隐私保护 索引
Kibana安装部署
Kibana安装部署
|
关系型数据库 MySQL 数据库
【工具安装】logstash的安装
Logstash 它是 ES 下的一款开源软件,它能够同时从多个来源采集数据、转换数据,然后将数据发送到 Eleasticsearch 中创建索引。 我们在项目中通常使用 Logstash 将数据库(如 MySQL)中的数据采用到ES索引中。也就是Logstash的工作是从MySQL中读取数据,向ES中创建索引,这里需要提前创建mapping的模板文件以便logstash使用。
134 0
【工具安装】logstash的安装
|
数据采集 存储 安全
Linux安装Elasticsearch
ElasticSearch,官方的解释Elasticsearch 是一个分布式的开源搜索和分析引擎,适用于所有类型的数据,包括文本、数字、地理空间、结构化和非结构化数据。Elasticsearch 在 Apache Lucene 的基础上开发而成,由 Elasticsearch N.V.(即现在的 Elastic)于 2010 年首次发布。Elasticsearch 以其简单的 REST 风格 API、分布式特性、速度和可扩展性而闻名,是 Elastic Stack 的核心组件;Elastic Stack 是适用于数据采集、充实、存储、分析和可视化的一组开源工具。
226 0
Linux安装Elasticsearch
|
自然语言处理 监控 网络协议
[基础服务-windows] [ELK] ElasticSearch + Kibana + Logstash 以及插件安装和配置
[基础服务-windows] [ELK] ElasticSearch + Kibana + Logstash 以及插件安装和配置
529 0
[基础服务-windows] [ELK] ElasticSearch + Kibana + Logstash 以及插件安装和配置
|
自然语言处理 安全 Java
Linux环境下ElasticSearch7.6的安装、配置及开机启动
本文将讲解在CentOS7环境下的ElasticSearch7.6环境的搭建及配置及开机启动配置
3435 0
Linux环境下ElasticSearch7.6的安装、配置及开机启动