ELK +filebeat +redis 安装

本文涉及的产品
云数据库 Tair(兼容Redis),内存型 2GB
检索分析服务 Elasticsearch 版,2核4GB开发者规格 1个月
Redis 开源版,标准版 2GB
推荐场景:
搭建游戏排行榜
简介: ELK +filebeat +redis 安装配置

一、安装elasticsearch

elasticsearch-6.1.2安装

  • 解压 进入目录
  • 配置文件 elasticsearch.yml
  • 修改 ip 和端口
  • 创建运行用户 elk
  • 授权 chown -R elk:elk /data1/elasticsearch-6.1.2
  • elk 用户启动 :
cd /data1/elasticsearch-6.1.2/bin/

nohup ./elasticsearch & 

二、安装logstash

  • 解压 进入目录
  • 配置文件 test.conf
input {
    redis {
    data_type => "list"
        key => "220" 
        host => "192.168.1.235" 
        port => 6379 
        password => "redis" 
        db => 2 
        threads => 1
    }
}
output {
        if [type] == "220messages" {
                elasticsearch {
                        hosts => [ "192.168.1.235:9200"]
                        index => "220messages"
                }
        }
        if [type] == "220ssh" {
                elasticsearch {
                        hosts => [ "192.168.1.235:9200"]
                        index => "220ssh"
                }
        }
        if [type] == "220tomcat" {
                elasticsearch {
                        hosts => [ "192.168.1.235:9200"]
                        index => "220tomcat"
                }
        }        
        
        stdout{
                codec => rubydebug
         }
}
  • 启动
nohup /data1/elk/logstash-6.1.2/bin/logstash -f /data1/elk/logstash-6.1.2/config/test.conf &

三、kibana 安装

  • 解压进入目录 kibana-6.1.2-linux-x86_64
  • 配置配置文件kibana.yml
* 端口 server.port: 5601
* server.host: "0.0.0.0"
* elasticsearch.url: "http://192.168.1.235:9200"
  • 启动
cd /data1/elk/kibana-6.1.2-linux-x86_64/bin
nohup ./kibana &

四、安装filebeat

  • 解压进入目录 filebeat-6.1.2-linux-x86_64
  • 配置文件
filebeat.prospectors:
 - input_type: log
   paths:
    - /data1/tomcat-9.0/logs/logback.log
    
   #定义额外字段
   fields:
     type: 220tomcat
   #覆盖重名字段
   fields_under_root: true
   
   ## 注意 fields 和  fields_under_root 处于同一层级
   
 - input_type: log
   paths:
    - /var/log/messages
   fields:
     type: 220messages
   fields_under_root: true
 - input_type: log
   paths:
    - /var/log/secure
   fields:
     type: 220ssh
   fields_under_root: true
   # 输出到redis
output.redis:
  hosts: ["192.168.1.235"]
  port: 6379
  password: "redis"  
  db: 2
  timeout: 5
  key: "220"
  
  • 启动
nohup ./filebeat -c test.yml &

安装redis

相关实践学习
基于Redis实现在线游戏积分排行榜
本场景将介绍如何基于Redis数据库实现在线游戏中的游戏玩家积分排行榜功能。
云数据库 Redis 版使用教程
云数据库Redis版是兼容Redis协议标准的、提供持久化的内存数据库服务,基于高可靠双机热备架构及可无缝扩展的集群架构,满足高读写性能场景及容量需弹性变配的业务需求。 产品详情:https://www.aliyun.com/product/kvstore     ------------------------------------------------------------------------- 阿里云数据库体验:数据库上云实战 开发者云会免费提供一台带自建MySQL的源数据库 ECS 实例和一台目标数据库 RDS实例。跟着指引,您可以一步步实现将ECS自建数据库迁移到目标数据库RDS。 点击下方链接,领取免费ECS&RDS资源,30分钟完成数据库上云实战!https://developer.aliyun.com/adc/scenario/51eefbd1894e42f6bb9acacadd3f9121?spm=a2c6h.13788135.J_3257954370.9.4ba85f24utseFl
目录
相关文章
|
23天前
|
NoSQL Linux PHP
如何在不同操作系统上安装 Redis 服务器,包括 Linux 和 Windows 的具体步骤
本文介绍了如何在不同操作系统上安装 Redis 服务器,包括 Linux 和 Windows 的具体步骤。接着,对比了两种常用的 PHP Redis 客户端扩展:PhpRedis 和 Predis,详细说明了它们的安装方法及优缺点。最后,提供了使用 PhpRedis 和 Predis 在 PHP 中连接 Redis 服务器及进行字符串、列表、集合和哈希等数据类型的基本操作示例。
49 4
|
2月前
|
NoSQL 数据可视化 Linux
redis学习四、可视化操作工具链接 centos redis,付费Redis Desktop Manager和免费Another Redis DeskTop Manager下载、安装
本文介绍了Redis的两个可视化管理工具:付费的Redis Desktop Manager和免费的Another Redis DeskTop Manager,包括它们的下载、安装和使用方法,以及在使用Another Redis DeskTop Manager连接Redis时可能遇到的问题和解决方案。
143 1
redis学习四、可视化操作工具链接 centos redis,付费Redis Desktop Manager和免费Another Redis DeskTop Manager下载、安装
|
1月前
|
存储 SQL 关系型数据库
2024Mysql And Redis基础与进阶操作系列(1)作者——LJS[含MySQL的下载、安装、配置详解步骤及报错对应解决方法]
Mysql And Redis基础与进阶操作系列(1)之[MySQL的下载、安装、配置详解步骤及报错对应解决方法]
|
2月前
|
NoSQL Ubuntu Linux
Redis 安装
10月更文挑战第14天
58 1
|
1月前
|
NoSQL 编译器 Linux
【赵渝强老师】Redis的安装与访问
本文基于Redis 6.2版本,详细介绍了在CentOS 7 64位虚拟机环境中部署Redis的步骤。内容包括安装GCC编译器、创建安装目录、解压安装包、编译安装、配置文件修改、启动服务及验证等操作。视频讲解和相关图片帮助理解每一步骤。
|
2月前
|
NoSQL Linux Redis
Docker学习二(Centos):Docker安装并运行redis(成功运行)
这篇文章介绍了在CentOS系统上使用Docker安装并运行Redis数据库的详细步骤,包括拉取Redis镜像、创建挂载目录、下载配置文件、修改配置以及使用Docker命令运行Redis容器,并检查运行状态和使用Navicat连接Redis。
314 3
|
2月前
|
NoSQL Linux Shell
Redis 的安装与部署(图文)
Redis 的安装与部署(图文)
|
2月前
|
NoSQL Ubuntu Redis
Ubuntu安装redis
本文介绍了在Ubuntu系统上安装Redis的两种方法:一种是通过编译安装本地Redis包,包括下载、解压、编译安装、配置启动和测试连接的步骤;另一种是通过apt安装在线的Redis包,并提供了更新系统软件包列表、安装Redis服务器、检查Redis服务器状态和测试连接的命令。
164 0
Ubuntu安装redis
|
3月前
|
NoSQL 关系型数据库 Redis
mall在linux环境下的部署(基于Docker容器),Docker安装mysql、redis、nginx、rabbitmq、elasticsearch、logstash、kibana、mongo
mall在linux环境下的部署(基于Docker容器),docker安装mysql、redis、nginx、rabbitmq、elasticsearch、logstash、kibana、mongodb、minio详细教程,拉取镜像、运行容器
mall在linux环境下的部署(基于Docker容器),Docker安装mysql、redis、nginx、rabbitmq、elasticsearch、logstash、kibana、mongo
|
3月前
|
NoSQL Linux Redis
linux安装单机版redis详细步骤,及python连接redis案例
这篇文章提供了在Linux系统中安装单机版Redis的详细步骤,并展示了如何配置Redis为systemctl启动,以及使用Python连接Redis进行数据操作的案例。
79 2