Centos7下ELK安装部署

本文涉及的产品
Elasticsearch Serverless通用抵扣包,测试体验金 200元
简介: 笔记

版本使用:

  • elasticsearch-6.7.0
  • kibana-6.7.0-linux-x86_64
  • logstash-6.7.0.rpm
  • centos7

相关软件安装包下载:

https://elasticsearch.cn/download/


(1)ES安装


赋予权限:

cd /opt/softwares
chmod u+x elasticsearch-6.7.0.tar.gz 

解压:

tar -zxvf elasticsearch-6.7.0.tar.gz -C ../modules/

创建软连接:

ln -s elasticsearch-6.7.0 elasticsearch

修改配置文件:

vim config/elasticsearch.yml
cluster.name: es-application
node.name: node-1
node.attr.rack: r1
path.data: data
path.logs: logs
network.host: bigdata-pro-m04
http.port: 9200
discovery.zen.ping.unicast.hosts: ["bigdata-pro-m04"]

注意需要在elasticsearch的根目录下创建data目录,这里不能写/data,而是data

启动:

bin/elasticsearch

启动过程中如有下面错误:

30.png

解决问题(1):

每个进程最大同时打开文件数太小,可通过下面2个命令查看当前数量

ulimit -Hn
ulimit -Sn

修改/etc/security/limits.conf文件,增加配置,然后重新启动

*               soft    nofile          65536
*               hard    nofile          65536

解决问题(2):

修改/etc/sysctl.conf文件,增加配置vm.max_map_count=262144

保存后执行:

sysctl -p

如果再次启动elasticsearch没有报错,并且能访问web界面即可:

http://10.211.55.6:9200/

32.png


(2)Logstash安装


安装Logstash使用的是6.7版本的rpm包

cd /opt/modules
sudo rpm -ivh /opt/softwares/logstash-6.7.0.rpm

Logstash原理

Logstash管道具有两个必需元素input和output,以及一个可选元素filter。输入插件使用源中的数据,过滤器插件根据您的指定修改数据,输出插件将数据写入目标。

33.png


(3)Kibana安装


赋予权限:

cd /opt/softwares
chmod u+x kibana-6.7.0-linux-x86_64.tar.gz

解压:

tar -zxvf kibana-6.7.0-linux-x86_64.tar.gz -C ../modules/

创建软连接:

ln -s kibana-6.7.0-linux-x86_64 kibana

修改配置文件:

vim kibana.yml
server.port: 5601
server.host: "bigdata-pro-m04"
elasticsearch.hosts: ["http://bigdata-pro-m04:9200"]

启动kibana

bin/kibana

访问web界面,如果能访问就说明安装成功

http://10.211.55.6:5601

34.png


相关实践学习
以电商场景为例搭建AI语义搜索应用
本实验旨在通过阿里云Elasticsearch结合阿里云搜索开发工作台AI模型服务,构建一个高效、精准的语义搜索系统,模拟电商场景,深入理解AI搜索技术原理并掌握其实现过程。
ElasticSearch 最新快速入门教程
本课程由千锋教育提供。全文搜索的需求非常大。而开源的解决办法Elasricsearch(Elastic)就是一个非常好的工具。目前是全文搜索引擎的首选。本系列教程由浅入深讲解了在CentOS7系统下如何搭建ElasticSearch,如何使用Kibana实现各种方式的搜索并详细分析了搜索的原理,最后讲解了在Java应用中如何集成ElasticSearch并实现搜索。  
相关文章
|
4月前
|
Linux 应用服务中间件 nginx
在CentOS上部署Minikube教程
至此,您已成功在CentOS上部署并使用Minikube。您可以自由探索Kubernetes的世界,熟练配置和管理Kubernetes集群。
423 20
|
12月前
|
监控 前端开发 Linux
centos7系统安装部署zabbix5.0
【9月更文挑战第23天】在CentOS 7系统上部署Zabbix 5.0的步骤包括:安装MariaDB数据库及必要软件包,配置Zabbix仓库,设置数据库并导入Zabbix数据库架构,配置Zabbix服务器与前端参数,启动相关服务,并通过浏览器访问Web界面完成安装向导。
920 0
|
8月前
|
安全 关系型数据库 MySQL
CentOS7仅安装部署MySQL80客户端
通过上述步骤,你可以在CentOS 7上成功安装并配置MySQL 8.0客户端。这个过程确保你能够使用MySQL客户端工具连接和管理远程的MySQL数据库,而不需要在本地安装MySQL服务器。定期更新MySQL客户端可以确保你使用的是最新的功能和安全修复。
785 16
|
Oracle Java 关系型数据库
CentOS 7.6操作系统部署JDK实战案例
这篇文章介绍了在CentOS 7.6操作系统上通过多种方式部署JDK的详细步骤,包括使用yum安装openjdk、基于rpm包和二进制包安装Oracle JDK,并提供了配置环境变量的方法。
454 80
|
Linux 虚拟化 数据安全/隐私保护
部署05-VMwareWorkstation中安装CentOS7 Linux操作系统, VMware部署CentOS系统第一步,下载Linux系统,/不要忘, CentOS -7-x86_64-DVD
部署05-VMwareWorkstation中安装CentOS7 Linux操作系统, VMware部署CentOS系统第一步,下载Linux系统,/不要忘, CentOS -7-x86_64-DVD
|
10月前
|
Oracle 关系型数据库 MySQL
Centos7下图形化部署单点KFS同步工具并将Oracle增量同步到KES
Centos7下图形化部署单点KFS同步工具并将Oracle增量同步到KES
Centos7下图形化部署单点KFS同步工具并将Oracle增量同步到KES
|
存储 Kubernetes 负载均衡
CentOS 7.9二进制部署K8S 1.28.3+集群实战
本文详细介绍了在CentOS 7.9上通过二进制方式部署Kubernetes 1.28.3+集群的全过程,包括环境准备、组件安装、证书生成、高可用配置以及网络插件部署等关键步骤。
1595 4
CentOS 7.9二进制部署K8S 1.28.3+集群实战
|
Linux pouch 容器
CentOS7部署阿里巴巴开源的pouch容器管理工具实战
关于如何在CentOS 7.6操作系统上安装和使用阿里巴巴开源的Pouch容器管理工具的实战教程。
286 2
CentOS7部署阿里巴巴开源的pouch容器管理工具实战
|
Kubernetes Linux API
CentOS 7.6使用kubeadm部署k8s 1.17.2测试集群实战篇
该博客文章详细介绍了在CentOS 7.6操作系统上使用kubeadm工具部署kubernetes 1.17.2版本的测试集群的过程,包括主机环境准备、安装Docker、配置kubelet、初始化集群、添加节点、部署网络插件以及配置k8s node节点管理api server服务器。
323 0
CentOS 7.6使用kubeadm部署k8s 1.17.2测试集群实战篇
|
11月前
|
存储 Linux 开发者
虚拟机centos7.9一键部署docker
本文介绍了如何在 CentOS 7.9 虚拟机上安装 Docker 社区版 (Docker-ce-20.10.20)。通过使用阿里云镜像源,利用 `wget` 下载并配置 Docker-ce 的 YUM 仓库文件,然后通过 `yum` 命令完成安装。安装后,通过 `systemctl` 设置 Docker 开机自启并启动 Docker 服务。最后,使用 `docker version` 验证安装成功,并展示了客户端与服务器的版本信息。文中还提供了列出所有可用 Docker-ce 版本的命令。
1405 0
虚拟机centos7.9一键部署docker