Centos7下ELK安装部署

本文涉及的产品
检索分析服务 Elasticsearch 版,2核4GB开发者规格 1个月
简介: 笔记

版本使用:

  • elasticsearch-6.7.0
  • kibana-6.7.0-linux-x86_64
  • logstash-6.7.0.rpm
  • centos7

相关软件安装包下载:

https://elasticsearch.cn/download/


(1)ES安装


赋予权限:

cd /opt/softwares
chmod u+x elasticsearch-6.7.0.tar.gz 

解压:

tar -zxvf elasticsearch-6.7.0.tar.gz -C ../modules/

创建软连接:

ln -s elasticsearch-6.7.0 elasticsearch

修改配置文件:

vim config/elasticsearch.yml
cluster.name: es-application
node.name: node-1
node.attr.rack: r1
path.data: data
path.logs: logs
network.host: bigdata-pro-m04
http.port: 9200
discovery.zen.ping.unicast.hosts: ["bigdata-pro-m04"]

注意需要在elasticsearch的根目录下创建data目录,这里不能写/data,而是data

启动:

bin/elasticsearch

启动过程中如有下面错误:

30.png

解决问题(1):

每个进程最大同时打开文件数太小,可通过下面2个命令查看当前数量

ulimit -Hn
ulimit -Sn

修改/etc/security/limits.conf文件,增加配置,然后重新启动

*               soft    nofile          65536
*               hard    nofile          65536

解决问题(2):

修改/etc/sysctl.conf文件,增加配置vm.max_map_count=262144

保存后执行:

sysctl -p

如果再次启动elasticsearch没有报错,并且能访问web界面即可:

http://10.211.55.6:9200/

32.png


(2)Logstash安装


安装Logstash使用的是6.7版本的rpm包

cd /opt/modules
sudo rpm -ivh /opt/softwares/logstash-6.7.0.rpm

Logstash原理

Logstash管道具有两个必需元素input和output,以及一个可选元素filter。输入插件使用源中的数据,过滤器插件根据您的指定修改数据,输出插件将数据写入目标。

33.png


(3)Kibana安装


赋予权限:

cd /opt/softwares
chmod u+x kibana-6.7.0-linux-x86_64.tar.gz

解压:

tar -zxvf kibana-6.7.0-linux-x86_64.tar.gz -C ../modules/

创建软连接:

ln -s kibana-6.7.0-linux-x86_64 kibana

修改配置文件:

vim kibana.yml
server.port: 5601
server.host: "bigdata-pro-m04"
elasticsearch.hosts: ["http://bigdata-pro-m04:9200"]

启动kibana

bin/kibana

访问web界面,如果能访问就说明安装成功

http://10.211.55.6:5601

34.png


相关实践学习
使用阿里云Elasticsearch体验信息检索加速
通过创建登录阿里云Elasticsearch集群,使用DataWorks将MySQL数据同步至Elasticsearch,体验多条件检索效果,简单展示数据同步和信息检索加速的过程和操作。
ElasticSearch 入门精讲
ElasticSearch是一个开源的、基于Lucene的、分布式、高扩展、高实时的搜索与数据分析引擎。根据DB-Engines的排名显示,Elasticsearch是最受欢迎的企业搜索引擎,其次是Apache Solr(也是基于Lucene)。 ElasticSearch的实现原理主要分为以下几个步骤: 用户将数据提交到Elastic Search 数据库中 通过分词控制器去将对应的语句分词,将其权重和分词结果一并存入数据 当用户搜索数据时候,再根据权重将结果排名、打分 将返回结果呈现给用户 Elasticsearch可以用于搜索各种文档。它提供可扩展的搜索,具有接近实时的搜索,并支持多租户。
相关文章
|
6天前
|
监控 Linux 应用服务中间件
centos7 部署zabbix5 踩坑笔记
centos7 部署zabbix5 踩坑笔记
|
6天前
|
JavaScript Java 应用服务中间件
centos部署vue项目(java,tomcat环境的搭建)
centos部署vue项目(java,tomcat环境的搭建)
59 0
|
6天前
|
分布式计算 关系型数据库 MySQL
Sqoop【部署 01】CentOS Linux release 7.5 安装配置 sqoop-1.4.7 解决警告并验证(附Sqoop1+Sqoop2最新版安装包+MySQL驱动包资源)
【2月更文挑战第8天】Sqoop CentOS Linux release 7.5 安装配置 sqoop-1.4.7 解决警告并验证(附Sqoop1+Sqoop2最新版安装包+MySQL驱动包资源)
113 1
|
4天前
|
Shell Linux 应用服务中间件
centos系统内容器部署服务访问不到是因为run后面加了bash
centos系统内容器部署服务访问不到是因为run后面加了bash
|
6天前
|
存储 关系型数据库 Linux
CentOS如何使用Docker部署Plik服务并实现公网访问本地设备上传下载文件
CentOS如何使用Docker部署Plik服务并实现公网访问本地设备上传下载文件
34 4
|
6天前
|
存储 安全 网络协议
云服务器 Centos7 部署 Elasticsearch 8.0 + Kibana 8.0 指南
云服务器 Centos7 部署 Elasticsearch 8.0 + Kibana 8.0 指南
30 0
|
6天前
|
Linux 数据库 开发者
Centos7安装docker并部署halo建站
Docker 是一个开源的应用容器引擎,它允许开发者将应用及其依赖打包到可移植的容器中,然后在任何支持 Docker 的平台上运行。Docker 的核心概念包括镜像(Image)、容器(Container)和仓库(Repository)。镜像是创建容器的基础,容器是镜像的运行实例,而仓库是存储和分发镜像的中心仓库。 Docker 的优势在于快速、一致地交付应用,实现响应式部署和扩展,以及更高效地利用硬件资源。它常用于简化配置、代码流水线管理、提
47 0
|
6天前
|
运维 安全 Linux
如何在CentOS部署JumpServer堡垒机并实现无公网ip环境远程访问
如何在CentOS部署JumpServer堡垒机并实现无公网ip环境远程访问
|
6天前
|
数据可视化 Linux Apache
CentOS部署Apache Superset大数据可视化BI分析工具并实现无公网IP远程访问
CentOS部署Apache Superset大数据可视化BI分析工具并实现无公网IP远程访问
|
6天前
|
JavaScript Linux 数据安全/隐私保护
如何在CentOS7部署Wiki.js知识库并实现分享好友公网远程使用【内网穿透】
如何在CentOS7部署Wiki.js知识库并实现分享好友公网远程使用【内网穿透】

热门文章

最新文章