ELK实时日志分析平台(elk+kafka+metricbeat)-KAFKA(二)

本文涉及的产品
日志服务 SLS,月写入数据量 50GB 1个月
简介:

一、kafka搭建

  1. 建立elk目录:mkdir /usr/loca/elk

  2. 安装zookeeper:

    1. 192.168.30.121:

      wKiom1myLD-yj6oNAAAhLNFsX2s875.png

      wKioL1myLCvB3bj_AABO8ki3-Hw352.png

    2. 192.168.30.122:

      wKiom1myLLfTcRaeAAAmkYmfFgg271.png

      wKioL1myLKOS5M4AAABQUL8lPCE800.png

    3. 192.168.30.123:

      wKiom1myLN3AMsWtAAAsjgFV1CU663.png

      wKioL1myLMmw-ZBYAABNW-IWCbg772.png

3. kafka安装:

    a. 192.168.30.121wKioL1myLZnDh8cQAAAi2ZVKr5k068.png

    wKioL1myLayCfq8mAACIicLkVhg456.png

    b. 192.168.30.122:

wKiom1myLgWxlWKBAAAi2ZVKr5k705.png

    wKiom1myLhqS1weKAACAPGlgGt8591.png

c. 192.168.30.123:

    wKiom1myLvejJrz1AAAi2ZVKr5k925.png

wKioL1myLiXx0jauAACSif4FwGs258.png

wKiom1myLlOSlzAsAAALXvnMs-w474.png

4.启动:

在三台服务器上执行下面命令:

wKiom1myL27yQLrCAADQrrwcpAY196.png

wKioL1myL1rAkehiAAEyffA2QaE048.png



本文转自 zhuxtqw 51CTO博客,原文链接:http://blog.51cto.com/1054054/1963668,如需转载请自行联系原作者

相关文章
|
9天前
|
存储 消息中间件 网络协议
日志平台-ELK实操系列(一)
日志平台-ELK实操系列(一)
|
3月前
|
消息中间件 存储 Kafka
Kafka日志处理:深入了解偏移量查找与切分文件
**摘要:** 本文介绍了如何在Kafka中查找偏移量为23的消息,涉及ConcurrentSkipListMap的查询、索引文件的二分查找及日志分段的物理位置搜索。还探讨了Kafka日志分段的切分策略,包括大小、时间、索引大小和偏移量达到特定阈值时的切分条件。理解这些对于优化Kafka的性能和管理日志至关重要。
91 2
|
7天前
|
消息中间件 Kafka API
python之kafka日志
python之kafka日志
14 3
|
24天前
|
消息中间件 存储 监控
Kafka的logs目录下的文件都是什么日志?
Kafka的logs目录下的文件都是什么日志?
37 11
|
2月前
|
消息中间件 监控 Kafka
Filebeat+Kafka+Logstash+Elasticsearch+Kibana 构建日志分析系统
【8月更文挑战第13天】Filebeat+Kafka+Logstash+Elasticsearch+Kibana 构建日志分析系统
90 3
|
2月前
|
消息中间件 Java Kafka
【Azure 事件中心】开启 Apache Flink 制造者 Producer 示例代码中的日志输出 (连接 Azure Event Hub Kafka 终结点)
【Azure 事件中心】开启 Apache Flink 制造者 Producer 示例代码中的日志输出 (连接 Azure Event Hub Kafka 终结点)
|
2月前
|
消息中间件 Kafka
一文吃透企业级elk技术栈:4. kafka 集群部署
一文吃透企业级elk技术栈:4. kafka 集群部署
|
4月前
|
消息中间件 存储 Kafka
go语言并发实战——日志收集系统(二) Kafka简介
go语言并发实战——日志收集系统(二) Kafka简介
|
3月前
|
消息中间件 NoSQL Kafka
基于Kafka的nginx日志收集分析与监控平台(3)
基于Kafka的nginx日志收集分析与监控平台(3)
|
3月前
|
消息中间件 监控 Kafka
基于Kafka的nginx日志收集分析与监控平台(2)
基于Kafka的nginx日志收集分析与监控平台(2)

热门文章

最新文章

下一篇
无影云桌面