Kafka安装以及入门基本命令操作

本文涉及的产品
服务治理 MSE Sentinel/OpenSergo,Agent数量 不受限
注册配置 MSE Nacos/ZooKeeper,118元/月
云原生网关 MSE Higress,422元/月
简介: Kafka安装以及入门基本命令操作

文章目录

1.单节点搭建

1.1 下载安装包

#解压

tar -xzf kafka_2.12-3.3.1.tgz  

#修改名字,也可以修改也可以不改

mv kafka_2.12-3.3.1 kafka-2.12

1.2 配置环境变量

vi /etc/profile

# 加入以下配置

export KAFKA_HOME=/opt/software/kafka_2.12-3.3.1

export PATH=$PATH:$KAFKA_HOME/bin

#重新加载配置文件

source /etc/profile

1.3 配置配置文件

单机版的可以不进行修改

vi server.properties

broker.id=0     #注意:这里要唯一的Integer类型

log.dirs=/kafka-logs    #真实数据存储的位置

zookeeper.connect=node02:2181 #zookeeper

1.4 启动

启动zookeeper

# Start the ZooKeeper service

$ bin/zookeeper-server-start.sh config/zookeeper.properties

启动kafka

$ bin/kafka-server-start.sh /opt/software/kafka_2.12-3.3.1/config/server.properties

image.png

1.5 创建启动脚本startKafka.sh

在安装目录下创建启动脚本

nohup  /opt/software/kafka_2.12-3.3.1/bin/kafka-server-start.sh /opt/software/kafka_2.12-3.3.1/config/server.properties > /opt/software/kafka_2.12-3.3.1 /kafkalog.txt 2>&1 &

启动

[root@node02 bin]# ./startKafka.sh

[root@node02 bin]# jps

12673 Kafka

9234 QuorumPeerMain

13036 Jps

2.简单的使用

2.1 创建topic

[root@node02 bin]# ./kafka-topics.sh --create --topic mytopic --bootstrap-server localhost:9092

Created topic mytopic.

2.2 查看topic

[root@node02 bin]# ./kafka-topics.sh --list --bootstrap-server localhost:9092

mytopic

2.3 producer生产数据

[root@node02 bin]# ./kafka-console-producer.sh --topic mytopic --bootstrap-server localhost:9092

>hello,kafka

>hello,world

>

2.4 consumer消费者拉取数据

[root@node02 bin]# ./kafka-console-consumer.sh --topic mytopic --from-beginning --bootstrap-server localhost:9092

hello,kafka

hello,world

相关文章
|
5月前
|
消息中间件 监控 数据可视化
Linux安装Kafka图形化界面
Linux安装Kafka图形化界面
250 4
|
3月前
|
消息中间件 Ubuntu Java
在Ubuntu 18.04上安装Apache Kafka的方法
在Ubuntu 18.04上安装Apache Kafka的方法
190 0
|
22天前
|
消息中间件 Ubuntu Java
Ubuntu系统上安装Apache Kafka
Ubuntu系统上安装Apache Kafka
|
2月前
|
消息中间件 JSON 安全
Kafka常用命令归纳
本文档详细介绍了Kafka 2.2及以上版本中Topic的操作命令,包括创建、查看、修改及删除Topic,以及动态调整主题参数和限速。此外,还涵盖了数据生产和消费的相关命令与性能测试方法,并对内部Topic(如`__consumer_offsets`和`__transaction_state`)的操作进行了说明。最后,提供了常见错误处理方案及Kafka推荐配置,帮助用户更好地管理和优化Kafka集群。
|
2月前
|
消息中间件 Kafka 测试技术
Kafka常用命令大全及kafka-console-consumer.sh及参数说明
该文章汇总了Kafka常用命令,包括集群管理、Topic操作、生产者与消费者的命令行工具使用方法等,适用于Kafka的日常运维和开发需求。
343 2
|
2月前
|
消息中间件 Java Linux
linux 之centos7安装kafka;;;;;待补充,未完成
linux 之centos7安装kafka;;;;;待补充,未完成
|
4月前
|
消息中间件 Java Kafka
kafka Linux环境搭建安装及命令创建队列生产消费消息
kafka Linux环境搭建安装及命令创建队列生产消费消息
108 4
|
3月前
|
消息中间件 存储 Ubuntu
在Ubuntu 14.04上安装Apache Kafka的方法
在Ubuntu 14.04上安装Apache Kafka的方法
20 0
|
3月前
|
消息中间件 Java Kafka
Docker 安装 kafka
Docker 安装 kafka
94 0
|
3月前
|
消息中间件 Kafka Apache
部署安装kafka集群
部署安装kafka集群