Kafka 的安装及测试_1

本文涉及的产品
服务治理 MSE Sentinel/OpenSergo,Agent数量 不受限
云原生网关 MSE Higress,422元/月
注册配置 MSE Nacos/ZooKeeper,118元/月
简介: 快速学习 Kafka 的安装及测试_1

开发者学堂课程【大数据实时计算框架 Spark 快速入门Kafka 的安装及测试_1】学习笔记,与课程紧密联系,让用户快速学习知识。

课程地址https://developer.aliyun.com/learning/course/100/detail/1727


Kafka的安装及测试_1


1.[root@node21 Kafka_2.10-0.8.2.1]# 11 进入 Kafka 目录。

2.[root@node21 Kafka_2.10-0.8.2.1]# 11 config/ 展开目录。

3.[root@node21 Kafka_2.10-0.8.2.1]# 11 config/server.properties。

4.Kafka 是一个集群,Broker 是节点,port 是端口,一个集群下有很多和节点。

5.log.dirs=/kafka-logs,需要放入 kafka 的数据。

6.Kafka 是一个分布式的消息队列。

7.topic 抽象概念,由多个 partition 组成,partition 是一个节点里面一片连续的数据。

8.num.partitions=1,默认每个 topic 只有一个 partition。

9.log.retention.hours=168,kafka 日志进来168个小时之后会被删除。

10.zookeeper.connection=spark21:2181,spark22:2181,spark23:2181 没有 zookeeper 的话,kafka 是运行不起来的。

11.[root@node21 Kafka_2.10-0.8.2.1]# mkdir /kafka-logs 创建目录。

12.[root@node21 Kafka_2.10-0.8.2.1]# chmod +x,/bin/* 加执行权限。

13.[root@node21 hadoopsoft]# scp -r kafka_2.10-0.8.2.1/[root@node22:/usr/hadoopsoft/ 换地址。

14.[root@node21 hadoopsoft]# cd zookeeper-3.4.8。

[root@node21 zookeeper-3.4.8]#.bin/zkServer.sh status 查看 zookeerer 状态。

15.[root@node21 kafka_2.10-0.8.2.1]# cat startkafka.sh  

Nohup bin/kafka-server-start.sh   config/server.properties > kafka.log(哪启动脚本哪创建) 2>&]  &[root@node21 kafka_2.10-0.8.2.1]# 启动 kafka

相关文章
|
2月前
|
消息中间件 Ubuntu Java
在Ubuntu 18.04上安装Apache Kafka的方法
在Ubuntu 18.04上安装Apache Kafka的方法
107 0
|
13天前
|
Linux
kickstart自动安装系统 --DHCP 配置及测试
PXE+Kickstart自动安装系统需配置DHCP服务器分配IP。dhcpd.conf示例:设置更新样式、忽略客户端更新、指定下一服务器及启动文件。定义子网、网关、掩码、动态地址池并预留特定MAC地址。重启xinetd、NFS、DHCP服务,确保新服务器与Kickstart服务器在同一网络,避免误装其他机器。注意隔离测试网络以防干扰生产环境。
61 18
|
2月前
|
测试技术 Linux 虚拟化
iOS自动化测试方案(五):保姆级VMware虚拟机安装MacOS
详细的VMware虚拟机安装macOS Big Sur的保姆级教程,包括下载VMware和macOS镜像、图解安装步骤和遇到问题时的解决方案,旨在帮助读者顺利搭建macOS虚拟机环境。
59 3
iOS自动化测试方案(五):保姆级VMware虚拟机安装MacOS
|
2月前
|
存储 Ubuntu 安全
ROS2教程02 ROS2的安装、配置和测试
本文是关于ROS2(机器人操作系统2)的安装、配置和测试的教程。内容包括使用一键安装脚本快速安装ROS2 Humble版,手动安装步骤,设置语言环境、添加软件源、更新软件包、安装ROS2桌面版和开发工具,配置ROS2环境,创建工作空间,配置ROS2领域以避免网络冲突,以及如何删除ROS2。此外,还包括了测试ROS2是否安装成功的两个案例:基本的Topic通信测试和使用Turtlesim演示程序。适用于Ubuntu 22.04操作系统。
90 1
ROS2教程02 ROS2的安装、配置和测试
|
4天前
|
安全 测试技术 Linux
CentOS7 安装vulhub漏洞测试环境
CentOS7 安装vulhub漏洞测试环境
|
9天前
|
消息中间件 Java Linux
linux 之centos7安装kafka;;;;;待补充,未完成
linux 之centos7安装kafka;;;;;待补充,未完成
|
9天前
|
Web App开发 Linux Python
linux上安装selenium环境及测试
该文章提供了在Linux CentOS上安装Selenium环境、Chrome浏览器及Chromedriver的详细步骤,并演示了如何以无头模式进行测试。
26 0
|
2月前
|
消息中间件 Kafka 测试技术
【Azure 事件中心】使用Kafka的性能测试工具(kafka-producer-perf-test)测试生产者发送消息到Azure Event Hub的性能
【Azure 事件中心】使用Kafka的性能测试工具(kafka-producer-perf-test)测试生产者发送消息到Azure Event Hub的性能
|
2月前
|
测试技术 开发工具 虚拟化
iOS自动化测试方案(一):MacOS虚拟机保姆级安装Xcode教程
这篇文章提供了一份保姆级的教程,指导如何在MacOS虚拟机上安装Xcode,包括环境准备、基础软件安装以及USB扩展插件的使用,以实现iOS自动化测试方案的第一步。
37 0
iOS自动化测试方案(一):MacOS虚拟机保姆级安装Xcode教程
|
2月前
|
消息中间件 存储 Ubuntu
在Ubuntu 14.04上安装Apache Kafka的方法
在Ubuntu 14.04上安装Apache Kafka的方法
16 0
下一篇
无影云桌面