[root@node01 bin]# ./kafka-topics.sh --create --zookeeper 172.16.150.154:2181 --replication-factor 1 --partitions 1 --topic Test Created topic "Test". [root@node01 bin]# ./kafka-console-producer.sh --broker-list 172.16.150.154:9092 --topic Test #其他服务器上创建一个消费者 [root@nod...
[root@localhost~]# hostnamectlset-hostname zk-kafka-01[root@localhost~]# hostnamectlset-hostname zk-kafka-02[root@localhost~]# hostnamectlset-hostname zk-kafka-03 //关闭三台的防火墙[root@zk-kafka-01~]# systemctl stop firewalld.service && setenforce0[root@zk-kafka-02~]# systemctl st...
三、kafka集群安装 kafka同样依赖Java环境,由于和zookeeper在相同的机器上,之前已经安装过了,所有可以直接跳过Java环境安装 1.安装kafka [root@node01 ~]#wget http://mirrors.tuna.tsinghua.edu.cn/apache/kafka/2.0.1/kafka_2.11-2.0.1.tgz[root@node01 ~]#tar xf kafka_2.11-2.0.1.tgz -C /usr/local[...
${KAFKA_HOME}/bin/kafka-server-start.sh-daemon${KAFKA_HOME}/config/server.properties ;; stop) echo"--- Kafka 停止 ---" ${KAFKA_HOME}/bin/kafka-server-stop.sh ;; restart) $0stop $0start ;; status) echo"--- Kafka 状态 ---" count=$(ps -ef | grep kafka | egrep -cv"grep|$$...
一、Zookeeper集群搭建1.1 下载 & 解压1.2 修改配置1.3 标识节点1.4 启动集群1.5 集群验证二、Kafka集群搭建2.1 下载解压2.2 拷贝配置文件2.3 修改配置2.4 启动集群2.5 创建测试主题 一、Zookeeper集群搭建 为保证集群高可用，Zookeeper 集群的节点数最好是奇数，最少有三个节点，所以这里搭建一个三个...
一、Zookeeper集群搭建 为保证集群高可用,Zookeeper 集群的节点数最好是奇数,最少有三个节点,所以这里搭建一个三个节点的集群。 1.1 下载 & 解压 下载对应版本 Zookeeper,这里我下载的版本3.4.14。官方下载地址:https://archive.apache.org/dist/zookeeper/ ...
1 首先我们需要在官网上下载好我们需要的kafka，zookeeper版本的安装包。如图，百度搜索zookeeper，点击红圈所示链接进入官网，按照下图步骤点击相应红圈处，到http链接下载随意点击一个下载链接即可，本人是点击最上面的推荐链接，然后进入下载链接后选择对应版本进去进行下载。2 下载好zookeeper版本后，继续下载kafka。同样百度...
三:搭建Kafka集群 以机器A为例 解压包 cd /home/work/dcs // 切换到下载目录 tar -zxvf kafka_2.10-0.10.2.0.tgz // 解压包 创建数据日志文件目录 mkdir ./kafka_2.10-0.10.2.0/data // 数据日志存放目录 打开配置文件 cd kafka_2.10-0.10.2.0/config // 切换到配置文件目录 ...
zookeeper.connect = localhost:2181,localhost:2181.. 设置zookeeper集群连接端口 常用命令: 启动kafka服务: ./kafka-server-start.sh -daemon ../config/server.properties 查看当前Kafka集群中Topic的情况 bin/kafka-topics.sh --list --zookeeper127.0.0.1:2181 ...
二:Zookeeper和Kafka下载 本文使用的zookeeper和kafka版本分别为:3.4.8 , 0.10.0.0 1 :首先到官网进行下载: 将压缩包放在自己指定的目录下,我这里放在了/opt/kafka 目录下 然后,通过clush 将压缩包copy到其它几个服务节点中 clush -g kafka -c /opt/kafka ...