kafka集群如何安裝以及測試

這篇文章給大家分享的是有關(guān)kafka集群如何安裝以及測試的內(nèi)容。小編覺得挺實(shí)用的，因此分享給大家做個(gè)參考，一起跟隨小編過來看看吧。

發(fā)展壯大離不開廣大客戶長期以來的信賴與支持，我們將始終秉承“誠信為本、服務(wù)至上”的服務(wù)理念，堅(jiān)持“二合一”的優(yōu)良服務(wù)模式，真誠服務(wù)每家企業(yè)，認(rèn)真做好每個(gè)細(xì)節(jié)，不斷完善自我，成就企業(yè)，實(shí)現(xiàn)共贏。行業(yè)涉及加固等，在成都網(wǎng)站建設(shè)、成都全網(wǎng)營銷推廣、WAP手機(jī)網(wǎng)站、VI設(shè)計(jì)、軟件開發(fā)等項(xiàng)目上具有豐富的設(shè)計(jì)經(jīng)驗(yàn)。

Kafka安裝

一、利用安裝zookeeper的三臺(tái)服務(wù)器做KAFKA集群。

服務(wù)器	IP地址	端口
服務(wù)器1	10.211.55.7	9092
服務(wù)器2	10.211.55.8	9092
服務(wù)器3	10.211.55.9	9092

1.1 下載 kafka_2.9.2-0.8.1

下載地址：https://archive.apache.org/dist/kafka/0.8.1/kafka_2.9.2-0.8.1.tgz

分別在三臺(tái)服務(wù)器創(chuàng)建kafka目錄并且下載kafka壓縮包

#mkdir /usr/local/kafka

#tar –zxvf kafka_2.9.2-0.8.1.tar.gz

1.2 創(chuàng)建log文件夾

#mkdir /usr/local/kafka/kafkalogs

1.3 配置kafka

#cd /usr/local/kafka/kafka_2.9.2-0.8.1/config

#vi server.properties 修改項(xiàng)如下：

broker.id=0 //當(dāng)前機(jī)器在集群中的唯一標(biāo)識(shí)

port=9092 //kafka對(duì)外提供服務(wù)的tcp端口

host.name=10.211.55.7 //主機(jī)IP地址

log.dirs=/usr/local/kafka/kafkalogs //log存放目錄

message.max.byte=5048576 //kafka一條消息容納的消息最大為多少

default.replication.factor=2 //每個(gè)分區(qū)默認(rèn)副本數(shù)量

replica.fetch.max.bytes=5048576

zookeeper.connect=10.211.55.7:2181, 10.211.55.8:2181, 10.211.55.9:2181

4.4 啟動(dòng)kafka

# ./kafka-server-start.sh -daemon ../config/server.properties //后臺(tái)啟動(dòng)運(yùn)行

kafka集群如何安裝以及測試

4.5 問題解決

[root@master ~]# /export/kafka/bin/kafka-console-producer.sh --broker-list 10.14.2.201:9092,10.14.2.202:9092,10.14.2.203:9092,10.14.2.204:9092 --topic test

SLF4J: Failed to load class "org.slf4j.impl.StaticLoggerBinder".

SLF4J: Defaulting to no-operation (NOP) logger implementation

SLF4J: See http://www.slf4j.org/codes.html#StaticLoggerBinder for further details.

# /export/kafka/bin/kafka-console-consumer.sh --zookeeper 10.14.2.201:2181,10.14.2.202:2181,10.14.2.203:2181,10.14.2.204:2181 --topic test --from-beginning

SLF4J: Failed to load class "org.slf4j.impl.StaticLoggerBinder".

SLF4J: Defaulting to no-operation (NOP) logger implementation

SLF4J: See http://www.slf4j.org/codes.html#StaticLoggerBinder for further details.

解決方法：

下載slf4j-1.7.6.zip

http://www.slf4j.org/dist/slf4j-1.7.6.zip

解壓

unzip slf4j-1.7.6.zip

把slf4j-nop-1.7.6.jar 包復(fù)制到kafka libs目錄下面

cd slf4j-1.7.6

cp slf4j-nop-1.7.6.jar /export/kafka/libs/

二、KAFKA集群驗(yàn)證

2.1 創(chuàng)建topic

#./kafka-topics.sh --create --zookeeper 10.211.55.7:2181 --replication-factor 1 --partitions 1 --topic test

2.2 查看topic

# ./kafka-topics.sh --list --zookeeper 10.211.55.7:2181

2.3 開啟發(fā)送者并發(fā)送消息

#./kafka-console-producer.sh --broker-list 10.211.55.7:9092 --topic test

2.4 開啟消費(fèi)者并接收消息

#./kafka-console-consumer.sh --zookeeper 10.211.55.8:2181 --topic test --from-beginning

感謝各位的閱讀！關(guān)于“kafka集群如何安裝以及測試”這篇文章就分享到這里了，希望以上內(nèi)容可以對(duì)大家有一定的幫助，讓大家可以學(xué)到更多知識(shí)，如果覺得文章不錯(cuò)，可以把它分享出去讓更多的人看到吧！

網(wǎng)站名稱：kafka集群如何安裝以及測試
網(wǎng)頁URL：http://muchs.cn/article8/ipgjip.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián)，為您提供網(wǎng)頁設(shè)計(jì)公司、域名注冊(cè)、做網(wǎng)站、服務(wù)器托管、企業(yè)網(wǎng)站制作、微信公眾號(hào)

聲明：本網(wǎng)站發(fā)布的內(nèi)容（圖片、視頻和文字）以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主，如果涉及侵權(quán)請(qǐng)盡快告知，我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場，如需處理請(qǐng)聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載，或轉(zhuǎn)載時(shí)需注明來源：創(chuàng)新互聯(lián)

猜你還喜歡下面的內(nèi)容