linux contos6.8下部署kafka集群的方法
有3臺服務(wù)器,ip分別為192.168.174.10,192.168.174.11,192.168.174.12。
1、官網(wǎng)下載,分別在每臺機(jī)器上解壓安裝
# 創(chuàng)建kafka的安裝目錄 mkdir -p /usr/local/software/kafka # 解壓 tar -xvf kafka_2.12-1.1.0.tgz -C /usr/local/software/kafka/
2、修改每臺服務(wù)器的/etc/profile文件,設(shè)置kafka環(huán)境變量,添加如下內(nèi)容
export KAFKA_HOME=/usr/local/software/kafka/kafka_2.12-1.1.0 export PATH=$PATH:$KAFKA_HOME/bin
添加完后重啟配置,命令如下:
source /etc/profile
3、修改每臺服務(wù)器的$KAFKA_HOME/config下的server.properties文件,修改代理id和日志存放目錄
#指定代理id,borker.id可以任意指定,前提是保證集群內(nèi)每臺機(jī)器的broker.id唯一,第二臺機(jī)器設(shè)置為2...以此類推 broker.id=1 #設(shè)置日志目錄 log.dirs=/opt/data/kafka/kafka-logs #設(shè)置zookeeper集群地址 zookeeper.connect=192.168.174.7:2181,192.168.174.8:2181,192.168.174.9:2181 #設(shè)置本機(jī)地址,設(shè)置為本服務(wù)器的ip地址。如果不設(shè)置會在創(chuàng)建主題和發(fā)送消息時(shí),發(fā)生NOT LEADER FOR PARTITION異常。 host.name=192.168.174.10
4、配置完成后,分別啟動3臺服務(wù)器的kafka,啟動kafka前確保zookeeper集群已經(jīng)成功啟動。
kafka-server-start.sh -daemon server.properties
5、驗(yàn)證是否成功啟動
jps
如果看到kafka進(jìn)程,說明啟動成功。
另外也可通過zookeeper客戶端查看zookeeper目錄結(jié)構(gòu),如下:
#登錄zookeeper zkCli . sh -server 192.168.174.7:2181 #查看目錄結(jié)構(gòu) ls / #查看已啟動的kafka代理 ls /brokers/ids
以上就是本文的全部內(nèi)容,希望對大家的學(xué)習(xí)有所幫助,也希望大家多多支持腳本之家。
相關(guān)文章
VMWare中CentOS ifcfg-eth0配置方法(親測直接可用)
本篇文章主要介紹了VMWare中CentOS ifcfg-eth0配置,這些配置是基于VMware Network Adapter VMnet8,具有一定的參考價(jià)值,感興趣的小伙伴們可以參考一下。2017-03-03Apache負(fù)載均衡設(shè)置方法 mod_proxy使用介紹
本文主要講解了Apache負(fù)載均衡功能的代碼配置,首先我們通過幾個(gè)模塊的功能進(jìn)行配置,之后就會發(fā)現(xiàn)其中的奧秘了,那么我們還是來具體看文章吧2012-10-10Linux文件服務(wù)器實(shí)戰(zhàn)詳解(虛擬用戶)
這篇文章主要介紹了Linux文件服務(wù)器實(shí)戰(zhàn)詳解(虛擬用戶) ,需要的朋友可以參考下2018-06-06linux如何利用crontab添加定時(shí)任務(wù)詳解
這篇文章主要給大家介紹了關(guān)于linux如何利用crontab添加定時(shí)任務(wù)的相關(guān)資料,文中通過示例代碼介紹的非常詳細(xì),對大家學(xué)習(xí)或者使用linux具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面來一起學(xué)習(xí)學(xué)習(xí)吧2019-04-04Centos7的Firewalld防火墻基礎(chǔ)命令詳解
這篇文章主要介紹了Centos7的Firewalld防火墻基礎(chǔ)命令詳解,文中通過示例代碼介紹的非常詳細(xì),對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2019-11-11centos7 mysql數(shù)據(jù)庫安裝和配置
本篇文章主要介紹了centos7 mysql數(shù)據(jù)庫安裝和配置 ,非常具有實(shí)用價(jià)值,希望對大家實(shí)用mysql能夠有所幫助2017-01-01