快捷導(dǎo)航

zookeeper服務(wù)優(yōu)化的一些建議

更新時(shí)間：2019年03月15日 09:52:32 作者：Scub

今天小編就為大家分享一篇關(guān)于zookeeper服務(wù)優(yōu)化的一些建議，小編覺(jué)得內(nèi)容挺不錯(cuò)的，現(xiàn)在分享給大家，具有很好的參考價(jià)值，需要的朋友一起跟隨小編來(lái)看看吧

1.快照文件和事務(wù)日志文件分別掛在不同磁盤。zoo.cfg文件中，dataDir是存放快照數(shù)據(jù)的，dataLogDir是存放事務(wù)日志的。zookeeper更新操作過(guò)程：先寫事務(wù)日志，再寫內(nèi)存，周期性落到磁盤（刷新內(nèi)存到快照文件）。事務(wù)日志的對(duì)寫請(qǐng)求的性能影響很大，保證dataLogDir所在磁盤性能良好、沒(méi)有競(jìng)爭(zhēng)者。

2. 默認(rèn)jvm沒(méi)有配置Xmx、Xms等信息，可以在conf目錄下創(chuàng)建java.env文件（內(nèi)存堆空間一定要小于機(jī)器內(nèi)存，避免使用swap）

export JVMFLAGS="-Xms2048m -Xmx2048m $JVMFLAGS"

3. 按天出zookeeper日志，避免zookeeper.out文件過(guò)大。

zkEnv.sh文件日志輸出方式從CONSOLE改為ROLLINGFILE；

if [ "x${ZOO_LOG4J_PROP}" = "x" ]
then
#  ZOO_LOG4J_PROP="INFO,CONSOLE"
  ZOO_LOG4J_PROP="INFO,ROLLINGFILE"
fi

conf/log4j.properties設(shè)置為按天生成文件DailyRollingFileAppender

#zookeeper.root.logger=INFO, CONSOLE
zookeeper.root.logger=INFO, ROLLINGFIL

log4j.appender.ROLLINGFILE=org.apache.log4j.DailyRollingFileAppender
log4j.appender.ROLLINGFILE.Threshold=${zookeeper.log.threshold}
log4j.appender.ROLLINGFILE.File=${zookeeper.log.dir}/${zookeeper.log.file}
log4j.appender.ROLLINGFILE.DatePattern='.'yyyy-MM-dd
# Max log file size of 10MB
#log4j.appender.ROLLINGFILE.MaxFileSize=10MB

4. zoo.cfg文件中skipACL=yes，忽略ACL驗(yàn)證，可以減少權(quán)限驗(yàn)證的相關(guān)操作，提升一點(diǎn)性能。

5. zoo.cfg文件中forceSync=no，這個(gè)對(duì)寫請(qǐng)求的性能提升很有幫助，是指每次寫請(qǐng)求的數(shù)據(jù)都要從pagecache中固化到磁盤上，才算是寫成功返回。當(dāng)寫請(qǐng)求數(shù)量到達(dá)一定程度的時(shí)候，后續(xù)寫請(qǐng)求會(huì)等待前面寫請(qǐng)求的forceSync操作，造成一定延時(shí)。如果追求低延時(shí)的寫請(qǐng)求，配置forceSync=no，數(shù)據(jù)寫到pagecache后就返回。但是機(jī)器斷電的時(shí)候，pagecache中的數(shù)據(jù)有可能丟失。

默認(rèn)為forceSync=yes，為yes可以設(shè)置fsync.warningthresholdms=50 如果數(shù)據(jù)固化到磁盤的操作fsync超過(guò)50ms的時(shí)候，將會(huì)在zookeeper.out中輸出一條warn日志（forceSync=yes有效）。

6. globalOutstandingLimit=100000 客戶端連接過(guò)多，限制客戶端請(qǐng)求，避免OOM

7. zoo.cfg文件中preAllocSize=64M 日志文件預(yù)分配大小; snapCount=100,000 多少次寫事務(wù)，生成一個(gè)快照如果快照生成頻繁可適當(dāng)調(diào)大該參數(shù)。

一般zk的應(yīng)用提倡讀大于寫，性能較好（10:1），存儲(chǔ)元數(shù)據(jù)用來(lái)協(xié)調(diào)分布式數(shù)據(jù)最終一致。寫過(guò)于頻繁使用緩存更好

8. 日志文件自動(dòng)清除（如果追求性能，可手動(dòng)清除）

autopurge.snapRetainCount=3 # The number of snapshots to retain in dataDir
autopurge.purgeInterval=24 # Purge task interval in hours Set to "0" to disable auto purge feature

總結(jié)

以上就是這篇文章的全部?jī)?nèi)容了，希望本文的內(nèi)容對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值，謝謝大家對(duì)腳本之家的支持。如果你想了解更多相關(guān)內(nèi)容請(qǐng)查看下面相關(guān)鏈接

您可能感興趣的文章: