詳解利用ELK搭建Docker容器化應(yīng)用日志中心
概述
應(yīng)用一旦容器化以后,需要考慮的就是如何采集位于Docker容器中的應(yīng)用程序的打印日志供運(yùn)維分析。典型的比如SpringBoot應(yīng)用的日志 收集。本文即將闡述如何利用ELK日志中心來收集容器化應(yīng)用程序所產(chǎn)生的日志,并且可以用可視化的方式對(duì)日志進(jìn)行查詢與分析,其架構(gòu)如下圖所示:
架構(gòu)圖
鏡像準(zhǔn)備
鏡像準(zhǔn)備
- ElasticSearch鏡像
- Logstash鏡像
- Kibana鏡像
- Nginx鏡像(作為容器化應(yīng)用來生產(chǎn)日志)
開啟Linux系統(tǒng)Rsyslog服務(wù)
修改Rsyslog服務(wù)配置文件:
vim /etc/rsyslog.conf
開啟下面三個(gè)參數(shù):
$ModLoad imtcp $InputTCPServerRun 514 *.* @@localhost:4560
開啟3個(gè)參數(shù)
意圖很簡(jiǎn)單:讓Rsyslog加載imtcp模塊并監(jiān)聽514端口,然后將Rsyslog中收集的數(shù)據(jù)轉(zhuǎn)發(fā)到本地4560端口!
然后重啟Rsyslog服務(wù):
systemctl restart rsyslog
查看rsyslog啟動(dòng)狀態(tài):
netstat -tnl
部署ElasticSearch服務(wù)
docker run -d -p 9200:9200 \ -v ~/elasticsearch/data:/usr/share/elasticsearch/data \ --name elasticsearch elasticsearch
ES啟動(dòng)成功效果
部署Logstash服務(wù)
添加 ~/logstash/logstash.conf
配置文件如下:
input { syslog { type => "rsyslog" port => 4560 } } output { elasticsearch { hosts => [ "elasticsearch:9200" ] } }
配置中我們讓Logstash從本地的Rsyslog服務(wù)中取出應(yīng)用日志數(shù)據(jù),然后轉(zhuǎn)發(fā)到ElasticSearch數(shù)據(jù)庫中!
配置完成以后,可以通過如下命令來啟動(dòng)Logstash容器:
docker run -d -p 4560:4560 \ -v ~/logstash/logstash.conf:/etc/logstash.conf \ --link elasticsearch:elasticsearch \ --name logstash logstash \ logstash -f /etc/logstash.conf
部署Kibana服務(wù)
docker run -d -p 5601:5601 \ --link elasticsearch:elasticsearch \ -e ELASTICSEARCH_URL=http://elasticsearch:9200 \ --name kibana kibana
啟動(dòng)nginx容器來生產(chǎn)日志
docker run -d -p 90:80 --log-driver syslog --log-opt \ syslog-address=tcp://localhost:514 \ --log-opt tag="nginx" --name nginx nginx
很明顯Docker容器中的Nginx應(yīng)用日志轉(zhuǎn)發(fā)到本地syslog服務(wù)中,然后由syslog服務(wù)將數(shù)據(jù)轉(zhuǎn)給Logstash進(jìn)行收集。
至此,日志中心搭建完畢,目前一共四個(gè)容器在工作:
實(shí)驗(yàn)驗(yàn)證
瀏覽器打開 localhost:90
來打開Nginx界面,并刷新幾次,讓后臺(tái)產(chǎn)生GET請(qǐng)求的日志
打開Kibana可視化界面: localhost:5601
localhost:5601
收集Nginx應(yīng)用日志
收集Nginx應(yīng)用日志
查詢應(yīng)用日志
在查詢框中輸入 program=nginx
可查詢出特定日志
查詢應(yīng)用日志
以上就是本文的全部內(nèi)容,希望對(duì)大家的學(xué)習(xí)有所幫助,也希望大家多多支持腳本之家。
相關(guān)文章
Docker MySQL每天定時(shí)自動(dòng)備份的實(shí)現(xiàn)方法
本文主要介紹了Docker MySQL每天定時(shí)自動(dòng)備份的實(shí)現(xiàn)方法,文中通過示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2023-01-01理解Docker(1):Docker安裝和基礎(chǔ)用法詳細(xì)介紹
本篇文章主要是介紹了Docker 安裝和基礎(chǔ)用法,對(duì)于想要需要的Docker的同學(xué)可以了解一下。2016-11-11詳解通過docker和docker-compose實(shí)現(xiàn)eureka高可用
這篇文章主要介紹了詳解通過docker和docker-compose實(shí)現(xiàn)eureka高可用,小編覺得挺不錯(cuò)的,現(xiàn)在分享給大家,也給大家做個(gè)參考。一起跟隨小編過來看看吧2018-09-09docker中mysql數(shù)據(jù)庫密碼修改方法
長時(shí)間使用非關(guān)系型數(shù)據(jù)庫MongoDB近期遇到突然想使用mysql卻發(fā)現(xiàn)mysql密碼忘記了,下面這篇文章主要給大家介紹了關(guān)于docker中mysql數(shù)據(jù)庫密碼修改方法的相關(guān)資料,需要的朋友可以參考下2023-11-11Docker 拉取鏡像及標(biāo)簽操作 pull | tag
這篇文章主要介紹了Docker 拉取鏡像及標(biāo)簽操作 pull | tag,具有很好的參考價(jià)值,希望對(duì)大家有所幫助。一起跟隨小編過來看看吧2020-11-11云centos開啟docker遠(yuǎn)程服務(wù)鏈接的實(shí)現(xiàn)步驟
本文主要介紹了云centos開啟docker遠(yuǎn)程服務(wù)鏈接,文中通過示例代碼介紹的非常詳細(xì),具有一定的參考價(jià)值,感興趣的小伙伴們可以參考一下2021-09-09Docker網(wǎng)絡(luò)模型以及容器通信詳解續(xù)篇
這篇文章主要介紹了Docker網(wǎng)絡(luò)模型以及容器通信詳解續(xù)篇的相關(guān)資料,通過學(xué)習(xí)Docker網(wǎng)路驅(qū)動(dòng)模型,更好地解決容器間的通信問題,需要的朋友可以參考下2022-11-11docker+jenkins+gitee配置持續(xù)集成部署方式
這篇文章主要介紹了docker+jenkins+gitee配置持續(xù)集成部署方式,具有很好的參考價(jià)值,希望對(duì)大家有所幫助,如有錯(cuò)誤或未考慮完全的地方,望不吝賜教2023-09-09