詳解利用ELK搭建Docker容器化應(yīng)用日志中心
概述
應(yīng)用一旦容器化以后，需要考慮的就是如何采集位于Docker容器中的應(yīng)用程序的打印日志供運(yùn)維分析。典型的比如SpringBoot應(yīng)用的日志 收集。本文即將闡述如何利用ELK日志中心來收集容器化應(yīng)用程序所產(chǎn)生的日志，并且可以用可視化的方式對日志進(jìn)行查詢與分析，其架構(gòu)如下圖所示：
架構(gòu)圖
鏡像準(zhǔn)備
鏡像準(zhǔn)備
- ElasticSearch鏡像
- Logstash鏡像
- Kibana鏡像
- Nginx鏡像（作為容器化應(yīng)用來生產(chǎn)日志）
開啟Linux系統(tǒng)Rsyslog服務(wù)
修改Rsyslog服務(wù)配置文件：
vim /etc/rsyslog.conf
開啟下面三個參數(shù)：
$ModLoad imtcp $InputTCPServerRun 514 *.* @@localhost:4560
開啟3個參數(shù)
意圖很簡單：讓Rsyslog加載imtcp模塊并監(jiān)聽514端口，然后將Rsyslog中收集的數(shù)據(jù)轉(zhuǎn)發(fā)到本地4560端口！
然后重啟Rsyslog服務(wù)：
systemctl restart rsyslog
查看rsyslog啟動狀態(tài)：
netstat -tnl
部署ElasticSearch服務(wù)
docker run -d -p 9200:9200 \ -v ~/elasticsearch/data:/usr/share/elasticsearch/data \ --name elasticsearch elasticsearch
ES啟動成功效果
部署Logstash服務(wù)
添加 ~/logstash/logstash.conf 配置文件如下：
input {
syslog {
type => "rsyslog"
port => 4560
}
}
output {
elasticsearch {
hosts => [ "elasticsearch:9200" ]
}
}
配置中我們讓Logstash從本地的Rsyslog服務(wù)中取出應(yīng)用日志數(shù)據(jù)，然后轉(zhuǎn)發(fā)到ElasticSearch數(shù)據(jù)庫中！
配置完成以后，可以通過如下命令來啟動Logstash容器：
docker run -d -p 4560:4560 \ -v ~/logstash/logstash.conf:/etc/logstash.conf \ --link elasticsearch:elasticsearch \ --name logstash logstash \ logstash -f /etc/logstash.conf
部署Kibana服務(wù)
docker run -d -p 5601:5601 \ --link elasticsearch:elasticsearch \ -e ELASTICSEARCH_URL=http://elasticsearch:9200 \ --name kibana kibana
啟動nginx容器來生產(chǎn)日志
docker run -d -p 90:80 --log-driver syslog --log-opt \ syslog-address=tcp://localhost:514 \ --log-opt tag="nginx" --name nginx nginx
很明顯Docker容器中的Nginx應(yīng)用日志轉(zhuǎn)發(fā)到本地syslog服務(wù)中，然后由syslog服務(wù)將數(shù)據(jù)轉(zhuǎn)給Logstash進(jìn)行收集。
至此，日志中心搭建完畢，目前一共四個容器在工作：
實(shí)驗驗證
瀏覽器打開 localhost:90 來打開Nginx界面，并刷新幾次，讓后臺產(chǎn)生GET請求的日志
打開Kibana可視化界面： localhost:5601
localhost:5601
收集Nginx應(yīng)用日志
收集Nginx應(yīng)用日志
查詢應(yīng)用日志
在查詢框中輸入 program=nginx 可查詢出特定日志
查詢應(yīng)用日志
以上就是本文的全部內(nèi)容，希望對大家的學(xué)習(xí)有所幫助，也希望大家多多支持腳本之家。
相關(guān)文章
Docker?compose一鍵安裝mirai搭建QQ機(jī)器人最快操作方法
這篇文章主要介紹了Docker?compose一鍵安裝mirai，搭建QQ機(jī)器人最快方法,詳細(xì)介紹了mirai基本操作，結(jié)合實(shí)例代碼給大家介紹的非常詳細(xì)，對大家的學(xué)習(xí)或工作具有一定的參考借鑒價值，需要的朋友可以參考下2022-04-04
這篇文章主要介紹了docker-compose安裝minio的相關(guān)知識，本文給大家介紹的非常詳細(xì)，對大家的學(xué)習(xí)或工作具有一定的參考借鑒價值,需要的朋友可以參考下2023-07-07
Docker本地鏡像的導(dǎo)出導(dǎo)入兩種方案介紹
這篇文章主要介紹了Docker本地鏡像的導(dǎo)出導(dǎo)入兩種方案的相關(guān)資料,兩種方法分別是export/import和save/load兩種方案,文中并對比了它們的差別和應(yīng)用場景,需要的朋友可以參考下2025-03-03
Docker 教程之存出和載入鏡像，移除及鏡像實(shí)現(xiàn)原理
這篇文章主要介紹了Docker 教程之存出和載入鏡像，移除及鏡像實(shí)現(xiàn)原理的相關(guān)資料,需要的朋友可以參考下2016-12-12
Docker容器化部署嘗試——多容器通信(node+mongoDB+nginx)
這篇文章主要介紹了Docker容器化部署嘗試——多容器通信(node+mongoDB+nginx)，小編覺得挺不錯的，現(xiàn)在分享給大家，也給大家做個參考。一起跟隨小編過來看看吧2018-12-12
Elasticsearch/Kibana密碼設(shè)置方法
這篇文章主要介紹了Elasticsearch/Kibana密碼設(shè)置,本文分步驟給大家介紹的非常詳細(xì)，對大家的學(xué)習(xí)或工作具有一定的參考借鑒價值，需要的朋友可以參考下2023-06-06
基于Docker部署Tomcat集群、 Nginx負(fù)載均衡的問題小結(jié)
這篇文章主要介紹了基于Docker部署 Tomcat集群、 Nginx負(fù)載均衡,本文給大家介紹的非常詳細(xì)，對大家的學(xué)習(xí)或工作具有一定的參考借鑒價值，需要的朋友可以參考下2021-09-09
在Docker中可以使用數(shù)據(jù)卷目錄掛載來將主機(jī)上的目錄與容器內(nèi)的目錄進(jìn)行映射,下面這篇文章主要給大家介紹了關(guān)于Docker數(shù)據(jù)卷與攔截以及目錄攔截的相關(guān)資料,需要的朋友可以參考下2024-01-01
利用Docker分層構(gòu)建優(yōu)化鏡像大小的實(shí)現(xiàn)
合適docker鏡像文件大小不僅影響容器啟動效率,也影響資源占用效率,本文介紹如何利用分層方式構(gòu)建docker鏡像,采用多種方式避免鏡像文件太大而影響性能,需要的朋友可以參考下2025-01-01
基于 Docker 搭建 Anythingllm的詳細(xì)過程
本文詳細(xì)介紹了如何在本地Windows 11企業(yè)版上使用Docker搭建和部署Anythingllm,包括Ollama和Docker的安裝步驟,以及配置和使用Anythinllm的具體方法,感興趣的朋友一起看看吧2025-03-03