佳木斯湛栽影视文化发展公司

主頁 > 知識庫 > 詳解Docker容器的日志處理

詳解Docker容器的日志處理

熱門標簽:使用U盤裝系統(tǒng) 硅谷的囚徒呼叫中心 美圖手機 阿里云 百度競價點擊價格的計算公式 智能手機 網(wǎng)站建設(shè) 檢查注冊表項

Docker有很多的日志插件,默認使用 json-file,只有使用json-file時,sudo docker logs -f 才可以顯示,輸入以下命令查看docker日志插件:

$ sudo docker info | grep Logging

這里先說明一下,當容器運行時,docker會在宿主機上創(chuàng)建一個該容器相關(guān)的文件,然后將容器產(chǎn)生的日志轉(zhuǎn)存到該文件下。docker logs -f 命令就會找到該文件內(nèi)容并顯示在終端上。

我們都知道docker logs -f會將所有對應(yīng)的服務(wù)日志輸出到終端,無論服務(wù)的部署在哪個節(jié)點上,那么我現(xiàn)在提出一個問題,是否每個節(jié)點對應(yīng)的容器文件,都會保存該服務(wù)的完整日志備份,還是只保存該節(jié)點服務(wù)對應(yīng)容器產(chǎn)生的日志?

因為這個問題涉及到每個節(jié)點如果都用filebeat監(jiān)聽宿主機的容器日志文件,那么如果每個節(jié)點的容器日志都是一個完整的備份,日志就會重復(fù),如果只是保存該節(jié)點上容器的日志,就不會。

答案是只保留該節(jié)點上容器的日志,docker logs -f 命令只不過在overlay網(wǎng)絡(luò)模型上走了一層協(xié)議,把在其它節(jié)點上的相同的容器日志匯聚起來。

默認使用docker的json-file,首先配置daemon:

$ sudo dockerd \

--log-driver=json-file \

--log-opt labels=servicename

啟動容器需要添加如下參數(shù):

$ sudo docker service update --label servicename=test

或者直接在docker-compose.yml中標記:

version: "3"

services:
 go-gin-demo:
  image: chenghuizhang/go-gin-demo:v3
  ports:
   - 8081:8081
  networks:
   - overlay
  deploy:
   mode: replicated
   replicas: 3
  labels:
   servicename: go-gin-demoxxxxxxx
  logging:
   options:
    labels: "servicename"

networks:
 overlay:

在每個節(jié)點安裝filebeat,并且filebeat.yml配置如下:

filebeat.prospectors:
- type: log
  paths:
  		# 容器的日志目錄
   - /var/lib/docker/containers/*/*.log
   # 因為docker使用的log driver是json-file,因此采集到的日志格式是json格式,設(shè)置為true之后,filebeat會將日志進行json_decode處理
  json.keys_under_root: true
  tail_files: true
output.logstash:
 hosts: ["172.17.10.114:5044"]

在logstash.conf中配置索引:

output {
 elasticsearch {
  action => "index"
  hosts => ["172.17.10.114:9200"]
  # 獲取日志label
  index => "%{attrs.servicename}-%{+YYYY.MM.dd}"
 }
}

Dockerfile文件需要將項目輸出的日志打印到stdout和stderr中,不然json-file日志驅(qū)動不會收集到容器里面輸出的日志,sudo docker logs -f就在終端顯示不了容器日志了,在Dockerfile中需加入以下命令:

RUN ln -sf /dev/stdout /xx/xx.log \ # info
	&& ln -sf /dev/stderr /xx/xx.log # error

或者在在項目的log4j配置輸出控制臺:

<Appenders>
  <Console name="Console" target="SYSTEM_OUT">
    <PatternLayout pattern="[%d{DEFAULT}]%m"/>
  </Console>
</Appenders>

如果日志需要記錄容器id名稱和鏡像名稱,在運行容器時可以加入以下參數(shù):

--log-opt tag="http://"

最終,json-file日志插件將容器打印到控制臺的日志生成到本地 /var/lib/docker/containers/*/ 目錄中,格式如下:

{
  "log":"[GIN-debug] [WARNING] Now Gin requires Go 1.6 or later and Go 1.7 will be required soon.",
  "stream":"stderr",
  "attrs":{
    "tag":"chenghuizhang/go-gin-demo:v3@sha256:e6c0419d64e5eda510056a38cfb803750e4ac2f0f4862d153f7c4501f576798b/mygo.2.jhqptjugfti2t4emf55sehamo/647eaa4b3913",
    "servicename":"test"
  },
  "time":"2019-01-29T10:08:59.780161908Z"
}

在logstash中格式化日志:

filter {
 grok {
  patterns_dir => "/etc/logstash/conf.d/patterns"
  match => {"message" => "%{TIMESTAMP_ISO8601:time}%{SERVICENAME:attr.servicename}%{DOCKER_TAG:attr.tag}"}
}

以上就是本文的全部內(nèi)容,希望對大家的學(xué)習(xí)有所幫助,也希望大家多多支持腳本之家。

標簽:黃山 湖北 通遼 懷化 湘潭 賀州 煙臺 山南

巨人網(wǎng)絡(luò)通訊聲明:本文標題《詳解Docker容器的日志處理》,本文關(guān)鍵詞  ;如發(fā)現(xiàn)本文內(nèi)容存在版權(quán)問題,煩請?zhí)峁┫嚓P(guān)信息告之我們,我們將及時溝通與處理。本站內(nèi)容系統(tǒng)采集于網(wǎng)絡(luò),涉及言論、版權(quán)與本站無關(guān)。
  • 相關(guān)文章
  • 收縮
    • 微信客服
    • 微信二維碼
    • 電話咨詢

    • 400-1100-266
    浪卡子县| 定陶县| 黎城县| 泾源县| 沅陵县| 阳曲县| 太康县| 明光市| 闽侯县| 营口市| 靖边县| 太和县| 永昌县| 临清市| 正定县| 屯昌县| 玛沁县| 蓝田县| 平武县| 安多县| 城市| 牡丹江市| 宜宾市| 新丰县| 宜都市| 公安县| 泽库县| 华安县| 池州市| 军事| 静乐县| 甘德县| 蕉岭县| 巴中市| 邹城市| 九龙坡区| 桑日县| 徐州市| 罗城| 桑植县| 县级市|