码头工人有很多的日志插件,默认使用json文件,只有使用json文件时,sudo码头工人日志- f才可以显示,输入以下命令查看码头工人日志插件:
$ sudo码头工人信息| grep日志
这里先说明一下,当容器运行时,码头工人会在宿主机上创建一个该容器相关的文件,然后将容器产生的日志转存到该文件下.docker日志- f命令就会找到该文件内容并显示在终端上。
我们都知道码头工人日志- f会将所有对应的服务日志输出到终端,无论服务的部署在哪个节点上,那么我现在提出一个问题,是否每个节点对应的容器文件,都会保存该服务的完整日志备份,还是只保存该节点服务对应容器产生的日志?
因为这个问题涉及到每个节点如果都用filebeat监听宿主机的容器日志文件,那么如果每个节点的容器日志都是一个完整的备份,日志就会重复,如果只是保存该节点上容器的日志,就不会。
答案是只保留该节点上容器的日志,码头工人日志- f命令只不过在叠加网络模型上走了一层协议,把在其它节点上的相同的容器日志汇聚起来。
默认使用码头工人的json文件,首先配置守护进程:
$ sudo dockerd \
——log-driver=json文件\
——log-opt标签=名
启动容器需要添加如下参数:
$ sudo码头工人服务更新——标签名=测试
或者直接在docker-compose.yml中标记:
版本:“3”
服务:
go-gin-demo:
图片:chenghuizhang/go-gin-demo: v3
港口:
——8081:8081
网络:
——覆盖
部署:
模式:复制
副本:3
标签:
名:go-gin-demoxxxxxxx
日志:
选项:
标签:“名”
网络:
覆盖:
在每个节点安装filebeat,并且filebeat.yml配置如下:
filebeat.prospectors:
类型:日志
道路:
#容器的日志目录
——/var/lib/docker/containers/*/*.log
#因为码头工人使用的日志司机是json文件,因此采集到的日志格式是json格式,设置为真实之后,filebeat会将日志进行json_decode处理
json。keys_under_root:真
tail_files:真
output.logstash:
主机(“172.17.10.114:5044”):
在logstash.conf中配置索引:
输出{
elasticsearch {
action=比;“指数”
主机=比;[" 172.17.10.114:9200 "]
#获取日志标签
指数=比;“% {attrs.servicename} - % {+ YYYY.MM.dd}”
}
}
Dockerfile文件需要将项目输出的日志打印到stdout和stderr中,不然json文件日志驱动不会收集到容器里面输出的日志,sudo码头工人日志- f就在终端显示不了容器日志了,在Dockerfile中需加入以下命令:
运行ln科幻/dev/stdout/xx/xx。日志\ #信息
,,ln科幻/dev/stderr/xx/xx。错误日志#
或者在在项目的log4j配置输出控制台:
& lt; Appenders>
& lt;控制台的名字==癝YSTEM_OUT”比“控制台”目标;
& lt; PatternLayout模式=" [% d{默认}]% m”/比;
& lt;/Console>
& lt;/Appenders>
如果日志需要记录容器id名称和镜像名称,在运行容器时可以加入以下参数:
——log-opt标签="//"
最终,json文件日志插件将容器打印到控制台的日志生成到本地<代码>/var/lib/码头工人/集装箱/*/目录中,格式如下:
{
“日志”:“[GIN-debug][警告]现在杜松子酒需要1.6或更高版本,1.7很快就会需要。”,
“流”:“stderr”,
" attrs ": {
“标签”:“chenghuizhang/go-gin-demo: v3@sha256: e6c0419d64e5eda510056a38cfb803750e4ac2f0f4862d153f7c4501f576798b/mygo.2.jhqptjugfti2t4emf55sehamo/647 eaa4b3913”,
“名”:“测试”
}，
“时间”:“2019 - 01 - 29 - t10:08:59.780161908z”
}
在logstash中格式化日志:
过滤器{
神交{
patterns_dir=比;“/etc/logstash/conf.d/模式”
匹配=比;{“消息”=比;“% {TIMESTAMP_ISO8601:时间}%{名:attr.servicename} % {DOCKER_TAG: attr.tag} "}
}
