使用MongoDB存储Docker日志

2018-01-19 10:35:19来源:http://blog.csdn.net/mydeman/article/details/79091037作者:mydeman的学习日志人点击

分享

日志是系统很重要的一个组成部分,通过日志可以及时发现系统中存在的问题,也可以为修复问题提供线索。Docker提供了多种插件方式管理日志,本文就对使用MongoDB存储Docker日志的过程做个记录。


数据流

Docker产生的日期 发送到 FluentD,然后FluentD在转存到MongoDB。


配置Fluentd

前提:操作系统是CentOS7,已安装MongoDB3.4


1. 安装Fluentd


CentOS 7的软件库并没有包含Fluentd的安装包,所以需要手动安装。在CentOS使用的软件td-agent


# curl -L /2014th7cj/d/file/p/20180119/install-redhat-td-agent3.sh | sh

上面命令会在/etct/yum.repo.d/目录中,创建一个td-agent的安装库 td.repo,然后自动安装td-agent。安装完毕后设为自动启动。


# systemctl start td-agent
# systemctl enable td-agent

如果在启动过程中出现问题,可以查看位于/var/log/td-agent/下日志文件td-agent.log


2. 配置将docker日志转存到MongoDB

转存到MongoDB需要插件支持,但是默认情况下td-agent是没有安装该插件的,需要安装。


# yum -y install td-agent-gemt
# td-agent-gem install fluent-plugin-mongo

编辑/etc/td-agent/td-agent.conf,增加


## match tag=docker.* and dump to mongodb
## 在docker启动容器时,日志的tag要符合docker.*的形式
<match docker.*>
@type mongo
# 数据库地址
host 127.0.0.1
# 数据库端口
port 22017
# 存储日志的数据库和数据集名称
database docker
collection log
</match>

重启td-agent。


启动容器

启动容器的命令改为:


$ docker run --mount type=bind,source=/home/demo/app,destination=/app --log-driver=fluentd --log-opt tag="docker.log" python3:latest python3 /app/test.py

运行完毕后,可以到MongoDB中查看日志。


参考文档:


https://docs.treasuredata.com/articles/td-agent
https://docs.docker.com/engine/admin/logging/fluentd/
https://docs.fluentd.org/v1.0/articles/out_mongo

最新文章

123

最新摄影

闪念基因

微信扫一扫

第七城市微信公众平台