Spring Boot 2 实战:轻量级日志loki集成2
上一篇文章简单入门了Loki日志平台的使用,今天又简单研究了如何在实践中使用Loki监控Spring Boot应用,特地分享给大家,让大家对这门新技术有更深的了解。
Loki的日志收集实践
上一篇文章中我们使用Docker Compose同时启动了Grafana、Loki、Promtail来监控一个应用。以及整个日志体系的架构。
但是实际应用中不可能为每一个应用都建立一个Grafana-Loki-Promtail
体系。
Promtail日志代理
目前Promtail可以从两个来源跟踪日志:本地日志文件和systemd日志,我们上一篇文章中演示的就是本地日志文件的加载,这种方式是目前我唯一能够使用的途径,另一种途径是通过K8S的服务发现能力。
如果在多个应用服务器上部署对应的多个Promtail守护程序就能监视多个应用的静态日志文件,并通过Loki API将日志推送到Loki中进行聚合式的管理。
Promtail动态配置
Grafana和Loki的部署请参考这一篇文章。
我们只需要为Loki应用部署相关的Promtail守护程序即可。 这里我仍然使用Docker对Promtail进行部署,不过我不能再使用默认配置了,这时的config.yml
应该是:
server:
http_listen_port: 9080
grpc_listen_port: 0
positions:
filename: /var/log/positions.yaml
client:
url: http://${LOKI_HOST}:${LOKI_PORT}/loki/api/v1/push
scrape_configs:
- job_name: system
pipeline_stages:
static_configs:
- labels:
app: ${APP_NAME}
job: varlogs
host: ${LOG_HOST}
__path__: /var/log/*log
为了构建一个通用的配置,我将一些参数进行了动态化。这是Loki2.1+
版本提供的特性,可以使用${}
来引用环境变量,甚至你可以为其指定默认值${VAR:default_value}
。但是你必须得知道为了开启这一特性需要在Promtail启动命令中添加选项-config.expand-env
。
Promtail Docker镜像改造
根据这个我对Promtail的Docker镜像进行了改造,具体的Dockerfile
为:
FROM grafana/promtail:2.2.1
LABEL AUTHOR = felord.cn
VOLUME ["/var/log/"]
EXPOSE 9080
ENV LOKI_HOST="localhost"
ENV LOKI_PORT=3100
ENV APP_NAME="APP"
ENV LOG_HOST="localhost"
COPY config.yml /etc/promtail/
CMD ["-config.file=/etc/promtail/config.yml", "-config.expand-env"]
你可以通过docker build -t loki-promtail:1.0 .
命令构建这个自定义Promtail镜像。基本的启动命令:
docker run -d --name promtail-service --network loki -v c:/docker/log:/var/log/ -e LOKI_HOST=loki -e APP_NAME=SpringBoot loki-promtail:1.0
其中挂载的目录c:/docker/log
依然是应用的日志目录,LOKI_HOST
要保证能够同Loki服务器通信,无论你通过直连还是Docker网络(这里用了Docker网桥)。你可以可以使用Docker Compose将应用和Promtail进行捆绑,所有的Promtail将把对应的日志发往Loki进行集中式的管理。另外通过自定义的Label
我们可以通过应用名称来搜索日志了。
总结
今天通过更加贴近实战的方式对Loki收集日志的机理进行了分享,尤其是日志收集器Promtail的改造部署。希望能够帮助你更加快捷地实战这个日志新贵。好了今天的分享就到这里,多多关注:码农小胖哥, 多多一键四连,多多支持持续输出原创技术分享。
评论系统未开启,无法评论!