Docker(14) docker-compose安装Grafana Loki日志聚合系统

亦凉 2023-03-01 06:30 14阅读 0赞

### 一、前言 ###

###### Grafana Loki 是什么？ ######

Loki 是一个水平可扩展，高可用性，多租户的`日志聚合系统`。它的设计非常经济高效且易于操作，因为它不会为日志内容编制索引，而是为每个日志流编制一组标签。

Loki 组成：

1.  loki : 主服务器，负责存储日志和处理查询
2.  promtail : 代理，负责收集日志并将其发送给 loki
3.  Grafana : Go语言开发的开源数据可视化工具，可以做数据监控和数据统计，带有告警功能

Loki : [https://github.com/grafana/loki][https_github.com_grafana_loki]

### 二、`docker-compose`安装`Grafana Loki` ###

# 环境准备
    git clone https://gitee.com/zhengqingya/docker-compose.git
    
    # Liunx系统走此路径
    cd docker-compose/Liunx
    # Windows系统走此路径
    cd docker-compose/Windows
    
    # 【 注：Liunx系统先授权，否则会报错：`cannot create directory '/var/lib/grafana/plugins': Permission denied` 】
    chmod 777 $PWD/grafana_promtail_loki/grafana/data
    chmod 777 $PWD/grafana_promtail_loki/grafana/log
    
    # 运行服务
    docker-compose -f docker-compose-grafana-promtail-loki.yml -p grafana_promtail_loki up -d

等待运行完成…  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzM4MjI1NTU4_size_16_color_FFFFFF_t_70]

### 三、运行一个java小程序测试日志 ###

新建docker-compose.yml

> 温馨小提示：
> 
> 1.  这是个定时打印日志任务的java小程序；
> 2.  该文件需与上面安装loki的`docker-compose-grafana-promtail-loki.yml`文件在同一级，目的：同步java程序的日志到`promtail`日志采集端，当然这里也可以通过将promtail放到容器中去采集日志，可参考：[https://gitee.com/zhengqingya/docker-compose/tree/master/Liunx/grafana-promtail-loki-nginx-demo][https_gitee.com_zhengqingya_docker-compose_tree_master_Liunx_grafana-promtail-loki-nginx-demo]
> 3.  更多可查看promtail和loki具体配置  
>     ![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzM4MjI1NTU4_size_16_color_FFFFFF_t_70 1]

version: '3'
    services:
      log-java-demo:
        image: registry.cn-hangzhou.aliyuncs.com/zhengqing/log-java-demo:latest
        container_name: log-java-demo 
        volumes: 
          - ./grafana_promtail_loki/logs:/var/log
        ports:
          - "88:88"

运行程序

docker-compose up -d

### 四、Grafana Loki 配置 ###

访问地址：[`http://127.0.0.1:3000`][http_127.0.0.1_3000]  
默认登录账号密码：`admin/admin`  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzM4MjI1NTU4_size_16_color_FFFFFF_t_70 2]  
配置loki数据源  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzM4MjI1NTU4_size_16_color_FFFFFF_t_70 3]  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzM4MjI1NTU4_size_16_color_FFFFFF_t_70 4]  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzM4MjI1NTU4_size_16_color_FFFFFF_t_70 5]  
填写loki地址： `http://loki:3100`  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzM4MjI1NTU4_size_16_color_FFFFFF_t_70 6]  
保存成功后，选择`Explore`  
![在这里插入图片描述][20200722221029563.png]  
这里选择以文件名的方式查看日志信息  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzM4MjI1NTU4_size_16_color_FFFFFF_t_70 7]  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzM4MjI1NTU4_size_16_color_FFFFFF_t_70 8]  
根据日志级别筛选日志  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzM4MjI1NTU4_size_16_color_FFFFFF_t_70 9]  
实时查看日志信息  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzM4MjI1NTU4_size_16_color_FFFFFF_t_70 10]  
更多日志选择和过滤可自行了解…

--------------------

> 今日分享语句：  
> 给自己的人生设立一个目标，给自己未来一个明确的希望，给自己的生活一个方向灯。让我们为着这个方向而努力，不断去超越自己，提高自己的水平，不让自己有懈怠的时候。

[https_github.com_grafana_loki]: https://github.com/grafana/loki
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzM4MjI1NTU4_size_16_color_FFFFFF_t_70]: /images/20230209/5ab1340233544c21b46d818773f62942.png
[https_gitee.com_zhengqingya_docker-compose_tree_master_Liunx_grafana-promtail-loki-nginx-demo]: https://gitee.com/zhengqingya/docker-compose/tree/master/Liunx/grafana-promtail-loki-nginx-demo
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzM4MjI1NTU4_size_16_color_FFFFFF_t_70 1]: /images/20230209/d5f4938ef36f45dd82329392ce859fb6.png
[http_127.0.0.1_3000]: http://127.0.0.1:3000
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzM4MjI1NTU4_size_16_color_FFFFFF_t_70 2]: /images/20230209/6f1d9a0b165946b49fc1f81dcb7b3be1.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzM4MjI1NTU4_size_16_color_FFFFFF_t_70 3]: /images/20230209/b763c7af23bb4e25bf4a26024b3d6f05.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzM4MjI1NTU4_size_16_color_FFFFFF_t_70 4]: /images/20230209/c3b8a53750d543d8a8c1edde65457f2d.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzM4MjI1NTU4_size_16_color_FFFFFF_t_70 5]: /images/20230209/259bf047968a467e91c528a5bd7837e9.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzM4MjI1NTU4_size_16_color_FFFFFF_t_70 6]: /images/20230209/ce095a7f13b24a59af57740b71baab8c.png
[20200722221029563.png]: /images/20230209/1b4deae8992b49f69a133584f8ea7c83.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzM4MjI1NTU4_size_16_color_FFFFFF_t_70 7]: /images/20230209/004140d4f2144d9fa2f14f0b2a0bc877.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzM4MjI1NTU4_size_16_color_FFFFFF_t_70 8]: /images/20230209/cc7ddc25aec14090873e7fa018c38381.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzM4MjI1NTU4_size_16_color_FFFFFF_t_70 9]: /images/20230209/34ebfd089e904c6584e8f681d5b6f5e6.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzM4MjI1NTU4_size_16_color_FFFFFF_t_70 10]: /images/20230209/afcda25023964f85bc4729b93bde56c4.png