搭建监控平台（一）

选型

最近终于有空搞搞机子了。 整了个 4C + 4G + 60G 的虚拟机来玩玩 Linux。

现在第一步就是搭建一个检测虚拟机状态的平台。 在搜索后决定用 Prometheus + Grafana 的架构来搭建。

流程

安装及初启动

首先我们需要安装上述软件，为了实现同时监控系统我们在安装完上述软件后再安装 node_exporter。 我在选择的发行版中官方仓库已经有相关包，这里直接选择使用包管理器安装：

1
sudo dnf install grafana prometheus

然后启动这两个服务：

1
systemctl enable --now grafana prometheus

现在我们就完成了安装以及初次启动。

配置

上文提到， Prometheus 如果要监控系统资源，要额外安装 node_exporter。 现在我们对 Prometheus 进行配置来启用这个插件：

1
scrape_configs:
2
  - job_name: 'prometheus'
3
    static_configs:
4
      - targets: ['localhost:9090']
5
        labels:
6
          app: 'prometheus'
7
  - job_name: 'node'
8
    static_configs:
9
      - targets: ['localhost:9100']

然后重启服务：

1
systemctl restart prometheus

即可完成插件启用。

现在让我们测试一下：

1
❯ sudo ss -tulnp | grep -E "9090|9100"
2
[sudo] password for elysium:
3
tcp   LISTEN 0      4096       127.0.0.1:9090       0.0.0.0:*    users:(("prometheus",pid=54760,fd=6))
4
tcp   LISTEN 0      4096               *:9100             *:*    users:(("node_exporter",pid=54759,fd=3))

此时脚本正常运行。

现在让我们看看 Grafana。 Grafana 网页端非常友好，我们只需要按照提示导入 Prometheus 数据源即可。 关于 dashboard，官方内置的已经过时， 我这里更推荐使用 Node Exporter Full。 配置时输入 1860 导入即可。

路由转发

实际的环境中，为了安全是不可能之间将 3030 暴露到互联网中。 因此，我们需要配置路径来让管理员可以访问。 比如域名为 foo.bar，则需要访问 foo.bar/monitor 来进行访问。

为了实现这样的功能，我们需要对 grafana 设置如下：

1
[server]
2
domain = localhost
3
root_url = %(protocol)s://%(domain)s/monitor/
4
serve_from_sub_path = true

然后对 nginx 设置如下：

1
server {
2
  location /monitor/ {
3
    proxy_pass http://localhost:3000/;
4
    proxy_set_header Host $host;
5
    proxy_set_header X-Real-IP $remote_addr;
6
    proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
7
    proxy_set_header X-Forwarded-Proto $scheme;
8
  }
9
}

然后重启这两个服务

1
systemctl restart nginx grafana

现在我们可以通过访问 foo.bar/monitor 来访问 Grafana。