如何使用Prometheus 存储Data 以供Grafana 可视化

Question

借助 Python request.get 和 json.loads 函数，我能够从 URL 获取数据。数据包含一个实例列表，其中每个实例都有 instance_id、状态等指标。

我的问题是，有什么方法可以将这些指标上传到 Prometheus？我查看了 pushgateway 函数，但不确定这是否是进行数据推送和存储的正确方法。

我目前将数据推送到 Prometheus 的工作如下：

from prometheus_client import CollectorRegistry, Gauge, push_to_gateway
from prometheus_client import Summary

registry1 = CollectorRegistry()
registry2 = CollectorRegistry()

s = Summary('request_latency_seconds', 'Description of summary', registry=registry1)
s.observe(4.7)

g = Gauge('job_last_success_unixtime', 'Last time a batch job successfully finished', registry=registry2)
g.set_to_current_time()

push_to_gateway('localhost:9091', job='batch_summary', registry=registry1)
push_to_gateway('localhost:9091', job='batch_gauge', registry=registry2)

但是，我不确定应该推送哪种指标类型（量表、摘要或其他？）

下面是我要推送的实例数据的例子：

{'url': 'https://example.com', 
'created': '2017-09-17-time', 
'status_code': 200, 
'instance_start': '2018-09-17-time', }

我将这些数据推送到 Prometheus 的原因是我想使用 Grafana 来获取这些数据并将它们可视化。

Grafana 图的示例是：时间为 x 轴，状态代码为 200 的实例数为 y 轴。

任何想法或帮助将不胜感激。谢谢！

Answer 1

因为我做了类似的事情，我可以给你一些指示。您可以将 pushgateway 用于“临时和批处理作业，以将其指标公开给 Prometheus”，正如 github 页面上所说。

我认为您需要 summary 指标，但为了确定，请阅读普罗米修斯 docs 页面上关于指标类型的文档。

您完成了第一部分，您通过 pushgateway 公开了您想要的指标，您始终可以通过您的网络浏览器或使用 curl 检查它是否有效：

你的 IP:9091

如果您可以在该端口上看到一些数据，则必须在 prometheus 服务器 上设置您的配置。

您需要告诉普罗米修斯服务器应该抓取您的节点推送网关的指标。您要查找的文件是 "prometheus.yml" 它的位置取决于您安装普罗米修斯服务器的位置。

当你打开它时，你应该这样写：

  - job_name: 'SomeJob-Name'
    static_configs:
      - targets: ['YourIPADDRESS:9091']
        labels:
          environment: 'prod'

之后重启你的 prometheus 服务器，来自你节点的数据应该在路径 YourPrometheusIP:9090/targets.

上可见

如何使用Prometheus 存储Data 以供Grafana 可视化

How to use Prometheus to store Data to be visualized by Grafana

python

grafana

prometheus