Prometheus 收集器指标集
editPrometheus 收集器指标集edit
Prometheus collector
指标集从 prometheus 导出器 中抓取数据。
从 Prometheus 导出器中抓取数据edit
要从 Prometheus 导出器中抓取指标,请将 hosts
字段配置为它。从其中检索指标的路径(默认情况下为 /metrics
)可以通过 metrics_path
配置。
- module: prometheus period: 10s hosts: ["node:9100"] metrics_path: /metrics #username: "user" #password: "secret" # This can be used for service account based authorization: #bearer_token_file: /var/run/secrets/kubernetes.io/serviceaccount/token #ssl.certificate_authorities: # - /var/run/secrets/kubernetes.io/serviceaccount/service-ca.crt
直方图和类型edit
此功能处于测试阶段,可能会发生变化。其设计和代码不如正式 GA 功能成熟,按原样提供,不附带任何担保。测试版功能不属于正式 GA 功能的支持服务等级协议。
metricbeat.modules: - module: prometheus period: 10s hosts: ["localhost:9090"] use_types: true rate_counters: false
use_types
参数(默认值:false)启用用于指标存储的不同布局,利用 Elasticsearch 类型,包括 直方图。
rate_counters
参数(默认值:false)启用从 Prometheus 计数器计算速率。启用后,Metricbeat 会存储自上次收集以来的计数器增量。此指标应使一些聚合更容易且性能更高。此参数只能与 use_types
结合使用。
当启用 use_types
和 rate_counters
时,指标将按以下方式存储
{ "prometheus": { "labels": { "instance": "172.27.0.2:9090", "job": "prometheus" }, "prometheus_target_interval_length_seconds_count": { "counter": 1, "rate": 0 }, "prometheus_target_interval_length_seconds_sum": { "counter": 15.000401344, "rate": 0 } "prometheus_tsdb_compaction_chunk_range_seconds_bucket": { "histogram": { "values": [50, 300, 1000, 4000, 16000], "counts": [10, 2, 34, 7] } } }, }
从 Prometheus 服务器抓取所有指标edit
根据您的规模,这种方法可能不适用。我们建议为此使用 remote_write 指标集,并使 Prometheus 将指标推送到 Metricbeat。
此模块可以通过使用 联合 API 抓取存储在 Prometheus 服务器中的所有指标。通过将此配置指向 Prometheus 服务器
metricbeat.modules: - module: prometheus period: 10s hosts: ["localhost:9090"] metrics_path: '/federate' query: 'match[]': '{__name__!=""}'
联合 API 将所有指标作为未类型化的指标返回,因此即使在启用 use_types
和 rate_counters
参数的情况下,也不会从 Prometheus 计数器中计算出速率指标。要获得计算出的速率指标,应改用 remote_write 指标集。
过滤指标edit
为了过滤进/出指标,可以使用 metrics_filters.include
metrics_filters.exclude
设置
- module: prometheus period: 10s hosts: ["localhost:9090"] metrics_path: /metrics metrics_filters: include: ["node_filesystem_*"] exclude: ["node_filesystem_device_*"]
上面的配置将仅包括与 node_filesystem_*
模式匹配并且不与 node_filesystem_device_*
模式匹配的指标。
要保留特定的指标,请将每个指标的正则表达式的开头和结尾锚定
- 插入符号
^
匹配文本或行的开头, - 美元符号
$
匹配文本的结尾。
- module: prometheus period: 10s hosts: ["localhost:9090"] metrics_path: /metrics metrics_filters: include: ["^node_network_net_dev_group$", "^node_network_up$"]
这是一个默认指标集。如果主机模块未配置,则默认情况下启用此指标集。
有关指标集中每个字段的描述,请参见 导出字段 部分。
以下是由此指标集生成的示例文档
{ "@timestamp": "2019-03-01T08:05:34.853Z", "event": { "dataset": "prometheus.collector", "duration": 115000, "module": "prometheus" }, "metricset": { "name": "collector", "period": 10000 }, "prometheus": { "labels": { "job": "prometheus" }, "metrics": { "up": 1 } }, "service": { "address": "127.0.0.1:55555", "type": "prometheus" } }