基于提示的自动发现

编辑

Metricbeat 支持基于提供程序提示的自动发现。 hints 系统会在 Kubernetes Pod 注解或 Docker 标签中查找前缀为 co.elastic.metrics 的提示。容器启动后,Metricbeat 会检查其是否包含任何提示,并为其启动相应的配置。提示告诉 Metricbeat 如何获取给定容器的指标。以下是支持的提示完整列表:

co.elastic.metrics/module
编辑

用于获取指标的 Metricbeat 模块。有关支持的模块列表,请参见 模块

co.elastic.metrics/hosts
编辑

与给定模块一起使用的主机设置。主机可以包含来自自动发现事件的 ${data.host}${data.port}${data.ports.<port_name>} 值,例如:${data.host}:80。对于 Kubernetes 自动发现事件,用户也可以利用端口名称,例如 http://${data.host}:${data.ports.prometheus}/metrics。在最后一个示例中,我们指的是名为 prometheus 的容器端口。

为了定位一个特定的公开端口,可以在模板配置中使用 localhost:{data.ports.8222},其中 8222 是公开目标端口的内部容器端口。

co.elastic.metrics/metricsets
编辑

要使用的 metricset 列表,以逗号分隔。如果未提供 metricset,则使用模块的默认 metricset。

co.elastic.metrics/metrics_path
编辑

从(默认情况下为 /metrics)中检索指标的路径,适用于 Prometheus 模块

co.elastic.metrics/period
编辑

指标检索的时间间隔,例如:10s

co.elastic.metrics/timeout
编辑

指标检索超时,默认值:3s

co.elastic.metrics/username
编辑

用于身份验证的用户名

co.elastic.metrics/password
编辑

用于身份验证的密码。建议从 ENV 变量中检索此敏感信息,并避免将密码以纯文本形式放置。与静态自动发现配置不同,基于提示的自动发现无法访问 Metricbeat 的密钥库,因为它可能是一个潜在的安全问题。但是,基于提示的自动发现可以使用 Kubernetes Secrets,如 Metricbeat 自动发现密钥管理 中所述。

co.elastic.metrics/ssl.*
编辑

SSL 参数,如 SSL 中所示。

co.elastic.metrics/metrics_filters.*
编辑

指标过滤器(仅限 Prometheus 模块)。

co.elastic.metrics/module: prometheus
co.elastic.metrics/metrics_filters.include: node_filesystem_*
co.elastic.metrics/metrics_filters.exclude: node_filesystem_device_foo,node_filesystem_device_bar
co.elastic.metrics/raw
编辑

当需要完全设置整个模块配置时,可以使用 raw 提示。您可以提供输入配置的字符串化 JSON。raw 会覆盖所有其他提示,可用于创建单个或多个配置。

co.elastic.metrics/raw: "[{\"enabled\":true,\"metricsets\":[\"default\"],\"module\":\"mockmoduledefaults\",\"period\":\"1m\",\"timeout\":\"3s\"}]"
co.elastic.metrics/processors
编辑

定义要添加到 Metricbeat 模块配置的处理器。有关支持的处理器的列表,请参见 处理器

为了提供处理器定义的顺序,可以使用数字。如果没有,提示构建器将进行任意排序。

co.elastic.logs/processors.1.add_locale.abbrevation: "MST"
co.elastic.logs/processors.add_locale.abbrevation: "PST"

在上例中,标记为 1 的处理器定义将首先执行。

当提示与模板一起使用时,只有在没有解析为 true 的模板条件的情况下才会评估提示。例如:

metricbeat.autodiscover.providers:
  - type: kubernetes
    hints.enabled: true
    templates:
        - condition:
            contains:
              kubernetes.annotations.prometheus.io/scrape: "true"
          config:
            - module: prometheus
              metricsets: ["collector"]
              hosts: "${data.host}:${data.port}"

在这个例子中,首先评估条件 kubernetes.annotations.prometheus.io/scrape: "true",如果未匹配,则处理提示。

Kubernetes

编辑

Kubernetes 自动发现提供程序支持 Pod 注解中的提示。要启用它,只需设置 hints.enabled

metricbeat.autodiscover:
  providers:
    - type: kubernetes
      hints.enabled: true

此配置启用 Kubernetes 的 hints 自动发现。hints 系统会在 Kubernetes 注解或 Docker 标签中查找前缀为 co.elastic.metrics 的提示。

您可以使用有用的信息注释 Kubernetes Pod 以启动 Metricbeat 模块

annotations:
  co.elastic.metrics/module: prometheus
  co.elastic.metrics/metricsets: collector
  co.elastic.metrics/hosts: '${data.host}:9090'
  co.elastic.metrics/period: 1m

上述注解用于启动 Prometheus 收集器 metricset,它以 1 分钟的间隔轮询父容器的 9090 端口。

多个容器
编辑

当 Pod 具有多个容器时,这些设置是共享的。要在 pod 中设置特定于容器的提示,您可以将容器名称放入提示中。

当 Pod 具有多个容器时,除非您将容器名称放入提示中,否则设置是共享的。例如,这些提示配置 Pod 中所有容器的通用行为,并为名为 sidecar 的容器设置特定的 hosts 提示。

annotations:
  co.elastic.metrics/module: apache
  co.elastic.metrics/hosts: '${data.host}:80'
  co.elastic.metrics.sidecar/hosts: '${data.host}:8080'
多组提示
编辑

当容器端口需要在其上定义多个模块时,可以使用数字前缀提供注解集。如果存在没有数字前缀的提示,则它们将组合到单个配置中。

annotations:
  co.elastic.metrics/1.module: prometheus
  co.elastic.metrics/1.hosts: '${data.host}:80/metrics'
  co.elastic.metrics/1.period: 60s
  co.elastic.metrics/module: prometheus
  co.elastic.metrics/hosts: '${data.host}:80/metrics/p1'
  co.elastic.metrics/period: 5s

上述配置将启动两个 metricbeat 模块配置,以确保每 5 秒轮询一次端点 "/metrics/p1",而每 60 秒轮询一次 "/metrics" 端点。

命名空间默认值
编辑

可以在命名空间的注解中配置提示作为默认值,在缺少 Pod 级注解时使用。生成的提示是 Pod 注解和命名空间注解的组合,Pod 的注解优先。要启用命名空间默认值,请如下配置命名空间对象的 add_resource_metadata

metricbeat.autodiscover:
  providers:
    - type: kubernetes
      hints.enabled: true
      add_resource_metadata:
        namespace:
          include_annotations: ["nsannotation1"]

Docker

编辑

Docker 自动发现提供程序支持标签中的提示。要启用它,只需设置 hints.enabled

metricbeat.autodiscover:
  providers:
    - type: docker
      hints.enabled: true

您可以使用有用的信息标记 Docker 容器以启动 Metricbeat 模块,例如:

  co.elastic.metrics/module: nginx
  co.elastic.metrics/metricsets: stubstatus
  co.elastic.metrics/hosts: '${data.host}:80'
  co.elastic.metrics/period: 10s

上述标签允许 Metricbeat 运行 nginx 模块并每 10 秒轮询一次 Docker 容器的 80 端口。