Cloud Foundry 输入

编辑

使用 cloudfoundry 输入从 Cloud Foundry 获取 HTTP 访问日志、容器日志和错误日志。连接到 Cloud Foundry loggregator 以接收事件。

配置示例

filebeat.inputs:
- type: cloudfoundry
  api_address: https://api.dev.cfdev.sh
  client_id: uaa-filebeat
  client_secret: verysecret
  shard_id: filebeat
  ssl:
      verification_mode: none
filebeat.inputs:
- type: cloudfoundry
  api_address: https://api.dev.cfdev.sh
  client_id: uaa-filebeat
  client_secret: verysecret
  shard_id: filebeat
  ssl.certificate_authorities: ["/etc/pki/cf/ca.pem"]
  ssl.certificate: "/etc/pki/cf/cert.pem"
  ssl.key: "/etc/pki/cf/cert.key"

配置选项

编辑

cloudfoundry 输入支持以下配置选项以及稍后描述的通用选项

api_address

编辑

Cloud Foundry API 的 URL。可选。默认值:"http://api.bosh-lite.com"。

doppler_address

编辑

Cloud Foundry Doppler Websocket 的 URL。可选。默认值:"(来自 ${api_address}/v2/info 的值)"。

uaa_address

编辑

Cloud Foundry UAA API 的 URL。可选。默认值:"(来自 ${api_address}/v2/info 的值)"。

rlp_address

编辑

Cloud Foundry RLP 网关的 URL。可选。默认值:"(与 api_server 相同的域下的 log-stream 子域)"。

client_id

编辑

用于向 Cloud Foundry 验证身份的客户端 ID。默认值:""。

client_secret

编辑

用于向 Cloud Foundry 验证身份的客户端密钥。默认值:""。

shard_id

编辑

与 Cloud Foundry 连接的分片 ID。在多个 filebeat 中使用相同的 ID 对事件负载进行分片。默认值:"(生成的 UUID)"。

version

编辑

用于连接 Cloud Foundry 以收集事件的消费者 API 版本。使用 v1 使用 Doppler/Traffic Control 收集事件。使用 v2 从 RLP 网关收集事件。默认值:"v1"。

这指定了 SSL/TLS 通用配置。默认值:不使用。

通用选项

编辑

所有输入都支持以下配置选项。

enabled
编辑

使用 enabled 选项启用和禁用输入。默认情况下,enabled 设置为 true。

tags
编辑

Filebeat 在每个发布的事件的 tags 字段中包含的标签列表。标签可以方便地在 Kibana 中选择特定事件或在 Logstash 中应用条件过滤。这些标签将附加到通用配置中指定的标签列表中。

示例

filebeat.inputs:
- type: cloudfoundry
  . . .
  tags: ["json"]
fields
编辑

您可以指定的可选字段,以将其他信息添加到输出中。例如,您可以添加可用于过滤日志数据的字段。字段可以是标量值、数组、字典或这些的任何嵌套组合。默认情况下,您在此处指定的字段将分组在输出文档中的 fields 子字典下。要将自定义字段存储为顶级字段,请将 fields_under_root 选项设置为 true。如果在通用配置中声明了重复字段,则其值将被此处声明的值覆盖。

filebeat.inputs:
- type: cloudfoundry
  . . .
  fields:
    app_id: query_engine_12
fields_under_root
编辑

如果此选项设置为 true,则自定义字段将作为顶级字段存储在输出文档中,而不是分组在 fields 子字典下。如果自定义字段名称与 Filebeat 添加的其他字段名称冲突,则自定义字段将覆盖其他字段。

processors
编辑

要应用于输入数据的处理器列表。

有关在配置中指定处理器的信息,请参阅 处理器

pipeline
编辑

为此输入生成的事件设置的 Ingest 管道 ID。

管道 ID 也可以在 Elasticsearch 输出中配置,但是此选项通常会导致更简单的配置文件。如果在输入和输出中都配置了管道,则使用输入中的选项。

keep_null
编辑

如果此选项设置为 true,则具有 null 值的字段将发布在输出文档中。默认情况下,keep_null 设置为 false

index
编辑

如果存在,则此格式化字符串会覆盖此输入的事件的索引(对于 Elasticsearch 输出),或者设置事件元数据的 raw_index 字段(对于其他输出)。此字符串只能引用代理名称和版本以及事件时间戳;对于访问动态字段,请使用 output.elasticsearch.index 或处理器。

示例值:"%{[agent.name]}-myindex-%{+yyyy.MM.dd}" 可能会扩展为 "filebeat-myindex-2019.11.01"

publisher_pipeline.disable_host
编辑

默认情况下,所有事件都包含 host.name。此选项可以设置为 true 以禁用向所有事件添加此字段。默认值为 false