ZooKeeper 模块
编辑ZooKeeper 模块编辑
zookeeper
模块收集并解析由 Apache ZooKeeper 创建的日志
运行模块时,它会在后台执行一些任务
- 设置日志文件的默认路径(但不用担心,您可以覆盖默认值)
- 确保每个多行日志事件都作为单个事件发送
- 使用 Elasticsearch 提取管道来解析和处理日志行,将数据 shaping 成适合在 Kibana 中可视化的结构
阅读快速入门,了解如何配置和运行模块。
兼容性编辑
zookeeper
模块已使用 3.7.0 版的日志进行了测试。
配置模块编辑
您可以通过在 modules.d/zookeeper.yml
文件中指定变量设置,或在命令行中覆盖设置,来进一步优化 zookeeper
模块的行为。
您必须在模块中至少启用一个文件集。 文件集默认情况下处于禁用状态。
变量设置编辑
每个文件集都有单独的变量设置,用于配置模块的行为。如果您未指定变量设置,则 zookeeper
模块将使用默认值。
对于高级用例,您还可以覆盖输入设置。请参阅覆盖输入设置。
在命令行中指定设置时,请记住在设置前加上模块名称作为前缀,例如,使用 zookeeper.audit.var.paths
而不是 audit.var.paths
。
以下示例显示如何在 modules.d/zookeeper.yml
文件中设置路径,以覆盖日志的默认路径
- module: zookeeper audit: enabled: true var.paths: - "/path/to/logs/zookeeper_audit.log*" log: enabled: true var.paths: - "/path/to/logs/zookeeper.log*"
要在命令行中指定相同的设置,您可以使用
-M "zookeeper.audit.var.paths=[/path/to/logs/zookeeper_audit.log*]" -M "zookeeper.log.var.paths=[/path/to/logs/zookeeper.log*]"
审计日志记录编辑
Zookeeper 3.6.0 版起提供审计日志记录功能,但默认情况下处于禁用状态。要启用它,您可以将以下设置添加到配置文件中
audit.enable=true
audit
文件集设置编辑
-
var.paths
- 一个基于 glob 的路径数组,用于指定在何处查找日志文件。Go Glob 支持的所有模式在此处也受支持。例如,您可以使用通配符从预定义级别的子目录中获取所有文件:
/path/to/log/*/*.log
。这将从/path/to/log
的子文件夹中获取所有.log
文件。它不会从/path/to/log
文件夹本身获取日志文件。如果将此设置留空,Filebeat 将根据您的操作系统选择日志路径。
时区支持编辑
此模块解析不包含时区信息的日志。对于这些日志,Filebeat 会读取本地时区,并在解析时使用它将时间戳转换为 UTC。用于解析的时区包含在 event.timezone
字段的事件中。
要禁用此转换,可以使用 drop_fields
处理器删除 event.timezone
字段。
如果日志来自与本地时区不同的系统或应用程序,则可以使用 add_fields
处理器将 event.timezone
字段覆盖为原始时区。
有关在配置中指定处理器的信息,请参阅处理器。
log
文件集设置编辑
-
var.paths
- 一个基于 glob 的路径数组,用于指定在何处查找日志文件。Go Glob 支持的所有模式在此处也受支持。例如,您可以使用通配符从预定义级别的子目录中获取所有文件:
/path/to/log/*/*.log
。这将从/path/to/log
的子文件夹中获取所有.log
文件。它不会从/path/to/log
文件夹本身获取日志文件。如果将此设置留空,Filebeat 将根据您的操作系统选择日志路径。
时区支持编辑
此模块解析不包含时区信息的日志。对于这些日志,Filebeat 会读取本地时区,并在解析时使用它将时间戳转换为 UTC。用于解析的时区包含在 event.timezone
字段的事件中。
要禁用此转换,可以使用 drop_fields
处理器删除 event.timezone
字段。
如果日志来自与本地时区不同的系统或应用程序,则可以使用 add_fields
处理器将 event.timezone
字段覆盖为原始时区。
有关在配置中指定处理器的信息,请参阅处理器。
字段编辑
有关模块中每个字段的说明,请参阅导出字段部分。