入门
编辑入门编辑
步骤 1: 安装编辑
将软件包添加到您的 go.mod
文件
require go.elastic.co/ecszap master
步骤 2: 配置编辑
设置一个默认日志记录器。例如
encoderConfig := ecszap.NewDefaultEncoderConfig() core := ecszap.NewCore(encoderConfig, os.Stdout, zap.DebugLevel) logger := zap.New(core, zap.AddCaller())
您可以自定义 ECS 日志记录器。例如
encoderConfig := ecszap.EncoderConfig{ EncodeName: customNameEncoder, EncodeLevel: zapcore.CapitalLevelEncoder, EncodeDuration: zapcore.MillisDurationEncoder, EncodeCaller: ecszap.FullCallerEncoder, } core := ecszap.NewCore(encoderConfig, os.Stdout, zap.DebugLevel) logger := zap.New(core, zap.AddCaller())
示例编辑
使用结构化日志记录编辑
// Add fields and a logger name logger = logger.With(zap.String("custom", "foo")) logger = logger.Named("mylogger") // Use strongly typed Field values logger.Info("some logging info", zap.Int("count", 17), zap.Error(errors.New("boom")))
上面的示例将生成以下日志输出
{ "log.level": "info", "@timestamp": "2020-09-13T10:48:03.000Z", "log.logger": "mylogger", "log.origin": { "file.name": "main/main.go", "file.line": 265 }, "message": "some logging info", "ecs.version": "1.6.0", "custom": "foo", "count": 17, "error": { "message":"boom" } }
记录错误编辑
err := errors.New("boom") logger.Error("some error", zap.Error(pkgerrors.Wrap(err, "crash")))
上面的示例将生成以下日志输出
{ "log.level": "error", "@timestamp": "2020-09-13T10:48:03.000Z", "log.logger": "mylogger", "log.origin": { "file.name": "main/main.go", "file.line": 290 }, "message": "some error", "ecs.version": "1.6.0", "custom": "foo", "error": { "message": "crash: boom", "stack_trace": "\nexample.example\n\t/Users/xyz/example/example.go:50\nruntime.example\n\t/Users/xyz/.gvm/versions/go1.13.8.darwin.amd64/src/runtime/proc.go:203\nruntime.goexit\n\t/Users/xyz/.gvm/versions/go1.13.8.darwin.amd64/src/runtime/asm_amd64.s:1357" } }
使用 Sugar 日志记录器编辑
sugar := logger.Sugar() sugar.Infow("some logging info", "foo", "bar", "count", 17, )
上面的示例将生成以下日志输出
{ "log.level": "info", "@timestamp": "2020-09-13T10:48:03.000Z", "log.logger": "mylogger", "log.origin": { "file.name": "main/main.go", "file.line": 311 }, "message": "some logging info", "ecs.version": "1.6.0", "custom": "foo", "foo": "bar", "count": 17 }
包装自定义底层 zapcore.Core
编辑
encoderConfig := ecszap.NewDefaultEncoderConfig() encoder := zapcore.NewJSONEncoder(encoderConfig.ToZapCoreEncoderConfig()) syslogCore := newSyslogCore(encoder, level) //create your own loggers core := ecszap.WrapCore(syslogCore) logger := zap.New(core, zap.AddCaller())
从现有配置过渡编辑
根据您的需求,有不同的方法可以创建日志记录器
encoderConfig := ecszap.ECSCompatibleEncoderConfig(zap.NewDevelopmentEncoderConfig()) encoder := zapcore.NewJSONEncoder(encoderConfig) core := zapcore.NewCore(encoder, os.Stdout, zap.DebugLevel) logger := zap.New(ecszap.WrapCore(core), zap.AddCaller())
config := zap.NewProductionConfig() config.EncoderConfig = ecszap.ECSCompatibleEncoderConfig(config.EncoderConfig) logger, err := config.Build(ecszap.WrapCoreOption(), zap.AddCaller())
步骤 3: 配置 Filebeat编辑
- 按照 Filebeat 快速入门 指南操作。
- 将以下配置添加到您的
filebeat.yaml
文件中。
对于 Filebeat 7.16+
filebeat.yaml。
filebeat.inputs: - type: filestream paths: /path/to/logs.json parsers: - ndjson: overwrite_keys: true add_error_key: true expand_keys: true processors: - add_host_metadata: ~ - add_cloud_metadata: ~ - add_docker_metadata: ~ - add_kubernetes_metadata: ~
使用 filestream 输入从活动日志文件读取行。 |
|
解码的 JSON 对象中的值将覆盖 Filebeat 通常添加的字段(类型、来源、偏移量等),以防止冲突。 |
|
Filebeat 在 JSON 反序列化错误的情况下添加 "error.message" 和 "error.type: json" 键。 |
|
Filebeat 将递归地将解码的 JSON 中的键点解开,并将它们扩展成一个分层对象结构。 |
|
处理器增强您的数据。请参阅 处理器 了解更多信息。 |
对于 Filebeat < 7.16
filebeat.yaml。
filebeat.inputs: - type: log paths: /path/to/logs.json json.keys_under_root: true json.overwrite_keys: true json.add_error_key: true json.expand_keys: true processors: - add_host_metadata: ~ - add_cloud_metadata: ~ - add_docker_metadata: ~ - add_kubernetes_metadata: ~
- 确保您的应用程序日志记录到 stdout/stderr。
- 按照 在 Kubernetes 上运行 Filebeat 指南操作。
- 启用 基于提示的自动发现(在
filebeat-kubernetes.yaml
中取消注释相应部分)。 - 将这些注释添加到使用 ECS 日志记录器的 pod 中。这将确保正确解析日志。
- 确保您的应用程序日志记录到 stdout/stderr。
- 按照 在 Docker 上运行 Filebeat 指南操作。
- 启用 基于提示的自动发现。
- 将这些标签添加到使用 ECS 日志记录器的容器中。这将确保正确解析日志。
docker-compose.yml。
有关更多信息,请参阅 Filebeat 参考。