- Logstash 参考文档其他版本
- Logstash 简介
- Logstash 入门
- Logstash 的工作原理
- 设置和运行 Logstash
- 升级 Logstash
- 创建 Logstash 管道
- 保护您的连接
- 高级 Logstash 配置
- Logstash 到 Logstash 通信
- 管理 Logstash
- 将 Logstash 与 Elastic Integrations 一起使用
- 使用 Logstash 模块
- 使用 Filebeat 模块
- 使用 Winlogbeat 模块
- 队列和数据弹性
- 转换数据
- 部署和扩展 Logstash
- 管理 GeoIP 数据库
- 性能调优
- 使用 Elastic Agent 监控 Logstash
- 监控 Logstash(旧版)
- 使用 API 监控 Logstash
- 使用插件
- 集成插件
- 输入插件
- azure_event_hubs
- beats
- cloudwatch
- couchdb_changes
- dead_letter_queue
- elastic_agent
- elastic_serverless_forwarder
- elasticsearch
- exec
- file
- ganglia
- gelf
- generator
- github
- google_cloud_storage
- google_pubsub
- graphite
- heartbeat
- http
- http_poller
- imap
- irc
- java_generator
- java_stdin
- jdbc
- jms
- jmx
- kafka
- kinesis
- logstash
- log4j
- lumberjack
- meetup
- pipe
- puppet_facter
- rabbitmq
- redis
- relp
- rss
- s3
- s3-sns-sqs
- salesforce
- snmp
- snmptrap
- sqlite
- sqs
- stdin
- stomp
- syslog
- tcp
- udp
- unix
- varnishlog
- websocket
- wmi
- xmpp
- 输出插件
- boundary
- circonus
- cloudwatch
- csv
- datadog
- datadog_metrics
- dynatrace
- elastic_app_search
- elastic_workplace_search
- elasticsearch
- exec
- file
- ganglia
- gelf
- google_bigquery
- google_cloud_storage
- google_pubsub
- graphite
- graphtastic
- http
- influxdb
- irc
- java_stdout
- juggernaut
- kafka
- librato
- logstash
- loggly
- lumberjack
- metriccatcher
- mongodb
- nagios
- nagios_nsca
- opentsdb
- pagerduty
- pipe
- rabbitmq
- redis
- redmine
- riak
- riemann
- s3
- sink
- sns
- solr_http
- sqs
- statsd
- stdout
- stomp
- syslog
- tcp
- timber
- udp
- webhdfs
- websocket
- xmpp
- zabbix
- 过滤器插件
- age
- aggregate
- alter
- bytes
- cidr
- cipher
- clone
- csv
- date
- de_dot
- dissect
- dns
- drop
- elapsed
- elastic_integration
- elasticsearch
- environment
- extractnumbers
- fingerprint
- geoip
- grok
- http
- i18n
- java_uuid
- jdbc_static
- jdbc_streaming
- json
- json_encode
- kv
- memcached
- metricize
- metrics
- mutate
- prune
- range
- ruby
- sleep
- split
- syslog_pri
- threats_classifier
- throttle
- tld
- translate
- truncate
- urldecode
- useragent
- uuid
- wurfl_device_detection
- xml
- 编解码器插件
- 技巧和最佳实践
- 故障排除
- 为 Logstash 做贡献
- 贡献 Java 插件
- 重大变更
- 发行说明
- Logstash 8.17.0 发行说明
- Logstash 8.16.1 发行说明
- Logstash 8.16.0 发行说明
- Logstash 8.15.4 发行说明
- Logstash 8.15.3 发行说明
- Logstash 8.15.2 发行说明
- Logstash 8.15.1 发行说明
- Logstash 8.15.0 发行说明
- Logstash 8.14.3 发行说明
- Logstash 8.14.2 发行说明
- Logstash 8.14.1 发行说明
- Logstash 8.14.0 发行说明
- Logstash 8.13.4 发行说明
- Logstash 8.13.3 发行说明
- Logstash 8.13.2 发行说明
- Logstash 8.13.1 发行说明
- Logstash 8.13.0 发行说明
- Logstash 8.12.2 发行说明
- Logstash 8.12.1 发行说明
- Logstash 8.12.0 发行说明
- Logstash 8.11.4 发行说明
- Logstash 8.11.3 发行说明
- Logstash 8.11.2 发行说明
- Logstash 8.11.1 发行说明
- Logstash 8.11.0 发行说明
- Logstash 8.10.4 发行说明
- Logstash 8.10.3 发行说明
- Logstash 8.10.2 发行说明
- Logstash 8.10.1 发行说明
- Logstash 8.10.0 发行说明
- Logstash 8.9.2 发行说明
- Logstash 8.9.1 发行说明
- Logstash 8.9.0 发行说明
- Logstash 8.8.2 发行说明
- Logstash 8.8.1 发行说明
- Logstash 8.8.0 发行说明
- Logstash 8.7.1 发行说明
- Logstash 8.7.0 发行说明
- Logstash 8.6.2 发行说明
- Logstash 8.6.1 发行说明
- Logstash 8.6.0 发行说明
- Logstash 8.5.3 发行说明
- Logstash 8.5.2 发行说明
- Logstash 8.5.1 发行说明
- Logstash 8.5.0 发行说明
- Logstash 8.4.2 发行说明
- Logstash 8.4.1 发行说明
- Logstash 8.4.0 发行说明
- Logstash 8.3.3 发行说明
- Logstash 8.3.2 发行说明
- Logstash 8.3.1 发行说明
- Logstash 8.3.0 发行说明
- Logstash 8.2.3 发行说明
- Logstash 8.2.2 发行说明
- Logstash 8.2.1 发行说明
- Logstash 8.2.0 发行说明
- Logstash 8.1.3 发行说明
- Logstash 8.1.2 发行说明
- Logstash 8.1.1 发行说明
- Logstash 8.1.0 发行说明
- Logstash 8.0.1 发行说明
- Logstash 8.0.0 发行说明
- Logstash 8.0.0-rc2 发行说明
- Logstash 8.0.0-rc1 发行说明
- Logstash 8.0.0-beta1 发行说明
- Logstash 8.0.0-alpha2 发行说明
- Logstash 8.0.0-alpha1 发行说明
Logstash 到 Logstash:输出到输入
编辑Logstash 到 Logstash:输出到输入
编辑Logstash 输出到 Logstash 输入是 Logstash 到 Logstash 通信的默认方法。
在您实施 Logstash 到 Logstash 之前,请查看这些注意事项。
配置概述
编辑要连接两个 Logstash 实例
- 配置下游(服务器)Logstash 以使用 Logstash 输入
- 配置上游(客户端)Logstash 以使用 Logstash 输出
- 保护 Logstash 输入和 Logstash 输出之间的通信
配置下游 Logstash 以使用 Logstash 输入
编辑在下游(接收)Logstash 上配置 Logstash 输入以接收连接。最小配置需要此选项
-
port
- 设置自定义端口。如果未提供,则默认值为 9800。
input { logstash { port => 9800 } }
配置上游 Logstash 以使用 Logstash 输出
编辑为了在从一个 Logstash 向另一个 Logstash 发送数据时获得最佳性能,数据会进行批量处理和压缩。因此,上游 Logstash(发送 Logstash)只需要关注使用以下选项配置接收端点
-
hosts
- 接收的一个或多个 Logstash 主机和端口对。如果未指定端口,将使用 9800。
Logstash 将批量事件负载均衡到所有配置的下游主机。由网络问题、反压或其他条件引起的任何故障将导致下游主机从负载均衡中隔离至少 60 秒。
output { logstash { hosts => ["10.0.0.123", "10.0.1.123:9800"] } }
保护 Logstash 到 Logstash
编辑务必保护 Logstash 实例之间的通信。使用 SSL/TLS 双向身份验证,以确保上游 Logstash 实例将加密数据发送到受信任的下游 Logstash 实例,反之亦然。
-
创建一个证书颁发机构 (CA) 以签署您计划在 Logstash 实例之间使用的证书。创建正确的 SSL/TLS 基础设施不在本文档的范围之内。
我们建议您使用 elasticsearch-certutil 工具来生成您的证书。
-
配置下游(接收)Logstash 以使用 SSL。将这些设置添加到 Logstash 输入配置中
-
ssl_enabled
:设置为true
时,它会启用 Logstash 使用 SSL/TLS -
ssl_key
:指定 Logstash 用于与客户端进行身份验证的密钥。 -
ssl_certificate
:指定 Logstash 用于与客户端进行身份验证的证书。 -
ssl_certificate_authorities
:配置 Logstash 以信任由指定的 CA 签名的任何证书。 -
ssl_client_authentication
:指定 Logstash 服务器是否根据 CA 验证客户端证书。
例如
input { logstash { ... ssl_enabled => true ssl_key => "server.pkcs8.key" ssl_certificate => "server.crt" ssl_certificate_authorities => "ca.crt" ssl_client_authentication => required } }
-
-
配置上游(发送)Logstash 以使用 SSL。将这些设置添加到 Logstash 输出配置中
-
ssl_key
:指定 Logstash 客户端用于与 Logstash 服务器进行身份验证的密钥。 -
ssl_certificate
:指定 Logstash 客户端用于向 Logstash 服务器进行身份验证的证书。 -
ssl_certificate_authorities
:配置 Logstash 客户端以信任由指定的 CA 签名的任何证书。
例如
output { logstash { ... ssl_enabled => true ssl_key => "client.pkcs8.key" ssl_certificate => "client.crt" ssl_certificate_authorities => "ca.crt" } }
-
-
如果您需要额外的身份验证步骤,您还可以在两个 Logstash 实例中使用基本的用户/密码身份验证
-
username
:设置用于身份验证的用户名。 -
password
:设置用于身份验证的密码。
例如,您需要在两个 Logstash 实例中添加以下内容
... logstash { ... username => "your-user" password => "your-secret" } ...
-
Was this helpful?
Thank you for your feedback.