自定义 Azure Blob 存储输入
编辑自定义 Azure Blob 存储输入
编辑使用 Azure Blob 存储输入
从存储在 Azure 云上的容器中的文件中读取内容。该输入可以配置为带轮询或不带轮询工作,但目前,如果禁用轮询,它只会执行一次性传递,列出文件内容并结束该过程。通常建议在大多数情况下使用轮询,即使处理大量文件时可能会变得昂贵。
为了减轻错误并确保稳定的处理环境,此输入采用了以下功能:
- 在处理 Azure Blob 容器时,如果突然出现任何中断,该进程将能够在上次成功保存状态的处理文件之后恢复。
- 如果某些文件发生任何错误,它们将被适当地记录,但其余文件将继续正常处理。
- 如果发生任何导致主线程停止的重大错误,将生成适当的日志来描述该错误。
配置输入
编辑假设您已经设置了 Azure Blob 容器并拥有可用的帐户凭据,请参阅此处的输入文档,了解有关集成使用的特定参数的更多详细信息。
ECS 字段映射
编辑此集成包括 ECS 动态模板,所有遵循 ECS 架构的字段都将分配正确的索引字段映射,无需手动添加。
摄取管道
编辑可以通过将名称添加到管道配置选项来添加自定义摄取管道,创建自定义摄取管道可以通过 API 或 *Ingest Node Pipeline UI* 完成。
更新日志
编辑更新日志
版本 | 详细信息 | Kibana 版本 |
---|---|---|
2.1.0 |
增强 (查看拉取请求) |
8.13.0 或更高版本 |
2.0.0 |
增强 (查看拉取请求) |
8.12.0 或更高版本 |
1.1.0 |
增强 (查看拉取请求) |
8.12.0 或更高版本 |
1.0.1 |
增强 (查看拉取请求) |
8.11.0 或更高版本 |
1.0.0 |
增强 (查看拉取请求) |
8.11.0 或更高版本 |
0.9.0 |
增强 (查看拉取请求) |
— |
0.8.0 |
增强 (查看拉取请求) |
— |
0.7.0 |
增强 (查看拉取请求) |
— |
0.6.0 |
增强 (查看拉取请求) |
— |
0.5.0 |
增强 (查看拉取请求) |
— |
0.4.0 |
增强 (查看拉取请求) |
— |
0.3.0 |
增强 (查看拉取请求) |
— |
0.2.0 |
增强 (查看拉取请求) |
— |
0.1.0 |
增强 (查看拉取请求) |
— |