Sqlite 输入插件

编辑
  • 插件版本:v3.0.4
  • 发布日期:2018-04-06
  • 更新日志

有关其他版本,请参阅版本化插件文档

安装

编辑

对于默认未捆绑的插件,可以通过运行 bin/logstash-plugin install logstash-input-sqlite 轻松安装。有关更多详细信息,请参阅使用插件

获取帮助

编辑

有关插件的问题,请在Discuss论坛中打开一个主题。对于错误或功能请求,请在Github中打开一个 issue。有关 Elastic 支持的插件列表,请查阅Elastic 支持矩阵

描述

编辑

从 sqlite 数据库读取行。

这在直接记录到表中的情况下最有用。任何被监视的表都必须有一个单调递增的 id 列。

默认情况下,读取所有表,除了

  • 匹配 sqlite_% 的表 - 这些是 sqlite 的内部/管理表
  • since_table - 此插件使用此表来跟踪状态。

示例

    % sqlite /tmp/example.db
    sqlite> CREATE TABLE weblogs (
        id INTEGER PRIMARY KEY AUTOINCREMENT,
        ip STRING,
        request STRING,
        response INTEGER);
    sqlite> INSERT INTO weblogs (ip, request, response)
        VALUES ("1.2.3.4", "/index.html", 200);

然后使用此 logstash 配置

    input {
      sqlite {
        path => "/tmp/example.db"
        type => weblogs
      }
    }
    output {
      stdout {
        debug => true
      }
    }

示例输出

    {
      "@source"      => "sqlite://sadness/tmp/x.db",
      "@tags"        => [],
      "@fields"      => {
        "ip"       => "1.2.3.4",
        "request"  => "/index.html",
        "response" => 200
      },
      "@timestamp"   => "2013-05-29T06:16:30.850Z",
      "@source_host" => "sadness",
      "@source_path" => "/tmp/x.db",
      "@message"     => "",
      "@type"        => "foo"
    }

Sqlite 输入配置选项

编辑

此插件支持以下配置选项以及稍后描述的通用选项

设置 输入类型 必填

batch

数字

exclude_tables

数组

path

字符串

另请参阅通用选项,了解所有输入插件支持的选项列表。

 

batch

编辑
  • 值类型为数字
  • 默认值为5

每次 SELECT 调用从每个表中获取的行数。

exclude_tables

编辑
  • 值类型为数组
  • 默认值为[]

要按名称排除的任何表。默认情况下,跟踪所有表。

path

编辑
  • 这是一个必填设置。
  • 值类型为字符串
  • 此设置没有默认值。

sqlite 数据库文件的路径。

通用选项

编辑

所有输入插件都支持这些配置选项

设置 输入类型 必填

add_field

哈希

codec

codec

enable_metric

布尔

id

字符串

tags

数组

type

字符串

add_field

编辑
  • 值类型为哈希
  • 默认值为{}

向事件添加字段

codec

编辑

用于输入数据的编解码器。输入编解码器是一种方便的方法,可以在数据进入输入之前对其进行解码,而无需在 Logstash 管道中使用单独的过滤器。

enable_metric

编辑
  • 值类型为布尔
  • 默认值为true

禁用或启用此特定插件实例的指标记录。默认情况下,我们会记录所有可以记录的指标,但您可以禁用特定插件的指标收集。

  • 值类型为字符串
  • 此设置没有默认值。

向插件配置添加唯一的 ID。如果未指定 ID,Logstash 将生成一个。强烈建议您在配置中设置此 ID。当您有两个或多个相同类型的插件时,这尤其有用,例如,如果您有两个 sqlite 输入。在这种情况下添加命名 ID 将在使用监控 API 时帮助监控 Logstash。

input {
  sqlite {
    id => "my_plugin_id"
  }
}

id 字段中的变量替换仅支持环境变量,不支持使用来自秘密存储的值。

tags

编辑
  • 值类型为数组
  • 此设置没有默认值。

向您的事件添加任意数量的标签。

这有助于稍后的处理。

type

编辑
  • 值类型为字符串
  • 此设置没有默认值。

向此输入处理的所有事件添加 type 字段。

类型主要用于过滤器激活。

该类型作为事件本身的一部分存储,因此您也可以使用该类型在 Kibana 中搜索它。

如果您尝试在已具有类型的事件上设置类型(例如,当您将事件从发货人发送到索引器时),则新的输入将不会覆盖现有类型。在发货人处设置的类型在其生命周期内都将保留在事件中,即使发送到另一个 Logstash 服务器也是如此。