小写分词器
编辑小写分词器编辑
lowercase
分词器,类似于 letter
分词器,在遇到非字母字符时将文本分解为词语,但它还会将所有词语转换为小写。它在功能上等同于 letter
分词器 与 lowercase
词语过滤器 的组合,但效率更高,因为它在一个步骤中执行这两个操作。
示例输出编辑
response = client.indices.analyze( body: { tokenizer: 'lowercase', text: "The 2 QUICK Brown-Foxes jumped over the lazy dog's bone." } ) puts response
POST _analyze { "tokenizer": "lowercase", "text": "The 2 QUICK Brown-Foxes jumped over the lazy dog's bone." }
以上句子将产生以下词语
[ the, quick, brown, foxes, jumped, over, the, lazy, dog, s, bone ]
配置编辑
lowercase
分词器不可配置。