字母分词器
编辑字母分词器编辑
letter 分词器在遇到非字母字符时将文本分解为词语。它对大多数欧洲语言效果良好，但对某些亚洲语言效果很差，因为这些语言中的词语之间没有空格。
示例输出编辑
response = client.indices.analyze(
body: {
tokenizer: 'letter',
text: "The 2 QUICK Brown-Foxes jumped over the lazy dog's bone."
}
)
puts response
POST _analyze
{
"tokenizer": "letter",
"text": "The 2 QUICK Brown-Foxes jumped over the lazy dog's bone."
}
上面的句子将生成以下词语
[ The, QUICK, Brown, Foxes, jumped, over, the, lazy, dog, s, bone ]
配置编辑
letter 分词器不可配置。