简述Token filter 过滤器 在 Elasticsearch 中如何工作？
参考答案：
在Elasticsearch中，Token Filter（字符过滤器）是操作分词器处理后的字符结果，并相应地修改这些字符的组件。它是分词器的一个重要部分，可以含有0或多个char filters，有且只有一个tokenizer，0或多个token filters。这些过滤器可以对分词结果进行进一步的处理和修改，以满足特定的搜索和分析需求。
Token Filter的工作流程大致如下：
- 首先，文档中的文本会被分词器（tokenizer）分割成一系列的词元（tokens）。
- 然后，这些词元会被传递到字符过滤器（Token Filter）中。字符过滤器可以对词元进行各种处理，例如转换为小写、去除停用词、进行词干提取等。
- 最后，经过字符过滤器处理后的词元会被返回给Elasticsearch，用于建立索引和进行搜索。
举几个常见的Token Filter的例子：
- Lowercase filter：转小写过滤器，会将所有字符字母转为小写。例如，输入“QuicK”，输出为“quick”。
- Stemmer filter：除梗过滤器，根据特定的规则（可配置），会除去单词的一部分内容。比如，它可以去除单词的时态或复数形式。例如，输入“running”，输出为“run”；输入“shoes”，输出为“shoe”。
- Apostrophe token filter：去掉撇号后的所有字符，包括撇号本身。这在英文中比较常见。例如，对于句子“This is Tom's clothes.”，这个过滤器会去掉's后面的所有字符，只保留“This is Tom”。
通过这些Token Filter，用户可以更加灵活地控制和处理文本数据，以满足不同的搜索和分析需求。同时，Elasticsearch也提供了丰富的内置分析器和分词器，用户可以根据需要选择和配置。