ES学习--详细配置与使用自定义分词器Analyzer

 时间:2024-10-13 16:22:43

1、首先看一下实现一个 character filter, tokenizer, token filter 三部分全部自定义的分词器Analyzer的相关语法结构。

ES学习--详细配置与使用自定义分词器Analyzer

2、实现自定义的 character filter , 语法结构为:"char_filter": { "自定义char filter的名称":{ "配置项1":"配置项1值", "配置项2":"配置项2值", "...":"..." } }图1示:定义一个 mapping 类型的 character filter,处理表情字符图2示:定义一个 pattern replace 类型的 character filter,处理手机号码

ES学习--详细配置与使用自定义分词器Analyzer
ES学习--详细配置与使用自定义分词器Analyzer

3、实现自定义的 Tokenizer, 语法结构为:"tokenizer": { "自定义tokenizer的名称":{ "配置项1":"配置项1值", "配置项2":"配置项2值", "...":"..." } }图示,定义了一个正则类型的 Tokenizer, 指定了若干个分词字符

ES学习--详细配置与使用自定义分词器Analyzer

4、实现自定义的 Token Filter, 语法结构为:"filter": { "自定义token filter的名称":{ "配置项1":"配置项1值", "配置项2":"配置项2值", "...":"..." } }图示,定义一个 stop 类型的 token filter, 停止词除了英文默认的停止词列表(_english_ ,还额外加了一个单词 "yes"

ES学习--详细配置与使用自定义分词器Analyzer

5、通过组合上述自定义的 character_filter、tokenizer、token filter 构建自定义的分词器 analyzer(图示), 语法结构为:"analyzer": { "自定义分词器名称":{ "type":"custom", "char_filter":["自定义char filter的名称","..."], "tokenizer":"自定义tokenizer的名称", "filter":["自定义token filter的名称","..."] } }

ES学习--详细配置与使用自定义分词器Analyzer

6、测试自定义分词器1. 将该分词器设置到一个索引上(图1示)2. 通过该索引来引用这个分词器进行测试,包含表情符和新停止词(图2示)3. 通过该索引来引用这个分词器进行测试,包含手机号和新停止词(图3示)

ES学习--详细配置与使用自定义分词器Analyzer
ES学习--详细配置与使用自定义分词器Analyzer
ES学习--详细配置与使用自定义分词器Analyzer
  • 工作中遇凉怎么办
  • Win10系统查看本机网卡网速的快捷方法
  • 云上城之歌如何进行旅馆委托任务
  • 如何改变浏览器默认字体字号?
  • Java 读取Excel中的公式
  • 热门搜索
    四大名著手抄报 关于节约用水的手抄报 创建文明城市手抄报 名著手抄报 食品安全手抄报内容 四年级数学手抄报 爱国主义手抄报 庆六一儿童节手抄报 清明的手抄报 传统节日手抄报