最新消息:XAMPP默认安装之后是很不安全的,我们只需要点击左方菜单的 "安全"选项,按照向导操作即可完成安全设置。

solr文本分析

XAMPP下载 admin 805浏览 0评论

Solr文本分析包括以下组件:

分析器(Analyzer)、字符过滤器(CharFilter)、分词器(Tokenizer)、分词过滤器(TokenFilter).

分析器将分词器和分词过滤器链组合成一个组件。

 

  1. <fieldType name=”nametext” class=”solr.TextField”>
  2. <analyzer type=”index”>
  3. <tokenizer class=”solr.StandardTokenizerFactory”/>
  4. <filter class=”solr.StandardFilterFactory”/>
  5. <filter class=”solr.LowerCaseFilterFactory”/>
  6. <filter class=”solr.StopFilterFactory”/>
  7. <filter class=”solr.EnglishPorterFilterFactory”/>
  8. </analyzer>
  9. </fieldType>

 

 

  • 标准分词器 · StandardTokenizer
  • 移除停用词 · StopFilterFactory
  • 小写转换 · LowerCaseFilterFactory
  • 折叠重复字母 · PatternReplaceCharFilterFactory
  • 对空格分词 WhitespaceTokenizerFactory   WordDelimiterFilterFactory(保留主题标签、提及符号、连字符)
  • 移除变音符号 ASCIIFoldingFilterFactory
  • 提取词干 KStemFilterFactory PorterStemFilterFactory
  • 同义词 SynonymFilterFactory

转载请注明:XAMPP中文组官网 » solr文本分析

您必须 登录 才能发表评论!