Lucene - StopAnalyzer



此分析器的工作方式类似于 SimpleAnalyzer,并删除诸如“a”、“an”、“the”等常用词。

类声明

以下是org.apache.lucene.analysis.StopAnalyzer类的声明:

public final class StopAnalyzer
   extends StopwordAnalyzerBase

字段

以下是 org.apache.lucene.analysis.StopAnalyzer 类的字段:

  • static Set<?> ENGLISH_STOP_WORDS_SET - 一个不可修改的集合,包含一些通常对搜索无用的常用英语单词。

类构造函数

下表显示了不同的类构造函数:

序号 构造函数和描述
1

StopAnalyzer(Version matchVersion)

构建一个移除 ENGLISH_STOP_WORDS_SET 中单词的分析器。

2

StopAnalyzer(Version matchVersion, File stopwordsFile)

使用给定文件中的停用词构建一个分析器。

3

StopAnalyzer(Version matchVersion, Reader stopwords)

使用给定读取器中的停用词构建一个分析器。

4

StopAnalyzer(Version matchVersion, Set<?> stopWords)

使用给定集合中的停用词构建一个分析器。

类方法

下表显示了不同的类方法:

序号 方法和描述
1

protected Reusable Analyzer Base. Token Stream Components create Components (String field Name, Reader reader)

创建一个新的 ReusableAnalyzerBase.TokenStreamComponents,用于对提供的 Reader 中的所有文本进行标记化。

继承的方法

此类继承自以下类的方法:

  • org.apache.lucene.analysis.StopwordAnalyzerBase
  • org.apache.lucene.analysis.ReusableAnalyzerBase
  • org.apache.lucene.analysis.Analyzer
  • java.lang.Object

用法

private void displayTokenUsingStopAnalyzer() throws IOException {
   String text 
      = "Lucene is simple yet powerful java based search library.";
   Analyzer analyzer = new StopAnalyzer(Version.LUCENE_36);
   TokenStream tokenStream 
      = analyzer.tokenStream(LuceneConstants.CONTENTS, 
      new StringReader(text));
   TermAttribute term = tokenStream.addAttribute(TermAttribute.class);
   while(tokenStream.incrementToken()) {
      System.out.print("[" + term.term() + "] ");
   }
}

示例应用程序

让我们创建一个测试 Lucene 应用程序来测试使用 BooleanQuery 进行搜索。

步骤 描述
1 Lucene - 第一个应用程序章节中解释的com.tutorialspoint.lucene包下创建一个名为LuceneFirstApplication的项目。您也可以使用Lucene - 第一个应用程序章节中创建的项目,以便在本节中了解搜索过程。
2 创建LuceneConstants.java,如Lucene - 第一个应用程序章节中所述。保持其余文件不变。
3 创建如下所示的LuceneTester.java
4 清理并构建应用程序,以确保业务逻辑根据要求工作。

LuceneConstants.java

此类用于提供将在整个示例应用程序中使用的各种常量。

package com.tutorialspoint.lucene;

public class LuceneConstants {
   public static final String CONTENTS = "contents";
   public static final String FILE_NAME = "filename";
   public static final String FILE_PATH = "filepath";
   public static final int MAX_SEARCH = 10;
}

LuceneTester.java

此类用于测试 Lucene 库的搜索功能。

package com.tutorialspoint.lucene;

import java.io.IOException;
import java.io.StringReader;

import org.apache.lucene.analysis.Analyzer;
import org.apache.lucene.analysis.StopAnalyzer;
import org.apache.lucene.analysis.TokenStream;
import org.apache.lucene.analysis.tokenattributes.TermAttribute;
import org.apache.lucene.util.Version;

public class LuceneTester {
	
   public static void main(String[] args) {
      LuceneTester tester;

      tester = new LuceneTester();
   
      try {
         tester.displayTokenUsingStopAnalyzer();
      } catch (IOException e) {
         e.printStackTrace();
      }
   }

   private void displayTokenUsingStopAnalyzer() throws IOException {
      String text 
         = "Lucene is simple yet powerful java based search library.";
      Analyzer analyzer = new StopAnalyzer(Version.LUCENE_36);
      TokenStream tokenStream = analyzer.tokenStream(
         LuceneConstants.CONTENTS, new StringReader(text));
      TermAttribute term = tokenStream.addAttribute(TermAttribute.class);
      while(tokenStream.incrementToken()) {
         System.out.print("[" + term.term() + "] ");
      }
   }
}

运行程序

完成源代码创建后,您可以通过编译和运行程序继续操作。为此,请使LuceneTester.Java文件选项卡处于活动状态,然后使用 Eclipse IDE 中提供的“运行”选项或使用Ctrl + F11来编译和运行LuceneTester应用程序。如果您的应用程序成功运行,它将在 Eclipse IDE 的控制台中打印以下消息:

[lucene] [simple] [yet] [powerful] [java] [based] [search] [library]
lucene_analysis.htm
广告