zoukankan      html  css  js  c++  java
  • Lucene为不同字段指定不同分词器(转)

    在lucene使用过程中,如果要对同一IndexWriter中不同 Document,不同Field中使用不同的analyzer,我们该如何实现呢? 

    通过对《lucene in action》的阅读,发现是可以解决这一问题的。lucene可以正对整个IndexWriter对象或者每一个document对象或者特定 Field使用不同的分析器。 
    Java代码 复制代码 

        Analyzer analyzer = new StandardAnalyzer();   
          
        IndexWriter writer = new IndexWriter(direcotry, analyzer, true); //   
          
        Document doc = new Document();   
          
        doc.add(new Field("title", "this is title", Field.Store.COMPRESS,Field.Index.TOKENIZED,Field.TermVector.WITH_POSITIONS_OFFSETS));   
          
        doc.add(new Field("content", "this is content", Field.Store.COMPRESS,Field.Index.TOKENIZED,Field.TermVector.WITH_POSITIONS_OFFSETS));   
          
        writer.addDocument(doc); //这是大部分情况下使用的一个方法  

    其实还有另外一个方法,原型如下: 
    lucene自带文档 写道 
    addDocument(Document doc, Analyzer analyzer) 
    Adds a document to this index, using the provided analyzer instead of the value of getAnalyzer(). 

    所以我们还可以写成这样: 
    Java代码 复制代码 

        writer.addDocument(doc, analyzer);   
        // 这里的analyzer是指另外一个你指定的analyzer,不同于上面的StandardAnalyzer  

      

    那 么如何针对特定Field使用不同分析器呢,lucene包里面有个PerFieldAnalyzerWrapper类,解决了这一问题,这是 lucene的文档里面的一段话: 
    lucene自带文档 写道 
    Example usage: 

    PerFieldAnalyzerWrapper aWrapper = new PerFieldAnalyzerWrapper(new StandardAnalyzer()); 
    aWrapper.addAnalyzer("firstname", new KeywordAnalyzer()); 
    aWrapper.addAnalyzer("lastname", new KeywordAnalyzer()); 

    In this example, StandardAnalyzer will be used for all fields except "firstname" and "lastname", for which KeywordAnalyzer will be used. 

    A PerFieldAnalyzerWrapper can be used like any other analyzer, for both indexing and query parsing. 

    PreFieldAnalyzerWrapper类的构造函数中需要一个默认的分析器作为参数。为了给不同的Field指定不同的 analyzer,就需要调用该类的addAnalyzer()方法。上面的E文相信大家都能看懂的,就不需要我来翻译了,我的英语很差,着急啊,呵呵。 

    也就是说大家以前初始化分析器的时候用这一句: 
    Java代码 复制代码 

        Analyzer analyzer = new StandardAnalyzer();  

    现在可以改用 
    Java代码 复制代码 

        PerFieldAnalyzerWrapper analyzer = new PerFieldAnalyzerWrapper(new StandardAnalyzer());  

    然 后如果需要特定域的分析器就调用addAnalyzer方法 
    Java代码 复制代码 

        analyzer.addAnalyzer("fieldname", new KeywordAnalyzer());  

    对了,最后说一下,PerFieldAnalyzerWrapper类也是在org.apache.lucene.analysis包下面的,只需要 
    Java代码 复制代码 

        import org.apache.lucene.analysis.PerFieldAnalyzerWrapper;  

    就行了 

    转:http://hi.baidu.com/lewutian/blog/item/42bf84ceeef3ba35b600c8e7.html 

  • 相关阅读:
    [转载]--python3.6 错误: ModuleNotFoundError:No module named "Crypto"
    [笔记]--RedHat6.5使用CentOS的yum源
    [笔记]--Linux公社,想要的都在里面
    [笔记]--vsftpd配置教程
    Vue 中 axios 配置使用
    Element-ui自定义主题换肤
    vue-cli项目打包需要修改的路径问题
    cookie和session 以及 localStorage和sessionStorage之间的区别和应用场景
    正则表达式
    详解-vue项目中的文件和目录
  • 原文地址:https://www.cnblogs.com/zhwl/p/3493841.html
Copyright © 2011-2022 走看看