• Lucene为不同字段指定不同分词器(转)


    在lucene使用过程中,如果要对同一IndexWriter中不同 Document,不同Field中使用不同的analyzer,我们该如何实现呢? 

    通过对《lucene in action》的阅读,发现是可以解决这一问题的。lucene可以正对整个IndexWriter对象或者每一个document对象或者特定 Field使用不同的分析器。 
    Java代码 复制代码 

        Analyzer analyzer = new StandardAnalyzer();   
          
        IndexWriter writer = new IndexWriter(direcotry, analyzer, true); //   
          
        Document doc = new Document();   
          
        doc.add(new Field("title", "this is title", Field.Store.COMPRESS,Field.Index.TOKENIZED,Field.TermVector.WITH_POSITIONS_OFFSETS));   
          
        doc.add(new Field("content", "this is content", Field.Store.COMPRESS,Field.Index.TOKENIZED,Field.TermVector.WITH_POSITIONS_OFFSETS));   
          
        writer.addDocument(doc); //这是大部分情况下使用的一个方法  

    其实还有另外一个方法,原型如下: 
    lucene自带文档 写道 
    addDocument(Document doc, Analyzer analyzer) 
    Adds a document to this index, using the provided analyzer instead of the value of getAnalyzer(). 

    所以我们还可以写成这样: 
    Java代码 复制代码 

        writer.addDocument(doc, analyzer);   
        // 这里的analyzer是指另外一个你指定的analyzer,不同于上面的StandardAnalyzer  

      

    那 么如何针对特定Field使用不同分析器呢,lucene包里面有个PerFieldAnalyzerWrapper类,解决了这一问题,这是 lucene的文档里面的一段话: 
    lucene自带文档 写道 
    Example usage: 

    PerFieldAnalyzerWrapper aWrapper = new PerFieldAnalyzerWrapper(new StandardAnalyzer()); 
    aWrapper.addAnalyzer("firstname", new KeywordAnalyzer()); 
    aWrapper.addAnalyzer("lastname", new KeywordAnalyzer()); 

    In this example, StandardAnalyzer will be used for all fields except "firstname" and "lastname", for which KeywordAnalyzer will be used. 

    A PerFieldAnalyzerWrapper can be used like any other analyzer, for both indexing and query parsing. 

    PreFieldAnalyzerWrapper类的构造函数中需要一个默认的分析器作为参数。为了给不同的Field指定不同的 analyzer,就需要调用该类的addAnalyzer()方法。上面的E文相信大家都能看懂的,就不需要我来翻译了,我的英语很差,着急啊,呵呵。 

    也就是说大家以前初始化分析器的时候用这一句: 
    Java代码 复制代码 

        Analyzer analyzer = new StandardAnalyzer();  

    现在可以改用 
    Java代码 复制代码 

        PerFieldAnalyzerWrapper analyzer = new PerFieldAnalyzerWrapper(new StandardAnalyzer());  

    然 后如果需要特定域的分析器就调用addAnalyzer方法 
    Java代码 复制代码 

        analyzer.addAnalyzer("fieldname", new KeywordAnalyzer());  

    对了,最后说一下,PerFieldAnalyzerWrapper类也是在org.apache.lucene.analysis包下面的,只需要 
    Java代码 复制代码 

        import org.apache.lucene.analysis.PerFieldAnalyzerWrapper;  

    就行了 

    转:http://hi.baidu.com/lewutian/blog/item/42bf84ceeef3ba35b600c8e7.html 

  • 相关阅读:
    《必须知道的.net》读后感 转
    Web Service
    设计模式
    对做“互联网产品”的一些想法
    四大发明之活字印刷——面向对象思想的胜利
    每个IT人都应当拥有的30条技能
    面向对象的本质是什么?
    数据库设计规范 zhuan
    翻动100万级的数据 —— 只需几十毫秒 转
    程序员发展十分重要的12条日常习惯
  • 原文地址:https://www.cnblogs.com/zhwl/p/3493841.html
Copyright © 2020-2023  润新知