lucene5.3.1+IKAnalyer 构建简单搜索引擎

项目应用场景

最近需要做一个简单的信息展示系统，信息和普通新闻差不多，主要有标题和内容，信息需要能通过关键词检索到，考虑到信息比较简单，检索也很简单，主要是通过标题和内容搜索，不想用Solr搭建搜索引擎，想用的Lucene写个简的搜索，能构增加索引、删除索引，通过关键字搜索信息就可以了。

项目依赖包

Lucene使用最新版本5.3.1 Maven配置如下

        <dependency>
            <groupId>org.apache.lucene</groupId>
            <artifactId>lucene-core</artifactId>
            <version>5.3.1</version>
        </dependency>
        <dependency>
            <groupId>org.apache.lucene</groupId>
            <artifactId>lucene-queryparser</artifactId>
            <version>5.3.1</version>
        </dependency>

分词器选择

由于项目对搜索精度没有太高要求，所以选择常用的IK分词器就可以了，选用的版本为IKAnalyzer2012_V5.jar ，百度可以很好搜索

文章准备

在C:/MyIndex/doc 目录下准备了两篇测试新闻，如下图所示

创建索引

    public static void indexFile() throws IOException {
        Directory dir = FSDirectory.open(Paths.get("C:/MyIndex"));
        Analyzer analyzer = new IKAnalyzer();
        IndexWriterConfig iwc = new IndexWriterConfig(analyzer);
        IndexWriter writer = new IndexWriter(dir, iwc);
        File path=new File("C:\MyIndex\doc");
        File [] file= path.listFiles();
        for(File f:file){
            String tile=f.getName();
            String content="";
            BufferedReader br=new BufferedReader(new InputStreamReader(new FileInputStream(f),"utf-8"));
            String line="";
            while (null!=(line=br.readLine())) {
                content+=line;
            }
            Document doc = new Document();
            doc.add(new TextField("name", tile, Field.Store.YES));
            doc.add(new TextField("content", content,Field.Store.YES));
            writer.addDocument(doc);
            System.out.println("add " + tile);  
        }
        writer.close();
    }

测试搜索

    public static void search() throws IOException, ParseException {
        Analyzer analyzer = new IKAnalyzer();
        IndexReader reader = DirectoryReader.open(FSDirectory.open(Paths.get("C:/MyIndex")));
        IndexSearcher searcher = new IndexSearcher(reader);
        QueryParser parser = new QueryParser("name", analyzer);
        String queries = "奥巴马";
        Query query = parser.parse(queries);
        System.out.println("Searching for: " + query.toString(queries));
        TopDocs results = searcher.search(query, 10);
        System.out.println("Total match：" + results.totalHits);
        ScoreDoc[] hits = results.scoreDocs;
        int count = 1;
        for (ScoreDoc hit : hits) {
            Document doc1 = searcher.doc(hit.doc);
            String res = doc1.get("name");
            System.err.println(count + "  " + res + ", " + hit.score);
            count++;
        }

    }

运行结果

add 习近平会见奥巴马： 中美两国要牢牢把握构建新型大国关系正确方向.txt
add 最高法紧急下令暂缓运毒7.5公斤农民死刑执行.txt
Searching for: name:奥 name:巴马
Total match：1
1  习近平会见奥巴马： 中美两国要牢牢把握构建新型大国关系正确方向.txt, 0.30935922

原文链接