Lucene全文搜索

时间:2011-07-24 15:25:10

标签: lucene

我正在使用Lucene 3.3.0和java。我面临以下问题,不知道是否有解决方案。

我索引下面的文字:“男孩玩得很难赢得游戏”使用StandardAnalyzer,然后我使用“play”进行查询搜索... Lucene只在我使用WildcardQuery构建器时才会找到命中。

问题在于,当我尝试搜索“男孩游戏”时,它根本找不到任何命中。

有没有让Lucene像上下文搜索一样解决这个问题?

谢谢, 萨默尔

private static void addDoc(IndexWriter w, String value) throws IOException {
    Document doc = new Document();
    doc.add(new Field("title", value, Field.Store.YES, Field.Index.ANALYZED));
    w.addDocument(doc);
}

@SuppressWarnings("deprecation")
public static void lucene(String args, String query) throws IOException, ParseException {
    // 0. Specify the analyzer for tokenizing text.
    // The same analyzer should be used for indexing and searching
    StandardAnalyzer analyzer = new StandardAnalyzer(Version.LUCENE_CURRENT);

    // 1. create the index
    Directory index = new RAMDirectory();

    // the boolean arg in the IndexWriter ctor means to
    // create a new index, overwriting any existing index
    IndexWriter w = new IndexWriter(index, analyzer, true,
            IndexWriter.MaxFieldLength.UNLIMITED);
    String[] splitOnLinefeed = args.split("\n");
    for (int i = 0; i < splitOnLinefeed.length; i++) {
        addDoc(w, splitOnLinefeed[i]);
    }
    w.close();

    // 2. query
    String querystr = query+"*";

    // the "title" arg specifies the default field to use
    // when no field is explicitly specified in the query.
    Query q = new QueryParser(Version.LUCENE_CURRENT, "title", analyzer)
            .parse(querystr);

    // 3. search
    IndexSearcher searcher = new IndexSearcher(index, true);
    ScoreDoc[] hits = searcher.search(q, 100).scoreDocs;

    // 4. display results
    System.out.println("Found " + hits.length + " hit(s).");
    for (int i = 0; i < hits.length; ++i) {
        int docId = hits[i].doc;
        Document d = searcher.doc(docId);
        System.out.println((i + 1) + ". " + d.get("title"));
    }

    // searcher can only be closed when there
    // is no need to access the documents any more.
    searcher.close();
}

public static void main(String[] args) throws Exception {
    lucene(parse("Test.pdf"), "boy game");
}

1 个答案:

答案 0 :(得分:0)

1)查询“play”:StandardAnalyzer不提供词干。很明显,您必须使用通配符或提供完全相同的术语。因此,没有词干,“游戏”和“游戏”完全不同。

如果您希望“title:play”工作,您可以通过组合StandardAnalyzer和PorterStemFilter的组件(标记器,过滤器)来创建自己的分析器

2)“男孩游戏”:你确定你的pdf是否正确解析了吗?请尝试将“args”参数打印到lucene();