Nutla --- lucene + hadoop 分布式搜索运行框架

最新推荐文章于 2013-12-26 09:08:22 发布

原创最新推荐文章于 2013-12-26 09:08:22 发布 · 1k 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#lucene #hadoop #框架 #string #path

Java相关同时被 2 个专栏收录

392 篇文章

订阅专栏

云计算云存储

36 篇文章

订阅专栏

本文介绍如何使用Lucene搜索HDFS中的索引文件，并提供了具体的Java代码示例。文中还提到了Nutla和Katta两个项目，它们分别提供了一种分布式的Lucene搜索方案及其实现。

Nutla

http://code.google.com/p/nutla/

Katta

http://katta.sourceforge.net/

介绍：http://www.iteye.com/topic/366431

参考资料：

http://www.blogjava.net/nianzai/category/45541.html

让Lucene能搜索HDFS下的索引：

    public static void main(String[] args) throws IOException 
    {
        Configuration conf = new Configuration();   
        FileSystem fs = FileSystem.get(conf);
        FsDirectory dir=new FsDirectory(fs, new Path("nutindex/0/"), false, conf);
        IndexReader reader = IndexReader.open(dir);
        System.out.println(reader.numDocs());
        for(int i=0;i<reader.numDocs();i++)
        {
           System.out.println(reader.document(i).get("id"));
        }
        reader.close();
   }

其他资料：

http://drdobbs.com/parallel/226300241?pgno=1

http://drdobbs.com/parallel/226300241?pgno=2

http://drdobbs.com/parallel/226300241?pgno=3