Hadoop与Lucene和Nutch的关系
2014-08-10 21:13
513 查看
[b]Hadoop+Lucene+Nutch[/b]
Hadoop中实现了 Google的GFS和MapReduce算法,使Hadoop成为了一个分布式的计算平台。Hadoop不仅是一个用于存储的分布式文件系统,而且是设计用来在由通用计算设备组成的大型集群上执行分布式应用的框架。
Lucene是一个Java高性能全文索引引擎工具包可以方便的嵌入到各种实际应用中实现全文索引搜索功能。Nutch是一个应用程序,是一个以Lucene为基础实现的搜索引擎应用,Lucene为Nutch 提供了文本搜索和索引的API,Nutch不仅提供搜索,而且还有数据抓取的功能。
在nutch0.8.0 版本之前,Hadoop是Nutch的一部分,从nutch0.8.0开始,NDFS和MapReduce从中被剥离出来成立一个新的开源项目 Hadoop,Nutch0.8.0版本的架构比从前有了根本性的变化,完全构建在Hadoop的基础之上了。
Hadoop中实现了 Google的GFS和MapReduce算法,使Hadoop成为了一个分布式的计算平台。Hadoop不仅是一个用于存储的分布式文件系统,而且是设计用来在由通用计算设备组成的大型集群上执行分布式应用的框架。
Lucene是一个Java高性能全文索引引擎工具包可以方便的嵌入到各种实际应用中实现全文索引搜索功能。Nutch是一个应用程序,是一个以Lucene为基础实现的搜索引擎应用,Lucene为Nutch 提供了文本搜索和索引的API,Nutch不仅提供搜索,而且还有数据抓取的功能。
在nutch0.8.0 版本之前,Hadoop是Nutch的一部分,从nutch0.8.0开始,NDFS和MapReduce从中被剥离出来成立一个新的开源项目 Hadoop,Nutch0.8.0版本的架构比从前有了根本性的变化,完全构建在Hadoop的基础之上了。
相关文章推荐
- Lucene、Nutch和Hadoop三者之间的关系
- solr ,hadoop ,lucene,nutch 的关系和区别
- (转)Lucene,Nutch,Hadoop 之间有什么关系?
- Lucene,Nutch,Hadoop 之间有什么关系?
- lucene、solr、nutch三者的关系
- 5.搜索之路——solr与lucene和nutch关系
- 李克华 云计算高级群: 292870151 195907286 交流:Hadoop、NoSQL、分布式、lucene、solr、nutch kafka入门:简介、使用场景、设计原理、主要配置及集群搭
- :Hadoop、NoSQL、分布式、lucene、solr、nutch kafka入门:简介、使用场景、设计原理、主要配置及集群搭
- Doug Cutting (Lucene-Nutch-Hadoop 创始人简介)
- 全文索引-lucene,solr,nutch,hadoop之lucene
- Doug Cutting (Lucene-Nutch-Hadoop 创始人简介)
- 全文索引-lucene,solr,nutch,hadoop之nutch与hadoop
- 构建自己的搜索引擎(lucene,hadoop,nutch)
- 全文索引-lucene,solr,nutch,hadoop之nutch与hadoop
- Doug Cutting (Lucene-Nutch-Hadoop 创始人访谈)
- Doug Cutting (Lucene-Nutch-Hadoop 创始人简介)
- nutch和lucene的关系
- lucene nutch solr及hadoop的区别和联系
- lucene、solr、nutch三者的关系
- 全文索引-lucene,solr,nutch,hadoop之solr