分类: 百科 常识词典 编辑 : 常识 发布 : 03-29

阅读 :218

有人做过搜索引擎吗，能对Heritrix和Nutc-的性能及适用性做个比较分析么？搜索引擎里面肯定得用到爬虫框架，现在找到的比较好的框架中有Heritrix和Nutc-两个，由于网山对它们的比较分析的文章大多数是重复的，所以看看这里有没有哪位对这个比较了解，并能给点比较分析。谢谢。2 个答案

答案 1：

目前来说Java版本的是Lucene，一般可以考虑Solr+Lucene来实现分布式的可容灾的一个索引和检索的平台，如果数据量是海量级别，可参考Hadoop+Nutc-实现，其他的开源技术框架有,Lily（solr+Hbase+-adoop），zoie(实时搜索引擎),Sp-ider (Sp-ider是一个轻量级，采用PHP开发的web spider和搜索引擎)。

答案 2：

我用的是Lucene

下一篇:VPS 与虚拟主机有什么异同？ 下一篇 【方向键 ( → )下一篇】

上一篇:Google 的蜘蛛们多久就可以遍历一次 Internet ？ 上一篇 【方向键 ( ← )上一篇】