分類(lèi): 百科 常識(shí)詞典 編輯 : 常識(shí) 發(fā)布 : 03-29

閱讀 :251

有人做過(guò)搜索引擎嗎，能對(duì)Heritrix和Nutc-的性能及適用性做個(gè)比較分析么？搜索引擎里面肯定得用到爬蟲(chóng)框架，現(xiàn)在找到的比較好的框架中有Heritrix和Nutc-兩個(gè)，由于網(wǎng)山對(duì)它們的比較分析的文章大多數(shù)是重復(fù)的，所以看看這里有沒(méi)有哪位對(duì)這個(gè)比較了解，并能給點(diǎn)比較分析。謝謝。2 個(gè)答案

答案 1：

目前來(lái)說(shuō)Java版本的是Lucene，一般可以考慮Solr+Lucene來(lái)實(shí)現(xiàn)分布式的可容災(zāi)的一個(gè)索引和檢索的平臺(tái)，如果數(shù)據(jù)量是海量級(jí)別，可參考Hadoop+Nutc-實(shí)現(xiàn)，其他的開(kāi)源技術(shù)框架有,Lily（solr+Hbase+-adoop），zoie(實(shí)時(shí)搜索引擎),Sp-ider (Sp-ider是一個(gè)輕量級(jí)，采用PHP開(kāi)發(fā)的web spider和搜索引擎)。

答案 2：

我用的是Lucene

下一篇:VPS 與虛擬主機(jī)有什么異同？ 下一篇 【方向鍵 ( → )下一篇】

上一篇:Google 的蜘蛛們多久就可以遍歷一次 Internet ？ 上一篇 【方向鍵 ( ← )上一篇】