分类: 百科 常识词典 编辑 : 常识 发布 : 03-29

阅读 :190

Google 的蜘蛛们多久就可以遍历一次 Internet ？4 个答案

答案 1：

1、这个问题本来就不成立。internet是活的，每时每刻都在增加新的网页，怎么能绝对遍历？ 2、每个搜索引擎都有自己分级的网站列表，比如新浪新闻，可能十分钟抓一次，新浪微博，五分钟一次。如果一个新网站马上上线，没有什么过硬的外链，可能直到你死搜索引擎都不来。

答案 2：

爬虫不是通过遍历internet的方法来更新数据的 对于不同权重的网站爬虫更新频率不同 同时，有些新出现的网页，是由外链引用或者其他网页跳转的方式被发现的，也不一定是由爬虫发现的。 这个问题如果深究就是google的核心算法了，不好一概而论的。

答案 3：

Google蜘蛛是并行的，大致得1-2天吧，虽然没有特别的统计它，只是估算。 一个新域名做的网站，在一个更新频度一般的网页放一个链接，1-2天内即可发现Google蜘蛛来过。

答案 4：

楼上两位已经说的很好了。 如果非得说遍历这个词，那从Google出生到Google死掉，应该是完整的一次遍历。

下一篇:有人做过搜索引擎吗，能对Heritrix和Nutc-的性能及适用性做个比较分析么？ 下一篇 【方向键 ( → )下一篇】

上一篇:点点网的盈利模式是什么呢? 上一篇 【方向键 ( ← )上一篇】