Asline0566 发表于 2023-4-6 16:23:35

Spider pool - 蜘蛛池的概念和原理

蜘蛛池的概念
蜘蛛池,英文:Spider pool蜘蛛池,指的是一个网站或一批网站被搜索引擎蜘蛛抓取的频次较多(10万+),看似这些网站上具有大量的搜索引擎蜘蛛,故称之为蜘蛛池。
蜘蛛池的原理当我们的网站不收录,或者搜索引擎抓取频次特别少的时候,可以考虑采用蜘蛛池来协助。用一个通俗易懂的例子来说明其中的道理:就如两块田A和B,A田具有满满的蓄水,而B田却几近干涸。为了不让B田的庄稼枯死,一个简单有效的方法就是,拉一个水管把A田的水引一些到B田去。如果拉的水管很细,那么过来的水就小,反之,如果拉了一个粗水管,或拉了多条水管,那么过来的水就多,B田也很快会有满满的蓄水。这样,借助A田的“A田B调”,B田就度过了艰难的初期时光,以后的日子,它只需等待自然的降雨就可以了。
这里,A田指的是蜘蛛池网站,B田指的是我们可怜的暂不收录、没抓取的网站。水管指的是在蜘蛛池网站上投放的网址链接,粗细指的是给这些链接投放的蜘蛛池个数。水管多少,指的是在蜘蛛池网站上放的网址链接多少
页: [1]
查看完整版本: Spider pool - 蜘蛛池的概念和原理