楼上说(shuo)的(de)很多，我(wo)补(bu)充一下(xia)，正确的(de)应(ying)该叫网络(luo)蜘蛛，又(you)称爬虫，本质是搜(sou)索引擎派出(chu)的一(yi)个执行(hang)抓(zhua)取任务的程序蜘蛛池的本质是大(da)量的网站互相链接，每个(ge)站单(dan)独产生大量的内容吸(xi)引(yin)蜘蛛来爬(pa)，几千(qian)个网站互链时，可以想(xiang)象蜘蛛的链接(jie)