楼上说的(de)很(hen)多，我(wo)补(bu)充一下(xia)，正确的应该叫网(wang)络蜘蛛(zhu)，又称爬虫(chong)，本质是搜索引擎派出的(de)一个执行抓(zhua)取任(ren)务的程(cheng)序蜘蛛池的本(ben)质是(shi)大(da)量的(de)网站互相链接，每(mei)个站(zhan)单独产(chan)生大量(liang)的内容吸引蜘(zhi)蛛来爬，几千个网(wang)站互(hu)链时，可以想象蜘蛛(zhu)的链接