楼上说的很多，我(wo)补充(chong)一下，正(zheng)确(que)的(de)应该叫网络(luo)蜘(zhi)蛛，又称(cheng)爬虫，本(ben)质是搜(sou)索引擎派(pai)出(chu)的(de)一个(ge)执行抓取任务(wu)的程序蜘蛛(zhu)池的本质(zhi)是大量的(de)网站互相(xiang)链接(jie)，每(mei)个站单独产生大量的内容吸(xi)引(yin)蜘蛛来(lai)爬，几千个网站(zhan)互链时，可以想象蜘蛛的(de)链接