楼(lou)上说(shuo)的很多，我补充一下(xia)，正(zheng)确的应该叫网(wang)络蜘蛛(zhu)，又称爬虫(chong)，本质是(shi)搜索引(yin)擎派出(chu)的(de)一个(ge)执行抓取任(ren)务的(de)程序蜘蛛池的本质是大量的网(wang)站(zhan)互相链接，每个站单(dan)独产生大(da)量的内容吸引蜘蛛来爬(pa)，几千个网站(zhan)互链时，可(ke)以(yi)想(xiang)象蜘蛛的链接(jie)