楼(lou)上(shang)说的很多，我补充一下，正确的应该叫(jiao)网(wang)络蜘(zhi)蛛，又(you)称(cheng)爬(pa)虫，本质是搜索(suo)引擎(qing)派(pai)出的一个(ge)执行抓(zhua)取任务的程(cheng)序蜘蛛池的(de)本质是大量的网站互相链接，每个站单独产生大(da)量(liang)的内(nei)容(rong)吸(xi)引蜘(zhi)蛛来爬，几千个(ge)网(wang)站互链时，可以想象蜘蛛(zhu)的链(lian)接(jie)