楼(lou)上说的很多(duo)，我(wo)补(bu)充一下，正(zheng)确的应(ying)该叫网络蜘蛛，又称爬虫，本(ben)质是(shi)搜索引(yin)擎派出的一个执(zhi)行抓取任务的程(cheng)序蜘蛛池的(de)本(ben)质(zhi)是(shi)大量的(de)网站互(hu)相链接，每个站单独产(chan)生大量的内(nei)容吸引蜘蛛(zhu)来爬，几千(qian)个网站互链(lian)时(shi)，可(ke)以想象蜘蛛的链接(jie)