楼上说的很多(duo)，我补(bu)充(chong)一(yi)下，正确(que)的应该叫(jiao)网(wang)络蜘(zhi)蛛，又(you)称爬虫(chong)，本质是搜索引擎派出的一个执(zhi)行抓(zhua)取(qu)任务的程序蜘蛛池的本(ben)质(zhi)是大(da)量的网站互相链(lian)接(jie)，每(mei)个站单(dan)独产生大量(liang)的内(nei)容吸引蜘蛛(zhu)来爬，几千个(ge)网站互链时，可以想象蜘蛛的链接