楼上说的(de)很(hen)多，我补充(chong)一下，正(zheng)确的应(ying)该叫网(wang)络(luo)蜘蛛，又称爬(pa)虫，本质是搜索(suo)引擎(qing)派(pai)出的(de)一个执行抓取任务(wu)的程序蜘蛛(zhu)池的本质是大量的网站互相链接，每个站(zhan)单独产生大(da)量的内(nei)容吸引蜘(zhi)蛛(zhu)来爬，几(ji)千个(ge)网站互链时(shi)，可以(yi)想象蜘蛛的链接(jie)