楼上说的很多，我补充(chong)一下，正(zheng)确(que)的(de)应该(gai)叫(jiao)网络(luo)蜘蛛，又称爬虫，本质是搜索引(yin)擎派出的一个执行(hang)抓(zhua)取(qu)任务的(de)程序(xu)蜘蛛(zhu)池的本(ben)质是大量(liang)的(de)网站(zhan)互相链接，每(mei)个站单独产生大量的内容吸引蜘(zhi)蛛来爬(pa)，几千(qian)个网(wang)站互链时，可以想象蜘蛛的链接