楼(lou)上说的(de)很多，我(wo)补充一下，正确的应该叫网(wang)络蜘(zhi)蛛，又称爬虫，本质是(shi)搜(sou)索引擎派出的一(yi)个(ge)执(zhi)行抓取任务的程(cheng)序蜘蛛池的本质是大量的网(wang)站互(hu)相链接(jie)，每(mei)个站单独(du)产(chan)生(sheng)大(da)量的内(nei)容(rong)吸引蜘蛛来爬，几千个网站(zhan)互(hu)链时(shi)，可(ke)以想象蜘蛛的链接