楼上(shàng )说的很多,我(wǒ )补充(chōng )一下(xià ),正确(què )的应(yīng )该叫网(wǎng )络(luò )蜘蛛,又(yòu )称爬(pá )虫,本质(zhì )是搜(sōu )索引擎派出(chū )的一个(gè )执(zhí )行抓取任(rèn )务的程序蜘蛛池(chí )的(de )本质是(shì )大量的网站互相链接,每个(gè )站单独(dú )产生(shēng )大(dà )量的(de )内容吸引蜘(zhī )蛛来爬,几千个网站互链时,可以(yǐ )想象(xiàng )蜘(zhī )蛛的链接(jiē )
Copyright © 2008-2018