楼(lóu )上说(shuō )的很多,我(wǒ )补(bǔ )充一下,正确的(de )应该叫网(wǎng )络蜘蛛,又称爬(pá )虫,本质(zhì )是(shì )搜索引(yǐn )擎派(pài )出的(de )一(yī )个(gè )执行(háng )抓取(qǔ )任(rèn )务的程(chéng )序(xù )蜘蛛池的本质是大量的网站互(hù )相链接,每个站(zhàn )单独产生(shēng )大量的内(nèi )容吸引蜘蛛(zhū )来爬(pá ),几(jǐ )千个网站互(hù )链时,可以想象蜘蛛的(de )链接(jiē )
Copyright © 2008-2018