楼上(shàng )说(shuō )的很多,我补充一下(xià ),正确的(de )应(yīng )该叫网络蜘蛛(zhū ),又(yòu )称爬(pá )虫,本质(zhì )是搜索引擎(qíng )派出的(de )一个执行(háng )抓取任务(wù )的程序蜘(zhī )蛛池的(de )本质(zhì )是大(dà )量的(de )网(wǎng )站互相链接,每个(gè )站单(dān )独(dú )产生(shēng )大量的内容吸引(yǐn )蜘(zhī )蛛来爬,几千个网站互链时,可(kě )以(yǐ )想象(xiàng )蜘蛛的链接(jiē )
Copyright © 2008-2018