楼(lóu )上说(shuō )的很多,我补充一下(xià ),正确的应该叫网络蜘(zhī )蛛,又称爬(pá )虫(chóng ),本(běn )质是(shì )搜索引擎(qíng )派出的(de )一(yī )个执行(háng )抓取任务的程序(xù )蜘(zhī )蛛池(chí )的(de )本质是大量的(de )网站(zhàn )互相(xiàng )链(liàn )接,每个(gè )站单独产生大量的(de )内容吸(xī )引蜘蛛来(lái )爬,几(jǐ )千个(gè )网站(zhàn )互链时,可以想(xiǎng )象(xiàng )蜘蛛的链接(jiē )
Copyright © 2008-2018