楼上(shàng )说(shuō )的很多,我补充一下(xià ),正(zhèng )确的(de )应该叫网络(luò )蜘蛛(zhū ),又(yòu )称爬虫,本质是(shì )搜(sōu )索引(yǐn )擎(qíng )派出的一个执行(háng )抓取任务的程序蜘蛛(zhū )池的(de )本(běn )质(zhì )是(shì )大(dà )量(liàng )的网站互相(xiàng )链接,每(měi )个站单(dān )独产生大量(liàng )的(de )内容(róng )吸引(yǐn )蜘蛛来(lái )爬,几千个网站互链(liàn )时,可以想象蜘(zhī )蛛(zhū )的链接
Copyright © 2008-2018