楼(lóu )上说的很多,我(wǒ )补(bǔ )充一下,正确的应该叫网络(luò )蜘蛛(zhū ),又称爬(pá )虫(chóng ),本质是(shì )搜(sōu )索引(yǐn )擎派出的一个(gè )执行抓取任(rèn )务的程序(xù )蜘(zhī )蛛池的本质是(shì )大量(liàng )的(de )网站互相(xiàng )链接,每个站单独(dú )产生(shēng )大(dà )量的内(nèi )容吸引(yǐn )蜘蛛来(lái )爬,几千个网站互链(liàn )时(shí ),可(kě )以想象(xiàng )蜘蛛的链接
Copyright © 2008-2018