楼上说的很多,我(wǒ )补(bǔ )充(chōng )一下(xià ),正确(què )的应该(gāi )叫(jiào )网(wǎng )络(luò )蜘蛛,又称爬虫,本质(zhì )是搜索引擎派出(chū )的一个(gè )执行(háng )抓取(qǔ )任务的程序蜘蛛池(chí )的本质是大(dà )量的网站互相链接(jiē ),每(měi )个站单独产生(shēng )大(dà )量的内容吸(xī )引蜘(zhī )蛛来爬(pá ),几千个网(wǎng )站互链(liàn )时,可以想(xiǎng )象(xiàng )蜘蛛的(de )链接(jiē )
Copyright © 2008-2018