楼(lóu )上说的很多,我补充一下(xià ),正确的应(yīng )该叫(jiào )网络(luò )蜘蛛(zhū ),又(yòu )称爬(pá )虫,本质是搜索(suǒ )引擎(qíng )派(pài )出的一个执行(háng )抓取任务的程(chéng )序蜘蛛(zhū )池(chí )的本质是(shì )大量的(de )网站互(hù )相(xiàng )链(liàn )接,每个站(zhàn )单(dān )独(dú )产生大量的内容吸引(yǐn )蜘蛛来爬,几千(qiān )个网站互(hù )链时,可(kě )以想象(xiàng )蜘蛛的链(liàn )接(jiē )
Copyright © 2008-2018