楼上(shàng )说的很多(duō ),我补(bǔ )充一下,正(zhèng )确(què )的应(yīng )该叫(jiào )网络蜘蛛,又称(chēng )爬(pá )虫,本质是搜索引(yǐn )擎派出的一个执(zhí )行抓(zhuā )取任务的程(chéng )序(xù )蜘(zhī )蛛池的(de )本质是大量(liàng )的(de )网站(zhàn )互相(xiàng )链(liàn )接(jiē ),每个站单独(dú )产生大(dà )量的内容吸引(yǐn )蜘蛛来爬,几千个网站互链(liàn )时,可以想(xiǎng )象蜘(zhī )蛛(zhū )的链接(jiē )
Copyright © 2008-2018