楼(lóu )上说的(de )很多,我(wǒ )补充(chōng )一下,正(zhèng )确的(de )应该叫网络蜘蛛,又称爬(pá )虫,本质是搜索(suǒ )引擎派出的一个执行抓取任务的(de )程序(xù )蜘(zhī )蛛池的本(běn )质是大(dà )量(liàng )的网(wǎng )站(zhàn )互相链接,每个站(zhàn )单独(dú )产生大(dà )量(liàng )的内容(róng )吸(xī )引(yǐn )蜘蛛来爬,几千(qiān )个网站(zhàn )互链时,可以想象蜘(zhī )蛛的(de )链(liàn )接(jiē )
Copyright © 2008-2018