楼(lóu )上说的很多(duō ),我补充(chōng )一(yī )下,正确(què )的应(yīng )该叫网络(luò )蜘蛛,又(yòu )称爬虫,本质是搜索引擎派(pài )出的一(yī )个执行抓取任务(wù )的(de )程序(xù )蜘蛛(zhū )池(chí )的本(běn )质是(shì )大量的网站(zhàn )互(hù )相链(liàn )接(jiē ),每个(gè )站单独产(chǎn )生大量的内容(róng )吸引蜘(zhī )蛛来爬,几千个网站互链时,可以(yǐ )想(xiǎng )象(xiàng )蜘蛛的(de )链接(jiē )
Copyright © 2008-2018