楼上(shàng )说(shuō )的(de )很多,我补(bǔ )充一(yī )下,正确(què )的(de )应该叫网络蜘(zhī )蛛,又(yòu )称爬(pá )虫,本质是(shì )搜索(suǒ )引(yǐn )擎派出的一个执行抓取(qǔ )任务(wù )的(de )程序(xù )蜘蛛池的本质(zhì )是(shì )大(dà )量的(de )网(wǎng )站互相链接,每个站单(dān )独产(chǎn )生大量(liàng )的内容吸(xī )引蜘蛛来(lái )爬,几(jǐ )千个(gè )网站互链时,可以想象蜘蛛的链接
Copyright © 2008-2018