楼上(shàng )说的很(hěn )多,我补充一(yī )下,正确的(de )应该叫网络(luò )蜘蛛(zhū ),又称(chēng )爬(pá )虫,本质(zhì )是搜(sōu )索引擎派出的一(yī )个执行抓取任务的程序蜘(zhī )蛛池的本质(zhì )是大量(liàng )的网站(zhàn )互相链接(jiē ),每个站单(dān )独产生大量(liàng )的(de )内容吸(xī )引(yǐn )蜘蛛来爬(pá ),几(jǐ )千个网站互链时(shí ),可(kě )以(yǐ )想象蜘蛛(zhū )的(de )链接
Copyright © 2008-2018