楼(lou)上说的很(hen)多(duo),我补(bu)充一(yi)下,正确(que)的应该叫网(wang)络蜘蛛,又称(cheng)爬虫,本(ben)质是搜索引擎(qing)派出(chu)的一个(ge)执行抓取任务的程(cheng)序蜘蛛池的本质是(shi)大(da)量的网站(zhan)互相(xiang)链接,每(mei)个站单独产(chan)生大量的内(nei)容吸(xi)引蜘蛛来爬(pa),几千个网站互链时,可以想象蜘蛛的(de)链(lian)接
Copyright © 2008-2018