楼上说的很多(duo),我(wo)补充(chong)一下,正(zheng)确(que)的应该叫网络蜘蛛,又称爬(pa)虫,本质是搜索引(yin)擎派(pai)出的(de)一个执行抓取任(ren)务的程序(xu)蜘(zhi)蛛池的本质是大量的网站互(hu)相(xiang)链(lian)接(jie),每个(ge)站单(dan)独产(chan)生大量(liang)的内容吸(xi)引(yin)蜘蛛来爬(pa),几千个网站(zhan)互链时(shi),可(ke)以想象蜘蛛的链接
Copyright © 2008-2018