楼(lou)上说的很多(duo),我(wo)补充一下,正确的应(ying)该叫网络蜘蛛,又称爬(pa)虫,本质是搜(sou)索引(yin)擎(qing)派出(chu)的(de)一个(ge)执行抓取任务的程序(xu)蜘(zhi)蛛池的本质是大(da)量的网站互相(xiang)链接,每个站单独(du)产生大量的内(nei)容(rong)吸引蜘蛛(zhu)来(lai)爬,几千个(ge)网(wang)站互链(lian)时(shi),可以想象蜘蛛的(de)链接
Copyright © 2023-2024