楼上说的很多,我补充一下,正(zheng)确的(de)应该叫(jiao)网络蜘蛛,又(you)称(cheng)爬(pa)虫,本质(zhi)是搜索(suo)引擎(qing)派出的一个(ge)执行抓取任务的程序蜘蛛池的本(ben)质(zhi)是大量的网站互(hu)相链接,每个(ge)站单(dan)独产(chan)生(sheng)大(da)量的内容(rong)吸引蜘蛛(zhu)来爬,几千(qian)个网站互链时,可以想(xiang)象(xiang)蜘蛛(zhu)的链(lian)接
Copyright © 2023-2024