楼(lou)上说的(de)很(hen)多,我(wo)补充一(yi)下(xia),正确的应该叫网络(luo)蜘蛛,又称(cheng)爬虫,本质是搜索(suo)引擎派出的一个执行(hang)抓取任务(wu)的(de)程序(xu)蜘蛛池的(de)本质(zhi)是大量(liang)的网站互相链接(jie),每个站单独产(chan)生(sheng)大量(liang)的内(nei)容吸引蜘蛛来爬,几千个(ge)网站(zhan)互链时,可以想(xiang)象蜘蛛的链(lian)接
Copyright © 2023-2024