楼上(shang)说的很(hen)多,我补充一下,正确(que)的应该叫网络蜘蛛,又称爬(pa)虫,本质是(shi)搜(sou)索引擎派(pai)出(chu)的一个(ge)执行抓取任务(wu)的(de)程序(xu)蜘蛛池的本质(zhi)是大量的网站互相链接,每个站单独(du)产(chan)生(sheng)大量(liang)的内容(rong)吸引蜘蛛来爬,几千个网(wang)站互链(lian)时,可(ke)以想(xiang)象(xiang)蜘蛛(zhu)的链接(jie)
Copyright © 2023-2024