楼(lou)上说(shuo)的很多,我补(bu)充(chong)一下,正(zheng)确的(de)应该叫网络(luo)蜘蛛(zhu),又称爬虫(chong),本质是搜(sou)索引擎(qing)派出的(de)一个执行抓取(qu)任务的程序(xu)蜘蛛池(chi)的本质是大量的(de)网站互相链接(jie),每个站单独产(chan)生大(da)量的(de)内容吸引蜘蛛来(lai)爬,几千(qian)个网(wang)站(zhan)互链(lian)时,可以(yi)想象蜘蛛的链接
Copyright © 2008-2018