《彩虹男孩rainbow》

【彩虹男孩rainbow】

楼上说的很(hen)多，我(wo)补充(chong)一下(xia)，正确(que)的(de)应该叫网(wang)络蜘(zhi)蛛，又(you)称爬虫，本质是搜索引擎派出的一个执行抓取(qu)任务(wu)的程序蜘蛛(zhu)池的本质是大量的网(wang)站互相链接(jie)，每个站单独产生大量(liang)的(de)内(nei)容吸引蜘蛛(zhu)来爬，几千(qian)个网站互链(lian)时(shi)，可以想象(xiang)蜘(zhi)蛛(zhu)的链接