爬行(crawler)
作者:笑面佛
瀏覽:659次
發(fā)布時間:2018-03-14




蜘蛛程序(spider)是搜索引擎的一部分,負責在互聯(lián)網上定位和索引每個網頁,這樣就能夠響應搜索者的搜索要求,成功的搜索引擎營銷依賴于爬在一個網站上找到幾乎所有的網頁。