深度優(yōu)先:根據(jù)網(wǎng)站的目錄層次結(jié)構(gòu),爬網(wǎng)程序到達(dá)一個(gè)目錄,并繼續(xù)深入該目錄,一直到更底 層,沒有連接。然后根據(jù)原始連接返回并開始爬網(wǎng)下一個(gè)目錄。因此,網(wǎng)站站長(zhǎng)目錄設(shè)置應(yīng)簡(jiǎn)單明了,不要讓蜘蛛迷路。從起點(diǎn)開始,繼續(xù)前進(jìn)。如果您走到了盡頭,請(qǐng)退后一步,嘗試另一條路徑,直到找到目標(biāo)位置。即使成功,也不會(huì)碰到南墻并向后轉(zhuǎn)彎,這種方法不一定能找到一個(gè)好的方法,但是優(yōu)點(diǎn)是記住的地方更少。

與“廣度優(yōu)先”爬網(wǎng)方法相反,“深度優(yōu)先”先爬網(wǎng)一個(gè)深頁(yè)面,然后逐漸爬網(wǎng)該深頁(yè)面。捕獲深頁(yè)后,它將返回到淺頁(yè),然后跟蹤另一個(gè)鏈接。拿來,這是一種垂直的頁(yè)面抓取方法。使用深度優(yōu)先搜尋方法,搜索引擎可以搜尋網(wǎng)站中更多隱藏和不受歡迎的頁(yè)面,從而可以滿足更多用戶的需求。
搜索引擎將爬網(wǎng)網(wǎng)站的主頁(yè),并提取主頁(yè)上的鏈接,然后跟隨鏈接至A-1頁(yè)之一,同時(shí)在A-中獲得鏈接并抓取B-1頁(yè) 獲得B-1來鏈接并爬網(wǎng)C-1,連續(xù)重復(fù)此步驟,并在滿足一定條件后,再爬網(wǎng)并從A-2鏈接。
這里介紹了上海網(wǎng)站生產(chǎn)優(yōu)化的深度和廣度優(yōu)化介紹,希望對(duì)您有所幫助。