廣度爬行和深度爬行
發(fā)布者: 華企立方 發(fā)布時間:2013-1-25
廣度爬行和深度爬行
廣度優(yōu)先:一般來說比較多在用在新站上面。蜘蛛根據(jù)網(wǎng)站的層次目錄結(jié)構(gòu),爬行,先訪問第一層 目錄的頁面,爬行完畢之后在爬行第二層的頁面依此類推。但是這樣爬行來說很多時候蜘蛛只在第一層目 錄或者前幾層目錄爬完就走了。這樣被收錄的頁面和網(wǎng)站本身的頁面比例來說不是很大。是以站長要解決 這個問題一般來說要從兩個方面入手,一個是增加網(wǎng)站權(quán)重,爭取蜘蛛在廣度爬行的時候也進(jìn)行深度爬行 。另外是,減少目錄層次,一般來說現(xiàn)在的開源程序和網(wǎng)站程序的架構(gòu)也都比較好,我們建立一級欄目和 二級欄目就足夠。整體的目錄層次不要超過三層。這樣利于蜘蛛的收錄和爬行。如果網(wǎng)站權(quán)重不夠,而發(fā) 布的內(nèi)容又再較深的目錄層次,應(yīng)該讓其在首頁顯示,蜘蛛來的時候可以第一時間爬行?,F(xiàn)在各大搜索引 擎根據(jù)網(wǎng)站的權(quán)重大小一般都回采用廣度爬行和深度爬行同時進(jìn)行。
文章由佛山網(wǎng)站建設(shè)
2800kj.cn整理提供
此文關(guān)鍵字: