(1)通過百度蜘蛛下載回來的網(wǎng)頁放到補充數(shù)據(jù)區(qū),通過各種程序計算過后才放到檢索區(qū),才會形成穩(wěn)定的排名,所以說只要下載回來的東西都可以通過指令找到,補充數(shù)據(jù)是不穩(wěn)定的,有可能在各種計算的過程中給k掉,檢索區(qū)的數(shù)據(jù)排名是相對比較穩(wěn)定的,百度目前是緩存機制和補充數(shù)據(jù)相結(jié)合的,正在向補充數(shù)據(jù)轉(zhuǎn)變,這也是目前百度收錄困難的原因,也是很多站點今天給k了明天又放出來的原因。
(2)深度優(yōu)先和廣度優(yōu)先,百度蜘蛛抓頁面的時候從起始站點(即種子站點指的是一些門戶站點)是廣度優(yōu)先抓取是為了抓取更多的網(wǎng)址,深度優(yōu)先抓去的目的是為了抓去高質(zhì)量的網(wǎng)頁,這個策略是由調(diào)度來計算和分配的,百度蜘蛛只負責(zé)抓取,權(quán)重優(yōu)先是指反向連接較多的頁面的優(yōu)先抓取,這也是調(diào)度的一種策略,一般情況下網(wǎng)頁抓取抓到40%是正常范圍,60%算很好,100%是不可能的,當然抓去的越多越好
本文由深圳建網(wǎng)站公司www.61916.com整理
關(guān)于我們 | 友情鏈接 | 網(wǎng)站地圖 | 聯(lián)系我們 | 最新產(chǎn)品
浙江民營企業(yè)網(wǎng) dgmlhs.cn 版權(quán)所有 2002-2010
浙ICP備11047537號-1