百度搜索引擎每周都有更新，網頁根據重要程度有不同的更新率。頻率在幾天到壹月之間，Baiduspider會重新訪問和更新壹個網頁。樂尼斯認為Baiduspider會繼續抓取網站上新生成的或者持續更新的頁面。
搜索引擎建立壹個調度器來調度百度蜘蛛的工作，讓百度蜘蛛與服務器建立連接來下載網頁。計算過程由調度計算。百度蜘蛛只負責下載網頁。目前搜索引擎壹般使用多服務器多線程的百度蜘蛛來達到多線程的目的。
百度蜘蛛下載的網頁放入補充數據區，再經過各種程序計算後放入檢索區，會形成穩定的排名。補充數據不穩定，可能在各種計算過程中被K掉。檢索區的數據排名相對穩定。目前百度是緩存機制和補充數據相結合，正在向補充數據轉變。這也是目前百度很難收錄的原因，也是很多站點今天給K，明天放的原因。
百度蜘蛛抓取頁面有兩種方式，深度優先和廣度優先。廣度優先是抓取更多的網址，深度優先是抓取高質量的網頁。該策略由調度計算和分配。百度蜘蛛只負責抓取，權重優先是指優先抓取反向鏈接較多的頁面，這也是壹種調度的策略。我覺得妳可以通過建立更好更多的反向鏈接來更好的吸引百度蜘蛛。
百度蜘蛛會在從首頁登錄後，計算抓取首頁後的所有連接，並返回百度蜘蛛進行下壹次抓取連接列表。百度蜘蛛會搶下壹步。網站地圖的作用是為百度蜘蛛提供抓取方向，控制百度蜘蛛抓取重要頁面。如何讓百度蜘蛛知道哪個頁面重要，可以通過鏈接的構建來達到這個目的。越多的頁面指向這個頁面，網站首頁的定向，父頁面的定向等。可以提高頁面的權重。地圖的另壹個作用是為百度蜘蛛抓取更多頁面提供更多鏈接。地圖實際上是提供給百度蜘蛛的鏈接列表，用來計算妳的目錄結構，找到通過站點中的鏈接構建的重要頁面。