Bing網站管理員工具中的爬網空間功能允許網站管理員控制Bingbot抓取您的網站的速率。當您的網站上有訪問者以適當地管理頻寬時,需要進行爬網控制以限制Bingbot和Googlebot等搜尋引擎蜘蛛的活動。
由於網站上的訪問者將被給予更高的優先順序,顯然當時的搜尋引擎活動將受到限制。您可以根據訪問者在您網站上的模式,通知Bingbot在一天中的任何時間點更快或更慢地爬行。
登入到您的Bing網站管理員工具帳戶並選擇您要設定抓取控制模式的網站。您必須在您的帳戶中新增並驗證您的站點才能使用此功能。“爬網控制元件”選項在“配置”選項卡下可用。
(1)爬網設定的時間首選項
登入您的Bing站長管理工具,選擇您的網站後,點選右側的“配置-爬網控制元件”,然後您會看到爬網設定的時間首選項,在這裡您可以選擇網站所在地區的時區及時間格式,比如您在中國大陸,則可以選擇東八區:
Bingbot爬網控制元件首選項
(2)爬網設定
選擇了時區和時間格式之後,我們可以開始設定爬網設定,如下圖所示,我們可以通過預設的選項,設定網站流量最多的時間段,如果網站面向的是中國使用者,選擇9AM-5PM即可。
如果網站面向其他國家或者地區,則可以根據自己網站流量的實際情況,選擇其他預設項,或者選擇自定義,然後手動下方的爬網速度網格,網格越多代表那個小時爬網速度越快(對應的小時應該網站流量越少)。
您還可以在robots.txt檔案中設定抓取延遲。您在Bing網站管理員工具中設定的抓取速度將被您的robots.txt中提供的資訊所取代。
重要的是,網站管理員應首先確保網站緩慢是由於Bingbot活動造成的。使用驗證Bingbot工具檢查伺服器日誌檔案中顯示的IP地址是否屬於Bingbot,然後根據Bingbot爬取模式和訪問者模式相應地設定爬取率。
有人可能說,Bing在搜尋引擎都沒什麼市場份額,管它幹什麼。
或者在後IE時代,bing的流量的確少得可憐。隨著Edge瀏覽器使用Chrome核心開發之後,Bing的流量也慢慢起來,雖遠不如百度,但聊勝於無。
這一點在閃電博的流量統計可以獲得證明,從最近30天閃電博的來源網站統計,可以看到bing的流量已經躍升至第二位,僅次於百度,且流量超過了15%。
因此,建議站長們不要忽視bing的流量。怎麼獲得更多的bing收錄?可以考慮使用搜尋推送外掛,將最新發布的內容即時推送至bing,這應該是當前最有效的主動推送方式之一。
評論留言