
如何做搜尋引擎蜘蛛日誌分析
搜尋引擎蜘蛛日誌檔案是一種非常強大但未被站長充分利用的檔案,分析它可以獲取有關每個搜尋引擎如何爬取網站內容的相關資訊點,及檢視搜尋引擎蜘蛛在一段時間內的行為。
IP地址(10) | 伺服器名稱 | 所屬國家 |
---|---|---|
144.76.112.228 | h404.23-4.de | DE |
2a01:4f8:192:62e3::2 | 2a01:4f8:192:62e3::2 | DE |
2a01:4f8:212:2f14::2 | h106.23-4.de | DE |
136.243.81.154 | h104.23-4.de | DE |
144.76.97.177 | h403.23-4.de | DE |
2a01:4f8:192:32b0::2 | 2a01:4f8:192:32b0::2 | DE |
136.243.81.27 | h106.23-4.de | DE |
144.76.13.39 | h301.23-4.de | DE |
5.9.0.81 | h102.23-4.de | DE |
2a01:4f8:160:62c1::2 | 2a01:4f8:160:62c1::2 | DE |
一般不需要攔截,尤其是如果你自己也受益於搜尋引擎優化服務。不過,如果你擔心伺服器資源佔用等問題,且您都不使用這些工具,當然也可以選擇攔截它們。
您可以通過在網站的 robots.txt 中設定使用者代理訪問規則來遮蔽 SEOdiver 或限制其訪問許可權。我們建議安裝 Spider Analyser 外掛,以檢查它是否真正遵循這些規則。
# robots.txt # 下列程式碼一般情況可以攔截該代理 User-agent: SEOdiver Disallow: /
您無需手動執行此操作,可通過我們的 Wordpress 外掛 Spider Analyser 來攔截不必要的蜘蛛或者爬蟲。
ABAKUS為SEO DIVER免費提供搜尋引擎優化的重要工具。搜尋引擎優化人員會發現各種工具用於網站的SEO分析。檢查你的反向連結,進行關鍵詞研究,並確定域名細節。
ABAKUS提供的SEO工具:
Domain Details
在這裡你可以找到有關資訊:移動友好性、Robots.txt、流量、伺服器位置、主機、IP和域名年齡網頁URL
SearchOnIP
查出哪些專案在一個給定域名的選定IP範圍內(C或D)。
Keyword Schnellabfrage
同時對幾個關鍵詞進行搜尋,並快速獲得概覽。網頁URL
LinkCheck
輸入一個域名以獲得指向該頁面的反向連結。匯出一個具有眾多屬性的檔案。網頁URL
Hub-Finder
從最多五個域中找到共同的反向連結,從而找到你的競爭對手的連結源/樞紐。網頁URL
OnPage-Analysis
分析網站最重要的OnPage因素(載入時間、元標籤、內容、收藏夾),並獲得具體的SEO提示.Webpage URL
Backlink Trust Points
尋找到第三層連結的反向連結。研究更深層次連結中的重要反向連結。
Keyword Recherche
識別特定主題的關鍵詞,確定季節性趨勢和流量。