
如何做搜尋引擎蜘蛛日誌分析
搜尋引擎蜘蛛日誌檔案是一種非常強大但未被站長充分利用的檔案,分析它可以獲取有關每個搜尋引擎如何爬取網站內容的相關資訊點,及檢視搜尋引擎蜘蛛在一段時間內的行為。
IP地址(1) | 伺服器名稱 | 所屬國家 |
---|---|---|
94.130.15.147 | static.147.15.130.94.clients.your-server.de | DE |
IP地址(1) | 伺服器名稱 | 所屬國家 |
---|---|---|
116.203.217.7 | 116.203.217.7 | DE |
78.47.24.231 | static.231.24.47.78.clients.your-server.de | DE |
116.203.126.25 | static.25.126.203.116.clients.your-server.de | DE |
144.76.94.114 | static.114.94.76.144.clients.your-server.de | DE |
IP地址(1) | 伺服器名稱 | 所屬國家 |
---|---|---|
144.76.94.114 | static.114.94.76.144.clients.your-server.de | DE |
IP地址(4) | 伺服器名稱 | 所屬國家 |
---|---|---|
88.99.144.159 | ? | DE |
94.130.67.180 | ? | DE |
138.201.31.160 | ? | DE |
213.239.217.85 | static.213-239-217-85.clients.your-server.de | DE |
78.46.46.248 | ? | DE |
88.198.15.244 | static.88-198-15-244.clients.your-server.de | DE |
88.99.148.110 | ? | DE |
148.251.136.181 | ? | DE |
88.198.16.190 | static.88-198-16-190.clients.your-server.de | DE |
144.76.94.111 | ? | DE |
176.9.77.78 | ? | DE |
144.76.95.24 | static.24.95.76.144.clients.your-server.de | DE |
136.243.1.83 | static.83.1.243.136.clients.your-server.de | DE |
144.76.94.110 | ? | DE |
148.251.136.182 | ? | DE |
96.126.102.64 | 96-126-102-64.ip.linodeusercontent.com | US |
IP地址(4) | 伺服器名稱 | 所屬國家 |
---|---|---|
88.99.148.110 | ? | DE |
176.9.77.78 | ? | DE |
144.76.95.24 | static.24.95.76.144.clients.your-server.de | DE |
136.243.1.83 | static.83.1.243.136.clients.your-server.de | DE |
IP地址(1) | 伺服器名稱 | 所屬國家 |
---|---|---|
136.243.1.83 | static.83.1.243.136.clients.your-server.de | DE |
IP地址(44) | 伺服器名稱 | 所屬國家 |
---|---|---|
144.76.95.24 | static.24.95.76.144.clients.your-server.de | DE |
176.9.63.54 | static.54.63.9.176.clients.your-server.de | DE |
144.76.78.196 | static.196.78.76.144.clients.your-server.de | DE |
136.243.1.83 | static.83.1.243.136.clients.your-server.de | DE |
144.76.78.198 | static.198.78.76.144.clients.your-server.de | DE |
88.198.230.150 | static.88-198-230-150.clients.your-server.de | DE |
78.46.87.116 | static.78-46-87-116.clients.your-server.de | DE |
78.46.85.137 | static.137.85.46.78.clients.your-server.de | DE |
88.198.105.82 | static.88-198-105-82.clients.your-server.de | DE |
188.40.60.5 | static.5.60.40.188.clients.your-server.de | DE |
78.46.49.208 | static.208.49.46.78.clients.your-server.de | PH |
78.46.34.151 | static.151.34.46.78.clients.your-server.de | DE |
178.63.83.22 | static.22.83.63.178.clients.your-server.de | DE |
2a01:4f8:192:c3::2 | 2a01:4f8:192:c3::2 | DE |
78.46.85.13 | static.78-46-85-13.clients.your-server.de | DE |
46.4.10.21 | static.21.10.4.46.clients.your-server.de | DE |
188.40.45.150 | static.150.45.40.188.clients.your-server.de | DE |
144.76.78.199 | static.199.78.76.144.clients.your-server.de | DE |
144.76.94.111 | static.111.94.76.144.clients.your-server.de | DE |
46.4.36.66 | a.inadm.com | DE |
176.9.127.53 | static.53.127.9.176.clients.your-server.de | DE |
46.4.94.206 | static.206.94.4.46.clients.your-server.de | DE |
176.9.151.196 | static.196.151.9.176.clients.your-server.de | DE |
46.4.98.112 | static.112.98.4.46.clients.your-server.de | DE |
176.9.28.106 | static.106.28.9.176.clients.your-server.de | DE |
176.9.29.147 | static.147.29.9.176.clients.your-server.de | DE |
148.251.136.183 | static.183.136.251.148.clients.your-server.de | DE |
IP地址(1) | 伺服器名稱 | 所屬國家 |
---|---|---|
144.76.78.197 | static.197.78.76.144.clients.your-server.de | DE |
一般不需要攔截,尤其是如果你自己也受益於搜尋引擎優化服務。不過,如果你擔心伺服器資源佔用等問題,且您都不使用這些工具,當然也可以選擇攔截它們。
您可以通過在網站的 robots.txt 中設定使用者代理訪問規則來遮蔽 uMBot 或限制其訪問許可權。我們建議安裝 Spider Analyser 外掛,以檢查它是否真正遵循這些規則。
# robots.txt # 下列程式碼一般情況可以攔截該代理 User-agent: uMBot Disallow: /
您無需手動執行此操作,可通過我們的 Wordpress 外掛 Spider Analyser 來攔截不必要的蜘蛛或者爬蟲。
Ubermetrics是營銷和公關專家的領先的內容智慧平臺。Ubermetrics的內容智慧平臺是一種人工智慧驅動的技術,把公共內容轉化為有意義的見解,以實現有效的內容驅動的傳播戰略。通過Ubermetrics,數字傳播者可以發現、研究、分析和優化內容和趨勢,最大限度地提高傳播效果和投資回報率。
Ubermetrics平臺每分鐘處理超過4.6億個來源的50,000個內容。我們先進的人工智慧、計量學和文字挖掘分析使數字傳播專家能夠發現相關的主題、趨勢、影響者和渠道,推動成功的內容戰略真正與利益相關群體產生共鳴。
在Ubermetrics,我們都熱愛溝通,並熱衷於為我們的客戶製造完美的產品,為他們的溝通工作提供動力。我們的團隊是我們產品的核心 – 這就是為什麼我們重視對彼此的投資。我們通過支援多樣性、開放、誠實、包容以及我們的日常工作來做到這一點。
Ubermetrics在德國柏林和美國舊金山設有辦事處。Ubermetrics與寶馬、Word Health Summit、Fink & Fuchs和RCI Banque等客戶在三大洲合作。