DataForSeo bot

基本資訊

DataForSeo bot的基本資訊如下表。但部分不是很規範的蜘蛛和爬蟲，可能存在資訊不明的情況。

使用者代理

關於DataForSeo bot蜘蛛或者爬蟲的使用者代理字串，IP地址和伺服器，所在地等資訊如下表格所示：

使用者代理字串: Mozilla/5.0 (compatible; DataForSeoBot/1.0; +https://dataforseo.com/dataforseo-bot)

來源

IP地址(182)	伺服器名稱	所屬國家
136.243.220.209	static.209.220.243.136.clients.your-server.de	DE
136.243.228.196	static.196.228.243.136.clients.your-server.de	DE
136.243.228.179	static.179.228.243.136.clients.your-server.de	DE
136.243.228.180	static.180.228.243.136.clients.your-server.de	DE
136.243.220.210	static.210.220.243.136.clients.your-server.de	DE
136.243.228.194	crawling-gateway-136-243-228-194.dataforseo.com	DE
136.243.228.197	crawling-gateway-136-243-228-197.dataforseo.com	DE
136.243.228.195	static.195.228.243.136.clients.your-server.de	DE
136.243.228.178	static.178.228.243.136.clients.your-server.de	DE
136.243.228.177	static.177.228.243.136.clients.your-server.de	DE
136.243.228.198	crawling-gateway-136-243-228-198.dataforseo.com	DE
136.243.228.193	crawling-gateway-136-243-228-193.dataforseo.com	DE
136.243.220.211	crawling-gateway-136-243-220-211.dataforseo.com	DE
136.243.228.181	crawling-gateway-136-243-228-181.dataforseo.com	DE
136.243.228.182	crawling-gateway-136-243-228-182.dataforseo.com	DE
136.243.220.213	crawling-gateway-136-243-220-213.dataforseo.com	DE
136.243.220.214	crawling-gateway-136-243-220-214.dataforseo.com	DE
217.31.19136.243.220.211	?	?

來源

IP地址(1)	伺服器名稱	所屬國家
168.119.140.248	168.119.140.248	US

訪問控制

瞭解如何控制DataForSeo bot訪問許可權，避免DataForSeo bot抓取行為不當。

對於未知蜘蛛或者爬蟲。它的用途對網站來說可能是好的，也可能是壞的，這取決於它是什麼。所以說，這需要站長進一步分析判斷這些尚不明確的爬蟲行為，再作最終決定。但，根據以往的經驗，未宣告行為目的及未命名的蜘蛛爬蟲，通常都有不可告人的祕密，我們理應對其行為進行控制，比如攔截。

您可以通過在網站的 robots.txt 中設定使用者代理訪問規則來遮蔽 DataForSeo bot 或限制其訪問許可權。我們建議安裝 Spider Analyser 外掛，以檢查它是否真正遵循這些規則。

# robots.txt

# 下列程式碼一般情況可以攔截該代理

User-agent: DataForSeo bot

Disallow: /

# robots.txt # 下列程式碼一般情況可以攔截該代理 User-agent: DataForSeo bot Disallow: /

# robots.txt
# 下列程式碼一般情況可以攔截該代理
User-agent: DataForSeo bot
Disallow: /

您無需手動執行此操作，可通過我們的 Wordpress 外掛 Spider Analyser 來攔截不必要的蜘蛛或者爬蟲。

基本資訊