Mediatoolkitbot

Mediatoolkitbot蜘蛛/爬虫属于营销类型,由Degordian d.o.o.开发运行。您可以继续阅读下方信息,以深入了解Mediatoolkitbot基本信息,用户代理和访问控制等。

基本信息

Mediatoolkitbot的基本信息如下表。但部分不是很规范的蜘蛛和爬虫,可能存在信息不明的情况。
蜘蛛/爬虫名称
Mediatoolkitbot
类型
营销
开发商
Degordian d.o.o.
当前状态
活动

用户代理

关于Mediatoolkitbot蜘蛛或者爬虫的用户代理字符串,IP地址和服务器,所在地等信息如下表格所示:
Mediatoolkitbot
用户代理字符串
Mediatoolkitbot (info@mediatoolkit.com)
首次出现
2015-10-19 11:33:30
最后出现
2015-10-18 12:14:52
遵循robots.txt
未知
来源
IP地址(1) 服务器名称 所属国家
213.186.1.242 213.186.1.242 HR
213.186.1.247 213.186.1.247 HR
213.186.1.243 213.186.1.243 HR
213.186.1.248 213.186.1.248 HR
213.186.1.245 213.186.1.245 HR
213.186.1.250 213.186.1.250 HR
213.186.1.244 213.186.1.244 HR
213.186.1.249 213.186.1.249 HR
213.186.1.246 213.186.1.246 HR
213.186.1.241 213.186.1.241 HR
50.28.51.253 50.28.51.253 US
用户代理字符串
Mediatoolkitbot (info@mediatoolkit.com)
首次出现
2015-10-19 11:33:30
最后出现
2015-10-18 12:14:52
遵循robots.txt
未知
来源
IP地址(1) 服务器名称 所属国家
50.28.51.253 50.28.51.253 US

访问控制

了解如何控制Mediatoolkitbot访问权限,避免Mediatoolkitbot抓取行为不当。

是否拦截Mediatoolkitbot?

一般不需要拦截,尤其是如果你自己也受益于搜索引擎优化服务。不过,如果你担心服务器资源占用等问题,且您都不使用这些工具,当然也可以选择拦截它们。

通过Robots.txt拦截

您可以通过在网站的 robots.txt 中设置用户代理访问规则来屏蔽 Mediatoolkitbot 或限制其访问权限。我们建议安装 Spider Analyser 插件,以检查它是否真正遵循这些规则。

	# robots.txt
	# 下列代码一般情况可以拦截该代理
	
	User-agent: Mediatoolkitbot
	Disallow: /

您无需手动执行此操作,可通过我们的 Wordpress 插件 Spider Analyser 来拦截不必要的蜘蛛或者爬虫。

常见蜘蛛/爬虫

Common Spiders
Googlebot
GoogleBot蜘蛛/爬虫属于搜索引擎类型,由Google Inc.开发运行。您可以继续阅读下方信息,以深入了解GoogleBot基本信息,用户代理和访问控制等。
Online Domain Tools
Online Domain Tools蜘蛛/爬虫属于监控类型,由AITIS s.r.o.开发运行。您可以继续阅读下方信息,以深入了解Online Domain Tools基本信息,用户代理和访问控制等。
AhrefsBot
AhrefsBot蜘蛛/爬虫属于营销类型,由Ahrefs Pte Ltd开发运行。您可以继续阅读下方信息,以深入了解AhrefsBot基本信息,用户代理和访问控制等。
SEMrushBot
SEMrushBot蜘蛛/爬虫属于营销类型,由Semrush Inc开发运行。您可以继续阅读下方信息,以深入了解SEMrushBot基本信息,用户代理和访问控制等。
DotBot
DotBot蜘蛛/爬虫属于营销类型,由SEOmoz, Inc.开发运行。您可以继续阅读下方信息,以深入了解DotBot基本信息,用户代理和访问控制等。
SentiBot
SentiBot蜘蛛/爬虫属于营销类型,由SentiOne开发运行。您可以继续阅读下方信息,以深入了解SentiBot基本信息,用户代理和访问控制等。
Awario crawler
Awario crawler蜘蛛/爬虫属于营销类型,由Link-Assistant.Com开发运行。您可以继续阅读下方信息,以深入了解Awario crawler基本信息,用户代理和访问控制等。
ZoomBot
ZoomBot蜘蛛/爬虫属于营销类型,由SEO Cube S.r.l.开发运行。您可以继续阅读下方信息,以深入了解ZoomBot基本信息,用户代理和访问控制等。

相关文章

Related Articles