COMODOSpider
COMODOSpider蜘蛛/爬虫属于类型，由Comodo Group, Inc.开发运行。您可以继续阅读下方信息，以深入了解COMODOSpider基本信息，用户代理和访问控制等。
基本信息
COMODOSpider的基本信息如下表。但部分不是很规范的蜘蛛和爬虫，可能存在信息不明的情况。
- 蜘蛛/爬虫名称
- COMODOSpider
- 类型
- 其他
- 开发商
-
Comodo Group, Inc.
- 当前状态
-
活动
用户代理
关于COMODOSpider蜘蛛或者爬虫的用户代理字符串，IP地址和服务器，所在地等信息如下表格所示：
Comodo SSL Checker
-
Comodo SSL Checker
-
CrazyWebCrawler-Spider 0.9.10
-
CrazyWebCrawler-Spider 0.9.4
-
CrazyWebCrawler-Spider 0.9.2
-
CrazyWebCrawler-Spider 0.9.0
-
Comodo-Webinspector-Crawler 2.2.1
-
Comodo-Webinspector-Crawler 2.2.2
-
Comodo-Webinspector-Crawler 2.2.0
-
Comodo-Webinspector-Crawler 2.1
-
Comodo Spider 1.2
-
Comodo Spider 1.1
-
Comodo-Certificates-Spider
-
COMODOSpider
-
COMODOSpider
- 用户代理字符串
- Comodo SSL Checker
- 首次出现
- 2010-01-05 19:09:46
- 最后出现
- 2018-08-19 07:29:34
- 遵循robots.txt
- 未知
- 来源
-
| IP地址(6) |
服务器名称 |
所属国家 |
| 91.199.212.132 |
secure.comodo.net |
GB |
| 178.255.87.242 |
no-dns-yet.ccanet.co.uk |
GB |
| 91.212.12.91 |
sslanalyzer.comodoca.com |
GB |
| 178.255.87.226 |
eth5.brad-fw.brad.office.ccanet.co.uk |
GB |
| 178.255.87.241 |
no-dns-yet.ccanet.co.uk |
GB |
| 91.212.12.60 |
search.comodo.com |
GB |
- 用户代理字符串
- CRAZYWEBCRAWLER 0.9.10, http://www.crazywebcrawler.com
- 首次出现
- 2015-12-19 09:53:17
- 最后出现
- 2018-06-28 17:42:11
- 遵循robots.txt
- 未知
- 来源
-
| IP地址(57) |
服务器名称 |
所属国家 |
| 192.241.150.142 |
? |
US |
| 198.211.100.23 |
? |
US |
| 128.199.121.246 |
? |
SG |
| 104.131.204.19 |
? |
US |
| 162.243.167.137 |
162.243.167.137 |
US |
| 198.199.66.93 |
? |
US |
| 192.81.211.149 |
192.81.211.149 |
US |
| 192.241.130.186 |
192.241.130.186 |
US |
| 128.199.171.73 |
? |
SG |
| 104.131.199.240 |
? |
US |
- 用户代理字符串
- CRAZYWEBCRAWLER 0.9.4, http://www.crazywebcrawler.com
- 首次出现
- 2015-06-17 12:11:35
- 最后出现
- 2015-06-17 12:11:35
- 遵循robots.txt
- 未知
- 来源
-
| IP地址(3) |
服务器名称 |
所属国家 |
| 128.199.143.250 |
? |
SG |
| 128.199.167.144 |
? |
SG |
| 178.62.229.171 |
server.rohit.com |
NL |
- 用户代理字符串
- CRAZYWEBCRAWLER 0.9.2, http://www.crazywebcrawler.com
- 首次出现
- 2015-04-03 12:03:28
- 最后出现
- 2015-04-03 12:03:28
- 遵循robots.txt
- 未知
- 来源
-
| IP地址(2) |
服务器名称 |
所属国家 |
| 178.62.70.240 |
? |
GB |
| 104.236.172.194 |
? |
US |
- 用户代理字符串
- crazywebcrawler 0.9.0, http://www.crazywebcrawler.com
- 首次出现
- 2014-08-14 09:15:00
- 最后出现
- 2014-10-09 20:50:13
- 遵循robots.txt
- 未知
- 来源
-
| IP地址(18) |
服务器名称 |
所属国家 |
| 162.243.20.40 |
tmp-lcx.web-dimensions.net |
US |
| 192.241.156.106 |
192.241.156.106 |
US |
| 107.170.187.89 |
107.170.187.89 |
US |
| 104.131.192.24 |
104.131.192.24 |
US |
| 162.243.206.109 |
162.243.206.109 |
US |
| 107.170.92.69 |
107.170.92.69 |
US |
| 192.241.142.197 |
192.241.142.197 |
US |
| 162.243.57.252 |
empts.com.br |
US |
| 178.62.207.234 |
gisting-1.gistingspeciaalbieren.nl |
NL |
| 104.131.85.76 |
104.131.85.76 |
US |
- 用户代理字符串
- Comodo-Webinspector-Crawler 2.2.1, http://www.comodorobot.com
- 首次出现
- 2014-07-13 16:52:27
- 最后出现
- 2014-07-13 16:52:27
- 遵循robots.txt
- 未知
- 来源
-
| IP地址(1) |
服务器名称 |
所属国家 |
| 5.101.100.40 |
? |
NL |
- 用户代理字符串
- Comodo-Webinspector-Crawler 2.2.2, http://www.comodorobot.com
- 首次出现
- 2014-12-28 07:19:23
- 最后出现
- 2014-07-07 21:29:47
- 遵循robots.txt
- 未知
- 来源
-
| IP地址(1) |
服务器名称 |
所属国家 |
| 162.243.240.103 |
host01.nyc.pub.sparkspace.io |
US |
- 用户代理字符串
- Comodo-Webinspector-Crawler 2.2.0, http://www.comodorobot.com
- 首次出现
- 2014-12-28 07:19:23
- 最后出现
- 2014-06-17 17:48:51
- 遵循robots.txt
- 未知
- 来源
-
| IP地址(3) |
服务器名称 |
所属国家 |
| 208.68.38.162 |
? |
US |
| 198.199.120.136 |
198.199.120.136 |
US |
| 95.85.14.216 |
95.85.14.216 |
NL |
- 用户代理字符串
- Comodo-Webinspector-Crawler 2.1
- 首次出现
- 2014-05-27 21:38:12
- 最后出现
- 2014-05-29 21:00:33
- 遵循robots.txt
- 未知
- 来源
-
| IP地址(6) |
服务器名称 |
所属国家 |
| 192.241.128.134 |
? |
US |
| 128.199.200.73 |
? |
SG |
| 188.226.237.128 |
zabbix-backend.idealscorp.com |
NL |
| 192.241.156.76 |
? |
US |
| 188.226.233.97 |
? |
NL |
| 192.241.156.47 |
? |
US |
- 用户代理字符串
- Comodo Spider 1.2
- 首次出现
- 2014-12-28 07:19:20
- 最后出现
- 2014-01-31 14:41:11
- 遵循robots.txt
- 未知
- 来源
-
| IP地址(4) |
服务器名称 |
所属国家 |
| 107.170.247.80 |
hurtado.alohatone.com |
US |
| 107.170.247.98 |
dev1.rushon.com |
US |
| 107.170.28.30 |
mail.exratione.com |
US |
| 178.255.80.147 |
reth1-252.dwdcccsg.dela.clif.dc.ccanet.co.uk |
GB |
- 用户代理字符串
- Comodo Spider 1.1
- 首次出现
- 2014-01-12 13:27:09
- 最后出现
- 2014-01-12 13:27:09
- 遵循robots.txt
- 未知
- 来源
-
| IP地址(1) |
服务器名称 |
所属国家 |
| 178.255.80.147 |
reth1-252.dwdcccsg.dela.clif.dc.ccanet.co.uk |
GB |
- 用户代理字符串
- Comodo-Certificates-Spider
- 首次出现
- 2009-12-16 12:14:54
- 最后出现
- 2013-08-26 16:39:59
- 遵循robots.txt
- 未知
- 来源
-
| IP地址(5) |
服务器名称 |
所属国家 |
| 178.255.87.241 |
no-dns-yet.ccanet.co.uk |
GB |
| 91.209.196.76 |
search.comodo.com |
GB |
| 91.212.12.58 |
mkt-search.comodo.com |
GB |
| 91.212.12.60 |
search.comodo.com |
GB |
- 用户代理字符串
- COMODOspider/Nutch-1.0
- 首次出现
- 2010-01-19 18:19:58
- 最后出现
- 2011-09-28 06:19:07
- 遵循robots.txt
- 未知
- 来源
-
| IP地址(4) |
服务器名称 |
所属国家 |
| 178.255.87.241 |
no-dns-yet.ccanet.co.uk |
GB |
| 91.212.12.60 |
search.comodo.com |
GB |
| 91.209.196.76 |
search.comodo.com |
GB |
| 91.212.12.59 |
search.comodo.com |
GB |
| 114.255.52.162 |
114.255.52.162 |
AU |
- 用户代理字符串
- COMODOspider/Nutch-1.0
- 首次出现
- 2010-01-19 18:19:58
- 最后出现
- 2011-09-28 06:19:07
- 遵循robots.txt
- 未知
- 来源
-
| IP地址(4) |
服务器名称 |
所属国家 |
| 91.209.196.76 |
search.comodo.com |
GB |
| 91.212.12.59 |
search.comodo.com |
GB |
| 91.212.12.60 |
search.comodo.com |
GB |
| 114.255.52.162 |
114.255.52.162 |
AU |
访问控制
了解如何控制COMODOSpider访问权限，避免COMODOSpider抓取行为不当。
是否拦截COMODOSpider？
对于未知蜘蛛或者爬虫。它的用途对网站来说可能是好的，也可能是坏的，这取决于它是什么。所以说，这需要站长进一步分析判断这些尚不明确的爬虫行为，再作最终决定。
但，根据以往的经验，未声明行为目的及未命名的蜘蛛爬虫，通常都有不可告人的秘密，我们理应对其行为进行控制，比如拦截。
通过Robots.txt拦截
您可以通过在网站的 robots.txt 中设置用户代理访问规则来屏蔽 COMODOSpider 或限制其访问权限。我们建议安装 Spider Analyser
插件，以检查它是否真正遵循这些规则。
# robots.txt
# 下列代码一般情况可以拦截该代理
User-agent: COMODOSpider
Disallow: /
您无需手动执行此操作，可通过我们的 Wordpress 插件 Spider Analyser 来拦截不必要的蜘蛛或者爬虫。
