inetdex bot

inetdex bot蜘蛛/爬虫属于搜索引擎类型,由Cyberserver Ltd.开发运行。您可以继续阅读下方信息,以深入了解inetdex bot基本信息,用户代理和访问控制等。

基本信息

inetdex bot的基本信息如下表。但部分不是很规范的蜘蛛和爬虫,可能存在信息不明的情况。
蜘蛛/爬虫名称
inetdex bot
类型
搜索引擎
开发商
Cyberserver Ltd.
当前状态
活动

用户代理

关于inetdex bot蜘蛛或者爬虫的用户代理字符串,IP地址和服务器,所在地等信息如下表格所示:
INETDEX-BOT/2.0
用户代理字符串
INETDEX-BOT/2.0 (http://www.inetdex.com)
首次出现
2024-07-13 16:22:24
最后出现
2024-07-13 16:22:29
遵循robots.txt
未知
来源
IP地址(1) 服务器名称 所属国家
51.89.128.250 ip250.ip-51-89-128.eu GB
158.69.254.117 bot130.inetdex.com CA
158.69.116.202 bot240.inetdex.com CA
158.69.118.54 bot280.inetdex.com CA
158.69.55.30 bot230.inetdex.com CA
192.95.30.38 bot180.inetdex.com CA
158.69.250.184 bot110.inetdex.com CA
158.69.254.110 bot100.inetdex.com CA
158.69.125.172 bot290.inetdex.com CA
167.114.158.90 bot270.inetdex.com CA
167.114.119.238 bot140.inetdex.com CA
用户代理字符串
INetBot/2.0 (http://www.inetdex.com; bot@inetdex.com)
首次出现
2024-04-07 06:29:52
最后出现
2024-04-07 13:01:58
遵循robots.txt
未知
来源
IP地址(1) 服务器名称 所属国家
145.239.255.241 ns3102664.ip-145-239-255.eu FR
用户代理字符串
INETDEX-BOT/1.5 (Mozilla/5.0 (Search Engine Bot); https://inetdex.com/; info at inetdex dot com)
首次出现
2022-05-31 22:12:06
最后出现
2022-06-12 14:51:14
遵循robots.txt
未知
来源
IP地址(1) 服务器名称 所属国家
51.75.241.40 srv-eu03.securelinux.net FR
用户代理字符串
INETDEX-BOT/1.5 (Mozilla/5.0; Search Engine Bot; https://inetdex.com/; info at inetdex dot com)
首次出现
2022-05-29 04:02:10
最后出现
2022-06-09 13:40:51
遵循robots.txt
未知
来源
IP地址(1) 服务器名称 所属国家
51.75.241.40 srv-eu03.securelinux.net FR
用户代理字符串
INETDEX-BOT/1.5 (Mozilla/5.0 (compatible; indexing for WebSearchEngine.org); https://inetdex.com/; info at inetdex dot com)
首次出现
2022-05-18 03:55:58
最后出现
2022-05-18 05:21:33
遵循robots.txt
未知
来源
IP地址(1) 服务器名称 所属国家
51.75.241.40 srv-eu03.securelinux.net FR
用户代理字符串
INETDEX-BOT/1.5 (Mozilla/5.0 (Crawling for WebSearchEngine.org); https://inetdex.com/; info at inetdex dot com)
首次出现
2022-05-17 23:25:05
最后出现
2022-05-17 23:25:13
遵循robots.txt
未知
来源
IP地址(1) 服务器名称 所属国家
51.75.241.40 srv-eu03.securelinux.net FR
用户代理字符串
INETDEX-BOT/1.5 (Mozilla/5.0; https://inetdex.com/; bot at inetdex dot com)
首次出现
2022-03-12 12:50:04
最后出现
2022-03-12 12:50:04
遵循robots.txt
来源
IP地址(1) 服务器名称 所属国家
51.75.241.40 srv-eu03.securelinux.net FR
168.119.91.226 static.226.91.119.168.clients.your-server.de DE
217.182.198.226 srv-eu49.securelinux.net FR
37.187.112.105 srv-eu09.securelinux.net FR
51.75.145.235 srv-eu04.securelinux.net FR
5.39.76.40 srv-eu33.securelinux.net FR
37.187.2.18 srv-eu07.securelinux.net FR
5.196.89.81 srv-eu02.securelinux.net FR
5.196.70.229 srv-eu01.securelinux.net FR
51.68.204.213 srv-uk08.securelinux.net FR
145.239.206.184 srv-uk07.securelinux.uk FR
用户代理字符串
INETDEX-BOT/1.5 (Mozilla/5.0; https://inetdex.com/; bot at inetdex dot com)
首次出现
2022-03-12 12:50:04
最后出现
2022-03-12 12:50:04
遵循robots.txt
未知
来源
IP地址(1) 服务器名称 所属国家
168.119.91.226 static.226.91.119.168.clients.your-server.de ?
用户代理字符串
INETDEX-BOT/1.4 (https://inetdex.com)
首次出现
2022-01-07 14:09:28
最后出现
2022-01-18 16:57:07
遵循robots.txt
未知
来源
IP地址(0) 服务器名称 所属国家
168.119.91.226 static.226.91.119.168.clients.your-server.de DE
51.75.241.40 srv-eu03.securelinux.net FR
用户代理字符串
INETDEX-BOT/1.4 (https://inetdex.com)
首次出现
2022-01-07 14:09:28
最后出现
2022-01-18 16:57:07
遵循robots.txt
未知
来源
IP地址(1) 服务器名称 所属国家
51.75.241.40 ns3133170.ip-51-75-241.eu FR
用户代理字符串
INETDEX/1.4 (https://inetdex.com)
首次出现
2022-01-04 19:13:20
最后出现
2022-01-06 12:58:34
遵循robots.txt
未知
来源
IP地址(0) 服务器名称 所属国家
51.75.241.40 ns3133170.ip-51-75-241.eu FR
用户代理字符串
INETDEX BOT/INETDEX BOT 1.4 (https://inetdex.com)
首次出现
2021-09-18 13:54:40
最后出现
2021-10-24 18:40:18
遵循robots.txt
未知
来源
IP地址(1) 服务器名称 所属国家
176.9.91.101 ? DE
用户代理字符串
INETDEX BOT
首次出现
2021-08-20 16:00:48
最后出现
2021-08-20 16:00:48
遵循robots.txt
未知
来源
IP地址(1) 服务器名称 所属国家
176.9.91.101 static.101.91.9.176.clients.your-server.de DE
198.245.61.174 srv17.inetdex.com CA
用户代理字符串
INETDEX BOT
首次出现
2021-08-20 16:00:48
最后出现
2021-08-20 16:00:48
遵循robots.txt
未知
来源
IP地址(1) 服务器名称 所属国家
198.245.61.174 srv17.inetdex.com CA
用户代理字符串
inetdex/1.2 (http://www.inetdex.com; info@inetdex.com)
首次出现
2017-09-22 16:19:04
最后出现
2017-09-22 16:19:05
遵循robots.txt
未知
来源
IP地址(1) 服务器名称 所属国家
91.121.183.176 inetdex.com FR
用户代理字符串
inetdex/1.2 (http://www.inetdex.com; info@inetdex.com)
首次出现
2017-09-22 16:19:04
最后出现
2017-09-22 16:19:05
遵循robots.txt
未知
来源
IP地址(1) 服务器名称 所属国家
91.121.183.176 inetdex.com FR

访问控制

了解如何控制inetdex bot访问权限,避免inetdex bot抓取行为不当。

是否拦截inetdex bot?

一般不要拦截。搜索引擎爬虫为搜索引擎提供动力,是用户发现您网站的有效途径。事实上,拦截搜索引擎爬虫可能会严重减少网站的自然流量。

通过Robots.txt拦截

您可以通过在网站的 robots.txt 中设置用户代理访问规则来屏蔽 inetdex bot 或限制其访问权限。我们建议安装 Spider Analyser 插件,以检查它是否真正遵循这些规则。

	# robots.txt
	# 下列代码一般情况可以拦截该代理
	
	User-agent: inetdex bot
	Disallow: /

您无需手动执行此操作,可通过我们的 Wordpress 插件 Spider Analyser 来拦截不必要的蜘蛛或者爬虫。

更多信息

INETDEX-BOT(也被称为网络爬虫)访问网站并为各种类型的文件(HTML、PDF…)编制索引,然后你可以通过网络搜索引擎搜索这些文件。

INETDEX-BOT尊重Robots.txt文件。

请让INETDEX-BOT为您的网站编制索引,并使其对访问者开放。

在下面的页面中,你可以看到使用INETDEX-BOT索引的搜索引擎。

https://websearchengine.net/,由INETDEX驱动的搜索引擎

你可以给inetdex发邮件:info [at] inetdex [dot] com

常见蜘蛛/爬虫

Common Spiders

相关文章

Related Articles