MegaIndex MegaIndex

蜘蛛/爬虫名称
MegaIndex
开发商
ALTWeb Capital - http://altwebcapital.com/ (broken link)
当前状态
活动
  • MegaIndex.ru/2.0
  • MegaIndex.com/2.0
  • MegaIndex.ru/2.0
  • MegaIndex.ru/2.0
用户代理字符串
Mozilla/5.0 (compatible; MegaIndex.ru/2.0; http://megaindex.com/crawler)
类型
营销
首次出现
2018-05-03 23:11:37
最后出现
2020-04-11 00:33:23
遵循robots.txt
IP地址
1
来源
IP地址 服务器名称 所属国家
176.9.50.244 ? DE
用户代理字符串
Mozilla/5.0 (compatible; MegaIndex.com/2.0; +http://megaindex.com/crawler)
类型
营销
首次出现
2016-02-26 19:25:00
最后出现
2016-02-27 22:47:07
遵循robots.txt
IP地址
1
来源
IP地址 服务器名称 所属国家
144.76.92.36 static.36.92.76.144.clients.your-server.de DE
用户代理字符串
Mozilla/5.0 (compatible; MegaIndex.ru/2.0; +https://www.megaindex.ru/?tab=linkAnalyze)
类型
营销
首次出现
2015-04-06 21:50:00
最后出现
2015-04-20 11:39:26
遵循robots.txt
IP地址
4
来源
IP地址 服务器名称 所属国家
5.9.98.178 ? DE
176.9.137.17 ? DE
176.9.41.28 ? DE
144.76.60.98 ? DE
176.9.50.244 ? DE
78.46.161.81 ? DE
46.4.72.213 ? DE
176.9.146.74 ? DE
5.9.6.51 static.51.6.9.5.clients.your-server.de DE
5.9.98.130 static.130.98.9.5.clients.your-server.de DE
46.4.100.132 ? DE
95.216.33.150 static.150.33.216.95.clients.your-server.de FI
2a01:4f8:162:3089::2 2a01:4f8:162:3089::2 DE
148.251.236.167 ? DE
5.9.151.67 static.67.151.9.5.clients.your-server.de DE
88.198.48.46 static.88-198-48-46.clients.your-server.de DE
5.9.156.11 static.11.156.9.5.clients.your-server.de DE
176.9.58.227 static.227.58.9.176.clients.your-server.de DE
176.9.139.229 ? DE
用户代理字符串
Mozilla/5.0 (compatible; MegaIndex.ru/2.0; +https://www.megaindex.ru/?tab=linkAnalyze)
类型
营销
首次出现
2015-04-06 21:50:00
最后出现
2015-04-20 11:39:26
遵循robots.txt
IP地址
4
来源
IP地址 服务器名称 所属国家
148.251.236.167 ? DE
5.9.151.67 static.67.151.9.5.clients.your-server.de DE
88.198.48.46 static.88-198-48-46.clients.your-server.de DE
5.9.156.11 static.11.156.9.5.clients.your-server.de DE

MegaIndex为整个互联网的链接提供索引。对于网站管理员,索引器的逻辑支持robot.txt中 “User-agent:*”指令的限制。MegaIndex Crawler使用robot.txt中指定的Crawl-delay值。最大的允许值是不超过5s。

常见问题

FAQs
查看更多 >