Nicecrawler

Nicecrawler，由Unknown Author开发的爬虫类型蜘蛛/爬虫，当前为活动状态。

基本信息

Nicecrawler的基本信息如下表。但部分不是很规范的蜘蛛和爬虫，可能存在信息不明的情况。

蜘蛛/爬虫名称: Nicecrawler

开发商: Unknown Author

当前状态: 活动

用户代理

关于Nicecrawler蜘蛛或者爬虫的用户代理字符串，IP地址和服务器，所在地等信息如下表格所示：

请选择代理

用户代理字符串: Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; Nicecrawler/1.1; +http://www.nicecrawler.com/) Chrome/90.0.4430.97 Safari/537.36

类型: 爬虫

首次出现: 2021-06-30 23:50:18

最后出现: 2024-11-24 02:07:56

遵循robots.txt

IP地址: 12

来源

IP地址	服务器名称	所属国家
69.160.160.58	crawler-58.nicecrawler.com	US
69.160.160.56	crawler-56.nicecrawler.com	US
69.160.160.52	crawler-52.nicecrawler.com	US
69.160.160.51	crawler-51.nicecrawler.com	US
69.160.160.60	69.160.160.60	US
69.160.160.59	69.160.160.59	US
69.160.160.55	crawler-55.nicecrawler.com	US
69.160.160.53	crawler-53.nicecrawler.com	US
69.160.160.54	crawler-54.nicecrawler.com	US
69.160.160.61	69.160.160.61	US
69.160.160.50	crawler-50.nicecrawler.com	US
69.160.160.57	crawler-57.nicecrawler.com	US

访问控制

了解如何控制Nicecrawler访问权限，避免Nicecrawler抓取行为不当。

通过Robots.txt拦截

您可以通过在网站的 robots.txt 中设置用户代理访问规则来屏蔽 Nicecrawler 或限制其访问权限。我们建议安装 Spider Analyser 插件，以检查它是否真正遵循这些规则。

	# robots.txt
	# 下列代码一般情况可以拦截该代理
	
	User-agent: Nicecrawler
	Disallow: /

您无需手动执行此操作，可通过我们的 Wordpress 插件 Spider Analyser 来拦截不必要的蜘蛛或者爬虫。

常见蜘蛛/爬虫

Common Spiders

Irokez.cz monitoring

Irokez.cz monitoring，由Adam Haken开发的监控类型蜘蛛/爬虫，当前为活动状态。

Online Domain Tools

Online Domain Tools，由AITIS s.r.o.开发的监控、工具、链接检测、营销类型蜘蛛/爬虫，当前为活动状态。

cron-job.org

cron-job.org是一项免费服务，用于根据可定制的时间表获取网站/URL，例如，自动执行脚本控制的任务，如备份创建或后台计算。

uptime.bot

UptimeBot 是一个可操作的网站监控工具，非常适合 Slack。

MxToolbox bot

MxToolbox通过提供免费、快速和准确的网络诊断和查询工具来支持全球互联网运营。数以百万计的技术专业人员使用MxToolbox的工具来帮助诊断和解决广泛的基础设施问题。 MxToolbox提供的工

SeznamBot

Seznam.cz是一家捷克在线公司，除了其他服务外，还经营门户网站Seznam.cz，它是捷克数百万互联网用户的首选之地。这个门户网站与自己的独立网络搜索引擎search.seznam.cz紧密结合

Uptimia

Uptimia是一个网站监测工具，跟踪你的网站的正常运行时间、速度和性能，并对任何网站问题发出即时警报。

Google Cloud Monitoring

Google Cloud Monitoring可以帮助您直观了解您的应用和基础架构的性能、可用性和健康状况。

站长工具

我们为站长量身定做的高效工具集。

查看全部工具