k6 crawler

基本信息

k6 crawler的基本信息如下表。但部分不是很规范的蜘蛛和爬虫，可能存在信息不明的情况。

用户代理

关于k6 crawler蜘蛛或者爬虫的用户代理字符串，IP地址和服务器，所在地等信息如下表格所示：

来源

IP地址(21)	服务器名称	所属国家
34.229.190.176	ec2-34-229-190-176.compute-1.amazonaws.com	US
34.201.102.58	ec2-34-201-102-58.compute-1.amazonaws.com	US
3.80.185.120	ec2-3-80-185-120.compute-1.amazonaws.com	US
3.90.21.167	ec2-3-90-21-167.compute-1.amazonaws.com	US
34.200.213.12	ec2-34-200-213-12.compute-1.amazonaws.com	US
3.216.78.118	ec2-3-216-78-118.compute-1.amazonaws.com	US
3.112.74.136	ec2-3-112-74-136.ap-northeast-1.compute.amazonaws.com	JP
35.180.40.112	ec2-35-180-40-112.eu-west-3.compute.amazonaws.com	FR
18.163.112.38	ec2-18-163-112-38.ap-east-1.compute.amazonaws.com	HK
18.163.33.239	ec2-18-163-33-239.ap-east-1.compute.amazonaws.com	HK
54.208.69.183	ec2-54-208-69-183.compute-1.amazonaws.com	US

访问控制

了解如何控制k6 crawler访问权限，避免k6 crawler抓取行为不当。

一般不拦截。此类爬虫通常由诸如Pingdom, Gtmetrix和PageSpeed Insights等网站测速工具发起，且一般为网站所有者所为。

您可以通过在网站的 robots.txt 中设置用户代理访问规则来屏蔽 k6 crawler 或限制其访问权限。我们建议安装 Spider Analyser 插件，以检查它是否真正遵循这些规则。

# robots.txt

# 下列代码一般情况可以拦截该代理

User-agent: k6 crawler

Disallow: /

# robots.txt # 下列代码一般情况可以拦截该代理 User-agent: k6 crawler Disallow: /

# robots.txt
# 下列代码一般情况可以拦截该代理
User-agent: k6 crawler
Disallow: /

您无需手动执行此操作，可通过我们的 Wordpress 插件 Spider Analyser 来拦截不必要的蜘蛛或者爬虫。

更多信息

k6是一个开源工具和云服务，使开发人员和QA工程师能够轻松进行负载测试。

k6 crawler是k6的网站爬虫，用于执行网站负载测试任务，所以一般情况下只有您使用k6对您的网站执行测试任务的时候，你才有可能在服务器日志看到k6 crawler。

基本信息