Google Page Speed Insights

Google Page Speed Insights蜘蛛/爬虫属于速度检测类型,由Google Inc.开发运行。您可以继续阅读下方信息,以深入了解Google Page Speed Insights基本信息,用户代理和访问控制等。

基本信息

Google Page Speed Insights的基本信息如下表。但部分不是很规范的蜘蛛和爬虫,可能存在信息不明的情况。
蜘蛛/爬虫名称
Google Page Speed Insights
类型
速度检测
开发商
Google Inc.
当前状态
无效

用户代理

关于Google Page Speed Insights蜘蛛或者爬虫的用户代理字符串,IP地址和服务器,所在地等信息如下表格所示:
Google Page Speed Insights
用户代理字符串
Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36 (KHTML, like Gecko; Google Page Speed Insights) Chrome/41.0.2272.118 Safari/537.36
首次出现
2017-05-25 14:50:24
最后出现
2021-03-26 11:31:02
遵循robots.txt
来源
IP地址(235) 服务器名称 所属国家
66.102.8.25 google-proxy-66-102-8-25.google.com US
66.102.8.27 google-proxy-66-102-8-27.google.com US
66.102.8.29 google-proxy-66-102-8-29.google.com US
66.102.8.105 google-proxy-66-102-8-105.google.com US
66.102.8.107 google-proxy-66-102-8-107.google.com US
66.102.8.103 google-proxy-66-102-8-103.google.com US
66.102.6.62 google-proxy-66-102-6-62.google.com US
64.233.172.186 google-proxy-64-233-172-186.google.com US
64.233.172.188 google-proxy-64-233-172-188.google.com US
64.233.172.190 google-proxy-64-233-172-190.google.com US
用户代理字符串
Mozilla/5.0 (Linux; Android 6.0.1; Nexus 5X Build/MMB29P) AppleWebKit/537.36 (KHTML, like Gecko; Google Page Speed Insights) Chrome/27.0.1453 Mobile Safari/537.36
首次出现
2016-04-20 16:13:20
最后出现
2019-04-05 17:13:08
遵循robots.txt
来源
IP地址(93) 服务器名称 所属国家
66.249.93.149 google-proxy-66-249-93-149.google.com US
66.249.93.138 google-proxy-66-249-93-138.google.com US
66.249.93.140 google-proxy-66-249-93-140.google.com US
66.249.93.142 google-proxy-66-249-93-142.google.com US
66.249.93.148 google-proxy-66-249-93-148.google.com US
66.249.93.150 google-proxy-66-249-93-150.google.com US
66.249.93.75 google-proxy-66-249-93-75.google.com BE
66.249.93.77 google-proxy-66-249-93-77.google.com BE
66.249.93.79 google-proxy-66-249-93-79.google.com BE
66.249.93.132 google-proxy-66-249-93-132.google.com US
用户代理字符串
Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36 (KHTML, like Gecko; Google Page Speed Insights) Chrome/27.0.1453 Safari/537.36
首次出现
2015-03-23 21:45:00
最后出现
2017-11-06 08:39:45
遵循robots.txt
来源
IP地址(149) 服务器名称 所属国家
66.249.88.128 google-proxy-66-249-88-128.google.com US
66.249.93.142 google-proxy-66-249-93-142.google.com US
66.249.93.140 google-proxy-66-249-93-140.google.com US
66.249.93.146 google-proxy-66-249-93-146.google.com US
66.249.93.147 google-proxy-66-249-93-147.google.com US
66.102.8.205 google-proxy-66-102-8-205.google.com US
66.102.8.207 google-proxy-66-102-8-207.google.com US
66.102.8.209 google-proxy-66-102-8-209.google.com US
66.249.93.138 google-proxy-66-249-93-138.google.com US
66.249.93.150 google-proxy-66-249-93-150.google.com US
用户代理字符串
Mozilla/5.0 (iPhone; CPU iPhone OS 8_3 like Mac OS X) AppleWebKit/537.36 (KHTML, like Gecko; Google Page Speed Insights) Version/8.0 Mobile/12F70 Safari/600.1.4
首次出现
2015-09-04 10:37:22
最后出现
2016-04-19 17:38:28
遵循robots.txt
来源
IP地址(33) 服务器名称 所属国家
66.249.93.179 google-proxy-66-249-93-179.google.com US
66.249.93.181 google-proxy-66-249-93-181.google.com US
66.249.93.177 google-proxy-66-249-93-177.google.com US
66.249.93.97 google-proxy-66-249-93-97.google.com KR
66.249.93.127 google-proxy-66-249-93-127.google.com US
66.249.93.123 google-proxy-66-249-93-123.google.com US
66.249.93.67 google-proxy-66-249-93-67.google.com US
66.249.93.120 google-proxy-66-249-93-120.google.com US
66.249.93.116 google-proxy-66-249-93-116.google.com US
66.102.8.193 google-proxy-66-102-8-193.google.com US
用户代理字符串
Mozilla/5.0 (iPhone; CPU iPhone OS 6_0_1 like Mac OS X) AppleWebKit/537.36 (KHTML, like Gecko; Google Page Speed Insights) Version/6.0 Mobile/10A525 Safari/8536.25
首次出现
2015-03-23 21:50:06
最后出现
2015-08-13 16:25:52
遵循robots.txt
来源
IP地址(7) 服务器名称 所属国家
66.249.93.251 google-proxy-66-249-93-251.google.com US
66.102.6.145 google-proxy-66-102-6-145.google.com US
66.102.6.163 google-proxy-66-102-6-163.google.com US
66.249.93.245 google-proxy-66-249-93-245.google.com US
66.249.93.248 google-proxy-66-249-93-248.google.com US
用户代理字符串
Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.4 (KHTML, like Gecko; Google Page Speed Insights) Chrome/22.0.1229 Safari/537.4
首次出现
2013-05-13 04:06:59
最后出现
2013-12-04 20:32:05
遵循robots.txt
来源
IP地址(2) 服务器名称 所属国家
159.223.192.50 159.223.192.50 US
66.249.82.90 google-proxy-66-249-82-90.google.com TW
66.249.93.103 google-proxy-66-249-93-103.google.com US
66.249.93.105 google-proxy-66-249-93-105.google.com KR
66.249.82.89 google-proxy-66-249-82-89.google.com TW
66.102.8.36 google-proxy-66-102-8-36.google.com US
66.249.93.100 google-proxy-66-249-93-100.google.com US
64.233.172.103 google-proxy-64-233-172-103.google.com US
66.249.93.89 google-proxy-66-249-93-89.google.com US
66.249.93.91 google-proxy-66-249-93-91.google.com US
66.249.93.93 google-proxy-66-249-93-93.google.com BE
66.102.8.25 google-proxy-66-102-8-25.google.com US
66.102.8.27 google-proxy-66-102-8-27.google.com US
66.102.8.29 google-proxy-66-102-8-29.google.com US
66.102.8.105 google-proxy-66-102-8-105.google.com US
66.102.8.107 google-proxy-66-102-8-107.google.com US
66.102.8.103 google-proxy-66-102-8-103.google.com US
66.102.6.62 google-proxy-66-102-6-62.google.com US
64.233.172.186 google-proxy-64-233-172-186.google.com US
64.233.172.188 google-proxy-64-233-172-188.google.com US
64.233.172.190 google-proxy-64-233-172-190.google.com US
66.249.93.149 google-proxy-66-249-93-149.google.com US
66.249.93.138 google-proxy-66-249-93-138.google.com US
66.249.93.140 google-proxy-66-249-93-140.google.com US
66.249.93.142 google-proxy-66-249-93-142.google.com US
66.249.93.148 google-proxy-66-249-93-148.google.com US
66.249.93.150 google-proxy-66-249-93-150.google.com US
66.249.93.75 google-proxy-66-249-93-75.google.com BE
66.249.93.77 google-proxy-66-249-93-77.google.com BE
66.249.93.79 google-proxy-66-249-93-79.google.com BE
66.249.93.132 google-proxy-66-249-93-132.google.com US
66.249.88.128 google-proxy-66-249-88-128.google.com US
66.249.93.146 google-proxy-66-249-93-146.google.com US
66.249.93.147 google-proxy-66-249-93-147.google.com US
66.102.8.207 google-proxy-66-102-8-207.google.com US
66.102.8.209 google-proxy-66-102-8-209.google.com US
66.102.8.205 google-proxy-66-102-8-205.google.com US
66.249.93.179 google-proxy-66-249-93-179.google.com US
66.249.93.181 google-proxy-66-249-93-181.google.com US
66.249.93.177 google-proxy-66-249-93-177.google.com US
66.249.93.67 google-proxy-66-249-93-67.google.com US
66.249.93.97 google-proxy-66-249-93-97.google.com US
66.249.93.123 google-proxy-66-249-93-123.google.com US
66.249.93.127 google-proxy-66-249-93-127.google.com US
66.249.93.120 google-proxy-66-249-93-120.google.com US
66.249.93.116 google-proxy-66-249-93-116.google.com US
66.102.8.193 google-proxy-66-102-8-193.google.com US
66.102.6.145 google-proxy-66-102-6-145.google.com US
66.102.6.163 google-proxy-66-102-6-163.google.com US
66.249.93.245 google-proxy-66-249-93-245.google.com US
66.249.93.248 google-proxy-66-249-93-248.google.com US
66.249.93.251 google-proxy-66-249-93-251.google.com US
66.249.93.193 google-proxy-66-249-93-193.google.com US
66.249.82.96 google-proxy-66-249-82-96.google.com US
78.153.140.223 hostglobal.plus GB
用户代理字符串
Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.4 (KHTML, like Gecko; Google Page Speed Insights) Chrome/22.0.1229 Safari/537.4
首次出现
2013-05-13 04:06:59
最后出现
2013-12-04 20:32:05
遵循robots.txt
未知
来源
IP地址(2) 服务器名称 所属国家
66.249.93.193 google-proxy-66-249-93-193.google.com US
66.249.82.96 google-proxy-66-249-82-96.google.com US

访问控制

了解如何控制Google Page Speed Insights访问权限,避免Google Page Speed Insights抓取行为不当。

是否拦截Google Page Speed Insights?

一般不拦截。此类爬虫通常由诸如Pingdom, Gtmetrix和PageSpeed Insights等网站测速工具发起,且一般为网站所有者所为。

通过Robots.txt拦截

您可以通过在网站的 robots.txt 中设置用户代理访问规则来屏蔽 Google Page Speed Insights 或限制其访问权限。我们建议安装 Spider Analyser 插件,以检查它是否真正遵循这些规则。

	# robots.txt
	# 下列代码一般情况可以拦截该代理
	
	User-agent: Google Page Speed Insights
	Disallow: /

您无需手动执行此操作,可通过我们的 Wordpress 插件 Spider Analyser 来拦截不必要的蜘蛛或者爬虫。

更多信息

您可以通过谷歌的在线工具获取 PageSpeed 得分并使用 PageSpeed 建议提高您网站的加载速度。

当您使用Google Page Speed Insights执行任何网站速度测试时,就会通过网络爬虫“Google Page Speed Insights”对您的网站进行模拟访问测试,并根据PageSpeed Insights标准进行评分。

如果您希望您的网站获得较好的PageSpeed Insights的评分,可以参考我们写的教程

常见蜘蛛/爬虫

Common Spiders
Pagespeed
Pagespeed蜘蛛/爬虫属于速度检测类型,由Alexander Muller开发运行。您可以继续阅读下方信息,以深入了解Pagespeed基本信息,用户代理和访问控制等。
InternetMeasurement
InternetMeasurement蜘蛛/爬虫属于速度检测类型,由internet-measurement.com开发运行。您可以继续阅读下方信息,以深入了解InternetMeasurement基本信息,用户代理和访问控制等。
KeyCDN bot
KeyCDN bot蜘蛛/爬虫属于工具类型,由proinity GmbH开发运行。您可以继续阅读下方信息,以深入了解KeyCDN bot基本信息,用户代理和访问控制等。
Pingdom.com bot
Pingdom.com bot蜘蛛/爬虫属于速度检测类型,由SolarWinds Worldwide, LLC开发运行。您可以继续阅读下方信息,以深入了解Pingdom.com bot基本信息,用户代理和访问控制等。
k6 crawler
k6 crawler蜘蛛/爬虫属于速度检测类型,由Load Impact AB.开发运行。您可以继续阅读下方信息,以深入了解k6 crawler基本信息,用户代理和访问控制等。
GTmetrix
GTmetrix蜘蛛/爬虫属于速度检测类型,由Gossamer Threads Inc.开发运行。您可以继续阅读下方信息,以深入了解GTmetrix基本信息,用户代理和访问控制等。
Google Page Speed Insights
Google Page Speed Insights蜘蛛/爬虫属于速度检测类型,由Google Inc.开发运行。您可以继续阅读下方信息,以深入了解Google Page Speed Insights基本信息,用户代理和访问控制等。
Neustar WPM
Neustar WPM蜘蛛/爬虫属于速度检测类型,由Neustar, Inc.开发运行。您可以继续阅读下方信息,以深入了解Neustar WPM基本信息,用户代理和访问控制等。

相关文章

Related Articles