Google Page Speed Insights

Google Page Speed Insights蜘蛛/爬虫属于速度检测类型,由Google Inc.开发运行。您可以继续阅读下方信息,以深入了解Google Page Speed Insights基本信息,用户代理和访问控制等。

基本信息

Google Page Speed Insights的基本信息如下表。但部分不是很规范的蜘蛛和爬虫,可能存在信息不明的情况。
蜘蛛/爬虫名称
Google Page Speed Insights
类型
速度检测
开发商
Google Inc.
当前状态
无效

用户代理

关于Google Page Speed Insights蜘蛛或者爬虫的用户代理字符串,IP地址和服务器,所在地等信息如下表格所示:
Google Page Speed Insights
用户代理字符串
Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36 (KHTML, like Gecko; Google Page Speed Insights) Chrome/41.0.2272.118 Safari/537.36
首次出现
2017-05-25 14:50:24
最后出现
2021-03-26 11:31:02
遵循robots.txt
来源
IP地址(235) 服务器名称 所属国家
66.102.8.25 google-proxy-66-102-8-25.google.com US
66.102.8.27 google-proxy-66-102-8-27.google.com US
66.102.8.29 google-proxy-66-102-8-29.google.com US
66.102.8.105 google-proxy-66-102-8-105.google.com US
66.102.8.107 google-proxy-66-102-8-107.google.com US
66.102.8.103 google-proxy-66-102-8-103.google.com US
66.102.6.62 google-proxy-66-102-6-62.google.com US
64.233.172.186 google-proxy-64-233-172-186.google.com US
64.233.172.188 google-proxy-64-233-172-188.google.com US
64.233.172.190 google-proxy-64-233-172-190.google.com US
用户代理字符串
Mozilla/5.0 (Linux; Android 6.0.1; Nexus 5X Build/MMB29P) AppleWebKit/537.36 (KHTML, like Gecko; Google Page Speed Insights) Chrome/27.0.1453 Mobile Safari/537.36
首次出现
2016-04-20 16:13:20
最后出现
2019-04-05 17:13:08
遵循robots.txt
来源
IP地址(93) 服务器名称 所属国家
66.249.93.149 google-proxy-66-249-93-149.google.com US
66.249.93.138 google-proxy-66-249-93-138.google.com US
66.249.93.140 google-proxy-66-249-93-140.google.com US
66.249.93.142 google-proxy-66-249-93-142.google.com US
66.249.93.148 google-proxy-66-249-93-148.google.com US
66.249.93.150 google-proxy-66-249-93-150.google.com US
66.249.93.75 google-proxy-66-249-93-75.google.com BE
66.249.93.77 google-proxy-66-249-93-77.google.com BE
66.249.93.79 google-proxy-66-249-93-79.google.com BE
66.249.93.132 google-proxy-66-249-93-132.google.com US
用户代理字符串
Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36 (KHTML, like Gecko; Google Page Speed Insights) Chrome/27.0.1453 Safari/537.36
首次出现
2015-03-23 21:45:00
最后出现
2017-11-06 08:39:45
遵循robots.txt
来源
IP地址(149) 服务器名称 所属国家
66.249.88.128 google-proxy-66-249-88-128.google.com US
66.249.93.142 google-proxy-66-249-93-142.google.com US
66.249.93.140 google-proxy-66-249-93-140.google.com US
66.249.93.146 google-proxy-66-249-93-146.google.com US
66.249.93.147 google-proxy-66-249-93-147.google.com US
66.102.8.205 google-proxy-66-102-8-205.google.com US
66.102.8.207 google-proxy-66-102-8-207.google.com US
66.102.8.209 google-proxy-66-102-8-209.google.com US
66.249.93.138 google-proxy-66-249-93-138.google.com US
66.249.93.150 google-proxy-66-249-93-150.google.com US
用户代理字符串
Mozilla/5.0 (iPhone; CPU iPhone OS 8_3 like Mac OS X) AppleWebKit/537.36 (KHTML, like Gecko; Google Page Speed Insights) Version/8.0 Mobile/12F70 Safari/600.1.4
首次出现
2015-09-04 10:37:22
最后出现
2016-04-19 17:38:28
遵循robots.txt
来源
IP地址(33) 服务器名称 所属国家
66.249.93.179 google-proxy-66-249-93-179.google.com US
66.249.93.181 google-proxy-66-249-93-181.google.com US
66.249.93.177 google-proxy-66-249-93-177.google.com US
66.249.93.97 google-proxy-66-249-93-97.google.com KR
66.249.93.127 google-proxy-66-249-93-127.google.com US
66.249.93.123 google-proxy-66-249-93-123.google.com US
66.249.93.67 google-proxy-66-249-93-67.google.com US
66.249.93.120 google-proxy-66-249-93-120.google.com US
66.249.93.116 google-proxy-66-249-93-116.google.com US
66.102.8.193 google-proxy-66-102-8-193.google.com US
用户代理字符串
Mozilla/5.0 (iPhone; CPU iPhone OS 6_0_1 like Mac OS X) AppleWebKit/537.36 (KHTML, like Gecko; Google Page Speed Insights) Version/6.0 Mobile/10A525 Safari/8536.25
首次出现
2015-03-23 21:50:06
最后出现
2015-08-13 16:25:52
遵循robots.txt
来源
IP地址(7) 服务器名称 所属国家
66.249.93.251 google-proxy-66-249-93-251.google.com US
66.102.6.145 google-proxy-66-102-6-145.google.com US
66.102.6.163 google-proxy-66-102-6-163.google.com US
66.249.93.245 google-proxy-66-249-93-245.google.com US
66.249.93.248 google-proxy-66-249-93-248.google.com US
用户代理字符串
Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.4 (KHTML, like Gecko; Google Page Speed Insights) Chrome/22.0.1229 Safari/537.4
首次出现
2013-05-13 04:06:59
最后出现
2013-12-04 20:32:05
遵循robots.txt
来源
IP地址(2) 服务器名称 所属国家
159.223.192.50 159.223.192.50 US
66.249.82.90 google-proxy-66-249-82-90.google.com TW
66.249.93.103 google-proxy-66-249-93-103.google.com US
66.249.93.105 google-proxy-66-249-93-105.google.com KR
66.249.82.89 google-proxy-66-249-82-89.google.com TW
66.102.8.36 google-proxy-66-102-8-36.google.com US
66.249.93.100 google-proxy-66-249-93-100.google.com US
64.233.172.103 google-proxy-64-233-172-103.google.com US
66.249.93.89 google-proxy-66-249-93-89.google.com US
66.249.93.91 google-proxy-66-249-93-91.google.com US
66.249.93.93 google-proxy-66-249-93-93.google.com BE
66.102.8.25 google-proxy-66-102-8-25.google.com US
66.102.8.27 google-proxy-66-102-8-27.google.com US
66.102.8.29 google-proxy-66-102-8-29.google.com US
66.102.8.105 google-proxy-66-102-8-105.google.com US
66.102.8.107 google-proxy-66-102-8-107.google.com US
66.102.8.103 google-proxy-66-102-8-103.google.com US
66.102.6.62 google-proxy-66-102-6-62.google.com US
64.233.172.186 google-proxy-64-233-172-186.google.com US
64.233.172.188 google-proxy-64-233-172-188.google.com US
64.233.172.190 google-proxy-64-233-172-190.google.com US
66.249.93.149 google-proxy-66-249-93-149.google.com US
66.249.93.138 google-proxy-66-249-93-138.google.com US
66.249.93.140 google-proxy-66-249-93-140.google.com US
66.249.93.142 google-proxy-66-249-93-142.google.com US
66.249.93.148 google-proxy-66-249-93-148.google.com US
66.249.93.150 google-proxy-66-249-93-150.google.com US
66.249.93.75 google-proxy-66-249-93-75.google.com BE
66.249.93.77 google-proxy-66-249-93-77.google.com BE
66.249.93.79 google-proxy-66-249-93-79.google.com BE
66.249.93.132 google-proxy-66-249-93-132.google.com US
66.249.88.128 google-proxy-66-249-88-128.google.com US
66.249.93.146 google-proxy-66-249-93-146.google.com US
66.249.93.147 google-proxy-66-249-93-147.google.com US
66.102.8.207 google-proxy-66-102-8-207.google.com US
66.102.8.209 google-proxy-66-102-8-209.google.com US
66.102.8.205 google-proxy-66-102-8-205.google.com US
66.249.93.179 google-proxy-66-249-93-179.google.com US
66.249.93.181 google-proxy-66-249-93-181.google.com US
66.249.93.177 google-proxy-66-249-93-177.google.com US
66.249.93.67 google-proxy-66-249-93-67.google.com US
66.249.93.97 google-proxy-66-249-93-97.google.com US
66.249.93.123 google-proxy-66-249-93-123.google.com US
66.249.93.127 google-proxy-66-249-93-127.google.com US
66.249.93.120 google-proxy-66-249-93-120.google.com US
66.249.93.116 google-proxy-66-249-93-116.google.com US
66.102.8.193 google-proxy-66-102-8-193.google.com US
66.102.6.145 google-proxy-66-102-6-145.google.com US
66.102.6.163 google-proxy-66-102-6-163.google.com US
66.249.93.245 google-proxy-66-249-93-245.google.com US
66.249.93.248 google-proxy-66-249-93-248.google.com US
66.249.93.251 google-proxy-66-249-93-251.google.com US
66.249.93.193 google-proxy-66-249-93-193.google.com US
66.249.82.96 google-proxy-66-249-82-96.google.com US
78.153.140.223 hostglobal.plus GB
用户代理字符串
Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.4 (KHTML, like Gecko; Google Page Speed Insights) Chrome/22.0.1229 Safari/537.4
首次出现
2013-05-13 04:06:59
最后出现
2013-12-04 20:32:05
遵循robots.txt
未知
来源
IP地址(2) 服务器名称 所属国家
66.249.93.193 google-proxy-66-249-93-193.google.com US
66.249.82.96 google-proxy-66-249-82-96.google.com US

访问控制

了解如何控制Google Page Speed Insights访问权限,避免Google Page Speed Insights抓取行为不当。

是否拦截Google Page Speed Insights?

一般不拦截。此类爬虫通常由诸如Pingdom, Gtmetrix和PageSpeed Insights等网站测速工具发起,且一般为网站所有者所为。

通过Robots.txt拦截

您可以通过在网站的 robots.txt 中设置用户代理访问规则来屏蔽 Google Page Speed Insights 或限制其访问权限。我们建议安装 Spider Analyser 插件,以检查它是否真正遵循这些规则。

Plain text
Copy to clipboard
Open code in new window
EnlighterJS 3 Syntax Highlighter
# robots.txt
# 下列代码一般情况可以拦截该代理
User-agent: Google Page Speed Insights
Disallow: /
# robots.txt # 下列代码一般情况可以拦截该代理 User-agent: Google Page Speed Insights Disallow: /
# robots.txt
# 下列代码一般情况可以拦截该代理
User-agent: Google Page Speed Insights
Disallow: /

您无需手动执行此操作,可通过我们的 Wordpress 插件 Spider Analyser 来拦截不必要的蜘蛛或者爬虫。

更多信息

您可以通过谷歌的在线工具获取 PageSpeed 得分并使用 PageSpeed 建议提高您网站的加载速度。

当您使用Google Page Speed Insights执行任何网站速度测试时,就会通过网络爬虫“Google Page Speed Insights”对您的网站进行模拟访问测试,并根据PageSpeed Insights标准进行评分。

如果您希望您的网站获得较好的PageSpeed Insights的评分,可以参考我们写的教程

常见蜘蛛/爬虫

Common Spiders
Pagespeed
Pagespeed蜘蛛/爬虫属于速度检测类型,由Alexander Muller开发运行。您可以继续阅读下方信息,以深入了解Pagespeed基本信息,用户代理和访问控制等。
InternetMeasurement
InternetMeasurement蜘蛛/爬虫属于速度检测类型,由internet-measurement.com开发运行。您可以继续阅读下方信息,以深入了解InternetMeasurement基本信息,用户代理和访问控制等。
KeyCDN bot
KeyCDN bot蜘蛛/爬虫属于速度检测类型,由proinity GmbH开发运行。您可以继续阅读下方信息,以深入了解KeyCDN bot基本信息,用户代理和访问控制等。
Pingdom.com bot
Pingdom.com bot蜘蛛/爬虫属于速度检测类型,由SolarWinds Worldwide, LLC开发运行。您可以继续阅读下方信息,以深入了解Pingdom.com bot基本信息,用户代理和访问控制等。
k6 crawler
k6 crawler蜘蛛/爬虫属于速度检测类型,由Load Impact AB.开发运行。您可以继续阅读下方信息,以深入了解k6 crawler基本信息,用户代理和访问控制等。
GTmetrix
GTmetrix蜘蛛/爬虫属于速度检测类型,由Gossamer Threads Inc.开发运行。您可以继续阅读下方信息,以深入了解GTmetrix基本信息,用户代理和访问控制等。
Google Page Speed Insights
Google Page Speed Insights蜘蛛/爬虫属于速度检测类型,由Google Inc.开发运行。您可以继续阅读下方信息,以深入了解Google Page Speed Insights基本信息,用户代理和访问控制等。
Neustar WPM
Neustar WPM蜘蛛/爬虫属于速度检测类型,由Neustar, Inc.开发运行。您可以继续阅读下方信息,以深入了解Neustar WPM基本信息,用户代理和访问控制等。

相关文章

Related Articles