startpage bot

startpage bot蜘蛛/爬虫属于类型,由Startpage BV开发运行。您可以继续阅读下方信息,以深入了解startpage bot基本信息,用户代理和访问控制等。

基本信息

startpage bot的基本信息如下表。但部分不是很规范的蜘蛛和爬虫,可能存在信息不明的情况。
蜘蛛/爬虫名称
startpage bot
类型
搜索引擎
开发商
Startpage BV
当前状态
活动

用户代理

关于startpage bot蜘蛛或者爬虫的用户代理字符串,IP地址和服务器,所在地等信息如下表格所示:
StartpagePrivateImageProxy/2.0
用户代理字符串
StartpagePrivateImageProxy/2.0 (https://www.startpage.com/; support@startpage.com) requests/2.23.0
首次出现
2021-12-13 20:53:25
最后出现
2022-02-21 16:48:51
遵循robots.txt
未知
来源
IP地址(3) 服务器名称 所属国家
213.144.233.251 rt233bb144-213-251.routit.net NL
37.0.86.2 rt86bb0-37-2.routit.net NL
64.71.175.150 s21.dmoz.ixquick.com US
213.144.233.249 rt233bb144-213-249.routit.net NL
37.0.86.10 rt86bb0-37-10.routit.net NL
213.144.233.248 rt233bb144-213-248.routit.net NL
37.0.86.14 rt86bb0-37-14.routit.net ?
64.71.175.203 64.71.175.203 US
37.0.86.54 rt86bb0-37-54.routit.net NL
213.144.235.195 rt235bb144-213-195.routit.net NL
34.243.123.118 ec2-34-243-123-118.eu-west-1.compute.amazonaws.com IE
37.0.81.241 rt81bb0-37-241.routit.net NL
64.71.134.103 64.71.134.103 US
64.71.134.15 64.71.134.15 US
37.0.86.46 rt86bb0-37-46.routit.net NL
64.71.175.165 s6.cobrand.ixquick.com US
213.144.235.196 rt235bb144-213-196.routit.net NL
37.0.81.236 rt81bb0-37-236.routit.net NL
213.144.233.254 rt233bb144-213-254.routit.net NL
37.0.86.38 rt86bb0-37-38.routit.net NL
64.71.134.41 64.71.134.41 CA
37.0.81.234 rt81bb0-37-234.routit.net NL
37.0.81.238 rt81bb0-37-238.routit.net NL
64.71.134.79 64.71.134.79 CA
35.162.23.156 ec2-35-162-23-156.us-west-2.compute.amazonaws.com US
67.63.61.231 67.63.61.231 US
67.63.61.241 67.63.61.241 US
37.0.81.237 rt81bb0-37-237.routit.net NL
用户代理字符串
StartpagePrivateImageProxy/2.0 (https://www.startpage.com/; support@startpage.com) requests/2.23.0
首次出现
2021-12-13 20:53:25
最后出现
2022-02-21 16:48:51
遵循robots.txt
未知
来源
IP地址(3) 服务器名称 所属国家
213.144.233.249 rt233bb144-213-249.routit.net NL
37.0.86.10 rt86bb0-37-10.routit.net NL
213.144.233.248 rt233bb144-213-248.routit.net NL
用户代理字符串
ixquick.com
首次出现
2020-12-28 03:42:31
最后出现
2021-01-11 09:08:16
遵循robots.txt
未知
来源
IP地址(2) 服务器名称 所属国家
3.138.173.82 ec2-3-138-173-82.us-east-2.compute.amazonaws.com US
173.209.56.26 odedi107164.mywhc.ca CA
151.236.55.168 151-236-55-168.static.as29550.net GB
151.236.55.216 bbb.linguebrescia.it GB
103.250.79.92 103.250.79.92 IN
用户代理字符串
Ixquick.com
首次出现
2019-09-24 00:14:23
最后出现
2019-10-28 18:37:37
遵循robots.txt
未知
来源
IP地址(2) 服务器名称 所属国家
151.236.55.168 151-236-55-168.static.as29550.net GB
151.236.55.216 bbb.linguebrescia.it GB

访问控制

了解如何控制startpage bot访问权限,避免startpage bot抓取行为不当。

是否拦截startpage bot?

一般不要拦截。搜索引擎爬虫为搜索引擎提供动力,是用户发现您网站的有效途径。事实上,拦截搜索引擎爬虫可能会严重减少网站的自然流量。

通过Robots.txt拦截

您可以通过在网站的 robots.txt 中设置用户代理访问规则来屏蔽 startpage bot 或限制其访问权限。我们建议安装 Spider Analyser 插件,以检查它是否真正遵循这些规则。

	# robots.txt
	# 下列代码一般情况可以拦截该代理
	
	User-agent: startpage bot
	Disallow: /

您无需手动执行此操作,可通过我们的 Wordpress 插件 Spider Analyser 来拦截不必要的蜘蛛或者爬虫。

更多信息

Startpage是一家全球性的隐私技术公司,其宗旨是始终将隐私放在第一位。Startpage的一套易于使用的隐私产品帮助世界各地的任何人在网上保护他们的个人数据。

Startpage被称为隐私搜索的先驱,负责在2006年创建了世界上第一个和最隐私的搜索引擎。从那时起,Startpage继续建立一系列的产品,使每个人都能获得隐私。

立足欧洲

Startpage成立并保持总部在荷兰,这意味着我们的用户受到严格的欧洲消费者隐私法的保护,包括GDPR。这些被广泛认为是世界上最强大的隐私保护。在Startpage上进行的每一次搜索都是通过Startpage专有的个人数据保护技术处理的。作为这项技术的一部分,用户可以选择只利用欧洲服务器。

产品

  • Startpage隐私保护-将你的搜索引擎设置为Startpage,并阻止整个互联网的跟踪。
  • Startpage隐私搜索-在没有跟踪、剖析或搜索历史的情况下搜索网页。
  • 匿名浏览-无痕迹地访问和浏览其他网站。

价值观

  • 真正的隐私-Startpage毫不妥协地致力于保护人们的个人数据。
  • 最好的技术-Startpage致力于提供最好的产品并提供一流的搜索结果。
  • 选择-Startpage永远不会告诉你该做什么,而是提供最简单和最安全的搜索和浏览互联网的选择。

团队

Startpage由一家荷兰公司拥有,该公司在荷兰海牙的总部运营,是System1的一部分,System1是一家位于美国的上市公司。Startpage的全球隐私倡导者团队由工程师、创作者和支持经理组成。如果你有任何问题,可以通过邮箱进行联系support@startpage.com。

常见蜘蛛/爬虫

Common Spiders

相关文章

Related Articles