Yahoo! JAPAN

是否拦截Yahoo! JAPAN？

一般不要拦截。搜索引擎爬虫为搜索引擎提供动力，是用户发现您网站的有效途径。事实上，拦截搜索引擎爬虫可能会严重减少网站的自然流量。

通过Robots.txt拦截

您可以通过在网站的 robots.txt 中设置用户代理访问规则来屏蔽 Yahoo! JAPAN 或限制其访问权限。我们建议安装 Spider Analyser 插件，以检查它是否真正遵循这些规则。

	# robots.txt
	# 下列代码一般情况可以拦截该代理
	
	User-agent: Yahoo! JAPAN
	Disallow: /

您无需手动执行此操作，可通过我们的 Wordpress 插件 Spider Analyser 来拦截不必要的蜘蛛或者爬虫。

Yahoo!JAPAN为提供、研究、开发和维护服务的目的，管理和运行访问互联网上发布的网页的系统。 爬行器 “就是这样一个系统。这些系统中的每一个都有一个 “名字”，叫做 “用户代理”。 然后他们使用这个 “名字 “来访问每个网页。这些系统的用户代理可以确定访问的目的。

关于爬虫

巡视网页并收集和积累内容的系统被称为 “爬虫”。在Yahoo!JAPAN，带有以下用户代理的爬虫收集和积累网页，用于搜索服务、研究和开发。

• Y!J-VSC/ViSe
• Y!J-SRD
• Y!J-BRI
• Y!J-BRE
• Y!J SearchMonkey
• Y!J-BRT
• Y!J-BRU/VSIDX
• Y!J-IER
• Y!J-BRW
• Y!J-RIE
• Y!J-APP
• Y!J-BRH
• Y!J-BRS
• Y!J-BRD/YSML
• Y!J-BUZZ
• Y!J-ASR
• Y!J-MMP/dscv
• Y!J-ISC/ImSe

关于与广告服务相关的爬虫

Yahoo! JAPAN为了刊登适当的广告，使用了以下的爬虫。

• Y!J-BRJ/YATS
• Y!J-BRL/YATSS
• Y!J-BRM/YATSD
• Y!J-BRN/YATSA
• Y!J-BRY/YATSH
• Y!J-BRZ/YATSHA

有关雅虎广告显示广告（YDN）爬虫的更多信息，请参见《雅虎广告》中的 “关于爬虫”。

关于网页验证系统

从Yahoo!JAPAN的每个页面链接到的网页。 为了确认，网页是由以下用户代理的系统访问的。 这些系统不收集或储存网页。

• Y!J-DLC
• Y!J-BRQ/DLCK
• Y!J-PSC
• Y!J-DSC

注意

• 可以使用除以上所列的IP地址和用户代理。
• IP地址和用户代理可能会发生变化，恕不另行通知。