中文网站站长博客 [ZH-CN]: 更新用于抓取智能手机版内容的Googlebot用户代理

中文网站站长博客。

Google中文网站站长博客为广大站长提供关于Google网页抓取、收录、搜索引擎优化以及其他相关的站长资讯。

更新用于抓取智能手机版内容的Googlebot用户代理

2014年2月14日星期五

原文：A new Googlebot user-agent for crawling smartphone content
多年来，Google一直在针对功能手机和智能手机使用不同的抓取工具来抓取内容并将其编入索引，而所有这些移动设备专用抓取工具都称为Googlebot移动版。由于功能手机和智能手机的功能存在很大差异，我们曾多次遇到过以下情况：网站站长实际上只想屏蔽针对功能手机的抓取或编入索引操作，但无意中屏蔽了针对智能手机的抓取或编入索引操作。抓取工具在名称上未加以区分导致Google不仅无法将某些网站的智能手机版内容编入索引，也无法确定这些网站是否针对智能手机进行了优化。

针对智能手机推出的新型Googlebot
为了在名称上对抓取工具加以区分并让网站站长拥有更大的控制权，我们将在3到4周后，不再将针对智能手机的“Googlebot-Mobile”用作用户代理。之后，针对智能手机的用户代理将直接使用“Googlebot”进行标识，但仍会在用户代理字符串的其他位置列出“mobile”字样。下面列出了新型和旧型用户代理：

针对智能手机的新型Googlebot用户代理：
Mozilla/5.0 (iPhone; CPU iPhone OS 6_0 like Mac OS X) AppleWebKit/536.26 (KHTML, like Gecko) Version/6.0 Mobile/10A5376e Safari/8536.25 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)

针对智能手机的Googlebot-Mobile用户代理（即将停止使用）：
Mozilla/5.0 (iPhone; CPU iPhone OS 6_0 like Mac OS X) AppleWebKit/536.26 (KHTML, like Gecko) Version/6.0 Mobile/10A5376e Safari/8536.25 (compatible; Googlebot-Mobile/2.1; +http://www.google.com/bot.html)

此项更改只会影响针对智能手机的Googlebot移动版用户代理。常规Googlebot的用户代理不会发生变化，并且其余两个Googlebot-Mobile抓取工具将继续在其用户代理字符串中提及功能手机设备。请参考以下示例：

常规Googlebot用户代理： Mozilla/5.0 (compatible; Googlebot/2.1;
+http://www.google.com/bot.html)

其余两个针对功能手机的Googlebot移动版用户代理：

SAMSUNG-SGH-E250/1.0 Profile/MIDP-2.0 Configuration/CLDC-1.1 UP.Browser/6.2.3.3.c.1.101 (GUI) MMP/2.0 (compatible; Googlebot-Mobile/2.1; +http://www.google.com/bot.html)

DoCoMo/2.0 N905i(c100;TB;W24H16) (compatible; Googlebot-Mobile/2.1; +http://www.google.com/bot.html)

您可以使用网站站长工具中的“Google抓取方式”功能测试您的网站，并可在帮助中心查看Google现有抓取工具的完整列表。抓取和编入索引请注意此项用户代理更新带来的以下重大影响：针对智能手机的新型Googlebot抓取工具将遵从Googlebot（而非Googlebot－Mobile）的robots.txt指令、robots元标记指令和HTTP header指令。例如，使用新型抓取工具后，以下robots.txt指令将屏蔽针对智能手机的新型Googlebot用户代理以及常规Googlebot执行的所有抓取操作：

User-agent: Googlebot Disallow: /

以下robots.txt指令将屏蔽Google的功能手机抓取工具执行的抓取操作：

User-agent: Googlebot-Mobile Disallow: /

根据我们的内部分析，受此项更新影响的网址不到0.001%，而此项更新可让网站站长更好地控制对其内容的抓取和编入索引操作。与往常一样，如果您有任何问题，可以：

阅读我们在建立针对智能手机进行优化的网站方面的建议

详细了解如何控制Googlebot抓取和编入索引操作

在网站站长帮助论坛中提问或参加网站站长中心在办公时间进行的环聊。

标签

恶意软件
搜索引擎优化
网站管理员小贴士
网站管理员指南
小贴士
心系四川爱我中华
badware
Google
Google Webmaster Tools
Google索引
Google站长工具
img
Matt Cutts 的文章
robots.txt
SEO
Top Contributor

博客归档

2020
- 十一月
- 九月
- 八月
- 七月
- 六月
- 五月
- 四月
- 三月
- 二月
- 一月

2019
- 十一月
- 十月
- 九月

2018
- 七月
- 五月
- 二月
- 一月

2017
- 十二月
- 十一月
- 六月
- 四月
- 三月

2016
- 十二月
- 十一月
- 十月
- 九月
- 八月
- 五月
- 三月
- 一月

2015
- 十二月
- 十一月
- 十月
- 九月
- 八月
- 七月
- 五月
- 四月
- 三月
- 二月
- 一月

2014
- 十一月
- 九月
- 八月
- 七月
- 六月
- 五月
- 四月
- 三月
- 二月
- 一月

2013
- 十二月
- 十一月
- 九月
- 八月
- 七月
- 六月
- 五月
- 四月
- 三月
- 二月
- 一月

2012
- 十二月
- 十一月
- 十月
- 九月
- 八月
- 七月
- 六月
- 五月
- 四月
- 三月
- 二月
- 一月

2011
- 十二月
- 十一月
- 十月
- 九月
- 八月
- 七月
- 六月
- 五月
- 四月
- 三月
- 二月
- 一月

2010
- 十二月
- 十一月
- 十月
- 九月
- 八月
- 七月
- 六月
- 五月
- 四月
- 三月
- 二月
- 一月

2009
- 十二月
- 十一月
- 十月
- 九月
- 八月
- 七月
- 六月
- 五月
- 四月
- 三月
- 二月
- 一月

2008
- 十二月
- 十一月
- 十月
- 九月
- 八月
- 七月
- 六月
- 五月
- 四月
- 三月
- 二月
- 一月

2007
- 十二月
- 十一月
- 十月
- 九月
- 八月
- 七月

Feed

Give us feedback in our Product Forums.

Google
Privacy
Terms