中文网站站长博客。
Google中文网站站长博客 为广大站长提供关于Google网页抓取、收录、搜索引擎优化以及其他相关的站长资讯。
更新用于抓取智能手机版内容的Googlebot用户代理
2014年2月14日星期五
原文:
A new Googlebot user-agent for crawling smart
phone content
作者:智能手机搜索工程师,Zhijian He
多年来,Google一直在针对功能手机和智能手机使用不同的抓取工具来抓取内容并将其编入索引,而所有这些移动设备专用抓取工具都称为Googlebot移动版。由于功能手机和智能手机的功能存在很大差异,我们曾多次遇到过以下情况:网站站长实际上只想屏蔽针对功能手机的抓取或编入索引操作,但无意中屏蔽了针对智能手机的抓取或编入索引操作。抓取工具在名称上未加以区分导致Google不仅无法将某些网站的智能手机版内容编入索引,也无法确定这些网站是否针对智能手机进行了优化。
针对智能手机推出的新型Googlebot
为了在名称上对抓取工具加以区分并让网站站长拥有更大的控制权,我们将在3到4周后,不再将针对智能手机的“
Googlebot-Mobile
”用作用户代理。之后,针对智能手机的用户代理将直接使用“Googlebot”进行标识,但仍会在用户代理字符串的其他位置列出“mobile”字样。下面列出了新型和旧型用户代理:
针对智能手机的新型Googlebot用户代理:
Mozilla/5.0 (iPhone; CPU iPhone OS 6_0 like Mac OS X) AppleWebKit/536.26 (KHTML, like Gecko) Version/6.0 Mobile/10A5376e Safari/8536.25 (compatible;
Googlebot
/2.1; +
http://www.google.com/bot.html
)
针对智能手机的
Googlebot-Mobile
用户代理(即将停止使用):
Mozilla/5.0 (iPhone; CPU iPhone OS 6_0 like Mac OS X) AppleWebKit/536.26 (KHTML, like Gecko) Version/6.0 Mobile/10A5376e Safari/8536.25 (compatible;
Googlebot-Mobile
/2.1; +http://www.google.com/bot.html)
此项更改只会影响针对智能手机的Googlebot移动版用户代理。常规Googlebot的用户代理不会发生变化,并且其余两个Googlebot-Mobile抓取工具将继续在其用户代理字符串中提及功能手机设备。请参考以下示例:
常规Googlebot用户代理:
Mozilla/5.0 (compatible; Googlebot/2.1;
+http://www.google.com/bot.html)
其余两个针对功能手机的Googlebot移动版用户代理:
SAMSUNG-SGH-E250/1.0 Profile/MIDP-2.0 Configuration/CLDC-1.1 UP.Browser/6.2.3.3.c.1.101 (GUI) MMP/2.0 (compatible; Googlebot-Mobile/2.1; +http://www.google.com/bot.html)
DoCoMo/2.0 N905i(c100;TB;W24H16) (compatible; Googlebot-Mobile/2.1; +http://www.google.com/bot.html)
您可以使用
网站站长工具中的“Google抓取方式”功能
测试您的网站,并可
在帮助中心查看Google现有抓取工具
的完整列表。
抓取和编入索引
请注意此项用户代理更新带来的以下重大影响:
针对智能手机的新型Googlebot抓取工具将遵从Googlebot(而非Googlebot-Mobile)的robots.txt指令、
robots元标记指令和HTTP header指令
。例如,使用新型抓取工具后,以下robots.txt指令将屏蔽针对智能手机的新型Googlebot用户代理以及常规Googlebot执行的所有抓取操作:
User-agent: Googlebot
Disallow: /
以下robots.txt指令将屏蔽Google的功能手机抓取工具执行的抓取操作:
User-agent: Googlebot-Mobile
Disallow: /
根据我们的内部分析,受此项更新影响的网址不到0.001%,而此项更新可让网站站长更好地控制对其内容的抓取和编入索引操作。与往常一样,如果您有任何问题,可以:
阅读我们
在建立针对智能手机进行优化的网站方面的建议
详细了解
如何控制Googlebot抓取和编入索引操作
在
网站站长帮助论坛
中提问或参加
网站站长中心在办公时间进行的环聊
。
Google发布商插件(测试版):在WordPress平台中轻松使用Google发布商产品
2014年2月11日星期二
原文:
Google Publisher Plugin beta: Bringing our publisher products to WordPress
作者:产品经理,Michael Smith
许多正在使用
WordPress
的发布商纷纷向我们反映,他们希望能通过更便捷的方式在WordPress平台中使用Google产品。现在,我们很高兴地宣布
Google发布商插件
(测试版)已正式推出,利用这一插件,发布商能够在WordPress网站中体验更多全新功能。如果您拥有自己的域名并且使用WordPress提供支持,那么您可以通过这款新插件直接在WordPress平台中使用部分Google服务。
需要注意的是,由于本次发布的是测试版插件,因此我们仍在尽力优化插件的功能,以确保它在为数众多的WordPress网站上都能正常运作。欢迎您立即试用,并告诉我们这款插件在您网站上的运行效果如何。
这是Google发布商插件的首个版本,目前支持以下两种Google产品:
Google AdSense:通过在您的网站上投放广告来赚取收入。这款插件会将您的WordPress网站与您的AdSense帐户关联起来,让您无需手动修改任何HTML代码就能在网站上轻松投放广告。
Google网站站长工具
:网站站长工具可为您提供详细的报告,便于您了解您的网页在Google上的展示率。利用这款插件,您只需点击一下,就能在网站站长工具上验证您的网站。
敬请访问
WordPress.org插件
目录下载并试用这款新插件。要详细了解这款插件及其使用方法,请访问我们的
帮助中心
。我们期待看到您的意见和建议!
重定向抓取错误的通知方式有新变化
2014年2月11日星期二
原文:
Changes in crawl error reporting for redirects
作者:网站站长趋势分析师
John Mueller
我们发现,在
网站站长工具
中,重定向网页
抓取错误
的显示方式有时会让网站站长颇感困惑。现在是时候改进这种方式来使相关错误数据更清晰、更易于诊断问题了!尽管以前我们都是针对初始网址(重定向网址)报告错误,但从现在起,我们将改为针对最终网址(实际返回错误代码的网址)显示错误。
我们不妨看看下面这个示例:
网址A重定向到网址B,然后网址B返回了错误。请忽略此处的重定向类型和错误类型,我们只是举例而已。
过去,我们会在网址A下报告最终检测到的错误;而现在,我们将改为在网址B下报告这些错误,这样会更方便您诊断网站站长工具中显示的抓取错误。现在,您可以借助
cURL
或您喜爱的
在线 server header 检查
器
等
工具,轻松地确定此错误实际发生在网址B上。
这一变动可能还会体现在部分网站的错误总数中。例如,当您的网站移至新网址时,您将只会看到新网址返回的抓取错误(假定旧网址可以正确地重定向),这就可能导致这些网站的错误总数发生明显变化。
请注意:这一变动仅会影响这类抓取错误在网站站长工具中的显示方式。此外,我们还想提醒您,如果应返回错误(例如:网址不存在)的网址发生抓取错误,那么系统显示抓取错误
并不会对该网站其他部分的编入索引和排名产生任何不利影响
(另请参阅
Google+上的相关讨论
)。
我们希望这一改动可让您更轻松地跟踪抓取错误,并清除您从未察觉到的意外错误!如有任何疑问,您可以随时在此发布问题;也可以通过访问
Google网站站长帮助论坛
来获取所需信息。
标签
恶意软件
搜索引擎优化
网站管理员小贴士
网站管理员指南
小贴士
心系四川 爱我中华
badware
Google
Google Webmaster Tools
Google索引
Google站长工具
img
Matt Cutts 的文章
robots.txt
SEO
Top Contributor
博客归档
2020
十一月
九月
八月
七月
六月
五月
四月
三月
二月
一月
2019
十一月
十月
九月
2018
七月
五月
二月
一月
2017
十二月
十一月
六月
四月
三月
2016
十二月
十一月
十月
九月
八月
五月
三月
一月
2015
十二月
十一月
十月
九月
八月
七月
五月
四月
三月
二月
一月
2014
十一月
九月
八月
七月
六月
五月
四月
三月
二月
更新用于抓取智能手机版内容的Googlebot用户代理
Google发布商插件(测试版):在WordPress平台中轻松使用Google发布商产品
重定向抓取错误的通知方式有新变化
一月
2013
十二月
十一月
九月
八月
七月
六月
五月
四月
三月
二月
一月
2012
十二月
十一月
十月
九月
八月
七月
六月
五月
四月
三月
二月
一月
2011
十二月
十一月
十月
九月
八月
七月
六月
五月
四月
三月
二月
一月
2010
十二月
十一月
十月
九月
八月
七月
六月
五月
四月
三月
二月
一月
2009
十二月
十一月
十月
九月
八月
七月
六月
五月
四月
三月
二月
一月
2008
十二月
十一月
十月
九月
八月
七月
六月
五月
四月
三月
二月
一月
2007
十二月
十一月
十月
九月
八月
七月
Feed
Give us feedback in our
Product Forums
.