谷歌元机器人

Question

我有一个问题：

如果我将此代码放在我的网站中：

<META NAME="robot" CONTENT="noindex,nofollow">

谷歌不会搜索特定的页面，对吗？不是所有网站。

Answer 1

使用 NOINDEX，Google 不会将此页面中的任何内容包含在其索引中（该页面对于 Google 搜索将不可见）。

使用NOFOLLOW，Google 机器人不会尝试跟踪此页面上的任何链接，因此当前页面链接到的这些页面将不会包含在 Google 索引中，除非可以访问它们（通过 Google 机器人）以其他方式。

请注意，问题中的代码片段为此 META 标记使用了错误的名称。

ROBOTS

需要采用复数形式，而不是

ROBOT

。虽然上/下/混合大小写并不重要，但我不相信机器人会尝试这两个名称。

顺便说一句，

<META NAME="ROBOTS" CONTENT="NOINDEX, NOFOLLOW">

相当于

<META NAME="ROBOTS" CONTENT="NONE">

而且，是的！网站的其余部分将照常被 Google 索引，除非排除其他机器人。

有关 Google 机器人解释 META 标签的方式的 官方文字可以在
官方 Google WebMaster Central 博客上找到