我也不建议阻止索引

[rakibhasanbd4723]

假设我对 /b 的目标是基本上拥有与 /a 完全相同的内容，但略有不同，即我要取出关于主题子部分的内容块并将其放在顶部。因此，A 将有关白板笔的部分放在顶部，但 B 将有关白板笔的部分放在底部，并将有关白板本身的部分放在顶部。好吧，这是相同的内容，其背后是相同的搜索意图。我在做同样的事情。

猜猜怎么着？您可以在 URL 中使 牙医数据库 用哈希。因此它是 a#b，它将跳转到页面中的特定部分（也称为片段 URL）。例如，您可以看到Moz.com/about/jobs。我认为如果您插入#listings，它会直接带您到职位列表。您无需阅读在这里工作的感觉，而是可以直接查看职位列表。现在，Google 认为所有这些都是一个 URL。因此他们不会对它们进行不同的排名。它们不会被不同的索引。它们本质上被规范化为相同的 URL。

不推荐
我不推荐...

5. 阻止 Google 抓取一个 URL，但不抓取另一个版本。
因为猜猜怎么着？即使您使用 robots.txt 并阻止 Googlebot 的蜘蛛，将它们赶走，并且由于您说 robots.txt 禁止 /b，它们无法访问它，Google 也不会知道 /b 和 /a 上的内容相同。他们怎么可能知道呢？

他们无法抓取它。所以他们看不到这里的任何东西。对他们来说，这是不可见的。因此，他们不知道任何排名信号、任何指向那里的链接、任何参与信号、任何内容信号，任何可能帮助 A 排名更好的排名信号，他们都看不到。如果你用其中一种方式进行规范化，那么你现在就是在告诉谷歌，是的，B 和 A 是一样的，联合他们的力量，给我所有的排名能力。