主页 / 问题 / 1309623
Accepted
Alex
Asked:2022-07-28 14:05:12 +0000 UTC2022-07-28 14:05:12 +0000 UTC

如何禁用 robots.txt 中具有特定获取参数的所有页面的索引？

  • 772

Yandex 抱怨有一定数量的带有 get 参数的重复页面。指向此类页面的链接如下所示：site.ru/blog/article?layout=new 参数始终相同，但其值会发生变化。如何使用 layout="" 禁用所有链接的索引？会有多正确Disallow: *?*layout=

оптимизация

2 个回答

  1. Best Answer

    这个结构是绝对正确的：

    Disallow: *?*layout=

    但是，请记住，它将禁止对包含参数的所有页面进行索引layout，无论其在参数列表中的位置以及地址中是否存在其他参数。那些。以下所有示例页面都不会被编入索引：

    site.ru/blog/article?layout=new
site.ru/blog/article?layout=old
site.ru/blog/article?layout=old&author=Example
site.ru/blog/article?page=1&layout=fashion
site.ru/blog/article?page=2&layout=new&author=Example
    • 2

  2. 我通过 Clean-param: in robots.txt 执行此操作有两个原因：

    1. 旁路服务器的负载减少。
    2. 如果您使用 Disallow 或 noindex 标签关闭索引，则搜索引擎也不会索引并考虑到此类页面的反向链接。如果您使用此方法从索引中关闭，则该站点将考虑反向链接。

    这些优点仅适用于 Yandex！

    在 Google 中，您会在 robots.txt 中收到错误，此时有些内容不匹配。但我忽略了它，一切都很好。

    对于谷歌，从我的角度来看，借助这个奇妙的工具来解决此类重复的问题，阅读它，您将了解所有优势。如果你不明白，那就不要碰它！

    • 0

相关问题