Поддержка Проблемы и решения Как закрыть страницы от поисковых систем

  • Вот мой robots.txt

    Disallow: /wp-login.php
    Disallow: /wp-register.php
    Disallow: /xmlrpc.php
    Disallow: /wp-settings.php
    Disallow: /wp-app.php
    Disallow: /*wp-
    Disallow: /wp-admin/
    Disallow: /wp-includes/
    Disallow: /wp-content/
    Disallow: /cgi-bin/
    Disallow: /tmp/
    Disallow: /cgi-bin
    Disallow: /tmp
    Disallow: /trackback
    Disallow: /trackback/
    Disallow: */trackback
    Disallow: */trackback/
    Disallow: *trackback
    Disallow: /comments
    Disallow: */comments
    Disallow: /comments/
    Disallow: *comments
    Disallow: */comments/
    Disallow: /feed
    Disallow: */feed
    Disallow: */feed/
    Disallow: /?feed=
    Disallow: *feed
    Disallow: /feed/
    Disallow: /date
    Disallow: */date
    Disallow: */date/
    Disallow: /date/
    Disallow: *date
    Disallow: /page
    Disallow: /page/
    Disallow: *page
    Disallow: /category
    Disallow: */category
    Disallow: /category/
    Disallow: */category/
    Disallow: *category
    Disallow: /tag
    Disallow: /tag/
    Disallow: /?s=
    Disallow: /*?*
    Disallow: /*?
    Allow: /wp-content/uploads/

    какие из низ дублируют друг друга чтобы можно было их сократить (убрать?) для наиболее оптимизированного robots.txt

Просмотр 1 ответа (всего 1)
Просмотр 1 ответа (всего 1)
  • Тема «Как закрыть страницы от поисковых систем» закрыта для новых ответов.