Правильный robots.txt для wordpress

  • LordShad0W

    (@lordshad0w)


    12 лет, 6 месяцев назад

    Доброе время суток!
    Народ, подскажите плиз. Файл robots.txt у меня стоит такой:
    User-agent: Yandex
    Disallow: /cgi-bin
    Disallow: /wp-admin
    Disallow: /wp-includes
    Disallow: /wp-content/plugins
    Disallow: /wp-content/cache
    Disallow: /wp-content/themes
    Disallow: /wp-trackback
    Disallow: /wp-feed
    Disallow: /wp-comments
    Disallow: */trackback
    Disallow: */feed
    Disallow: */comments
    Host: http://www.мой сайт.ru

    User-agent: *
    Disallow: /cgi-bin
    Disallow: /wp-admin
    Disallow: /wp-includes
    Disallow: /wp-content/plugins
    Disallow: /wp-content/cache
    Disallow: /wp-content/themes
    Disallow: /wp-trackback
    Disallow: /wp-feed
    Disallow: /wp-comments
    Disallow: */trackback
    Disallow: */feed
    Disallow: */comments

    Sitemap: http://мой сайт/sitemap.xml

    Яндекс проиндексировал с таким роботом страницы /?autor, /?m=, /?p= и /?tag=.
    Как, точнее как именно мне прописать эти страницы в disallow? Чето не могу понять?
    Мне в принципе нужно, чтобы кроме Главной страницы , а также /?page_id= и /?cat= боты ничего не определяли..
    Кто знает, помогите плиз…
    Буду признателен!

  • Тема «Правильный robots.txt для wordpress» закрыта для новых ответов.

Метки