Поддержка Проблемы и решения проблемы в Robots.txt при добавлении в Гугл Вебмастер

  • Добрый день!
    При добавлении карты сайта в Гугл Вебмастер у меня появляется ошибка

    Файл Sitemap содержит URL, доступ к которым заблокирован в файле robots.txt

    Содержание robots.txt:

    User-agent: *
    Disallow: /wp-admin/
    Sitemap: http://мой_сайт.ru/sitemap.xml

    Т.е как видно из содержания, я нигде ничего не блокирую. Если я проверяю на доступность заблокированные страницы на которые мне показывает гугл, то в том же гугл мастере они отмечаются как доступные. Конкретно проблема при добавлении сайт мапа

Просмотр 2 ответов — с 1 по 2 (всего 2)
  • Модератор Yuri

    (@yube)

    Т.е как видно из содержания, я нигде ничего не блокирую.

    Страницы могут быть запрещены для индексации не только через robots.txt, но и через meta name="robots" в head страницы.

    Вроде как нашел решение проблемы. Изначально в настройках блога стояла галочка «Не индексировать сайт». Потом я ее снял, я так понимаю гугл еще обновил у себя информацию. Верно?

Просмотр 2 ответов — с 1 по 2 (всего 2)
  • Тема «проблемы в Robots.txt при добавлении в Гугл Вебмастер» закрыта для новых ответов.