• Реальных страниц 100 с небольшим.
    А робот загрузил 1000 с лишним. И это не из системных wp-admin/wp-content.

    Получается он загрузил содержимое рубрик, меток.
    Но это не более 50-100 страниц.

    Хочу исключить хлам, прописав в disallow robots.txt, но не могу просмотреть пути, — откуда конкретно появилось столько лишних страниц.

    Вопрос: как просмотреть все внутренние ссылки на сайте, чтобы выявить откуда столько мусора?

    Например, архив за ноябрь.
    Там добавленных вручную страниц максимум 30-50. А показывает что их 239.

Просмотр 2 ответов — с 1 по 2 (всего 2)
  • Полагаю, что по этой причине и возникают проблемы с попаданием в поиск Яндекса. Заметьте, не в индекс.

    Robots составил. Насколько удачно, — будет ясно где-то через месяц.
    Yandex покажет.

Просмотр 2 ответов — с 1 по 2 (всего 2)
  • Тема «Откуда берётся целый ворох лишних страниц. Хлам попада» закрыта для новых ответов.