как robots запретить индексировать служебные страницы?
-
Здравствуйте, у меня вот такой robots (не помню где его когда-то взял):
User-agent: *
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php
sitemap: https://crimea-investment.com/sitemap.xml
Host: https://crimea-investment.com/и поисковики индексирую всё подряд, в том числе и служебные страницы шаблона, в результате чего яндекс вебмастер ругается, что во многих страницах нет описания. а гугл плюется что я на 50 страницах я поставил noindex (по не знанию, просто нужно было, чтоб эти страницы не индексировались
Примеры страниц:
https://crimea-investment.com/taxonomy-grids/
https://crimea-investment.com/listing-with-properties-slider/
https://crimea-investment.com/text-with-icons/вот таких 50 штук
Как правильно составить роботс, если мне надо, чтоб индексировались: главная, новости, размещенные объекты и страницы с категориями (квартиры, дома и т.д), а также информационные страницы(часть из них в меню)?Страница, с которой нужна помощь: [войдите, чтобы увидеть ссылку]
-
я как-то по незнанию начал удалять такие страницы, что сказалось на функционале темы. потом на yoast ставил на эти страницы noindex и в консоле гугл мастер пишет что есть этих 50 страниц с ошибкой на которых стоит noindex (красным цветом). В принципе, если это нормально, тогда буду спокоен. также яндех вебмастер пишет, что у этих страниц нет описания. Поэтому стараюсь исправить все ошибки, чтоб не упасть в ранжировании у поисковиков. Подскажите, если можно ставить просто noindex, то можно не обращать на предупреждения гугла?
Спасибо что ответили
- Тема «как robots запретить индексировать служебные страницы?» закрыта для новых ответов.