Как закрыть страницы от поисковых систем
-
Вот мой robots.txt
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /wp-settings.php
Disallow: /wp-app.php
Disallow: /*wp-
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wp-content/
Disallow: /cgi-bin/
Disallow: /tmp/
Disallow: /cgi-bin
Disallow: /tmp
Disallow: /trackback
Disallow: /trackback/
Disallow: */trackback
Disallow: */trackback/
Disallow: *trackback
Disallow: /comments
Disallow: */comments
Disallow: /comments/
Disallow: *comments
Disallow: */comments/
Disallow: /feed
Disallow: */feed
Disallow: */feed/
Disallow: /?feed=
Disallow: *feed
Disallow: /feed/
Disallow: /date
Disallow: */date
Disallow: */date/
Disallow: /date/
Disallow: *date
Disallow: /page
Disallow: /page/
Disallow: *page
Disallow: /category
Disallow: */category
Disallow: /category/
Disallow: */category/
Disallow: *category
Disallow: /tag
Disallow: /tag/
Disallow: /?s=
Disallow: /*?*
Disallow: /*?
Allow: /wp-content/uploads/какие из низ дублируют друг друга чтобы можно было их сократить (убрать?) для наиболее оптимизированного robots.txt
- Тема «Как закрыть страницы от поисковых систем» закрыта для новых ответов.