Title: Помогите создать robots.txt
Last modified: 07.06.2016

---

# Помогите создать robots.txt

 *  Решено [oriont1000](https://ru.wordpress.org/support/users/oriont1000/)
 * (@oriont1000)
 * [10 лет, 4 месяца назад](https://ru.wordpress.org/support/topic/%d0%9f%d0%be%d0%bc%d0%be%d0%b3%d0%b8%d1%82%d0%b5-%d1%81%d0%be%d0%b7%d0%b4%d0%b0%d1%82%d1%8c-robotstxt/)
 * Яндекс вебмастер пишет ошибку.
    [https://yadi.sk/i/3iuerk6ksKyba](https://yadi.sk/i/3iuerk6ksKyba)
 * Мой robots.txt на данный момент
    [https://yadi.sk/i/bDiYHHbhsKyfR](https://yadi.sk/i/bDiYHHbhsKyfR)
 * Помогите исправить ошибку и если можно то понять. Спасибо.

Просмотр 8 ответов — с 1 по 8 (всего 8)

 *  [silatal](https://ru.wordpress.org/support/users/silatal/)
 * (@silatal)
 * [10 лет, 4 месяца назад](https://ru.wordpress.org/support/topic/%d0%9f%d0%be%d0%bc%d0%be%d0%b3%d0%b8%d1%82%d0%b5-%d1%81%d0%be%d0%b7%d0%b4%d0%b0%d1%82%d1%8c-robotstxt/#post-211753)
 * User-agent: *
    Disallow: /cgi-bin Disallow: /wp-admin Disallow: /wp-includes 
   Disallow: /wp-content/plugins Disallow: /wp-content/cache Disallow: /wp-content/
   themes Disallow: */trackback Disallow: */feed Disallow: /*? Disallow: /author/
   Disallow: /transfers.js Disallow: /go.php Disallow: /xmlrpc.php
 * User-agent: Yandex
    Disallow: /cgi-bin Disallow: /wp-admin Disallow: /wp-includes
   Disallow: /wp-content/plugins Disallow: /wp-content/cache Disallow: /wp-content/
   themes Disallow: */trackback Disallow: */feed Disallow: /*? Disallow: /author/
   Disallow: /transfers.js Disallow: /go.php Disallow: /xmlrpc.php Host: СЮДА ПИСАТЬ
   ДОМЕН. Типо MYSITE.RU без www и http
 * User-agent: Googlebot
    Allow: *.css Allow: *.js Allow: /wp-includes/*.js Disallow:/
   cgi-bin/ Disallow: /wp-admin/ Disallow: /wp-includes/ Disallow: /wp-content/cache
   Disallow: */trackback Disallow: */feed Disallow: /author/ Disallow: /transfers.
   js Disallow: /go.php Disallow: /xmlrpc.php Disallow: /*? Host: СЮДА ПИСАТЬ ДОМЕН.
   Типо MYSITE.RU без www и http
 *  Модератор [Yui](https://ru.wordpress.org/support/users/fierevere/)
 * (@fierevere)
 * 永子
 * [10 лет, 4 месяца назад](https://ru.wordpress.org/support/topic/%d0%9f%d0%be%d0%bc%d0%be%d0%b3%d0%b8%d1%82%d0%b5-%d1%81%d0%be%d0%b7%d0%b4%d0%b0%d1%82%d1%8c-robotstxt/#post-211754)
 *     ```
       Host: volgograd-advokat.rf
       ```
   
 * уверены что там должно быть именно это?
 * если домен кириллический, то его надо транслировать в punycode
 * а так домена .rf не существует вообще
 *  Автор [oriont1000](https://ru.wordpress.org/support/users/oriont1000/)
 * (@oriont1000)
 * [10 лет, 4 месяца назад](https://ru.wordpress.org/support/topic/%d0%9f%d0%be%d0%bc%d0%be%d0%b3%d0%b8%d1%82%d0%b5-%d1%81%d0%be%d0%b7%d0%b4%d0%b0%d1%82%d1%8c-robotstxt/#post-211757)
 * волгоград-адвокат.рф
 * xn—-7sbbagddakc1ed2bchz7b.xn--p1ai
 * так.
 *  Модератор [Yui](https://ru.wordpress.org/support/users/fierevere/)
 * (@fierevere)
 * 永子
 * [10 лет, 4 месяца назад](https://ru.wordpress.org/support/topic/%d0%9f%d0%be%d0%bc%d0%be%d0%b3%d0%b8%d1%82%d0%b5-%d1%81%d0%be%d0%b7%d0%b4%d0%b0%d1%82%d1%8c-robotstxt/#post-211762)
 * Host: xn—-7sbbagddakc1ed2bchz7b.xn--p1ai
 * да , так
 *  Автор [oriont1000](https://ru.wordpress.org/support/users/oriont1000/)
 * (@oriont1000)
 * [10 лет, 4 месяца назад](https://ru.wordpress.org/support/topic/%d0%9f%d0%be%d0%bc%d0%be%d0%b3%d0%b8%d1%82%d0%b5-%d1%81%d0%be%d0%b7%d0%b4%d0%b0%d1%82%d1%8c-robotstxt/#post-211763)
 * Спасибо.
 *  Автор [oriont1000](https://ru.wordpress.org/support/users/oriont1000/)
 * (@oriont1000)
 * [10 лет, 4 месяца назад](https://ru.wordpress.org/support/topic/%d0%9f%d0%be%d0%bc%d0%be%d0%b3%d0%b8%d1%82%d0%b5-%d1%81%d0%be%d0%b7%d0%b4%d0%b0%d1%82%d1%8c-robotstxt/#post-211764)
 * решено Всех Благодарю.
 *  Автор [oriont1000](https://ru.wordpress.org/support/users/oriont1000/)
 * (@oriont1000)
 * [10 лет, 4 месяца назад](https://ru.wordpress.org/support/topic/%d0%9f%d0%be%d0%bc%d0%be%d0%b3%d0%b8%d1%82%d0%b5-%d1%81%d0%be%d0%b7%d0%b4%d0%b0%d1%82%d1%8c-robotstxt/#post-211767)
 * Поменял файл. Яндекс нашел ошибку.
    [https://yadi.sk/i/iuzdPSwUsLAgZ](https://yadi.sk/i/iuzdPSwUsLAgZ)
 * Мне нужно убрать 47 строку?
 *  Модератор [Yui](https://ru.wordpress.org/support/users/fierevere/)
 * (@fierevere)
 * 永子
 * [10 лет, 4 месяца назад](https://ru.wordpress.org/support/topic/%d0%9f%d0%be%d0%bc%d0%be%d0%b3%d0%b8%d1%82%d0%b5-%d1%81%d0%be%d0%b7%d0%b4%d0%b0%d1%82%d1%8c-robotstxt/#post-211768)
 * _**Host:**_ работает для всех user agent, перечислять его индивидуально для каждого
   UA не нужно, да , уберите

Просмотр 8 ответов — с 1 по 8 (всего 8)

 Тема «Помогите создать robots.txt» закрыта для новых ответов.

 * Форум: [Проблемы и решения](https://ru.wordpress.org/support/forum/how-to-and-troubleshooting/)
 * 8 ответов
 * 3 участника
 * Последний ответ: [Yui](https://ru.wordpress.org/support/users/fierevere/)
 * Последняя активность: [10 лет, 4 месяца назад](https://ru.wordpress.org/support/topic/%d0%9f%d0%be%d0%bc%d0%be%d0%b3%d0%b8%d1%82%d0%b5-%d1%81%d0%be%d0%b7%d0%b4%d0%b0%d1%82%d1%8c-robotstxt/#post-211768)
 * Статус: решённая

## Темы

### Самые популярные темы

### Темы без ответов

### Без вопроса

### Решённые

### Нерешённые

### Все темы