вопрос по robots.txt
-
доброе время суток. не нашел(или плохо искал) нужную инфу.
подскажите пожалуйста я хочу запретить индексирование всего — кроме моих страничек которые создал, другими словами где, как и в чем лежит мой контент? Как называются файлики физически и где лежат? и еще мнения расходятся по поводу Allow: одни говорят не хавают боты другие говорят что все гуд 🙁
Просмотр 4 ответов — с 1 по 4 (всего 4)
Просмотр 4 ответов — с 1 по 4 (всего 4)
- Тема «вопрос по robots.txt» закрыта для новых ответов.