вопрос по robots.txt

  • Решено sshaganov

    (@sshaganov)


    13 лет назад

    доброе время суток. не нашел(или плохо искал) нужную инфу.
    подскажите пожалуйста я хочу запретить индексирование всего — кроме моих страничек которые создал, другими словами где, как и в чем лежит мой контент? Как называются файлики физически и где лежат? и еще мнения расходятся по поводу Allow: одни говорят не хавают боты другие говорят что все гуд 🙁

Просмотр 4 ответов — с 1 по 4 (всего 4)
  • brederik

    (@brederik)

    13 лет назад

    ссыль
    Я вот здесь уже писал пример нормального robots.txt
    Что касается Allow, то где именно он не работает, в .htaccess или robots.txt?

    Автор sshaganov

    (@sshaganov)

    13 лет назад

    Что касается Allow

    про robots.txt, за пример файла спасибо — а по сути вопроса?

    другими словами где, как и в чем лежит мой контент? Как называются файлики физически и где лежат?

    Модератор Юрій

    (@yube)

    13 лет назад

    Страницы — это не файлы. Они сохраняются в базе данных точно так же, как записи.

    Страницы « WordPress Codex

    Автор sshaganov

    (@sshaganov)

    13 лет назад

    значит все внутри мускуля 🙂 понял спасибо

Просмотр 4 ответов — с 1 по 4 (всего 4)

Тема «вопрос по robots.txt» закрыта для новых ответов.