Правильно ли составлин robots.txt ?

Тема в разделе "Общие вопросы оптимизации", создана пользователем tsa, 23 фев 2011.

Статус темы:
Закрыта.
  1. tsa

    tsa На форуме с: 23 фев 2011 Сообщения: 14

    Правильно ли составлин robots.txt на manucoz.ru ?

  2. slavs™

    slavs™ На форуме с: 14 янв 2011 Сообщения: 167

    я бы оставил только инструкции для всех ботов
  3. tsa

    tsa На форуме с: 23 фев 2011 Сообщения: 14

    slavs™, а видь Host: manucoz.ru токо яндекс распазнает а остальные считают это за онибку!
    1 человеку нравится это.
  4. slavs™

    slavs™ На форуме с: 14 янв 2011 Сообщения: 167

    директиву Host понимают все боты. С чего вы взяли про ошибку?
  5. DeZenden

    DeZenden На форуме с: 23 мар 2010 Сообщения: 111

    Disallow: /index.php?do=lastcomments есть смысл закрывать?

    Disallow: /index.php?do=stats повтор в robots.txt

    Disallow: /index.php?subaction=newposts есть смысл закрывать?
Статус темы:
Закрыта.