robots.txt индексация

Тема в разделе "Общие вопросы оптимизации", создана пользователем МаринаП, 30 авг 2015.

Статус темы:
Закрыта.
  1. МаринаП

    МаринаП На форуме с: 30 авг 2015 Сообщения: 25

    Здравствуйте! я сейчас пытаюсь раскрутить сайт, но пока в этом новичок. Скажите как правильно прописать robots.txt? чтобы сайт индексировался. Плагин Yoast SEO у меня скачен. Там есть этот файл. скажите как его правильно заполнить?
  2. SEOnik

    SEOnik На форуме с: 7 май 2015 Сообщения: 34

    User-Agent: *
    Disallow:
    Host: ваш сайт

    стандартная схема.

    А лучше стоит вникнуть и почитать какой нить толковый материал по robots.txt
    Потому как на разных CMS разная схема, в виду того, что есть необходимость закрывать от индексации ту же админскую часть или же какой то конкретный раздел.
  3. andr-seo.fed

    andr-seo.fed На форуме с: 24 сен 2015 Сообщения: 9

    есть сервисы для составления robots.txt, единственное, изучите команды для закрытия ненужных страниц и разделов от индексации
Similar Threads
  1. VooDooManiac
    Ответов:
    5
    Просмотров:
    1.542
  2. alexman30
    Ответов:
    17
    Просмотров:
    2.304
  3. Marketologov
    Ответов:
    1
    Просмотров:
    958
  4. meira
    Ответов:
    12
    Просмотров:
    1.103
  5. Alexrealty
    Ответов:
    5
    Просмотров:
    556
Загрузка...
Статус темы:
Закрыта.