Несколько вопросов по robots.txt

Тема в разделе "Общие вопросы оптимизации", создана пользователем Данил, 30 дек 2013.

Статус темы:
Закрыта.
  1. Данил

    Данил На форуме с: 30 дек 2013 Сообщения: 1

    Здравствуйте! Мой блог на WP помогите понять:

    Вопрос 1:
    Символ * означает любую последовательность, так вот чем отличается такой вид написания:
    Disallow: */feed
    Disallow: */trackback
    Disallow: */comments
    от такого:
    Disallow: /*feed
    Disallow: /*trackback
    Disallow: /*comments

    Вопрос 2:
    Почему некоторые прописывают:
    Disallow: */trackback
    Disallow: */*/trackback
    Disallow: */*/feed/*/
    Disallow: */feed
    Disallow: */*/feed
    Зачем пишут */feed и при этом еще */*/feed/*/ и */*/feed с несколькими слешами, если можно пожалуйста подробный пример.

    Вопрос 3:
    Объясните пожалуйста еще и такие выражения, почему пишут /feed/ и */feed.
    Disallow: /trackback
    Disallow: */trackback
    Disallow: /feed/
    Disallow: */feed
    Disallow: /comments
    Disallow: */comments

    Заранее спасибо.
  2. Прапорщик Задов

    Прапорщик Задов На форуме с: 4 янв 2014 Сообщения: 1

    У меня тоже вопросик. Мне нужно запретить индексировать все страницы, кроме тех, что указаны в sitemap.xml.
    Возможно в файле robots.txt написать следующее:
    Код:
    User-agent: *
    Disallow: /
    Sitemap: http://site.ru/sitemap.xml
    ?
Статус темы:
Закрыта.