нужен совет по robots.txt

Тема в разделе "Общие вопросы оптимизации", создана пользователем sergo777, 24 апр 2013.

Статус темы:
Закрыта.
  1. sergo777

    sergo777 На форуме с: 15 апр 2013 Сообщения: 125

    Нужен совет как закрыть от индексации урл, но не весь урл а его часть. Пример:

    www.site/by-price-4000-6000.html , и вот нужно закрыть именно /by-price так как url-ов такого вида полно

    www.site/by-price-5000-6000.html
    www.site/by-price-1000-2000.html
    www.site/by-price-8000-9000.html
    www.site/by-price-7000-8000.html

    и они генерируются системой, т.е. закрыть все нет возможности, мне посоветовали конструкцию типа:

    Disallow: /by-price-*

    но насколько она жизнеспособна пока не ясно, может кто подскажет?
  2. Kovtun

    Kovtun SEO На форуме с: 2 сен 2009 Сообщения: 2.845

    Напишите в поддержку яндекса через вебмастер такие варианты:
    Disallow: /by-price
    Disallow: /by-price*

    Будут ли они работать. Пока других вариантов не вижу. Легче прописать в шаблоне, который отвечает за вывод этих страниц:
    Код:
    <meta name="robots" content="noindex, follow"/>
  3. sergo777

    sergo777 На форуме с: 15 апр 2013 Сообщения: 125

    это понятно, сложнее реализовать т.к. странички динамически формируются.


    не совсем ясно куда писать, и за чем. И страницы вывалились в Гугл, в яше их не видно
  4. Kovtun

    Kovtun SEO На форуме с: 2 сен 2009 Сообщения: 2.845

    Формируются же. Можно это реализовать и не так сложно!
    С этим поисковиком robots не помощник. Нужно именно предложенный вариант пытаться.
  5. sergo777

    sergo777 На форуме с: 15 апр 2013 Сообщения: 125

    ок, буду в этом направлении копать.

    что это значит Гугл перестал учитывать роботс?
  6. Kovtun

    Kovtun SEO На форуме с: 2 сен 2009 Сообщения: 2.845

    sergo777, без понятия. Просто со старым форумом была проблема в том, что /members была закрыта в robots, тем не менее все профили прекрасно индексировались как минимум год до тех пор, пока напрямую в коде на этих страницах не поставил meta.
  7. sergo777

    sergo777 На форуме с: 15 апр 2013 Сообщения: 125

    странно, последнее время поисковики удивляют постоянно. Со своей проблемой я решил как бороться, через мета тег
Similar Threads
  1. Govchik
    Ответов:
    2
    Просмотров:
    698
  2. alinka
    Ответов:
    3
    Просмотров:
    718
  3. scrdefft
    Ответов:
    5
    Просмотров:
    572
  4. moa032
    Ответов:
    3
    Просмотров:
    631
Загрузка...
Статус темы:
Закрыта.