Помогите разобраться с сайтом

У меня есть сайт component точка in точка ua. В роботс txt разрешил индексацию 6 страниц главная, о нас, контакты и т.д.) Так фот именно их он не хочет индексировать, хотя яндекс это сделал давно. Вместо этого на днях в индекс попали страницы категорий и подкатегорий товаров. Смотрел в статистику бот бывает каждый день. Может проблема в том что я удалил часть страниц через пнукт Удалить url (левые странички в индекс попали). Вобщем помогите советом пожалуйста!

VooDooManiac,
Disallow: /index.php?
Disallow: /shop.html?

- это что? Я раньше не видел такого. Где описание того, что это правильный синтаксис?

EXALL, не нашел где бы это описывалось, видимо неправильно. Заменил на Disallow: /index.php?option=com_virtuemart Но ни яша ни гуглне ругались на такой запрет, проверял в инструментах вебмастера. Сейчас гугл вобще с катушек слетел - добавил еще 30 страниц запрещенных в robots, так еще в этих страничка какие-то левые тайтлы. Я сижу и удивляюсь..

VooDooManiac, про левые тайтлы - бывает такое в выдаче. Как правило проходит за 1-2 недели.
Про остальное - пока не знаю. У меня проблема с индексацией в Google была один раз... главная вылетела из выдачи (внутряки остались). В итоге через 1-2 дня все вернулось на место.

Я не знаю что делать уже... Странички которые появились в индексе гугла так и не добавляются в панель вебмастера. В статистике сканирования уже месяц ровная линия для параметра "Количество сканированных страниц в день". Контакты для связи с работниками гугля так и не нашел. В центре вебмастеров нормальный совет никто дать не может. Яндекс и яху все индексируют правильно. Напрашивается вывод - гугл пока не адаптирован для суровых сайтов СНГ!:)

Сейчас цирк продолжается, страницы категорий сайта которые попали в индекс гугла имеют вид: Тайтл страницы + "Головна - IN.UA" Такая же надпись добавляется к страницам товаров. Что с этим делать? Прошло уже много времени а ничего не меняется. В яндексе все нормально да и в яху тоже. Жду Ваших предложений!

VooDooManiac, я так понимаю, проблема с товарной базой на компоненте Виртуемарт (не удивлюсь, если сайты на джумле). Так вот, для того, чтобы титлы были адекватные, надо ковыряться в настройках по полной программе и делать так, чтобы не брались заголовки из нескольких мест. Вообще, насколько я знаю, в виртуемарте мета-данные (титл, кейвордс и ты ды) не пропишешь.

Что касаемо запрета, у меня есть впечатление, что ссылки надо прописывать полностью в роботсе, чтобы поисковик не лез куда не надо. Иначе он может, видимо, и попутать.

Mongooz, совершенно верно, стоит виртуамарт на джумле. Что Вы имеете ввиду ковыряться в настройках по полное программе? Ведь все остальные поисковики индексируют страницы правильно! Словосочетание Головна IN.UA нигде не упоминалось за время создания сайта. Делал сам, поэтому знаю о чем говорю. Единственное чем титлы страниц категорий отличаются от главной, только тем что после названия страницы нет приставки Интернет-магазин Компонент. Но все равно в голову не укладывается, тайтлы ведь не джаваскриптов генерятся, откуда может браться эта приставка, когда в исходном коде все правильно....

VooDooManiac,не пытайтесь понять, откуда у джумлы растут рога) Это бесполезно, имхо. У меня тоже была просто адская проблема с титлами - они генерятся в трех разных местах, а для главной страницы - вообще в 4х или 5ти. Соответственно, нужно поставить галки общим смыслом "не брать отсюда" во всех местах, кроме одного. Что касается виртуемарта... насколько помню - там вообще все титлы берутся то ли одинаковые, то ли по названию категории... Кажется, второе. В общем, там действительно что-то очень хитрое было с кодом, я это отдавал программисту заниматься... За неделю он где-то осилил...

Mongooz, в том то и дело, без понимания нельзя!:) буду дальше думать...