Несоответствие загруженных страниц от количества страниц в поиске

Тема в разделе "Общие вопросы оптимизации", создана пользователем Taumi, 3 май 2011.

Статус темы:
Закрыта.
  1. Taumi

    Taumi На форуме с: 18 апр 2011 Сообщения: 68

    Уже затрагивалась эта тема, но прошу поднять ее еще раз.

    Мне передан сайт. По Яндекс Вебмастеру следующие данные:

    ТИЦ ? 20
    Страниц в поиске 594
    Внешних ссылок на страницы сайта 703
    Дата последнего посещения сайта роботом 1.05.2011
    Загружено роботом 10681
    Исключено роботом 1733


    По исключенным страницам следующие данные:

    Кодировка не распознана 2
    HTTP-статус: Ресурс не найден (404) 1099
    Информация: страницы намеренно запрещены к индексированию или не должны индексироваться.
    Документ запрещен в файле robots.txt 632

    Помогите разобраться, куда мне вообще смотреть хоть, чтобы удалить страницы с 404 ошибкой. Сайт на DLE.

    Еще один вопрос. Написано, что документы в роботс запрещены. Но при регистрации в вебмастере - прекрасно залился прежний роботс. Потом сделала редирект с ввв на без ввв. И яндекс перестал загружать роботс в принципе. Написала им.
    Ответ следующий:
    У Вас настроен редирект с главной страницы на страницу без www . Если Вы уберете редирект, файл будет успешно проверен.

    Как быть? Это же ненормально.

    Заранее благодарю.
  2. Razboyni4eG

    Razboyni4eG На форуме с: 6 апр 2011 Сообщения: 372

    Рекомендую установить на сайт google analytics (статистика по сайту) и панель вебмастера от гугла (можно завязать на analytics). В панели есть подробные данные по ошибкам индексирования: заблокированные robots.txt, 404 not found, битые ссылки и пр.
    1 человеку нравится это.
Статус темы:
Закрыта.