Яндекс — инструменты для вебмастера
Первым делом, естественно, нам интересно сколько страниц сайта находится в поиске. В левой колонке находим Индексирование сайта — Страницы в поиске . Наблюдаем, все ли проиндексированы страницы, и нет ли лишних.
Последнее — также плохо, как и плохая индексация. Поскольку ненужные страницы в индексе, те, что не должны были туда попасть, создают плохое впечатление о вашем сайте — во-первых, появляется много дублированных страниц с повторяющимся контентом, значит текст уже становится неуникальным. А, как мы знаем, уникальность текста на сайте очень важна для продвижения.
Во-вторых, такие «мусорные» страницы замедляют индексацию новых, хороших, которые проиндексировать желательно.
Как бороться с дублированием страниц? Об этом мы позаботились, когда составляли robots.txt . Мы прописали запрет на индексирование всего, что нежелательно. Эта мера неплохо помогает с поисковиком Яндекс, по крайней мере я лишних страниц в индексе не наблюдаю.
А вот Google не очень-то реагирует на robots.txt и часть страниц, те, что запрещены, все же попали в индекс. Такую ситуацию я наблюдаю на многих сайтах — очень много страниц в индексе google, и с каждым днем они все увеличиваются, по мере того, как прибавляются комментарии на блоге.
Это очень плохо, так сайт может понизиться в поисковой выдаче google, или чего доброго — выпасть совсем. С этим нужно что-то делать. Мы обязательно займемся этим в следующей статье, когда будем разбирать особенности регистрации и панель инструментов вебмастера Google.