Индексация сайта. Методы ускорения

технические ошибки – страницы с «мусором», неправильный robots.txt и т.п.;

домен под санкциями;

сайт плохо структурирован.

Ответы на решения этих проблем могут стать темой не одной статьи. Поэтому представим, что ваш сайт идеальный – корректный robots.txt, грамотная перелинковка, оптимизированный контент. Но весь ресурс или его часть все равно не индексируются. Для начала проверим видимость сайта операторами «url» в Яндексе (url:http://имя сайта) и «info» в Google (info:http://имя сайта) – вводим каждый в нужном поисковике.

Действия, если документа на сайте нет в выдаче:

Вносим новую дату обновления и приоритетность обхода в sitemap.xml:

Ставим ссылки на все посадочные страницы при неполной индексации;

Составляем sitemap.xml только из не проиндексированных страниц, если поисковый робот почему-то не берет их в индекс.

Пользуемся инструментами вебмастеров в Яндексе «Переобход страниц» и в Google «Просмотреть как Googlebot». Впрочем, эти инструменты приводят робота поисковика на страницу, но не гарантируют индексацию.

Размещаем временные внешние ссылки, пока страница индексируется. Их можно купить на бирже ссылок, таких как Sape.

Получаем ссылки с реальных аккаунтов из социальных сетей. Проблема – качественные ссылки из сетей не продаются на биржах.

Генерируем быстрый объемный трафик на ресурс с помощью e-mail рассылок или раскрутки на профильных форумах.

Делаем перелинковку на сайте – либо ставим ссылки бессистемно (они поменяются при обновлении страницы), либо по схеме перелинковки (например, закольцованные статичные ссылки по ID страниц).

Ставим ссылки с главной страницы на документ, не попавший в индексацию.

Если результата от указанных методов нет, при этом сайт «белый», необходим технический анализ ресурса.

Иногда встречаются проекты с такой проблемой – их запросов нет в ТОП. Тогда нужно сначала проверить индексацию, а затем кластеризацию – грамотную расстановку ключей в документе. От подобных ошибок не застрахованы даже SEO специалисты с опытом.

Случаи с индексацией могут быть и сложнее:

Технические сбои поисковиков. Два варианта – подождать или сменить домен. Из практики: ресурс не попадал в ТОП по всем запросам, проблемы с индексацией отдельных страниц. Применили все методы, однако поддержка Яндекс признала технические ошибки со стороны поисковика. До 4-х месяцев ресурс работал с проблемами, дело шло к смене доменного имени. Вдруг однажды индексация прошла и сайт вошел в ТОП.

Технические ошибки сайта. Выход: обнаружить и исправить. Среди них:

СМS генерирует страницы с мусором, а бот тратит ресурс на данные документы. Нужно их закрыть в robots.txt, а лучше – удалить навсегда.

Сервер выдает некорректный ответ. Не все это проверяют, хотя никто из разработчиков не застрахован от ошибок.

Сайт с плохой историей. Выход: смена доменного имени. Это негативно скажется на всем ресурсе. Поэтому проверка истории домена, всех упоминаний о нем – необходимо и обязательно.

Не всё из перечисленного поможет решить проблему с индексацией. Но основные и чаще всего встречающиеся – изложены в материале.