Чтобы ускорить индексацию сайта, нужно помочь поисковику найти страницы и убедиться, что ничто не мешает их добавить. Базовый набор действий: подключить сайт к панелям вебмастера Яндекса и Google Search Console, сгенерировать и отправить карту сайта (sitemap.xml), проверить, что нужные страницы не закрыты в robots.txt и мета-теге noindex, и вручную отправить важные страницы на переобход. Свежая страница при этом попадает в поиск за часы-дни, а не за недели. Ниже - все способы ускорить индексацию и разбор причин, почему страницы упорно не индексируются.

Как поисковик находит страницы. Робот обходит сайт по ссылкам и по карте сайта, скачивает страницы, оценивает их и добавляет в индекс - базу, из которой строится выдача. Пока страницы нет в индексе, её невозможно найти в поиске ни по какому запросу. Ускорить индексацию - значит сократить путь от «страница создана» до «страница в базе поисковика».

Как ускорить индексацию: рабочие способы

  1. Подключите панели вебмастераДобавьте и подтвердите сайт в Яндекс.Вебмастере и Google Search Console. Это прямой канал связи с поисковиком: через него отправляют страницы и видят проблемы индексации.
  2. Настройте карту сайтаSitemap.xml - список всех страниц для робота. Сгенерируйте её и укажите в панелях вебмастера и в robots.txt. Для растущего сайта карта должна обновляться автоматически при добавлении страниц.
  3. Отправьте страницы на переобходВ обеих панелях есть инструмент переобхода: вставляете адрес новой или обновлённой страницы - робот приходит быстрее обычного. Лимиты есть, но на важные страницы их хватает.
  4. Свяжите страницу внутренними ссылкамиСтраница без единой ссылки на неё - сирота, робот может её не найти. Поставьте ссылки с уже проиндексированных страниц: перелинковка ускоряет обход.
  5. Проверьте robots.txt и noindexУбедитесь, что нужные страницы не закрыты от индексации по ошибке. Это причина номер один, почему страницы не попадают в поиск.
Проверьте это в первую очередь. Самая частая причина, почему сайт не индексируется - он случайно закрыт от поисковиков. Директива Disallow в robots.txt, мета-тег noindex, галочка «закрыть от индексации» в настройках движка, оставшаяся с этапа разработки. Один неверный символ в robots.txt способен убрать из поиска весь сайт. Как это лечится, разбирали в материале про то, что robots.txt закрыл сайт от индексации.

Почему страницы не индексируются

ПричинаПризнакРешение
Закрыто в robots.txtСтраница помечена «запрещена в robots»Убрать Disallow для нужных страниц
Мета-тег noindexВ коде страницы noindexУбрать тег в настройках движка
Нет в карте сайта и без ссылокРобот не знает о страницеДобавить в sitemap и перелинковать
Дубли и низкое качество«Страница-дубль» в отчётеУникализировать или склеить
Медленный или падающий сайтРобот не может обойтиУскорить сайт, стабилизировать хостинг
Новый сайт, мало доверияИндексация идёт медленноВремя, контент, внешние сигналы

Страницы не попадают в поиск, а причину не найти?

Проведём аудит индексации: проверим robots.txt, карту сайта, noindex, дубли и техническое здоровье. Настроим всё так, чтобы новые страницы индексировались за дни. Аудит - бесплатно.

Наладить индексацию

Сколько времени занимает индексация

Для сайта с историей и настроенной картой новая страница обычно индексируется за несколько часов-дней, особенно после ручной отправки на переобход. Новый сайт поисковики оценивают осторожнее: первичная индексация может занять от нескольких дней до пары недель, пока накапливается доверие. Если страница не в индексе больше двух недель при правильных настройках - это сигнал проблемы: техническая ошибка, дубль или низкое качество контента. Индексация - первый шаг продвижения: без неё бессмысленны и семантика, и тексты. С чего начинать SEO по шагам, разбирали в материале про план первых 30 дней.

Совет. Если важные страницы внезапно пропали из поиска, не паникуйте и не переделывайте всё подряд. Сначала проверьте панель вебмастера: там поисковик прямо пишет, почему страница исключена - noindex, дубль, ошибка загрузки. Причина почти всегда конкретна и чинится точечно. Порядок действий при выпадении из поиска мы описали в статье про то, что делать, если сайт пропал из поиска.

Частые вопросы про индексацию

Как быстро проверить, в индексе ли страница?
Скопируйте адрес страницы и вставьте в поиск - если она в индексе, покажется в выдаче. Точнее - через инструмент проверки URL в панели вебмастера: он покажет статус страницы, дату последнего обхода и причину, если страница не проиндексирована. Это самый надёжный способ понять, что происходит.
Ускорит ли индексацию частое обновление сайта?
Да, косвенно. Сайты, которые регулярно обновляются и публикуют новое, робот обходит чаще - он привыкает, что здесь появляется свежий контент. Заброшенный сайт робот навещает редко. Регулярные публикации, живой блог, обновление товаров - всё это приучает поисковик заходить чаще и индексировать быстрее.
Нужно ли отправлять на переобход каждую страницу вручную?
Нет, для большинства страниц хватает карты сайта и внутренних ссылок - робот найдёт их сам. Ручной переобход нужен для важных или срочных страниц: новая услуга, обновлённая цена, статья под горячий запрос. На весь сайт с тысячами страниц ручной отправки не напасёшься, да и лимиты не позволят.
Почему Google проиндексировал, а Яндекс нет (или наоборот)?
Это нормально: у поисковиков разные скорость и алгоритмы обхода. Google часто индексирует быстрее, Яндекс - тщательнее оценивает перед добавлением. Работайте с обеими панелями вебмастера отдельно, отправляйте страницы на переобход в каждой. Со временем, если сайт технически здоров, страницы попадут в индекс обоих поисковиков.

Итог: ускорить индексацию - значит помочь роботу найти страницы (карта сайта, ссылки, переобход) и убрать всё, что мешает их добавить (robots.txt, noindex, дубли, сбои). Базовые настройки делаются один раз и работают дальше сами. Если страницы упорно не индексируются, а причину найти не удаётся, мы разберёмся с этим в рамках продвижения и технической оптимизации сайта: найдём, что мешает попасть в поиск, и настроим индексацию так, чтобы новые страницы появлялись в выдаче за дни. Аудит индексации делаем бесплатно.