Добавили новый товар или статью, а в поиске их нет неделями. Причина: страница ещё не проиндексирована, поисковик до неё не дошёл. Для каталога это прямые потери, ведь непроиндексированный товар не приносит заявок. Ниже разберём, что такое индексация сайта простыми словами, чем она отличается в Яндексе и Google, как ускорить индексацию страниц и что делать, если они не попадают в поиск.
Что такое индексация
Индексация сайта это процесс, при котором поисковый робот обходит сайт, находит страницы и добавляет их в свою базу, индекс. Только после этого страница может показываться в выдаче. Простыми словами, индекс это каталог библиотеки: книга может стоять на полке, но пока её нет в каталоге, её никто не найдёт.
Индексация проходит в три шага: робот находит адрес (по ссылке, из карты сайта или по уведомлению), скачивает страницу и оценивает её. Если страница полезная и не дублирует другую, она попадает в индекс. На новом или большом сайте робот доходит до всех страниц не сразу, отсюда задержка. Подробнее о том, как устроена сама база поисковика, в материале Поисковый индекс.
Индексация сайта в Яндексе и Google
Индексация сайта в поисковых системах идёт по одной логике, но у Яндекса и Google разные инструменты и скорость.
| Яндекс | ||
|---|---|---|
| Где управлять | Яндекс Вебмастер | Google Search Console |
| Ручная отправка | «Переобход страниц», списком до 700 адресов в сутки | «Проверка URL», по одному адресу |
| Автоматическое уведомление | Поддерживает протокол IndexNow | IndexNow не поддерживает, опирается на карту сайта и ссылки |
| Отчёт об индексе | «Страницы в поиске», с причиной исключения | «Индексирование страниц», с причиной исключения |
Для российского производства важнее Яндекс: по данным Яндекс Радара за первый квартал 2026 года, его доля в поиске России 69,8%. Но настраивать стоит оба инструмента: работа почти одинаковая.
Как ускорить индексацию
- Карта сайта. Sitemap.xml показывает роботу все страницы разом и даты их изменения.
- Переобход в Вебмастере. В Яндекс Вебмастере и Search Console можно вручную отправить новые страницы на индексацию.
- IndexNow. Сайт сам сообщает поисковику о новых и изменённых адресах сразу после публикации.
- Перелинковка. Ссылки с уже проиндексированных страниц ведут робота на новые.
- Скорость и отсутствие ошибок. Быстрый сайт робот обходит полнее, экономя ресурс на обход.
- Регулярное обновление. На живой сайт робот заходит чаще.
IndexNow: уведомление вместо ожидания
IndexNow это протокол, который в 2021 году запустили Microsoft Bing и Яндекс. Вместо того чтобы ждать, пока робот сам зайдёт, сайт отправляет поисковику список изменённых адресов.
«IndexNow это простой способ для владельцев сайтов мгновенно сообщать поисковым системам о последних изменениях контента на своём сайте».
Мы используем IndexNow на своём сайте, но осознанно. Отправляем только страницы, где изменился смысл: новую статью, переписанный текст, новый заголовок. Технические правки не отправляем. Пример из нашей практики: когда мы проставили размеры всем картинкам, изменились 1 070 страниц, но только внутри служебных тегов. Отправить их все значило бы сообщить поисковику «сайт переписан целиком», хотя для читателя не изменилось ничего.
Индексация нового сайта
Индексация нового сайта начинается не с ожидания, а с регистрации в инструментах поисковиков. Порядок такой:
- Добавьте сайт в Яндекс Вебмастер и Google Search Console и подтвердите права.
- Проверьте robots.txt: на новых сайтах часто остаётся запрет, поставленный на время разработки.
- Загрузите карту сайта в оба инструмента.
- Отправьте главные страницы на переобход: главную, основные разделы каталога, страницы услуг.
- Поставьте первые внешние ссылки: карточка в Яндекс Бизнесе, профили в отраслевых каталогах, соцсети.
Если новые страницы не индексируются, проверьте, не закрыты ли они в robots.txt, как это часто бывает после переезда с тестовой версии.
Внешние ссылки и индексация
Внешние ссылки, или бэклинки, это ссылки на Ваш сайт с других сайтов. Для индексации они работают как дополнительные двери: робот находит новый сайт или страницу, переходя по ссылке с уже известного ему ресурса. Чем чаще робот видит ссылки на сайт, тем чаще он на него заходит.
Для производства полезные внешние ссылки это отраслевые каталоги, сайты партнёров и дилеров, публикации в профильных изданиях, карточки в картах. Покупать сотни ссылок на биржах ради индексации не нужно: для обхода достаточно нескольких живых упоминаний, а массовые покупные ссылки поисковики умеют распознавать.
Важно, куда ведут внешние ссылки. После переезда сайта мы всегда разбираем выгрузку внешних ссылок из Вебмастера: часть из них обычно ведёт на старые адреса страниц и картинок, которые после переезда отдают ответ «удалено». Такие ссылки не передают ничего. Поэтому при переезде важно сохранить адреса или настроить перенаправления не только для страниц, но и для файлов, на которые ссылаются.
Что мешает индексации
Иногда страницы не индексируются из-за ошибок: закрыты в robots.txt, помечены noindex, ведут через цепочку редиректов, отдают ошибку или сайт слишком медленный. Отдельная причина: робот считает страницу дублем другой или недостаточно полезной. Такое бывает с короткими карточками, которые отличаются только артикулом, и со страницами из одного-двух абзацев. Как писать тексты, которые поисковик считает полезными, в статье SEO-тексты: что это и как писать правильно.
Сколько ждать в норме
Время индексации сайта зависит от того, насколько он живой. На сайте, который обновляется каждую неделю, новая страница обычно попадает в индекс за несколько дней. На сайте, куда последний раз что-то добавляли полгода назад, робот заходит редко, и та же страница может ждать месяц.
«Сканирование может занять от нескольких дней до нескольких недель. Наберитесь терпения и следите за прогрессом».
Тревожный порог простой: если через две недели после публикации страницы нет в индексе, а Вы её отправляли на переобход, дело не в очереди, а в ошибке. Ищите причину, а не ждите дальше.
Пошагово: что нажать в Вебмастере
- Яндекс Вебмастер, раздел «Индексирование» → «Переобход страниц». Вставляете адреса списком и отправляете. Лимит около 700 адресов в сутки на сайт, для точечных публикаций этого хватает с запасом.
- Google Search Console: «Проверка URL» → «Запросить индексирование». Тут по одному адресу, массовой отправки нет, поэтому вручную гоняют только важные страницы.
- Проверяете, что страница есть в карте сайта и что у неё свежая дата изменения. Робот смотрит на неё, чтобы решить, стоит ли перечитывать.
- Ставите на новую страницу хотя бы одну ссылку с той, которая уже в индексе. Со страницы без входящих ссылок робот уходит и возвращается нескоро.
Как пользоваться остальными отчётами, разобрали в статье Яндекс.Вебмастер: что проверять и как использовать.
Когда каталог большой
У сайта завода с тысячами товаров задача разворачивается: проблема не в скорости обхода, а в том, что робот тратит его не на те страницы. Он ходит по бесконечным комбинациям фильтров и сортировок, пока карточки товара ждут очереди.
Что помогает: закрыть от обхода страницы фильтров и сортировок, оставив только те комбинации, под которые есть спрос; убрать битые ссылки и цепочки перенаправлений, на каждой из них робот теряет заход; разложить карту сайта на несколько файлов, отдельно каталог, отдельно блог. Тогда видно, какой раздел индексируется плохо, и не приходится гадать.
Как проверить, что страница действительно в индексе
Не по тому, что она открывается: открывается она у всех. В Вебмастере есть отчёт «Страницы в поиске»: там видно и то, что вошло в индекс, и то, что робот исключил, с указанием причины. Причина важнее самого факта: «недостаточно качественная» и «дубль» лечатся совершенно по-разному.
Второй способ: поиск по точной фразе с Вашей страницы в кавычках. Если страница в индексе, она найдётся. Если нет, вернётся пусто.
Новые страницы долго не появляются в поиске? Найдём причину при техническом аудите сайта: проверим robots.txt, карту сайта, перенаправления, дубли и то, как робот видит каталог. Первый разбор бесплатно, а настройку индексации возьмём в рамках технической проверки сайта.
