Поисковый индекс

Как это работает

Поисковый робот обходит страницы сайтов, считывает их содержимое и передаёт данные в индекс. Там информация хранится в структурированном виде: по словам, ссылкам и другим признакам, что позволяет системе за доли секунды подобрать подходящие страницы под запрос. Когда пользователь ищет что-то, поиск обращается не ко всему интернету напрямую, а именно к этому заранее собранному индексу.

Зачем это бизнесу

Если страница не попала в индекс, она не появится в поиске, какими бы хорошими ни были её текст и предложение. Поэтому базовая задача SEO: сделать так, чтобы важные страницы сайта корректно индексировались: были доступны роботу, не закрыты по ошибке и не дублировались. Это фундамент, без которого остальная работа над продвижением не даёт результата.

Почему страница может не попасть в индекс

Причин обычно четыре. Робот до неё не дошёл: на страницу нет внутренних ссылок и её нет в карте сайта. Робот дошёл, но получил запрет: noindex или закрытие в robots. Страница попала, но её сочли дублем другой. И четвёртая, самая обидная: страница слишком похожа на десятки соседних и не несёт своего содержания. Первые три чинятся техникой за день, четвёртая только текстом.