Как проверить индексацию сайта

Индексация — это попадание страниц сайта в базу поисковой системы. Пока страница не проиндексирована, найти её через поиск невозможно: для Яндекса и Google её как будто не существует. Поэтому первое, что стоит проверить при продвижении, — сколько ваших страниц в индексе и все ли нужные туда попали.

Как узнать число страниц в индексе

Самый быстрый способ — специальный оператор поиска. Введите в Яндексе или Google запрос вида site:вашсайт.ru — поисковик покажет страницы этого сайта в индексе и их примерное количество. Ещё точнее — данные в панелях вебмастеров: Яндекс.Вебмастер и Google Search Console показывают, сколько страниц проиндексировано, какие исключены и почему.

Сколько страниц должно быть в индексе

Идеально, когда в индексе все нужные страницы и нет лишних. Сравните число в индексе с реальным количеством полезных страниц сайта. Если в индексе намного меньше — часть контента не доходит до поиска. Если намного больше — туда попал мусор: дубли, страницы фильтров, технические адреса. И то и другое стоит поправить.

Почему страницы не индексируются

Частые причины, по которым страница не попадает в поиск:

• она закрыта в robots.txt или мета-тегом noindex;
• на неё нет ссылок — робот просто не нашёл к ней путь;
• страница новая — роботу нужно время, чтобы её обойти;
• дубль или слишком похожий на другую страницу контент;
• сайт медленный или часто недоступен, и робот не успевает всё обойти.

Как ускорить индексацию

Чтобы новые страницы быстрее попадали в поиск: добавьте карту sitemap.xml и укажите её в Вебмастере; вручную отправляйте важные страницы на переобход через панели вебмастеров; делайте внутреннюю перелинковку, чтобы у робота были пути ко всем страницам; следите за скоростью и доступностью сайта. Чем удобнее роботу обходить сайт, тем быстрее всё индексируется.

Как проверить индексацию одной страницы

Иногда нужна судьба не всего сайта, а конкретной страницы. Способов три. Самый быстрый — вбить её адрес в поиск целиком: если страница в индексе, она найдётся первой по своему же URL. Точнее — оператор url: в Яндексе (например, url:site.ru/stranica). А самый надёжный — инструмент «Проверить статус URL» в Яндекс.Вебмастере и аналогичная проверка в Google Search Console: они прямо скажут, в индексе страница или нет, и если нет — почему.

Почему в индексе больше страниц, чем в карте

Частый повод для паники: в sitemap.xml 150 адресов, а в индексе 300. На деле это обычное явление и не всегда проблема. В индексе со временем накапливаются старые удалённые URL, страницы с параметрами и метками, варианты со слешем и без, адреса, найденные роботом по ссылкам. Плохо, когда наоборот — в индексе заметно меньше, чем полезных страниц: значит, часть контента до поиска не дошла. А разбухший индекс стоит почистить от дублей и мусора, чтобы робот не тратил на них силы.

Что делать, если страница выпала из индекса

Страница была в поиске и пропала — разберём по шагам. Сначала исключите технику: не закрылась ли она случайно в robots.txt или мета-тегом noindex, отдаёт ли код 200, нет ли ошибочного редиректа или canonical на другую страницу. Если технически всё чисто — причина обычно в качестве: поисковик мог счесть страницу малоценной или дублирующей. Тогда помогает доработка контента: больше пользы, уникальности, актуальности. После правок отправьте страницу на переобход в Вебмастере — это ускорит возвращение.

Чем отличается индексация в Яндексе и Google

Два поисковика индексируют по-разному, и это нормально. Google обычно подхватывает новые страницы быстрее и держит в индексе больше. Яндекс обходит сайты реже и строже относится к качеству — у него страница может «висеть» в ожидании дольше. Поэтому проверяйте индексацию в обеих панелях отдельно и не пугайтесь, если цифры расходятся. Ускорить попадание в индекс помогает протокол IndexNow: он мгновенно сообщает поисковикам об обновлениях — подробнее в статье про IndexNow.

Индексация — это вход в поиск: без неё всё остальное продвижение бессмысленно. Регулярно проверяйте, все ли нужные страницы в индексе, и убирайте лишние. Как это вписано в общую работу — в гайде как раскрутить сайт самостоятельно.