Бесплатная проверка

Проверить индексацию сайта

Команда NEXFORCE·SEO-специалистыОпубликовано Проверено

Страница может быть отличной и всё равно отсутствовать в поиске — просто потому, что робот до неё не дошёл или ему запретили. Прежде чем дописывать тексты, стоит убедиться, что страницу вообще пускают в индекс.

Что проверяем

Что именно смотрит проверка

  • Мета-тег robots и заголовок X-Robots-Tag: не закрыта ли страница от индексации
  • Canonical: не указывает ли страница на другую как на основную
  • robots.txt: не попадает ли раздел под запрет обхода
  • Код ответа сервера: отдаёт ли страница 200, а не редирект или ошибку
  • Наличие страницы в карте сайта и дата её последнего изменения
  • Наличие содержимого в исходном коде — видит ли робот текст без выполнения скриптов
Зачем

Почему это влияет на поиск

Самая частая причина — страница ни с чем не связана

Мы измеряли это на собственном сайте: страницы с одной входящей ссылкой из содержимого держались нулём в поиске, а те, на которые вело около сорока, — полным составом. Робот не видит смысла обходить адрес, на который никто не ссылается, сколько бы текста там ни было.

Запрет часто ставят случайно

Noindex, оставшийся с разработки, canonical на главную во всём шаблоне, закрытый в robots.txt раздел с фильтрами, в котором заодно оказался каталог. Всё это встречается чаще, чем кажется, и обнаруживается только проверкой.

Карта сайта может быть прочитана давно

Поисковая система перечитывает карту не мгновенно. Бывает, что в панели вебмастера видно число адресов вдвое меньше настоящего просто потому, что последнее чтение было три недели назад. На это можно повлиять протоколом IndexNow, минуя карту.

Проверка

Введите адрес — покажем за 30 секунд

Без регистрации. Проверка идёт по этой странице сайта и заодно показывает остальные заметные ошибки, если они есть.

Из практики

Что обычно находим по этой проверке

Страницы есть, ссылок на них нет

Раздел доступен по прямому адресу, но на него не ссылается ничего, кроме карты сайта. Робот доходит до него в последнюю очередь, а часто не доходит вовсе.

Служебные разделы съедают обход

Фильтры, сортировки и поиск по сайту плодят бесконечные адреса. Они не попадут в выдачу, но потратят внимание робота, которого не хватит настоящим страницам.

Страница обойдена, но в поиск не взята

Самый частый и самый неприятный случай: технически всё в порядке, а решение отрицательное. Тогда дело не в доступе, а в том, чем страница отличается от соседних.

Что делать дальше

Как чинить то, что нашлось

Сначала связать, потом дописывать

Прежде чем наращивать текст на непроиндексированной странице, посчитайте, сколько ссылок из содержимого на неё ведёт. Если одна или ноль — сначала ссылки: из разделов по смыслу, а не из подвала.

Проверить запреты по всему шаблону

Ошибки индексации почти всегда шаблонные, а не единичные: если noindex попал на одну страницу типа, он стоит на всех. Проверять надо по типу страниц, а не по одному примеру.

Сообщить о новых страницах напрямую

IndexNow позволяет уведомить поисковые системы об изменениях, не дожидаясь переобхода карты. Яндекс его поддерживает и отвечает подтверждением; для Bing нужно подтвердить домен.

Если чинить некому или непонятно, с чего начинать, — это и есть наша работа: SEO-продвижение сайта, а сколько это стоит — на странице стоимость продвижения.

FAQ

Вопросы про индексация

От нескольких дней до нескольких недель, и зависит это больше от сайта, чем от страницы: у сайта с частым обновлением и хорошей связностью робот заходит чаще. Ускорить можно ссылками из уже проиндексированных разделов и уведомлением через IndexNow.

Робот знает адрес, но не считает нужным его обходить или включать в поиск. Чаще всего дело в слабой связности — на страницу почти никто не ссылается, — либо в том, что похожая страница уже есть и новая не добавляет ничего своего.

Помогает, но квота ограничена, и тратить её стоит на действительно изменившиеся или новые страницы. Отправлять весь сайт разом смысла нет: переобход не заменяет причин, по которым страница не попала в индекс.

Ещё проверки

Что ещё можно проверить бесплатно

Проверить, работает ли сайт

Отвечает ли сайт и с каким кодом

Проверить дубли страниц на сайте

Пары страниц с совпадающим текстом — сравнение по пятёркам слов без шапки, подвала и меню

Узнать, на какой платформе сделан сайт

Признаки платформы в разметке страницы

Проверить карту сайта

Есть ли sitemap.xml и отдаётся ли он кодом 200, а не через переадресацию

Проверить микроразметку сайта

Есть ли на странице разметка JSON-LD и разбирается ли она без ошибок

Проверить robots.txt сайта

Есть ли robots.txt и отдаётся ли он кодом 200

Проверить мета-теги сайта

Title: есть ли, длина, не обрезается ли в выдаче, не повторяется ли на других страницах

Проверить скорость загрузки сайта

Время ответа сервера — сколько проходит до первого байта

Полный SEO-аудит сайта

Все проверки сразу: метатеги, скорость, индексация, разметка и мобильная версия — больше двадцати параметров.