Перейти к содержимому
SEO/Опубликовано 3 сентября 2026 г./5 мин

42 страницы, которые робот прочитал и не взял в поиск

Что такое индексация простыми словами и почему «страница есть, а в поиске нет» — нормальное состояние. Наш провал: 42 страницы переписали до 92% своего текста, робот их скачал, а в поиск не вошла ни одна.

42 страницы, которые робот прочитал и не взял в поиск
С
Команда NEXFORCE
SEO-эксперт NEXFORCE

Индексация — это, простыми словами, укладка вашей страницы в базу поисковика. Звучит как выключатель: есть страница — есть в поиске. На деле это три разных шага, между которыми проходят дни и недели:

  1. Обход. Робот пришёл и скачал страницу. Это видно в Вебмастере.
  2. Индексация. Он решил, стоит ли класть её в базу.
  3. Показ. Страница появилась в выдаче по какому-то запросу.

Первое не гарантирует второго, второе — третьего. Мы проверили это на себе, причём дорого. Ниже разбор собственного провала со всеми цифрами, включая нелестные.

Что мы построили

У нас семь услуг и шесть ниш: онлайн-торговля, медицина, юристы, недвижимость, строительство и ИТ. Семь на шесть — сорок два разворота «услуга для ниши». Каждый отвечает на свой вопрос: чем продвижение медицинского центра отличается от продвижения интернет-магазина.

Сначала мы закрыли их от индексации: по форме это матрица, а матрица похожа на дорвеи. Потом измерили. Пересечение текста у одной услуги в разных нишах — 13–18%, внутри одной ниши между услугами совпадают три предложения из тридцати трёх. Прежняя оценка «60–65% дублей» оказалась артефактом: считали вместе с шапкой и подвалом, то есть меряли обвязку сайта, а не текст.

Тогда мы переписали содержание, довели долю собственного текста до 92%, получили 0 замечаний из 42 от внутреннего шлюза качества и 7 августа 2026 года открыли всю матрицу для индексации.

Робот пришёл и всё прочитал

Дальше самое важное — здесь обычно и ошибаются. Робот матрицу не пропустил, а забрал в первую очередь:

ДатаСкачано роботомИз них наша матрица
7 августа5146
8 августа6
9 августа11

Девяносто процентов дневного внимания робота ушло сюда. Он прочитал их целиком. Технических причин не осталось: ни закрытого robots.txt, ни медленной отдачи, ни ошибок ответа — это мы проверили первым делом, и всё было чисто.

А в поиск за пять дней не вошла ни одна. Ноль из сорока двух.

Для сравнения — в те же дни двенадцать терминов нашего словаря, опубликованных 11 августа, оказались в поиске 12-го. Один сайт, один робот, одни сутки на всё. Конвейер был здоров, отдельно стояла именно матрица.

12 августа мы закрыли все сорок две обратно в noindex, а содержание подняли в родительские разделы ниш вроде продвижения сайтов автосервисов, которые индексируются нормально. Причина не «текст плохой», а арифметика обхода: робот тратил день на то, что не берёт, пока мы возвращали в поиск кейсы и услуги.

В чём мы ошиблись: первое

21 августа две из сорока двух вошли в поиск Яндекса. Через девять дней после того, как мы их закрыли. По скачиванию от 10 августа — вердикт вынесли по версии, которую робот забрал ещё в открытом окне, и он просто ехал две недели.

Это /services/seo-promotion/construction/ и /services/seo-promotion/ecommerce/. Проверено 3 сентября 2026 года: обе по-прежнему в выдаче, хотя запрет индексации стоит на них почти месяц. Мы вынесли приговор на пятый день, ответ пришёл на четырнадцатый.

Отсюда правило. Пустой результат через пять дней означает ровно одно: прошло пять дней. Наши замеры дают двое суток типичным сроком для здоровой публикации — это срок «как быстро бывает», а не срок для приговора.

В чём мы ошиблись: второе, и оно хуже

Мы мерили одним поисковиком. Все выводы выше — про Яндекс. А в Google матрица работала всё это время.

За 5 июня — 1 сентября 2026 года показы в Google получили 13 адресов из 42: 184 показа и один клик. По датам:

ПериодАдресов с показамиПоказовКликов
до закрытия, 5 июня — 11 августа121271
после закрытия, 12 августа — 1 сентября5570

Вторая строка поучительна сама по себе: запрет индексации не срабатывает мгновенно. Google показывал закрытые адреса ещё три недели — до переобхода он о запрете не знает.

Позиции честные: в среднем 60–90 место, настоящего трафика мы не получали нигде. Но фраза «не вошла ни одна» была верна для одной поисковой системы и для пяти дней. Мы записали её как факт про сайт, а получился факт про наш способ смотреть.

Что осталось верным

Все сорок две живы, отдают ответ 200 и остаются закрытыми от индексации — проверили каждую 3 сентября. Открывать обратно не собираемся, но по другой причине, чем думали в августе. Не «робот отверг», а конкуренция с родительскими разделами ниш за один запрос: внимание робота дороже тратить на страницы, которые показываются.

Числа по сайту за этот период, без подгонки: в поиске Яндекса было 48 адресов (7–9 августа), стало 91 к 12 августа, 151 к 25 августа и 133 на 2 сентября. Приписывать рост закрытию матрицы мы не будем — в те же недели вышли десятки новых материалов, а к сентябрю число снизилось. Честный вывод один: закрытие не помешало.

Как проверить это у себя

Порядок, который мы теперь считаем правильным, стоит трёх минут:

  • Посмотрите, скачан ли адрес. В Вебмастере это отдельная цифра. Скачан, а в поиске нет — техническую часть закрывайте: причина в содержании либо во времени.
  • Не судите раньше двух недель. Двое суток — это «бывает», а не норматив. Наш ответ пришёл на четырнадцатый день.
  • Смотрите обе системы. Google и Яндекс расходятся не в мелочах: один и тот же материал числился «нигде» в одной системе и собирал показы в другой.
  • Проверьте, не спорит ли новый материал с вашим же. Наша ошибка была в этом, а не в тексте: матрица целилась в запросы, уже закрытые разделами ниш.

И отдельно — про вердикт «малоценная страница», который приходит в этой истории чаще всего, и про то, что даёт молодой домен за два месяца: показы приходят быстро, клики — нет, и путать эти два события не стоит.

Вопросы и ответы

FAQ по теме

Что такое индексация простыми словами?+
Это второй из трёх шагов, которые проходит страница. Сначала робот её скачивает, потом решает, класть ли в базу, и только после этого она может попасть в выдачу. Слово «проиндексирована» обычно означает второй шаг, а человек под ним чаще всего имеет в виду третий — «показывается людям». Между ними может быть недели разницы, и именно в этот зазор попадают почти все вопросы «страница есть, а в поиске нет».
Через сколько новая страница попадает в поиск?+
По нашим замерам здоровая новая страница входит в поиск Яндекса примерно за двое суток: двенадцать терминов словаря, опубликованных 11 августа 2026 года, были в поиске 12-го. Но обратное неверно — отсутствие через двое суток ещё ничего не доказывает. Две наши страницы вошли в поиск через две недели после того, как робот их скачал.
Как понять, что робот страницу видел?+
В Яндекс.Вебмастере есть отдельные цифры: сколько адресов скачано и сколько находится в поиске. Если страница скачана, но в поиск не попала, техническую часть можно закрывать: дело не в доступе, не в robots.txt и не в скорости. Дальше разговор только о содержании и о том, отвечает ли страница на запрос лучше тех, что уже в выдаче.
Помогает ли переписать текст, если страница не индексируется?+
Не всегда. Мы переписали 42 страницы до 92% собственного текста, и в поиск Яндекса за пять дней не вошла ни одна. При этом в Google те же страницы показы получали. Прежде чем переписывать, стоит убедиться, что страница вообще нужна в двух системах сразу и что прошло достаточно времени.