Проверить дубли страниц на сайте
Дубли — это когда поисковая система видит на сайте несколько страниц, отвечающих на один и тот же вопрос. Она выбирает из них одну, а остальные считает менее полезными версиями той же. Так теряются целые разделы каталога при том, что тексты на них разные.
Что именно смотрит проверка
- —Пары страниц с совпадающим текстом — сравнение по пятёркам слов без шапки, подвала и меню
- —Группы страниц с одинаковым Title
- —Группы страниц с одинаковым H1
- —Сколько адресов в карте сайта и сколько из них удалось сравнить
- —Соблюдение robots.txt: закрытые от обхода страницы не читаем
Почему это влияет на поиск
Из десяти одинаковых страниц в поиск попадает одна
Поисковая система не наказывает за дубли, она просто выбирает лучшую и перестаёт показывать остальные. Для каталога это означает, что девять карточек из десяти перестают приводить людей, хотя формально они есть и открываются.
Дубли тратят обход
Робот приходит с ограниченным вниманием. Если оно уходит на десять версий одной страницы, новым разделам не достаётся ничего. Мы видели это на своём сайте: девять десятых дневного обхода однажды ушло в раздел, который поиск всё равно не берёт.
Одинаковый Title — самый частый и самый дешёвый в исправлении случай
Обычно это шаблон, в который подставили только название товара или города. Правится один раз в шаблоне и сразу на всех страницах сразу, а эффект виден быстрее, чем от переписывания текстов.
Введите адрес — покажем за 30 секунд
Без регистрации. Проверка идёт по этой странице сайта и заодно показывает остальные заметные ошибки, если они есть.
Что обычно находим по этой проверке
Карточка товара в нескольких категориях
Один товар доступен по трём-четырём адресам через разные разделы каталога. Тексты совпадают полностью, различается только путь.
Города, размноженные подстановкой
Двадцать страниц с одинаковым текстом, где меняется только название города. Мы сами закрыли у себя сорок две подобные страницы после того, как поиск дважды отказался их брать.
Постраничная навигация без canonical
Вторая и третья страницы списка повторяют описание раздела целиком, а отличаются только набором карточек.
Как чинить то, что нашлось
Развести шаблоны по смыслу
Если заголовки генерируются, в шаблон нужно подставлять не только название, но и то, чем страница отличается: город, услугу, тип, характеристику. Иначе шаблон сам и производит дубли.
Склеить адреса, а не тексты
Часть дублей — это не разные страницы, а один текст по нескольким адресам: со слэшем и без, с параметрами сортировки, с www и без. Лечится редиректами и canonical, переписывать там нечего.
Объединить то, что отвечает на один вопрос
Если две страницы правда про одно и то же, лучше сделать из них одну сильную и поставить редирект со второй. Две слабые проигрывают одной хорошей, и это тот случай, когда меньше страниц значит больше трафика.
Если чинить некому или непонятно, с чего начинать, — это и есть наша работа: SEO-продвижение сайта, а сколько это стоит — на странице стоимость продвижения.
Вопросы про дубли страниц
До двадцати пяти, и берём их из карты сайта. Обходить сайт по ссылкам мы намеренно не станем: карта — это то, что владелец сам отдал поисковым системам, а обход чужого сайта с нашего адреса был бы уже сканером. Если карты нет, мы честно об этом скажем.
Мы считаем долю совпавших пятёрок слов относительно меньшей из двух страниц. От 70% — дубль, от 45% — стоит посмотреть. Сравнение идёт без шапки, подвала и меню: с ними любые две страницы одного сайта совпадают примерно на треть, и мера теряет смысл.
Нет, штрафа за них не бывает. Происходит другое: из группы одинаковых страниц выбирается одна, а остальные перестают показываться. Формально с сайтом всё в порядке, фактически часть страниц не работает.
Что ещё можно проверить бесплатно
Отвечает ли сайт и с каким кодом
Признаки платформы в разметке страницы
Есть ли sitemap.xml и отдаётся ли он кодом 200, а не через переадресацию
Есть ли на странице разметка JSON-LD и разбирается ли она без ошибок
Есть ли robots.txt и отдаётся ли он кодом 200
Title: есть ли, длина, не обрезается ли в выдаче, не повторяется ли на других страницах
Время ответа сервера — сколько проходит до первого байта
Мета-тег robots и заголовок X-Robots-Tag: не закрыта ли страница от индексации
Все проверки сразу: метатеги, скорость, индексация, разметка и мобильная версия — больше двадцати параметров.