Дублированный контент: почему это плохо и как исправить

Дублированный контент — одна из технических проблем, которая незаметно «съедает» позиции в Яндексе. Сайт может выглядеть нормально, но из-за дублей поисковик путается какую страницу показывать в выдаче — и в итоге не показывает ни одну.

Что считается дублированным контентом

Дубли — это когда одинаковый или почти одинаковый контент доступен по нескольким URL-адресам. Яндекс видит несколько страниц с одним текстом и не понимает какую из них считать «главной» — и какую продвигать по запросам.

Откуда берутся дубли — 5 типичных источников

1. HTTP и HTTPS версии

Если сайт доступен и по http://домен.ru и по https://домен.ru — это уже два разных адреса с одинаковым контентом. Нужен 301-редирект с http на https.

2. С www и без www

Аналогично: www.домен.ru и домен.ru — технически разные адреса. Настройте редирект одной версии на другую.

3. URL с параметрами

Страница товара может быть доступна по нескольким адресам: /product/123, /product/123?color=red, /product/123?utm_source=ya. Для поисковика это три разные страницы с одним контентом. Закройте параметры через robots.txt или canonical.

4. Страницы с / и без /

домен.ru/page и домен.ru/page/ — тоже потенциальные дубли. Настройте единый формат URL на всём сайте.

5. Скопированный контент

Если вы скопировали описания товаров с сайта производителя или с другого ресурса — это внешний дубль. Яндекс определит что оригинал не у вас и будет продвигать источник, а не ваш сайт.

Как найти дубли на своём сайте

• Яндекс.Вебмастер → Диагностика → показывает страницы исключённые из индекса, часть из них — дубли
• Поиск Яндекса: введите уникальный фрагмент текста со своей страницы в кавычках и посмотрите сколько результатов появится
• Screaming Frog SEO Spider (бесплатно до 500 URL): сканирует сайт и находит дубли title, description и контента

Как исправить дубли

Canonical-тег

На дублирующей странице укажите какая страница является «главной»:

<link rel="canonical" href="https://домен.ru/главная-страница/">

Это говорит Яндексу: «эта страница — копия, продвигай вот ту».

301-редирект

Если страница является техническим дублем (http/https, www/без www) — настройте редирект. Пользователь и робот автоматически попадут на правильный URL.

Закрыть в robots.txt

Страницы с UTM-параметрами и фильтрами можно закрыть от индексации через robots.txt — тогда Яндекс их просто не будет сканировать.

Важно: не путайте внутренние и внешние дубли

Внутренние дубли (на вашем сайте) решаются canonical и редиректами. Внешние дубли (ваш текст скопирован где-то ещё) — другая проблема. В этом случае нужно либо переписать текст, либо жаловаться через Яндекс.Вебмастер на плагиат.

Если дубли — часть более широкой технической проблемы, нужен полноценный SEO-аудит.