Как найти и удалить дубли страниц в WordPress без потери SEO

Дубли страниц в WordPress обычно появляются не из-за одной ошибки, а из-за набора мелких настроек: архивы тегов, пагинация, параметры в URL, страницы вложений, версии с и без слеша, http и https, www и без www. В итоге поисковик видит несколько адресов с одинаковым или почти одинаковым контентом, а сайт теряет предсказуемость в индексации.

Ниже разберём, как быстро найти такие дубли, что можно закрыть от индексации, а что лучше склеить редиректом или каноническим URL. Без абстракций — только то, что реально проверяется на живом сайте.

Как понять, что у вас именно дубли, а не обычная индексация архивов

Симптомы обычно видны в поисковой консоли и в логике URL. Если одна и та же статья открывается по нескольким адресам, а в индексе всплывают страницы вида /page/2/, ?replytocom=, /attachment/ или параметры сортировки, это уже повод разбираться. Отдельная история — когда WordPress отдаёт страницу вложения вместо самой записи изображения: такие URL часто индексируются без пользы.

Что проверить в первую очередь

• Откройте одну запись в нескольких вариантах URL: со слешем и без, с www и без него, по http и https.
• Посмотрите, не создаёт ли тема или плагин архивы по авторам, датам и тегам без реальной необходимости.
• Проверьте страницы вложений: если они существуют отдельно, это частый источник дублей.
• В Search Console найдите страницы с похожими заголовками и одинаковыми сниппетами.

Если дубли появляются только в выдаче, а не в самом сайте, проблема часто в каноникализации и редиректах. Если же на сайте реально доступны одинаковые страницы по разным адресам, сначала надо закрыть источник, а уже потом чистить индекс.

Диагностика: где искать дубли в WordPress

Начинайте с карты сайта и структуры URL. В WordPress часто дубли создаются автоматически, даже если контент вручную не дублируется. Для диагностики удобно пройтись по четырём зонам: записи и страницы, архивы, медиа, технические параметры.

1. Записи и страницы

Проверьте, не доступны ли записи по нескольким адресам из-за старых редиректов, смены структуры постоянных ссылок или ручных страниц-замен. Иногда после миграции остаются старые URL, а новый адрес уже открыт без редиректа.

2. Архивы и таксономии

Теги, категории, архивы авторов и дат могут индексироваться даже на небольшом сайте. Если у архива мало уникального текста и он повторяет ленту записей, это почти всегда кандидат на закрытие от индексации или на доработку.

3. Страницы вложений

WordPress создаёт отдельные страницы вложений для изображений и файлов. Если их не использовать осознанно, они часто становятся дублями без содержания. В большинстве проектов их либо редиректят на файл, либо на родительскую запись.

4. Параметры в URL

Параметры сортировки, фильтрации, трекинга и комментариев могут порождать множество технических дублей. Не каждый параметр вреден, но каждый надо оценивать отдельно: индексируется ли он, меняет ли контент и нужен ли пользователю.

Пошаговое решение: как убрать дубли без лишнего риска

Ниже порядок, который обычно работает на практике. Сначала выравниваем основной адрес, потом убираем очевидные дубли, затем настраиваем каноникал и только после этого чистим индексацию.

Шаг 1. Зафиксируйте один основной вариант домена и протокола

У сайта должен быть один канонический вариант: https, с www или без него — неважно, но один. Это настраивается на уровне сервера и WordPress-адресов. В админке проверьте Адрес WordPress (URL) и Адрес сайта (URL).

Если нужен редирект на уровне WordPress, можно использовать такой вариант в functions.php или в небольшом mu-plugin:

<?php
add_action('template_redirect', function () {
    if (is_admin() || wp_doing_ajax()) {
        return;
    }

    $host = $_SERVER['HTTP_HOST'] ?? '';
    $uri  = $_SERVER['REQUEST_URI'] ?? '/';

    $target_host = 'example.ru';
    $target_scheme = 'https';

    if ($host !== $target_host || !is_ssl()) {
        $url = $target_scheme . '://' . $target_host . $uri;
        wp_redirect($url, 301);
        exit;
    }
});

На практике редирект лучше делать на уровне nginx или Apache, а не PHP, если есть доступ к конфигу. Но код выше полезен как временная мера или для тестового стенда.

Шаг 2. Уберите страницы вложений из индекса

Если вложения не нужны как отдельные страницы, их лучше редиректить на родительскую запись или сам файл. Для этого можно использовать фильтр attachment_link и редирект на фронтенде.

<?php
add_filter('attachment_link', function ($link, $post_id) {
    $parent_id = wp_get_post_parent_id($post_id);

    if ($parent_id) {
        return get_permalink($parent_id);
    }

    return wp_get_attachment_url($post_id) ?: $link;
}, 10, 2);

add_action('template_redirect', function () {
    if (is_attachment()) {
        $parent_id = get_post_field('post_parent', get_queried_object_id());

        if ($parent_id) {
            wp_redirect(get_permalink($parent_id), 301);
            exit;
        }
    }
});

Если у вас уже есть SEO-плагин, проверьте, не делает ли он это сам. Двойная логика редиректа иногда приводит к цепочкам и петлям.

Шаг 3. Закройте бесполезные архивы от индексации

Категории с нормальным контентом можно оставить, а вот архивы тегов, авторов или дат часто лучше закрыть от индексации, если они не несут ценности. Это можно сделать через SEO-плагин или кодом, если нужен точечный контроль.

Пример для мета robots на архиве тегов и дат:

<?php
add_filter('wp_robots', function (array $robots) {
    if (is_tag() || is_date() || is_author()) {
        $robots['noindex'] = true;
        $robots['follow'] = true;
    }

    return $robots;
});

Важно: не ставьте noindex на всё подряд. Если архив реально полезен пользователю и содержит уникальные описания, его можно оставить в индексе.

Шаг 4. Проверьте canonical на страницах с параметрами

Если на сайте есть фильтры, сортировка или UTM-метки, canonical должен указывать на чистую версию страницы. В большинстве случаев WordPress и SEO-плагин делают это автоматически, но после кастомных шаблонов или нестандартных запросов стоит проверить вручную.

Для проверки откройте исходный код страницы и найдите <link rel="canonical" ...>. Он должен вести на основной URL без лишних параметров, если параметры не меняют содержимое существенно.

Шаг 5. Удалите старые дубли через 301, а не через 404

Если у вас уже есть старые адреса после смены структуры ссылок, их лучше перенаправить на новые. Это касается старых рубрик, переименованных страниц, изменённых URL записей и старых вложений. 404 оставляйте только для реально удалённых материалов, которые не имеют замены.

Простой пример редиректа старого адреса:

<?php
add_action('template_redirect', function () {
    if (is_page('old-about')) {
        wp_redirect(home_url('/about/'), 301);
        exit;
    }
});

Для массовых редиректов удобнее использовать серверные правила или специализированный плагин редиректов. Кодом имеет смысл закрывать точечные случаи, а не строить на нём всю миграцию.

Сравнение подходов: плагин, код или серверные правила

Как проверить, что решение сработало

После правок не ограничивайтесь открытием пары страниц в браузере. Проверьте цепочку целиком: ответ сервера, canonical, robots и индексацию.

• Откройте старый URL через curl -I и убедитесь, что он отдаёт 301, а не 200.
• Проверьте, что у новой страницы один canonical и он ведёт на чистый адрес.
• Посмотрите исходный код архивов: нет ли случайного noindex там, где он не нужен.
• В Search Console отправьте на повторную проверку важные URL и дождитесь переобхода.
• Сравните список проиндексированных страниц до и после изменений, особенно по тегам, вложениям и параметрам.

Команда для быстрой проверки редиректа:

curl -I https://example.ru/old-url/

В ответе должен быть 301 Moved Permanently и заголовок Location с новым адресом. Если видите 302 или цепочку из нескольких переходов, редирект ещё надо упрощать.

Частые ошибки и как их исправить

Ставят noindex вместо редиректа

Если старый URL уже существует и у него есть замена, noindex не решает проблему дубля полностью. Поисковик может ещё долго держать старый адрес в обходе. В таких случаях нужен 301, а noindex — только как дополнительная мера для архивов без ценности.

Оставляют страницы вложений без контроля

Медиафайлы часто индексируются отдельно, особенно если в теме есть ссылки на attachment pages. Если их не закрыть, они превращаются в тонкие страницы без пользы. Исправление: редирект на родительскую запись или на сам файл, если это оправдано.

Делают редирект через несколько промежуточных URL

Цепочка http → https → www → /new-url/ ухудшает скорость обхода и усложняет диагностику. Лучше свести всё к одному шагу на уровне сервера. Если это невозможно, хотя бы уберите лишние переходы в WordPress-коде.

Закрывают от индексации полезные архивы

Иногда категории или теги дают трафик и помогают навигации. Если у архива есть уникальный текст, нормальная структура и он решает задачу пользователя, не надо автоматически ставить noindex. Сначала оцените, есть ли у страницы самостоятельная ценность.

Не проверяют тему и плагины на генерацию дублей

Некоторые темы создают дополнительные шаблоны архивов, а плагины — собственные страницы фильтров. После обновления темы или установки нового SEO-плагина дубли могут появиться снова. Поэтому после любых изменений стоит заново пройтись по списку URL и проверить canonical.

Практические советы по безопасности и производительности

Если вы решаете проблему кодом, лучше вынести правила в mu-plugin, а не править тему напрямую. Так они не потеряются после обновления. Для массовых редиректов и SEO-настроек используйте проверенные инструменты, а не самописные костыли, если задача типовая.

Если нужен более широкий технический аудит сайта, полезно сочетать настройку дублей с чисткой лишних архивов, служебных страниц и повторяющихся элементов. В таких сценариях иногда удобнее использовать набор инструментов вроде Clearfy Pro, если он уже есть в рабочем стеке, но только после проверки, какие именно функции реально нужны сайту.

И ещё один момент: не вносите сразу несколько изменений в robots, canonical, редиректы и структуру ссылок. Когда всё меняется одновременно, потом сложно понять, что именно сломало индексацию. Делайте по одному блоку правок и фиксируйте результат.