Пагинация и SEO: нужно ли закрывать постраничную навигацию от индексации

Пагинация – это постраничная навигация на страницах каталогов или категорий.

Проблематика

Страницы пагинации попадают в индекс поисковой системы. При этом складывается ситуация, что страницы имеют одинаковый title и description, что не есть хорошо, о чем и предупреждают поисковики.

Нужно ли открывать или закрывать пагинацию для роботов поисковых систем?
Если открывать, то что при этом надо учесть, уникализировать заголовки или оптимизировать каждую страницу. А если закрывать, то каким именно способом: robots.txt, meta robots, canonical?

Вариант 1. Оставить страницы пагинации в индексе.

Первый вариант, который может придти на ум – это уникализировать title и description для станиц пагинации, это решит проблему дублирования.

1. Надо уникализировать заголовок title у всех страниц пагинации. Первая страница, она же главная страница категории, будет иметь какой-то оптимизированный заголовок, например: «Купить холодильник в Краснодаре недорого – интернет-магазин Холодос». Тогда для всех последующих страниц, начиная со второй и далее, заголовок будет с приставкой « – страница X», вот так: «Купить холодильник в Краснодаре недорого – интернет-магазин Холодос – страница 2».
2. Описанный выше вариант самый простой и распространенный. Но его можно модифицировать, чтобы стало еще лучше и красивее. Например, подставлять в title пагинаций не весь title целиком, а брать только название категории (часто это переменная, которая подставляется в H1), вот так: «Холодильники – страница 2». Это нужно, чтобы страницы пагинации никак не мешали первой странице категории, поэтому делаем заголовок неоптимизированным, менее релевантным.
3. Если вдруг у нас есть в категории какое-то описание или seo текст, он не должен дублироваться, то есть его нельзя повторять на всех страницах, он должен оставаться только на главной странице категории.
4. Нельзя допускать дублирования главной страницы категории по адресам типа site.ru/category/holodolnik и site.ru/category/holodolnik/page/1 (или site.ru/category/holodolnik?page=1 в зависимости от технических особенностей движка). Это решается 301 редиректом со страниц page/1 (page=1 и т.п.) на url без них.

Вариант 2. Закрыть от индексации страницы пагинации.

Менее очевидный вариант, т.к. тогда все страницы каталога пропадут из обработки и выдачи ПС (поисковой системы).

1. Закрыть индексацию страниц через robots.txt. Например, директивой Disallow: */page/ или Disallow: /*page= (в зависимости от технической реализации в CMS). Это самый плохой способ избавиться от пагинаций, и я не рекомендую вам его использовать. Потому что тогда робот точно не будет заходить на закрытые страницы, карточки товаров в глубине каталога будут плохо индексироваться, а при всем при этом ссылки на страницы пагинации могут появляться в выдаче Google (он показывает в выдаче даже закрытые страницы, но с пометкой, что они закрыты).
2. Закрыть страницы при помощи <meta name=”robots” content=”noindex” />. Этот метод также закроет страницы от поисковиков, как и предыдущий, только Google уже не будет выводить ссылки на такие страницы, то есть все будет чисто. Но проблема с тем, что товары из глубины каталога будут страдать останется. Можно использовать сочетание директив content="noindex,follow" при которых робот не будет добавлять страницы в индекс, но будет переходить по ссылкам, содержащимся на данных страницах, но проблему с товарами из глубины каталога это не решает.

Вариант 3. Оптимальный – Прописать канонические адреса.

Вышеописанные варианты решают проблему, но не являются оптимальными. т.к. современные поисковые систему имеют специальную механику работы с такими страницами. Заключается она в использовании специального мета-тега с атрибутом rel=”canonical”. В котором указывается канонический адрес страницы (каноникал), то есть начальная (первая) страница категории.

1. Использовать rel=”canonical” с указанием главной страницы категории для страниц пагинации. Это самый лучший вариант избавиться от пагинации в индексе. Если мы будем использовать канонический адрес, например, <link rel="canonical" href="https://site.ru/category/holodolnik"/> на всех страницах пагинации, то поисковики будут заходить на все страницы, будут обходить ссылки на этих страницах, при этом сами страницы пагинации в индекс не попадут.