На данный момент, устранение проблемы дублированных страниц является одной из самых важных при оптимизации сайта. В большинстве случаев для решения этой проблемы лучше всего использовать .
Но, когда мы или не можем использовать 301 редирект, или нам необходимы страницы для просмотра пользователями, то нам на помощь приходит атрибут rel= «canonical».
С помощью этого атрибута можно довольно быстро устранить проблемы дублирующего контента.
Очень важно прописать именно в секции HEAD, так как если вы случайно пропишите данный атрибут не в этой секции, то данная инструкция будет проигнорированная поисковыми системами.
Для каждой страницы в xml-карте сайта вы можете прописать её каноническую ссылку. Но, в данном случае, поисковые системы могут проигнорировать данные рекомендации.
Но, следуют учесть, что на данный момент Google поддерживает данный элемент заголовка
Если вы четко понимаете причину возникновения похожих или очень схожих страниц у вас на сайте и, при этом, каждая такая страница должна существовать на сайте, то желательно определиться какая из этих страниц серии является основной и со всех других страниц проставить канонические ссылки на эту одну главную.
В общем лучше всего использовать 301 редирект, но если это довольно сложно или долго реализовывать, то можно воспользоваться и атрибутом rel=”canonical”. По заявлениям Google, передаваем вес через канонические ссылки абсолютно идентичный весу, который передает 301 редирект.
Если у вас в интернет магазине есть серия товаров, которая отличается, например, только цветом, то лучше выбрать один товар в качестве главного (типичного) и на него проставить канонические ссылки с других продуктов.
Если на вашем сайте товары можно сортировать разными способами и параметр сортировки указывается в урле:
Для одной страницы должна быть одна каноническая страница. Если указанно несколько страниц, то в таком случае будет учтена только первая инструкция.
Следите за тем, чтобы всегда указывать одни и те же канонические страницы при разной реализации (например, через xml-карту сайта и через rel=”canonical” на самой странице).
В общем случае, при указании канонических ссылок всегда желательно прописывать абсолютные ссылки
Тогда поисковые системы будут просто игнорировать данные инструкции.
После того, как вы настроили все канонические ссылки у себя на сайте, то желательно сделать проверку всего сайта на то, как будут видеть эти все инструкции поисковые роботы. Для этого лучше всего воспользоваться программой Screaming Frog SEO Spider.
После индексации вашего сайта эта программа в удобном для вас виде предоставит вам полную информацию по всем страницам
1. Убедиться, что на вкладке Basic
выставлена галочка напротив Crawl Canonical
Сегодня мы поговорим про атрибут Rel=” Canonical” и в каких случаях его необходимо прописывать.
12 февраля 2009 года Google представил атрибут canonical, который был создан, чтобы избавить сайт от дублированных страниц, указав необходимый URL адрес (каноническую страницу).
.
Каноническая ссылка – что это?
Каноническая страница
– более приоритетная страница по сравнению с остальными.
Давайте разберем конкретный пример:
У нас имеется каноническая страница, на которую мы хотим ссылаться в случае с дублями.
Тег link с атрибутом каноникал будет являться канонической ссылкой
.
Данную проблему мы можем решить другим способом. Со страниц дублей будет идти ReDirect 301 на главную (каноническую страницу). О 301-редиректе я расскажу в следующей статье.
Для главной страницы атрибут canonical необязателен, так как мы указываем в robots.txt директиву Host.
Что делать с пагинацией в интернет-магазине?
Нужен ли Canonical, где имеются карточки товаров? На этот вопрос уже ответил Яндекс:
“Если в какой-либо категории на вашем сайте находится большое количество товаров, могут появиться страницы пагинации (порядковой нумерации страниц), на которых собраны все товары данной категории. Если на такие страницы нет трафика из поисковых систем и их контент во многом идентичен, то советую настраивать атрибут rel="canonical" тега
То если страницы пагинаций вида:
http://site.ru
/category-name/” />
Рекомендую ознакомится со следующим списком статей, который помогут сделать внутреннюю оптимизацию сайта качественно:
Как правило, проблемы с дублями возникают со стороны платформы (чаще всего это известные CMS Joomla, Opencart и прочие). Opencart вообще можно вынести в отдельную категорию, так как не до конца решена проблема, во всяком случае у меня разобраться не получилось и пришлось переносить все на другой движок. (Никому не рекомендую данный движок)
Но так же существуют ошибки со стороны оптимизатора которые я описал ниже.
Основные ошибки написания Canonical
Неверный ответ сервера.
Страница, на которую ставим тег link rel=” canonical” должна быть работоспособной. То есть ответ сервера должен быть 200. Проверить robots.txt
Возможно, что данная страница закрыта от индексации поисковых роботов.
Дублирование и расположение атрибута.
Важно, чтобы тег встречался всего 1 раз на странице и располагался только в теге
.
Отсутствие цепочек ссылок.
Со всех дублирующихся страниц все канонические ссылки указывают на 1 каноническую страницу. Чтобы не получилось, что одна ссылка ссылается на другую вторая на третью и так далее.
Rel Canonical в CMS Wordpress
Прописать тег Canonical в CMS Wordpress вы можете c помощью плагинов:
В SEO Yoast ограниченный функционал, можно указать только в поле необходимый канонический URL.
Плагин All in SEO
В All in SEO имеется возможность так же указывать канонический URL, а так же запрещать пагинацию для канонических URL(то есть ПС не будет индексировать эти страницы).
Заключение
Учитывая проблемы многих платформ, данный атрибут обязательно стоит учитывать, ведь он влияет на индексацию страниц вашего сайта.
Думаю, я рассказал большую часть про атрибут Rel=” Canonical”. Пишите в комментариях, как вы используете канонические ссылки на своих сайтах.
Как указать каноническую страницу из числа одинаковых или похожих
Если у вас есть одна страница, доступная по нескольким URL, или разные страницы с похожим контентом (например, версии для мобильных устройств и компьютеров), Google будет считать один URL каноническим
, а остальные – его копиями
. Сканирование канонического URL будет выполняться намного чаще, чем его копий.
Сообщите нам, какой из URL является каноническим. В противном случае мы выберем его самостоятельно или будем считать оба адреса равноценными, а это может привести к нежелательным последствиям. Дополнительные сведения представлены в разделе ниже, где говорится о том, для чего нужно выбирать канонический URL
.
Как указать каноническую страницу
Существует несколько способов указать каноническую страницу из числа повторяющихся:
Способ
Описание
Рекомендации, которые имеют силу независимо от выбранного способа нормализации URL.
Добавьте в код всех повторяющихся страниц тег
Плюсы
Минусы
Увеличивает размер страницы.
Работает только с HTML-страницами, но не с файлами, такими как PDF. Для последних можно использовать атрибут rel=canonical в HTTP-заголовке.
Включите в ответ страницы заголовок rel=canonical.
Плюсы
Не увеличивает размер страницы.
Так можно пометить сколько угодно страниц.
Минусы
Разметка на крупных сайтах или ресурсах, на которых URL часто меняются, отнимает много усилий.
Укажите канонические страницы в файле Sitemap.
Плюсы
Легко настроить и обновлять, особенно на крупных сайтах.
Минусы
Роботу Googlebot тем не менее нужно определить повторяющуюся страницу для каждой канонической, которую вы укажете в файле Sitemap.
Менее значимый сигнал для робота Googlebot, чем атрибут rel=canonical.
Используйте код статуса 301, чтобы сообщить роботу Googlebot, что URL, заданный в качестве нового адреса страницы, ведет на ее более актуальную версию.
Вариант страницы в формате AMP
Если один из вариантов страницы – AMP, укажите каноническую страницу и ее варианты согласно инструкциям для AMP.
Общие положения
Ниже приведены общие инструкции по указанию канонических URL.
Общие положения
Не обозначайте
канонические страницы с помощью файла robots.txt .Не используйте
инструмент удаления URL для указания канонической страницы: в этом случае из результатов поиска будут удалены все
варианты URL.Не указывайте
разные URL одной страницы в качестве канонических одним и тем же или разными способами (например, не надо добавлять один URL, используя файл Sitemap, другой – с помощью атрибута rel="canonical").Не пытайтесь предотвратить
выбор канонической страницы, применяя директиву noindex . Она предназначена для исключения страницы из индекса.Обязательно выделяйте
каноническую страницу при использовании атрибутов hreflang . Выбирайте для этого страницу на том же языке или ее вариант на наиболее близком языке.
Используйте
канонический URL при настройке ссылок на своем сайте. Это поможет нам понять, какую страницу вы считаете приоритетной.
О преимуществах HTTPS по сравнению с HTTP в канонических URL
При определении канонических ссылок Google отдает предпочтение страницам HTTPS, если при этом не возникают проблемы, например следующие:
Страница HTTPS использует недействительный сертификат SSL.
Страница HTTPS содержит небезопасные зависимости (кроме изображений).
Страница HTTPS выполняет переадресацию на страницу HTTP.
Страница HTTPS указывает на страницу HTTP с помощью атрибута rel="canonical" .
Кроме того, вы можете дополнительно указать, что адресу HTTPS следует отдавать предпочтение. Вот как это сделать:
Добавьте переадресацию с HTTP-страницы на HTTPS.
Добавьте ссылку rel="canonical" , ведущую со страницы HTTP на страницу HTTPS.
Используйте протокол HSTS .
Как предотвратить
использование страницы HTTP в качестве канонической:
Проверяйте сертификаты SSL, а также ссылки со страницы HTTPS на HTTP. Ошибки в них могут привести к тому, что каноническим будет считаться адрес HTTP. При этом реализация протокола HSTS не имеет значения.
В файлах Sitemap и компонентах указывайте страницу HTTPS, а не HTTP.
Не используйте сертификат SSL/TLS для некорректного хоста (например, если example.com передает сертификат для www.example.com). Этот сертификат должен соответствовать полному URL сайта или являться групповым, то есть пригодным для использования на нескольких субдоменах.
Только для опытных пользователей:
как заставить роботов Google игнорировать динамические параметры
Вы можете сообщить Google о параметрах, которые следует игнорировать. Подробные сведения представлены в Справочном центре . При использовании этой функции наши роботы не будут обрабатывать повторяющийся контент, что упростит им работу. Например, если вы укажете, что нужно проигнорировать параметр sessionid , мы посчитаем идентичными следующие страницы:
https://www.example.com/dresses/green.php?sessionid=273749
https://www.example.com/dresses/green.php
Способы
Указать канонический URL для повторяющихся URL или похожих страниц можно одним из способов, описанных ниже.
Какой бы способ вы ни выбрали, обязательно следуйте приведенным выше общим рекомендациям.
Используйте атрибут rel="canonical"
Используйте в заголовке страницы тег
Предположим, вы хотите указать страницу https://example.com/dresses/green-dresses , содержание которой воспроизводится на других, в качестве канонической. Выполните следующие действия:
Пометьте все повторяющиеся страницы с помощью элемента link
с атрибутом rel="canonical".
Добавьте в раздел
этих страниц элемент Если у канонической
страницы есть вариант для мобильных устройств,
добавьте элемент link с атрибутом rel="alternate" и ссылкой на мобильную версию:
В случае необходимости добавьте атрибуты hreflang или настройте переадресацию другими способами
.
Используйте следующую структуру URL: https://www.example.com/dresses/green/greendress.html Не
применяйте такой вариант: /dresses/green/greendress.html
Если у вас есть доступ к настройкам сервера, можно указывать канонический URL для документов в формате, отличном от HTML (например, PDF), с помощью атрибута rel="canonical" в заголовках HTTP (а не с помощью HTML-тегов).
Например, если на вашем сайте по нескольким разным URL доступен файл PDF, можно возвращать заголовок HTTP rel="canonical" , чтобы сообщить роботу Googlebot, какой из этих URL является каноническим:
Link: ; rel="canonical"
В настоящее время этот способ поддерживается только для веб-поиска.
Элементы link с атрибутом rel="canonical" должны содержать абсолютные пути, а не относительные
. Подробнее:Неправильно:
/downloads/white-paper.pdf
Используйте файл Sitemap
Укажите канонический URL для каждой страницы в файле Sitemap . Все страницы в нем предлагаются в качестве канонических. Googlebot будет определять, какие из них являются повторяющимися (при наличии), по их контенту.
Мы не гарантируем,
что URL в файле Sitemap будут рассматриваться как канонические во всех случаях. Но в целом это удобный способ для определения приоритетных URL на крупном сайте.
Не включайте
в файл Sitemap неканонические страницы, если вы его используете.
Используйте код статуса 301 для URL удаленных страниц
Это позволяет исключить устаревшие адреса и обеспечить переадресацию на новые.
Предположим, на вашу страницу можно перейти по следующим URL:
https://example.com/home
https://home.example.com
https://www.example.com
Выберите один из этих адресов в качестве канонического и используйте переадресацию 301 на стороне сервера, чтобы перенаправлять на данный адрес трафик с других URL. Это один из самых надежных способов обеспечить переход пользователей и поисковых систем на нужную страницу. Код статуса 301 означает, что запрашиваемая страница находится по другому адресу.
Если у вас есть доступ к сервису веб-хостинга, попробуйте найти в представленных на нем справочных материалах документацию по настройке переадресаций 301.
Эта информация оказалась полезной?
Как можно улучшить эту статью?
Канонический тег (rel=”canonical”) является довольно важным инструментом поисковой оптимизации. Зачастую он даже лучше, чем 301 редирект при работе с дублированным контентом.
Разберём более подробно этот тег.
Что плохого в дублированном контенте
Дублированный контент – это два одинаковых по своему содержанию документа. Когда Google видит дубль, он старается исключить его из индекса, т.к. по идее пользователь не захочет видеть один и тот же документ в поисковой выдаче несколько раз. Да и к тому же самому поисковику не хочется постоянно обрабатывать тысячи и даже миллионы дублированных страниц, тратя на это свои производственные мощности.
Проблема для веб-мастера состоит в том, что если одна и та же информация находится на разных страницах, то в выдаче будет только одна из этих страниц. Но url, который выберет Гугл, не всегда является наиболее оптимальным для пользователя, и не всегда является первоисточником.
Пока поисковик не определит первоисточник, результаты выдачи не будут удовлетворять целям первоначального автора контента. В данном случае канонический тег имеет ограниченную пользу, поскольку те, кто крадут ваш контент, скорее всего, не будут ставить теги.
С другой стороны, если дублирование происходит на вашем сайте, то тег будет как нельзя кстати. Даже если на вашем сайте будут ссылки на дублированный контент, ценность для выдачи будет составлять только страница-первоисточник. Таким образом, даже при наличии ссылок на несколько дублей, значимой для Google будет считаться только одна из этих страниц. И не пострадает.
Естественно, это не лучшее решение с точки зрения SEO. Но это не приведёт к каким-либо санкциям со стороны Гугла.
Что такое тег rel=”canonical”
Тег имеет следующий синтаксис:
Да, rel=”canonical” должен использоваться только для выбора предпочитаемой страницы при дублировании (незначительные различия в содержании допустимы).
Другими словами, используйте его только для борьбы с дублированным контентом. При использовании его для других целей вы можете быть уличены в поисковом спаме.
Проблемы дублированного контента
Реализуйте теги надлежащим образом на вашем сайте. Это убережёт вас от проблем дублированного контента, некоторые из которых связаны с системами управления сайтами (CMS):
Tracking Codes
. Некоторые системы требуют добавления переменных в конце url-адреса для обратных ссылок на ваш сайт. Формат может быть такой: www.example.com?tracking-variable или такой: www.example.com/example.htm?tracking-code. Проблема заключается в том, что поисковые системы разделяют адреса, даже если те различаются всего одним символом. Хотя Google и Bing и имеют в своём распоряжении технологии, которые помогают определять такие адреса, до сих пор возникает множество ошибок при их обработке. Интересно будет отметить, что некоторые ссылаются на ваш сайт, дабы получить взаимную обратную ссылку, используя данный метод. Канонический тег защитит вас от этого.Приставки к url
. Как мы уже уяснили, любые два адреса, отличающиеся хотя бы одним символом, рассматриваются как отдельные страницы. И есть несколько случаев, когда приставки к адресам могут привести к дублированию контента. К ним относятся, например, дополнительный язык сайта (русская и английская версии страницы) или создание движком дополнительных страниц (ярко выражено в WordPress).Разбивка на страницы
. Это когда сайт разбивается автоматически на несколько страниц с одинаковым контентом. Например, если у вас интернет-магазин и продукцию можно отсортировать по цвету товара или по его цене (при этом для результата сортировки генерируется отдельная страница с одинаковыми описаниями товаров).WWW
. По большей части это не проблема, т.к. Google обычно правильно определяет адреса с www и без. Но до сих пор бывает такое, что поисковик индексирует как бы две версии сайта (example.com и www.example.com). В результате половина вашего контента проиндексирована с www, а другая половина – без www. Обычно это дело прописывается в robot.txt, но и канонический тег тут тоже может помочь.Если невозможно реализовать 301 редирект
. Как ни странно, но в некоторых случаях у веб-мастера нет возможности реализовать 301 редирект, например, из-за ограниченного доступа к серверу. Канонический тег в данном случае является альтернативой, с той лишь разницей, что исходная страница будет продолжать существовать.Но всё-таки, в соответствии с политикой Google, канонический тег это рекомендация, а не обязательное для исполнение правило. Эта опция поможет владельцам сайтов самостоятельно указывать, какую страницу Гугл должен считать канонической. Таким образом, для Google будет проще определить, какую страницу необходимо включить в индекс при дублировании контента.
В этой статье мы рассмотрим канонические ссылки в html (атрибут rel="canonical"). Поговорим зачем они были введены и для чего использовать. Скажу сразу, что появились они в 2009 году в компании Google.
Что такое каноническая ссылка
Дубли на сайте - страницы содержащие одинаковый контент , но имеющие разные адреса URL.
Чаще всего дубли возникают в результате недоработок движка сайта . Такие проблемы есть почти у каждого сайта на CMS. Ничего страшного в этом нету, если их грамотно обработать. Бороться с дублями необходимо прежде всего для того, чтобы занимать хорошие места в поисковой выдаче. Как известно, дубли негативно влияют на траст сайта в целом, а следовательно и на его позиции.
Для борьбы с дублями существует несколько способов:
robots.txt (все про robots.txt)
301 редиректом (как сделать 301 редирект)
404 страницей (404 ошибка - как правильно настроить)
Однако есть и четвертый способ решения этой проблемы - использование атрибута rel="canonical"
.
Атрибут rel="canonical" - как пользоваться
Синтаксис rel="canonical"
...
Этот атрибут прописывается в заголовочных тегах
. На всех одинаковых страницах (дублях) нужно указать адрес главной страницы (основной). Ссылки в href=""
и есть канонические ссылки.
Например, если на сайте есть одинаковые страницы
site/catalog/tovar
site/catalog/tovar?sort=abc
site/catalog/tovar?sort=price
Для уточнения какая из этих страниц является главной достаточно написать на каждой странице:
Тем самым показывая поисковой системе, что адрес основной страницы является - site/catalog/tovar
.
Ответы на часто задаваемые вопросы
1. Стоит ли пользоваться каноническими ссылками?
Да, стоит. В рассмотренным примере, можно было пользоваться только каноническими ссылками или robots.txt. Можно совмещать эти два способа.
При использовании нужно быть осторожным, чтобы не давать роботу ложные рекомендации на тех страницах, где это делать не нужно.
2. Что будет если канонически ссылки противоречат друг другу
Это плохо, но поисковый робот тогда самостоятельно разберется, какую страницу оставить главной. Лучше не допускать таких противоречий.
3. Случаи, когда робот может проигнорировать ваши рекомендации
Из справки Яндекса:
Документ по каноническому адресу недоступен для индексирования
В качестве канонического адреса указывается URL в другом домене или поддомене
Вы указали несколько канонических адресов
4. Можно ли использовать цепочку канонических URL
Например, /stranica/123 ссылается на /stranica/12, а эта в свою очередь на /stranica/. Поисковый робот может проигнорировать такую конструкцию.
5. Как правильно выбрать канонический урл
Сложно ответить и рассмотреть все варианты в паре предложений. Дадим общие рекомендации. На мой взгляд нужно смотреть на привлекательность URL (или точнее на ЧПУ). К примеру, если есть страница /cat/2323fdfds34.html и страница /cat/rel-canonical. Очевидно, что второй адрес гораздо предпочтительней.
Если все не так очевидно, то стоит выбирать менее вложенные статьи в каталоги и менее короткие URL. К примеру /cat/podcat/podpodcat/str.html лучше заменить на /cat/str.html
И последнее: если какая-то страница уже долго время существует и хорошо ранжируется, то все новые "дубли", лучше ссылать на нее. Смена адреса путем rel canonical, конечно, не должна повлиять на позиции, но лучше не рисковать, если они и так высокие по этому запросу.
6. Можно ли ссылаться на другой домен канонической ссылкой
В атрибуте rel canonical можно использовать ссылки только внутри домена или поддоменов. Нельзя ссылаться на внешние сайты.
7. Можно ли делать rel canonical сама на себя
Да можно. Смысла в этом нету, но и плохого тоже.
