Канонический URL-адрес сообщает Google, Bing и Yahoo, какие страницы показывать, а какие скрывать на страницах результатов поисковой системы. Хотя поисковые системы могут игнорировать канонический URL-адрес, это дает вам как владельцу веб-сайта больший контроль над присутствием вашего веб-сайта в Интернете.

Как выглядит канонический URL?

Ваши посетители не увидят канонический URL-адрес при посещении вашего веб-сайта. Канонический URL-адрес может быть определен в источнике страницы или в заголовке HTTP.

Источник страницы

Канонический URL-адрес должен быть расположен в разделе — источника страницы. Для нашей домашней страницы канонический URL-адрес выглядит следующим образом:

Определение канонического URL-адреса в заголовке HTTP часто используется, когда вам нужно установить канонический URL-адрес для документа, отличного от HTML, например PDF.

В заголовке HTTP это выглядит следующим образом:

 HTTP/1.1 200 OK
Сервер: nginx
Дата: Чт, 28 апреля 2016 г., 11:54:25 по Гринвичу
Тип содержимого: приложение/pdf
Длина контента: 23629
Последнее изменение: пт, 29 апреля 2016 г., 17:47:17 по Гринвичу
Ссылка:  com/downloads/whitepaper.pdf>; rel="canonical" 

Возможный сценарий, в котором вам потребуется использовать HTTP-заголовок для определения канонического URL-адреса для не-HTML-документа, — это когда контент предлагается как в виде обычной страницы (HTML-документ), так и в виде PDF-файла ( не-HTML-документ).

Обратите внимание: в настоящее время только Google поддерживает определение канонического URL-адреса с помощью заголовка HTTP. Для изображений Google не поддерживает канонический формат, определенный через заголовок HTTP.

Управляйте вашими каноническими URL-адресами

Выявляйте проблемы с вашими каноническими URL-адресами и находите URL-адреса, которые вам необходимо канонизировать!

Когда использовать канонический URL?

Нет мыслимого сценария, в котором было бы плохой идеей включать канонический URL. Google, Bing и Yahoo в значительной степени полагаются на канонический URL-адрес, чтобы понять, какие страницы показывать и скрывать на страницах результатов поисковой системы. Канонический URL-адрес может ссылаться либо на себя, либо на другую страницу.

Канонический URL-адрес ссылается сам на себя

Если существует только одна версия страницы, убедитесь, что канонический URL-адрес ссылается сам на себя.

По сути, это говорит поисковым системам: «Я единственная версия этой страницы, и только я должен быть проиндексирован».

Канонический URL-адрес, ссылающийся на другую страницу

Если существует несколько версий страницы, убедитесь, что канонический URL-адрес ссылается на страницу, которую вы предпочитаете индексировать поисковыми системами.

Распространенные случаи, когда канонические URL-адреса устраняют проблемы с дублированием содержимого:

• Когда в URL используются параметры запроса.
• Когда страницы немного отличаются друг от друга, что обычно называют почти дубликатами.
• При намеренном создании нескольких версий страницы.

Параметры запроса в URL-адресе

В зависимости от структуры URL-адреса веб-сайта URL-адреса иногда содержат параметры запроса. Параметры запроса в URL-адресах используются для запроса определенного контента.

Например:

www.example.com/shoes/nike?lang=uk&id=101

• Переменная lang=uk указывает, что языком запрашиваемой страницы является английский (Великобритания).
• Переменная id=101 указывает, что следует запрашивать страницу номер 101.
• Между переменными есть символы и , указывающие на то, что вам нужна версия страницы 101 на английском языке (Великобритания). создавать дублированный контент. URL-адрес www.example.com/shoes/nike?id=101&lang=uk запрашивает ту же страницу, что и www.example.com/shoes/nike?lang=uk&id=101 , но страницы имеют другой URL. Эту форму дублированного контента можно легко исправить с помощью канонического URL-адреса.

  Немного разные страницы (почти дубликаты)

  Когда страницы отличаются лишь незначительно, мы часто называем их «почти дубликаты страниц» или «почти дубликаты». Хорошим примером почти дублирующихся страниц являются веб-сайты электронной коммерции, продающие обувь. Представьте, что у вас есть кроссовки Nike Air Max 38 размера, которые доступны в красном, синем и черном цветах. При выборе другого цвета URL меняется, но 99% содержимого страницы остается неизменным.

  • Общие Nike Air Max, размер 38: www.example.com/shoes/nike/men-38/
  • Общие Nike Air Max, размер 38 красного цвета: www.example.com/shoes/nike/men- 38-red/
  • General Nike Air Max размера 38 синего цвета: www.example.com/shoes/nike/men-38-blue/
  • General Nike Air Max размера 38 черного цвета: www.example. com/shoes/nike/men-38-black/

  Поскольку содержание этих четырех страниц очень похоже, имеет смысл использовать канонический URL из www.example.com/shoes/nike/men-38-red/ , www.example.com/shoes/nike/men-38-blue/ и www.example.com/shoes/nike/men -38-черный/ указывает на www. example.com/shoes/nike/men-38/ .

  Преднамеренное создание нескольких версий страницы

  Может быть много причин для преднамеренного создания нескольких версий страницы. Приведем два примера:

  1. Персонализированные целевые страницы для кампаний
  2. Запуск тестов оптимизации коэффициента конверсии, когда вы тестируете три версии одной и той же страницы, которые по существу имеют одинаковое содержание.

  При наличии нескольких версий страницы убедитесь, что канонический URL-адрес указывает на предпочтительную версию, которую вы хотите проиндексировать. Когда канонический URL-адрес ссылается на другой URL-адрес, это сообщает поисковым системам:

  «Существует несколько версий моей страницы, которые либо идентичны, либо очень похожи. Чтобы убедиться, что ваш индекс хороший и чистый, обязательно проиндексируйте страницу, которую я ссылка».

  Полезные ресурсы

  Лучшие практики для целевых страниц

  Отдельные страницы для компьютеров и мобильных устройств

  Если у вас есть отдельные страницы для компьютеров и мобильных устройств, вы должны использовать канонический URL-адрес и альтернативный URL-адрес, чтобы сообщить поисковым системам о связи между этими страницами.

  На данный момент Google является единственной поисковой системой, поддерживающей эту конкретную реализацию.

  Давайте поговорим о реализации:

  Используйте атрибут mobile для передачи мобильной версии страницы.

  Рабочий стол

  В настольной версии страницы канонический URL-адрес и альтернативный URL-адрес в -раздел выглядит следующим образом:

   
  <ссылка rel="canonical" href="https://www.example.com/" />
  
   

  Mobile

  В мобильной версии страницы канонический URL в разделе выглядит следующим образом:

   
  <ссылка rel="canonical" href="https://www.example.com/" />
   

  Таким образом поисковые системы отображают мобильную версию страницы для мобильных устройств и настольную версию страницы для настольных устройств.

  Междоменный канонический

  Канонический URL-адрес можно использовать для предотвращения дублирования контента в случаях, когда проблемы дублирования контента выходят за пределы одного веб-сайта. Когда контент публикуется на нескольких страницах, на нескольких доменах можно использовать междоменный канонический URL-адрес, чтобы сигнализировать поисковым системам, какую версию страницы следует проиндексировать.

  Объединение ненужных страниц с переадресацией

  Если нет необходимости в существовании нескольких версий страницы, лучше всего перенаправить избыточные страницы на предпочтительную версию. Примеры, в которых перенаправление — гораздо лучший способ справиться с несколькими версиями страниц:

  • Страница доступна по протоколам HTTP и HTTPS.
  • Страница доступна через несколько доменов ( www.example1.com , www.example2.com , www.example3.com ) или поддоменов ( www.example.com , www2) .пример. com , www3.example.com ), и это не служит цели.

  Обратите внимание, что если вы используете перенаправления в приведенных выше примерах, рекомендуется по-прежнему использовать также используйте канонический URL. Если ваши перенаправления перестают работать, у вас все еще есть канонический URL-адрес, чтобы предотвратить проблемы с индексацией.

  Правильно ли настроены ваши канонические URL-адреса?

  Узнайте, отправляете ли вы смешанные сигналы индексации, и получайте оповещения о проблемах с каноническими URL-адресами в режиме реального времени!

  Каковы передовые методы работы с каноническими URL-адресами?

  Канонический URL — очень мощный инструмент в наборе инструментов веб-мастера. Крайне важно придерживаться приведенных ниже рекомендаций при работе с каноническими URL-адресами, чтобы предотвратить проблемы с индексацией:

  • Используйте абсолютные URL-адреса — не может быть никаких сомнений относительно страницы, которую поисковая система должна индексировать. Используйте полный URL-адрес, включая протокол (HTTP или HTTPS), субдомен и домен.
  • Один канонический URL-адрес на странице — всегда должен быть только один канонический URL-адрес на странице.
  • Размещение в   -секции или HTTP-заголовке — канонический URL всегда должен быть помещен в -раздел или в HTTP-заголовок
  • Укажите на индексируемую страницу — канонический URL-адрес должен указывать на индексируемую страницу.
  • Включите в карту сайта XML только предпочтительную версию страницы .

  Использовать абсолютные URL-адреса

  В качестве канонических URL-адресов следует использовать только абсолютные URL-адреса. Возьмем, к примеру:

  Поскольку этот URL-адрес является каноническим URL-адресом, точное местоположение не вызывает сомнений. URL.

  Теперь сравните канонический URL-адрес выше с неоднозначным URL-адресом ниже:

  Некоторые веб-серверы по умолчанию неправильно настроены, что делает каждую страницу вашего сайта доступной со всех доменов. и поддомены. Это приводит к огромному количеству дублированного контента, которого вам всегда следует избегать.

  Наличие абсолютных URL-адресов в качестве канонических URL-адресов предотвращает появление подобных проблем с дублированием содержимого.

  Один канонический URL на страницу

  На странице всегда должен быть только один канонический URL. Если определено более одного канонического URL, поисковые системы могут запутаться. Google заявил, что они просто выберут один из канонических URL-адресов и проигнорируют другие, когда обнаружат несколько канонических URL-адресов на одной странице. Хотя мы не уверены, как Bing и Yahoo обрабатывают несколько канонических URL-адресов на странице, они рекомендуют использовать только один канонический URL-адрес на странице.

  Размещение в разделе

  Канонический URL-адрес всегда должен быть помещен в — раздел вашей страницы. Если канонический URL размещен не в разделе -, поисковые системы не смогут его найти и обработать. В свою очередь, это может привести к проблемам дублирования контента.

  Ссылка на индексируемую страницу

  Канонический URL-адрес всегда должен ссылаться на индексируемую страницу. Поисковые системы могут запутаться, когда канонический URL-адрес ссылается на страницу, которая перенаправляется 301 или сама канонизирована.

  Включить в карту сайта XML только предпочтительную версию

  Все страницы, включенные в вашу карту сайта XML, должны индексироваться поисковыми системами. Поэтому важно, чтобы в случае, если у вас есть несколько версий страницы, вы включали только предпочтительную версию страницы в свою XML-карту сайта.

  Управляйте вашими каноническими URL-адресами

  Выявляйте проблемы с вашими каноническими URL-адресами и находите URL-адреса, которые вам необходимо канонизировать!

  Каковы ограничения канонического URL?

  Хотя канонические URL-адреса являются отличным инструментом в наборе инструментов веб-мастера, они также имеют свои ограничения.

  Консолидация авторитета ссылок только частично

  Давайте рассмотрим пример: страница А имеет несколько действительно мощных обратных ссылок. Страница A ссылается на страницу B как на каноническую. Поисковые системы, скорее всего, проиндексируют страницу B и оставят страницу A вне своего индекса.

  Каждая ссылка передает некоторые полномочия, называемые полномочиями связи. Авторитет ссылки, которая передается на страницу А через мощные обратные ссылки, равен только частично, передается на страницу Б. Мы говорим только частично , потому что это серая область, о которой поисковые системы не очень ясно. Нет исследований, показывающих, что канонический URL-адрес передает все полномочия ссылок. Кроме того, был введен канонический URL-адрес, чтобы сообщать поисковым системам, какие страницы показывать, а какие скрывать. Поэтому наша позиция по этому вопросу такова: канонический URL-адрес не полностью передает авторитет ссылки.

  Мэтт Каттс из Google сказал, что «на самом деле между ними нет большой разницы [переадресация 301 и канонический URL]».

  Если вы хотите передать как можно больше ссылок, мы советуем вам использовать переадресацию 301.

  Канонические URL-адреса не предотвращают проблемы оптимизации сканирования

  Канонические URL-адреса предназначены для устранения проблем с дублированием содержимого. Канонический URL сообщает поисковым системам, какие страницы индексировать, но не сообщает поисковым системам, какие страницы сканировать . Это важное различие.

  Когда поисковые системы не тратят время на сканирование полезных и важных страниц, мы говорим о проблемах с оптимизацией сканирования. Существует множество причин, по которым поисковые системы не сканируют полезные и важные страницы. Поисковые системы могут попасть в бесконечные циклы переадресации, тратить много времени на сканирование страниц, которые вы вообще не хотите индексировать, или продолжать заходить в тупики на вашем веб-сайте (страницы без ссылок на другие страницы). Это пустая трата времени, тем более, что у поисковых систем есть так называемый «краулинговый бюджет» (выделенное время для сканирования сайта) для каждого сайта. Файл robots.txt можно использовать для предотвращения проблем с оптимизацией сканирования.

  Часто задаваемые вопросы о канонических URL-адресах

  1. Передают ли канонические URL-адреса какие-либо авторитетные ссылки?

  Мы подозреваем, что некоторые полномочия ссылок передаются при канонизации URL-адресов.

  Как написано в разделе «Консолидация авторитета ссылок только частично», мы не можем с уверенностью сказать, проходит ли канонический URL по авторитету ссылок. Что мы знаем, так это то, что канонический URL-адрес не предназначен для передачи авторитета ссылки, для этого и существует переадресация 301.

  2. Могу ли я заставить поисковые системы использовать мой канонический URL?

  Нет, канонический URL — это совет, а не директива для поисковых систем.

  3. Чем канонический URL лучше переадресации 301?

  Канонический URL-адрес и перенаправление 301 — это два совершенно разных средства достижения цели.

  Канонический URL используется, когда посетителям должны быть доступны все версии страницы, но только одна из них должна индексироваться поисковыми системами.

  Перенаправление 301 перенаправляет как посетителей, так и поисковые системы с одного URL-адреса на другой URL-адрес. URL-адрес перенаправления недоступен для посетителей или поисковых систем.

  4. Могу ли я испортить свой веб-сайт каноническими URL-адресами?

  При неправильном использовании канонические URL-адреса могут вызвать серьезные проблемы с индексацией вашего веб-сайта.

  Например, представьте, что по какой-то причине все ваши страницы имеют каноническую ссылку на главную. Поскольку канонический URL является сильным сигналом для поисковых систем, они, скорее всего, обработают его и деиндексируют канонизированные страницы.

  Несмотря на то, что вы должны быть осторожны с каноническими URL-адресами, мы настоятельно рекомендуем вам использовать их, чтобы сообщать поисковым системам, какие страницы индексировать, а какие скрывать.

  5. Все ли поисковые системы поддерживают канонический URL?

  Мы знаем, что Google, Bing и Yahoo поддерживают канонический URL.

  Яндекс и Baidu, кажется, также поддерживают канонический URL. Для DuckDuckGo это непонятно.

  6. Как поисковые системы справляются с несколькими каноническими URL-адресами на одной странице?

  Google заявил, что они будут полностью игнорировать элементы канонического URL-адреса, если на одной странице есть несколько канонических URL-адресов.

  Непонятно, как другие поисковые системы справляются с этим, хотя мы настоятельно рекомендуем использовать только один канонический URL на странице.

  7. Предотвращает ли канонический URL сканирование страниц?

  Нет, это не так. Поисковые системы все равно будут сканировать ваши страницы, независимо от того, установили ли вы канонический URL-адрес, указывающий на другой URL-адрес. Канонический URL-адрес — это просто сильный сигнал для поисковых систем относительно предпочтительной страницы, которая должна отображаться на страницах результатов поисковой системы. Также см. Канонические URL-адреса не предотвращают проблемы оптимизации сканирования.