Главное зеркало сайта с WWW и без WWW

В этой статье я вам расскажу о том, что такое главное зеркало сайта, о доменах с WWW и без WWW и прочих вещах, связанных с этой интересной историко-технической темой. А для начала разберём понятие «WWW» и определим, как правильнее записывать адрес.

Коротко об истории WWW и как правильно писать

WWW – это английская аббревиатура, которая расшифровывается как world wide web, что можно перевести на русский язык, как «всемирная паутина». Понятие «WWW» ввели в 1989 году Тим Бернерс-Ли и Роберт Кайо – дядьки, которые изобрели Интернет. Этими тремя буками они отмечали текст, который являлся гиперссылкой, чтобы её было легко распознать.

С тех пор прошло более 25 лет и теперь каждый знает, где просто текст, а где гиперссылка. И поэтому надобность в WWW отпала. Сегодня WWW можно считать рудиментарным атрофированным органом, который хоть и есть, но не на что уже не пригоден.

Любой сайт будет доступен по адресу с WWW и без WWW, однако в строке браузера будет отображаться лишь один вариант – тот, который выбран главным зеркалом. Главное зеркало сайта может быть как с WWW, так и без него.

Теперь возникает два вопроса. Первый – какой вариант лучше сделать главным зеркалом сайта? На самом деле, задумывать об этом не стоит, так как оба варианта написания домена отличаются друг от друга лишь внешним видом. Ни для продвижения сайта, ни для технических особенностей значения не имеет, что будет главным зеркалом. И что бы вы ни выбрали, сайт будет доступен по адресам с WWW и без WWW.

Каждый сайт открывается по адресу с WWW и без, но в адресной строке будет всегда записан адрес главного зеркала. Для практики нет разницы, какой из адресов выбран главным зеркалом.

Второй вопрос – как создать главное зеркало сайта и нужно ли это делать? Рассмотрим ниже.

Как указать главное зеркало сайта и зачем это нужно

Варианты одного и того же домена с WWW и без WWW являются для поисковых систем разными адресами. Таким образом, если главное зеркало сайта не выбрано, поисковый робот буде считать что на двух разных адресах (с WWW и без) присутствует абсолютно одинаковый материал. А что происходит с сайтами с неуникальным контентом мы знаем – они неизбежно вылетают из поиска, и их потом сложно туда вернуть.

Поэтому необходимо определить главное зеркало сайта, произвести, так называемую склейку домена – это означает, что необходимо указать поисковику, что варианты написания одного и того же домена с WWW и без WWW – это один и тот же сайт.

Главное зеркало сайта – это основной вариант написания одного домена, с WWW или без. Если не выбрать главное зеркало, то сайт не будет нормально индексироваться поисковыми системами, и в поиске участвовать тоже не будет.

Большинство хостингов самостоятельно предопределяют один из вариантов написания домена, как главное зеркало сайта. Проверить, делает ли это ваш хостинг, можно простым способом. Попробуйте записать в строку браузера адрес вашего домена с WWW и без. В одном из вариантов должно происходить автоматическое переключение на главное зеркало сайта, и адрес, как бы вы ни записали, в итоге должен оставаться только один (с WWW или без).

Такое переключение осуществляется благодаря редиректу 301. Если главное зеркало сайта всё ещё не установлено, то вам нужно установить редирект в файл конфигурации сервера .htaccess.

Чтобы указать главное зеркало сайта c WWW, вставьте в .htaccess такой код:

RewriteEngine On RewriteCond %{http_HOST} ^example\.ru$ [NC] RewriteRule ^(.*)$ http://www.example.ru/$1 [R=301,L]

RewriteEngine On RewriteCond %{http_HOST} ^example\.ru$ [NC] RewriteRule ^(.*)$ http://www.example.ru/$1 [R=301,L]

А если хотите сделать без WWW, то такой:

RewriteEngine On RewriteCond %{http_HOST} ^www.example\.ru$ [NC] RewriteRule ^(.*)$ http://example.ru/$1 [R=301,L]

RewriteEngine On RewriteCond %{http_HOST} ^www.example\.ru$ [NC] RewriteRule ^(.*)$ http://example.ru/$1 [R=301,L]

Не забудьте заменить в коде example.ru на свой сайт.

Чтобы проверить, правильно ли вы установили код, и склеились ли домены, проделайте процедуру, о которой я вписал выше. Впишите в браузер домен с WWW и без — в одном из случаев должно происходить переключение на главное зеркало сайта. Если так и происходит, то значит, теперь поисковики будут считать оба варианта написания домена как один и тот же сайт.

Помните, что главное зеркало для Яндекса указывается также и в файле robots.txt в директиве host. И ещё главное зеркало нужно настроить в панелях управлениях сайтом Яндекса и Google.

Статьи по теме:

Главное зеркало сайта | SEO оптимизация и продвижение сайта для новичков

Вступление

Сайт должен быть доступен пользователям только по одному адресу. Этот адрес называют — главное зеркало сайта.

Что такое зеркало сайта?

Зеркалами сайта называются все ресурсы с одинаковым контентом. Вернее, совпадение контента должно быть не менее 80%.

Дизайн сайта и его оформление значение не имеют. Единица зеркальности является его контент.

Однако главное зеркало сайта должно быть только одно. Именно главное зеркало сайта должно участвовать в работе с поисковыми системами.

Стоит отметить, что зеркала сайта появляются в автоматическом режиме или по злому умыслу.

Автоматом появляются зеркала при добавлении домена на хостинг и автоматическом создание адреса сайта без WWW и с WWW. Для поисковиков это два разных адреса, а значит два разных сайта.

Также зеркала появляются при переходе сайта на безопасный протокол HTTPS. То есть когда в сети появляются два сайта один http, второй https.

Появится зеркало сайта при переходе на новый домен. Читать Как изменить имя домена без потери поисковой выдачи.

Кроме этих вариантов, администратор сайта может добавить в поиск, зеркало сайта добровольно. Например, сайт на доменах в разных доменных зонах (ru, com, kz) или доменах с разным написанием.

Создание таких доменов оправданно, а создание таких сайтов зеркал вызывает сомнения. Однако как вариант создания зеркал их нужно упомянуть.

Зеркало может появиться по злому умыслу. Например, зеркальный сайт может появиться при воровстве контента. Это отдельная тема. Повторюсь, поисковик считает сайты зеркальными, если совпадение контента превышает 80%.

Понятие главное зеркало сайта

Так как зеркал у сайта может быть сколь угодно много, то поисковикам нужно сообщить или они выберут самостоятельно, какой сайт индексировать, как главный.

Индексируемый сайт из всех зеркальных сайтов называется главным зеркалом сайта. Поисковик может выбрать его самостоятельно, либо веб-мастер должен назначить главное зеркало и сообщить об этом поисковику.

Настроить главное зеркало сайта

Прежде чем назначить главное зеркало сайта вы должны сами с ним определиться и сделать постраничную переадресацию не главных зеркал на главное зеркало.

Например, вы выбрали главным зеркалом сайт на протоколе https без www в домене. В этом случае вам нужно сделать переадресацию сайтов с www в домене и сайта на протоколе http на сайт https.

Переадресация

Сделать переадресацию сайта с www на сайт без www проще всего инструментами администрирования на веб-хостинге. Почти на всех панелях управления хостингами и VDS есть функция переадресации сайта с www на сайт без www и наоборот.

Важно сделать 301 Permanent Redirect (постоянную) переадресацию, а не временную 302.

Если по каким либо причинам это функционал недоступен на хостинге, то попробуйте внести изменения в файл .htaccess. Этот файл работает для управления веб-сервером на Apache.

• Почитать, как .htaccess файлы обеспечивают изменения конфигурации для каждого каталога сайта лучше в первоисточнике тут.
• Как сделать ручную переадресацию на серверах Nginx лучше почитать в первоисточнике тут.

Аналогичную переадресацию нужно сделать при использовании безопасного протокола https. Все страницы сайта доступные по протоколу http должны переадресовываться, на те же страницы по протоколу https.

Выполняется 301 Permanent Redirect теме же методами. Либо инструментами управления хостингом, либо ручной правкой файла .htaccess на Apache. Для Nginx включаются директивы return в контекст server или в location контекст.

Назначение главного зеркала

Главное зеркало может быть указано веб-мастером или выбрано поисковиком самостоятельно. Второй вариант использовать не нужно, так как «по своему усмотрению» поисковик может выбрать неправильное главное зеркало.

Логично и правильно самостоятельно указать главное зеркало поисковикам через инструменты веб-мастера.

Для Google

Чтобы указать главное зеркало сайта для Google:

• Войдите в консоль Search Console под своим аккаунтом. Если аккаунта еще нет, заведите его;
• Добавьте в консоль все свои ресурсы: сайт с и без www, сайт http и https. Всего 4 сайта;
• Откройте в консоли любой добавленный сайт;
• В верхнем правом углу нажмите знак «шестерёнка» и выберите «Настройки сайта»;
• Выделите чек в нужном вам пункте «Отображать URL-адреса как…».

Повторите эту операцию для остальных сайтов этого домена.

Главное зеркало сайта Яндекс

Напомню, директива host на Яндексе больше не работает (источник).

Теперь Яндекс внимательно читает директивы 301 переадресации. Чтобы указать главное зеркало Яндекс нужно:

• Зайти в свой аккаунт на Яндекс.Вебмастер;
• Сделать постраничную 301-ую переадресацию сайтов на главное зеркало;
• В Яндекс.Вебмастере зайти в инструмент «Переезд сайта» и указать новое главное зеркало;
• Подождать 3-5 дней. Сервис сообщит вам о новом главном зеркале.
• Инструкция тут.

Как узнать главное зеркало сайта

Дело не только в том, чтобы сделать правильную переадресацию на главное зеркало. Главное, чтобы поисковики правильно определили задуманное вами главное зеркало.

Поэтому, чтобы узнать какое зеркало поисковики считают главным, отбрасываем сервисы проверок и делаем прямые поисковые запросы в поисковиках, используя язык поисковых запросов и свой домен. По запросу смотрим, что поисковики отдают в выдаче.

В поиске Google ищем:

site:domen.edu

На Yandex, ищем:

url:www.domen.edu* | url:domen.edu*

Вывод

Назначить главное зеркало сайта задача не праздная, а базовая и игнорировать её просто нельзя.

©seojus.ru

Еще статьи

(Всего просмотров 87)

Поделиться ссылкой:

Похожее

Главное зеркало сайта — настройка для поисковых систем

Главное зеркало сайта или основной домен сайта следует указывать поисковым системам для того, чтобы они точно знали какой из доменов считать основным, а какой зеркалом.

Указание главного зеркала сайта является одним из пунктов по технической оптимизации сайта. Это действие можно сделать тремя способами:

1. Настройкой файла robots.txt
2. Настройкой файла .htaccess
3. Настройкой соответствующих разделов в инструментах для вебмастеров поисковых систем Яндекса и Google.

Уточняю один момент. В данном посте мы рассмотрим самый распространенный случай по определению главного зеркала сайта – с WWW или без WWW.
Другие ситуации, которые возникают, например, при переезде сайта на другой домен мы опустим.

Честно говоря, современный аналитический уровень возможностей поисковых систем, на мой взгляд, может легко обеспечить решение этой задачи.

Но все ведущие специалисты по продвижению все-таки настоятельно рекомендуют проводить такую настройку.

Причем настаивают выполнять все три вышеперечисленных пункта, несмотря на то, что пункт с robots.txt носит рекомендательный характер для поисковых систем.

Настройка robots.txt

Файл robots.txt представляет собой текстовый файл с набором определенных директив. Расположен этот файл в главной директории сайта. Редактируется простейшими редакторами типа «Блокнот».

Очень хорошо и подробно описано применение этого файла и его команд в справочном разделе сервиса Яндекс Вебмастер. Также можно расширить свой кругозор в этом вопросе на сайте robotstxt.org.ua.

В этой публикации нам следует указать поисковым системам главное зеркало сайта. Делается это при помощи директивы Host следующим образом:

Host: inetmkt.ru

Обращаю Ваше внимание, что эту директиву используют только для поискового робота Яндекс. Фрагмент выглядит примерно таким образом:

User-agent: Yandex
Crawl-delay: 4
Disallow: /cgi-bin
Disallow: /wp-admin
……………
Disallow: /tag
Disallow: /feedback
Host: inetmkt.ru

Проверить корректность заполнения файла robots.txt можно в том же Яндекс Вебмастере. В разделе «Настройка индексирования» есть подраздел, который так и называется «Анализ robots.txt».

Отмена директивы Host в Яндексе

Поисковая система Яндекс объявила, что с марта 2018 года директива Host в файле robots.txt больше поддерживаться не будет.

Для указания главного зеркала рекомендовано использования 301 редиректа в файле .htaccess и инструкций в инструментах Вебмастеров Яндекса.

Хорошо это или плохо? Скорее хорошо. Ведь Google и ранее не учитывал эту директиву. Теперь правила указания основного зеркала сайта становятся более унифицированными.

Настройка файла .htaccess

Определение главного зеркала сайта в файле .htaccess осуществляется путем настройки 301 Редиректа.

Как это делается можно прочитать в этой статье. Здесь даны примеры настройки для блогов на CMS WordPress.

Файл .htaccess, как и robots.txt, также является текстовым файлом и располагается в главной директории сайта. В этом случае все его директивы должны выполняться для всего сайта. Если же такие файлы встречаются в других директориях сайта, то его команды будут действовать только в этой директории и в подчиненных ей поддиректориях.

Настройка главного зеркала сайта в инструментах вебмастеров.

Для настройки главного зеркала сайта в инструментах для вебмастеров Яндекса и Google следует иметь аккаунт в этих поисковых системах.

Также для этого следует подтвердить права на сайт. Как это делается, надеюсь, Вы уже знаете.

Заостряю Ваше внимание на одном нюансе. В инструментах вебмастеров Google следует подтверждать права как на домен с www, так и без www.

Это делается довольно просто, путем размещения небольшого файла в основной директории или указания специальных тегов.

Настройка зеркала в Яндексе

Указание главного зеркала в Яндексе происходит в разделе «Настройка индексирования». В подразделе «Главное зеркало» дается три варианта, которые следует указать. По умолчанию система выбирает – «На усмотрение робота».

Таким образом производилась настройка в старой версии Вебмастера. В новом Вебмастере Яндекса этот параметр настраивается несколько по другому. Думаю, что главное зеркало Яндекс определяет при регистрации сайта в этом сервисе. Вы ведь явно указываете протокол и URL основного домена с www или без него.

При необходимости главное зеркало можно перенастроить в разделе «Индексирование» — подразделе «Переезд сайта».

Настройка зеркала в Google

В инструментах для вебмастеров Google возможность настройки находится сразу при входе в раздел «Настройки сайта». Но еще раз повторюсь, что подтвердить права на домен придется дважды. Для домена с www и без www.

Вот такие нехитрые, но необходимые действия следует проделать, чтобы у поисковых систем не осталось вопросов о Главном Зеркале Вашего сайта или сайтов Ваших клиентов.

Полезные Материалы:

Как указать Яндексу и Google на главное зеркало сайта

Здравствуйте уважаемые читатели SEO-Mayak.com.  Сегодня я расскажу, как указать поисковикам Яндекс и Google на главное зеркало сайта.

Не так давно уже была опубликована статья — «Как зарегистрировать свой проект в поисковых системах«. Но сейчас речь пойдет немного о другом,  говорить мы будем о зеркалах, вернее о главных зеркалах наших с вами сайтов.

Что такое зеркало сайта? По мнению Яндекса, зеркало является частично или полной копией сайта. Есть и другие трактования, но суть одна — это очень плохо отражается на поисковом продвижении.

В чем же заключается эдакая зеркальность? Если вы попробуете набрать домен своего сайта например:  www.сайт.com и просто сайт.com, то попадете в обоих случаях на главную страницу. Так вот, для поисковой машины это два совершенно разных сайта с полностью идентичным содержимый.

То есть, это полный дубль сайта. О различных дублях контента я подробно писал в статьях:Похожие (дублированные) страницы» и «Как правильно выводить анонсы статей«.

Дело в том, что надо определится по поводу главного зеркала, будет сайт с www или без него. Кстати по этому поводу мнения сильно разнятся, но если почитать историю возникновения www, то становится понятно, что www это уже в прямом и переносном смысле — прошлый век. Беру на себя смелость посоветовать своим читателя отказаться от пресловутой аббревиатуры создателей всемирной паутины.

Аббревиатура WWW расшифровывается, как World Wide Web и переводится просто — «Всемирная паутина».

Теперь когда мы определились с основным зеркалом, самое время сообщить об этом крупным поисковым системам.

Как указать Яндексу на главное зеркало

Указать Яндексу на главное зеркало можно перейдя по этой ссылке. Следуем — «Мои сайты«, выбираем свой сайт или один из своих сайтов, — «Настройка индексирования» — «Главное зеркало«:

Примечание! Проект должен быть уже зарегистрирован в поисковых системе и если Вы этого не сделали, то советую почитать статью — «Регистрация сайта в поисковых системах Яндекс, Google, Bing, Mail.ru и других»

Как указать Google на главное зеркало

Чтобы указать Google на главное зеркало, я пошел уже протоптанной другими веб-мастерами дорожкой,  инструменты для веб-мастеров — «Конфигурация» — «Настройки»

Выбрал главное зеркало и нажал — «Сохранить» ниже выскочило сообщение, которое заставило меня призадуматься:

Почитам немного справочник Google я понял, что для прохождения данной процедуры надо попасть в сервис Google Apps для бизнеса

Проходим регистрацию и попадаем на панель администратора. Далее выбираем — «Подтвердить право собственности на домен»

В всплывающем окне нажимаем — «Продолжить» и попадаем на страницу, где нам предлагается выбрать регистратора домена или провайдера:

Если Вы не нашли в предложенном списке своего регистратора домена, то в самом конце выбираем — «Другое»:

Далее откроется страница с предложение создать запись в системе доменных имен (DNS):

Задачка! Но не все так страшно как может показаться на первый взгляд. Копируем предложенный код и идем в панель управления своего хостинг-провайдера, заходим в настройки DNS и в поле TXT-запись вставляем скопированный код. На моем хостинге поле TXT-запись выглядит так:

Если там уже есть какие-то символы, то просто заменяем их скопированным кодом от Google. Теперь возвращаемся в панель управления и нажимаем кнопку — «Подтвердить» и если мы все сделали правильно появится такое сообщение:

Также Google предлагает альтернативные способы подтверждения и я попытался воспользовался одним из них для моего тестового домена:

Но как я не старался получить файл googleb1c540918a6ec845.html Гугл настойчиво слал мне совершенно другой файл, точно такой же, что я закачал в корень сайта при регистрации в поисковой системе Google и потом упорно не хотел его видеть. Тогда я пошел другим путем, методом добавления метатега файл header.php. и на этот раз подтверждение прошло успешно.

Каким из предложенный вариантов воспользоваться конечно решать Вам, но наверно лучше идти по рекомендованному пути, ведь не зря же он  — «рекомендованный».

Чтобы окончательно завершить перенаправление, кроме всего вышесказанного, необходимо выполнить 301 редирект через файл .htaccess

Если возникли сложности, то расскажите об них в комментариях.

До встречи!

С уважением, Виталий Кириллов

Что такое главное зеркало сайта и для чего оно нужно

На просторах интернета существует просто огромнейшее количество сайтов, каждый из которых – это отдельная система, в которой есть свои нюансы. Абсолютно каждый человек знаком с понятием зеркало, поэтому особой сложности в понимании термина «зеркало сайта» ни у кого не возникнет.

Говоря вкратце зеркало сайта – это копия сайта, который может быть создан по различным причинам. Основной причиной является резервная копия данных, для предотвращения потери информации.

Зеркал у сайта может быть просто огромное количество, но из этого множества есть одно главное зеркало. Чем отличается главное зеркало от всего остального? Отличие одно, именно оно и индексируется поисковыми системами, остальные склеиваются и просто проходят мимо робота.

Зеркало сайта должно не отличатся в дизайне и контенте от своего оригинала, если поисковыми роботами будут найдены различия, то сайты расклеятся и больше не будут зеркалами.

Игнорирование выбора главного зеркала

Если выбор главного зеркала оставить на полочку, то это очень сильно повлияет на продвижения сайта. Главным образом выбором займется робот, но сколько времени это займет, предугадать невозможно. Сайт получит обратные ссылки, зеркала не смогут взаимодействовать друг с другом, что существенно понизит индекс цитирования и продвижение уйдет на нет. Другими словами заниматься выбором главного зеркала нужно очень ответственно и с большим пониманием.

Зеркала широко используются для продвижения и сохранения показателей сайта. Также немалую роль играет это при смене домена сайта. Когда владелец сайта хочет поменять домен, то для того, чтобы сохранить все его позиции в поисковых системах, оставить наработанный авторитет, нужно просто старый домен сделать главным зеркалом нового существующего сайта с помощью 301 редиректа, о котором писали тут.

Для того, чтобы привязать зеркало сайта, нужно будет покопаться в каждой поисковой системе отдельно. Это делается несложно, но для эффективного продвижения сайта это сделать просто необходимо.

Суть зеркала сайта на самом деле очень проста, но за этой простотой скрывается достаточно массивная система индексации, которая иногда может дать сбой. Поэтому важно самому назначать главное зеркало сайта для каждой поисковой системы.

Как указать основное зеркало и какие есть способы смены

Прежде чем начинать продвижение сайта, надо сначала определить какой домен будет основным. Иначе в индексах поисковых систем может оказаться оба сайта (с префиксом www и без него) с одинаковым содержимым.

Сайт доступен для индексации как с www, так и без www. Вам необходимо выбрать основное зеркало.

Выбор основного зеркала

Зеркалами считаются сайты, являющиеся полными или частичными копиями. Копии определяются по совпадению контента на страницах с одинаковыми адресами (site1.ru/page.html и site2.ru/page.html). Например, в большинстве случаев хосты site.ru и www.site.ru являются зеркалами, так как контент страниц, доступных по одинаковым адресам, не отличается.

Также сайты считаются зеркалами, если со страниц одного сайта настроен серверный редирект на соответствующие им страницы другого сайта (site1.ru перенаправляет на site2.ru, site1.ru/page.html перенаправляет на site2.ru/page.html и т.д.).

Так как роботы поисковых систем склеивают зеркала и индексируют только одно из них (основное), то иногда требуется вручную указать для роботов, какое именно из зеркал должно являться основным.

Способы смены основного зеркала

Существует несколько методов для смены основного зеркала:

1. Изменить основное зеркало в панели вебмастера поисковой системы (инструкции для Яндекса и Google)
2. С помощью директивы Host в файле robots.txt (только для Яндекса)

Пример:

#Если www.glavnoye-zerkalo.ru главное зеркало сайта, то 
#robots.txt для всех сайтов из группы зеркал выглядит так
User-Agent: *
Disallow: /forum
Disallow: /cgi-bin
Host: www.glavnoye-zerkalo.ru

3. С помощью серверного 301 редиректа со страниц старого домена на соответствующие им страницы нового.

Это приводит к тому, что показатели сайта тИЦ, PR и ссылочное ранжирование распыляются на оба сайта. И хуже всего, то, что за дублированный контент, страницы сайта могут вообще выпасть из индекса.

Проблема в том, что поисковые машины не всегда правильно определяют главное зеркало сайта, пользуясь своими алгоритмами определения и склейки зеркал. И главным зеркалом может быть выбран совсем не тот сайт.

Поэтому лучше не надеяться на авось, а самому явным образом указать основной домен. Существует несколько способов сказать роботам поисковых систем на то, какое зеркало нужно считать основным.

Основной домен для Google

Чтобы указать для Гугла основной домен, выполните следующие действия.

1. 1. На главной странице Инструментов для веб-мастеров (www.google.com/webmasters/tools/) выберите  сайт, для которого нужно указать основной домен.
   2. В разделе Конфигурация сайта перейдите в Настройки.

1. В разделе Основной домен выберите требуемый параметр.

Кроме того, для Гугла можно прописать инструкцию в файле .htaccess

Redirect 301 / https://fortress-design.com/

Основное зеркало для Яндекса

Для Яндекса основной домен или как называет Яндекс основное зеркало указывается в файле robots.txt

host: fortress-design.com

Проверка основного зеркала сайта в Яндекс.Вебмастере

Чтобы узнать, какие страницы сайта находятся индексе в Яндексе, укажите URL сайта в специальную форму (webmaster.yandex.ru/check.xml).