Как установить главное зеркало. История о том, как я сменил главное зеркало. Основное зеркало с WWW

Главное зеркало сайта – практически 100% версия ресурса, расположена по иному адресу. Контент на ней может повторяться на 80% и более.

Поисковые системы имеют свои алгоритмы индексации. Адрес сайта с приставкой www и без неё может восприниматься, как индивидуальные ресурсы. Главное зеркало сайта, что это такое? Это тот же сайт, но по другому адресу.

Иногда ресурсы переезжают на другой домен, оставляют весь контент без изменений, но владелец забывает о редиректе. Если не подойти к делу рационально, то ТИЦ и PR слетят для каждой версии или разделятся.

Так происходит из-за того, что поисковики не понимают, где главная версия, а где копия сайта. Важно объяснить системам, что такое главное зеркало сайта. Посмотрим, как сделать работу правильно и быстро.

Как определить главное зеркало сайта без ошибок?

Введите в адресную строку браузера адрес сайта с префиксом www. Не исчезли символы и вы не попали на тот же сайт по адресу сайт.ру?

Проверяем адрес сайт.ру тем же методом. После перехода адрес сайта не изменился, не добавились символы www? Значит зеркало не настроено совсем.

Это плохо, потому как поисковики расценивают ресурс, как автономные ресурсы и все параметры разделяются между ними. Как настроить главное зеркало сайта, рассмотрим далее.

Настройка главного зеркала сайта

Как приоритетную версию ресурса выбирайте сайт без дополнения www. Как только интернет начал развиваться такие адреса считались популярными, сейчас всё идёт к упрощению.

Настраиваем зеркало в Google Search Console и Яндекс.Вебмастер

В корневой директории сайта главная и второстепенная версии прописываются файлами. Htaccess – приоритетный файл, вся информация, которая здесь значится, воспринимается, как главная. Чтобы вы не написали в robots.txt, он останется второстепенным.

В файле htaccess прописываете условие, что при попадании на адрес www, пользователь незаметно переходит на сайт без приставки в адресе. Как это смотрится в коде, смотрите в сети, это зависит от типа CMS, с которой работаете.

Но, есть один нюанс: htaccess не даёт гарантии, что сайт и зеркало будут восприниматься поисковыми системами одинаково. Дополнительно проделываете следующие мероприятия:

  1. В панели вебмастера Яндекс находите опцию «Настройка индексации», выбираете «Главное зеркало».
  2. Указываете один из вариантов:
  • Сайт с приставкой www;
  • Веб-сайт без приставки www в адресе;
  • На усмотрение поисковых систем.

Определение главного зеркала сайта должно указывать на адрес ресурса без приставки www, как уже сказано выше. Главное зеркало сайта в новом вебмастере указывается точно так же, как и в стандартной версии. Разница между ними только в дизайне и количестве функций.

С Гуглом всё проще:

  1. Нужно зайти в Google Search Console, выбрать «Сообщения».
  2. Находите раздел «Выберете приоритетную версию» — указывайте нужный тип зеркала, который будет главным.


Директива для Яндекса

Яндекс – специфический поисковик. Ему мало указания в htaccess, панели вебмастера для 100% результата. Дополнительно зайдите в robots.txt, и в корне директории с ресурсом, пропишите директиву, которая будет отправлять Яндекс на главную версию веб-сайта (Host).

Прописывается следующее:

  • Юзер адепт (User-agent), указываете Яндекс;
  • Дисселов (Disallow), прописываете /wp-admin;
  • Хост (Host) адрес своего сайта без приставки www.

Обратите внимание, что в Disallow, указываются все разделы, куда роботы от поисковой системы не должны заходить админка, cgi-bin и другие элементы, которые считаете нужным.

Выше приведён пример, где не индексируется панель администратора вордпресс. После проделанной работы поисковик правильно понимает, где главное зеркало сайта.

Создаем зеркало сайта с HTTPS, SLL

С появлением HTTPS Гугл повышает в позициях сайты, имеющие этот протокол. Считается, что подобные ресурсы безопасны. Идеально если протокол создаётся сразу при разработке сайта.

Если нет, то после перехода на безопасный протокол необходимо поставить редирект с нынешнего зеркала на основное с приставкой HTTPS. Как узнать главное зеркало сайта онлайн уже рассматривалось выше.

Когда изначально сайт с http:, но без приставки www был основной версией, а такой же сайт с приставкой – дополнительной версией, то после изменений версия https: станет основным вариантом, а перечисленные пойдут, как дополнительные зеркала.

Причина перехода сайта на новый домен с приставкой в адресе s – повышенный уровень безопасности данных после получения сертификата SSL. Информация при попадании на сайт будет шифроваться, что снижает риск её попадания в третьи руки.

Проверить главное зеркало сайта стоит с сертификатом или без него можно способами, перечисленными выше.

Мониторим страницы, попавшие в индекс

Финальная проверка проделанной работы – мониторинг проиндексированных страниц. Проверяются показатели посещаемости и количество страниц в поисковиках не раньше, чем через 14 дней.

Адекватный результат увидите через месяц. Проделанная работа привела к ожидаемому результату? Если нет, то ищите ошибку. Код должен быть идеальным, лишняя точка может сделать файлы.htaccess и роботс бесполезными.

Зеркало сайта – точные и частичные копии сайта, доступные под разными адресами. Обычно они определяются путем сравнения контента на страницах с одинаковыми адресами, например site1.ru/index.php и site2.ru/index.php. В большинстве случаев www.site.ru и site.ru также являются зеркалами, т.к. являются для поисковиков сайтами с одинаковым содержанием, но расположенными по разным адресам.

На что влияет?

Если поисковые работы находят в интернете одинаковые сайты, то они идентифицируют их как «зеркала». Как всем известно, основная задача поисковых систем заключается в предоставлении пользователям наибольшего объема уникальной информации. При этом поисковые алгоритмы постоянно развиваются и усовершенствуют методы борьбы с дублирующимся контентом, удаляя неуникальные документы из индекса.

Поэтому все найденные зеркала склеиваются поисковыми роботами, а в индексе остается только один сайт, который считается основным зеркалом.

Если не произвести необходимые настройки, то алгоритмы поисковых систем могут выбрать в качестве основного зеркала совсем не тот сайт, который нужен нам для . Чтобы этого избежать, рекомендуется своевременно выполнить ряд работ по склейки всех зеркал, с указанием нужного сайта в качестве главного зеркала.

Склейка зеркал также необходимо выполнять в случае сменяя доменного имени, это позволит сохранить (тИЦ и PR), а также передать вес от имеющихся ссылок.

Как узнать, что сайт - неглавное зеркало

Если существует сайт, который находится не в индексе поисковой системы и есть подозрение, что он является неосновным зеркалом какого-либо ресурса, то стоит добавить его к индексации на странице " Сообщить о новом сайте ". Если появилось соответствующее сообщение, то ресурс склеин:



Способы склейки зеркал

Существует несколько способов склеить все зеркала и показать поисковым системам, какая из копий сайта является основной. Некоторые из представленных способов подходят только для настройки корректной обработки зеркал в пределах одного домена, другие подходят для сайтов, расположенных на разных доменах.

Директива Host. Главное зеркало сайта можно указать в помощи директивы Host. Ее обычно пишут после директив Disallow:

User-Agent: *
Disallow: /admin/
Disallow: /index.php
Host: www.domain.ru

Директива Host корректно обрабатывается только поисковой системой Яндекс, поэтому ее рекомендуют использовать одновременно с другими способами настройки зеркал.

Ссылочная структура. Помочь поисковой системе правильно выбрать основное зеркало сайта можно, использую грамотную ссылочную структуру (актуально, если на сайте используются абсолютные ссылки). Необходимо, чтобы все ссылки с внутренние ссылки сайта вели на страницы, принадлежащие правильному зеркалу.

Если в качестве главного зеркала сайта мы выбираем www.site.ru, то рекомендуется все ссылки вида http://site.ru/page.html поменять на http://www.site.ru/page.html

301 редирект. Один из самых эффективных и поэтому наиболее часто применяемый способ указать главное зеркало – настройка серверного редиректа. Для его реализации необходимо добавить в файл.htaccess следующую информацию:

RewriteEngine on
RewriteCond %{HTTP_HOST} ^site.ru
RewriteRule ^(.*)$ http://www.site.ru/$1
RewriteBase /

Яндекс.Вебмастер. Указать главное зеркало сайта можно и в . Для этого необходимо добавить сайт и перейти в пункт «Главное зеркало» раздела «Настройка индексирования». Там можно самостоятельно выбрать один из вариантов (с www или без) или оставить на усмотрение робота:




Не стоит забывать, что данные, указанные в панели инструментов, будут учитываться только поисковой системой Яндекс.

Google Webmaster Tools. Указать основное зеркало сайта можно и в панели Google Webmaster Tools. Для этого необходимо добавить ваш сайт в инструменты для вебмастеров и перейти в пункт «Настройки» раздела «Конфигурация сайта»:




В Webmaster Tools можно самостоятельно выбрать один основной домен, который будет участвовать в основном поиске Google.

После выполнения одного из способов настройки основного зеркала и индексации поисковыми роботами, произойдет выбор главного зеркала и только по этому адресу сайт станет доступен в поисковых системах. Данный процесс может занять некоторое время.

Расклейка зеркал

Если сайты перестают быть зеркалами и начинают предоставлять пользователем различные контент, то происходит автоматическое расклеивание ресурсов. Поисковая система Яндекс, утверждает, что ее алгоритмы осуществляют расклейку сайтов в течение 1-2 недель.

Когда только начинаешь заниматься сайтами, то не задумываешься, что, например, www..ru — разные адреса. Эти доменные имена являются зеркалами. На каждом из них могут отображаться разные сайты.

Какие сайты Яндекс считает зеркалами?

Яндекс считает зеркалами сайты, которые содержат одинаковый контент на страницах, находящихся на одинаковых адресах. Например, www..ru/yandex-webmaster/. У меня стоят , поэтому все зеркала ведут на один адрес.

Какие адреса могут являться зеркалами:

  • с префиксом www и без него - www.primer.ru и primer.com;
  • по протоколам HTTP и HTTPS - http://primer.com и https://primer.com;
  • находится в разных доменных зонах - primer.com и primer.ru;
  • настроен серверный 301 редирект с одного адреса на другой - primer.com перенаправляет на primer.ru.

Что такое главное зеркало?

Главное зеркало - это доменное имя сайта, по которому он индексируется в поисковике и показывается в результатах поиска, если доступен по нескольким доменам. Можно настроить в сервисе Яндекс Вебмастера.

Как указать главное зеркало в Яндекс Вебмастер?

Если изначально не было выбрано главное зеркало сайта, то робот выберет его самостоятельно в соответствии со своим алгоритмом.

Чтобы указать главное зеркало поисковику необходимо настроить переезд в Яндекс Вебмастере .

Зайдите в раздел «Индексирование» в пункт «Переезд сайта». Выберите новый домен, который будет главным зеркалом. Если в списке нет нужного адреса, то следует .

Если не планируете менять домен, а просто хотите сменить протокол или префикс, то для этого есть два пункта:

  • добавить https;
  • добавить www.

Чтобы выбрать главное зеркало нужно пройти несколько этапов:

  1. Добавить сайт в Яндекс Вебмастер;
  2. Отметить галочкой нужный пункт;
  3. Сделать 301-редирект со старого домена на соответствующие страницы нового.

Раньше это делалось довольно сложно и долго. На данный момент все проходит очень быстро и, обычно, без проблем.

И да, советую переходить на HTTPS , т.к. Google дает таким адресам чуть больше преимуществ за повышенную безопасность передачи данных по этому протоколу.

Если вы планируете сделать главным адрес с протоколом HTTPS (или с префиксом www), то добавляйте адрес именно с этим протоколом (префиксом), например, https://сайт.

Есть другой вариант перехода на главное зеркало — просто сделать 301-редирект. Но если сначала сделать настройки в Яндекс Вебмастере, то переезд пройдет быстрее. Яндекс пишет, что смена занимает от одной до трех недель. После этого сайт начинает участвовать в поиске под именем нового главного зеркала.

Индексируются ли зеркала?

Яндекс склеивает все домены и показывает в поиске только главное зеркало. Страницы неглавного зеркала будут в поиске до тех пора, пока страницы главного зеркала их не вытеснят. Вытесненные страницы будут исключены из поиска, но могут храниться в базе Яндекса.

Как проверить, является ли сайт чьим-нибудь зеркалом?

Проверить является ли сайт зеркалом, можно добавив его в Яндекс.Вебмастер.

  1. Если сайт признан неглавным зеркалом, он будет автоматически добавлен вместе со своим главным зеркалом.
  2. Если сайты не являются зеркалами, они будут отображаться в сервисе независимо друг от друга.

При необходимости зеркало может быть отклеено.

Учитываются ли характеристики неглавных зеркал на главном?

Да, учитываются. Например, это полезно, если интернет-ресурс переезжает на новый домен. Если старый домен станет неглавным зеркалом нового, это поможет сайту сохранить позиции в поиске.

Склеятся ли адреса, если настроить перенаправление со всех страниц одного сайта на главную страницу другого?

Да, робот склеит такие сайты, но использовать этот способ не рекомендуется. Вместо него лучше настроить перенаправление на соответствующие друг другу страницы.

Как расклеиваются зеркала?

Если сайты перестают являться зеркалами друг друга и отдают разное содержимое, в течение нескольких недель они расклеиваются роботом.

Вы можете сообщить роботу о необходимости расклейки сайтов с помощью специального инструмента в сервисе Яндекс.Вебмастер.

После того, как адреса расклеятся, они будут отображаться как отдельные, не связанные между собой ресурсы.

Добрый день. В этой статье мы приступим к техническому аудиту сайта, которые вы должны проделывать, и, в частности, пропишем для сайта его главное зеркало.

Часто на продвижение приходят сайты, на которых, вроде, все делается – работа с контентом, ссылочное продвижение, но сайт очень плохо идет в ТОП.

В большинстве случаев – это именно техническая сторона вопроса.

В SEO сообществе ходят мифы о том, чем отличается хороший сеошник от плохого. Плохой SEO оптимизатор занимается правкой текста и покупкой ссылок, а нормальный сеошник качественно относится к первому и второму пункту, и, кроме этого, делает полный технический аудит.

Разумеется, это не полный спектр того, что делает сеошник, но, как правило, причиной плохого продвижения является то, что не сделана правильная техническая оптимизация.

Начнем мы с главного зеркала.

Главное зеркало – то, по которому откликается ваш сайт, с www, или без него..

Раньше это было более явно выражено, то есть в индекс попадали страницы и с www, и без него.

Эти страницы являются прямыми дубликатами. Это очень плохо, и, чтобы это все исправить, делается 301-й редирект (изначальная настройка зеркала – это 301-й редирект), указание директивы HOST в файле Robots.txt, и ручное задание главного зеркала в инструментах для вебмастера.

Давайте посмотрим, что нам надо подключить для главного зеркала, и как с этим всем работать.

Нам понадобятся Инструменты для вебмастера от Яндекса (webmaster.yandex.ru), и от Google (google.com/webmasters).

Для того, чтобы задать главное зеркало сайта в Яндексе, в правой колонке выбираем Настройка индексирования -> Главное зеркало.

В открывшемся поле выбираем, какой вариант написания мы выбираем в качестве главного зеркала – с www, или без него. После чего, нажимаем кнопку Применить.

В кабинете вебмастера Гугла, назначить главное зеркало немного сложнее.

После того, как вы подтвердили оба варианта домена, вы нажимаете в правом верхнем углу на значек шестеренко (настройки), и выбираете пункт «Настройки сайта». При этом, не важно, какое зеркало будет в данный момент отображаться в аккаунте – с www, или без него.

В открывшемся поле выбираете нужный вариант зеркала, и сохраняете его.

Все, в инструментах вебмастера обоих поисковых систем вы настроили свое главное зеркало.

И теперь, в соответствии со схемой, предложенной выше, вам осталось настроить 301-й редирект и файл Robots.txt, чтобы окончательно показать поисковикам главное зеркало вашего сайта.

В файле Robots.txt за это отвечает команда HOST. Вот как этот файл оформлен у меня:

Как видите, главным зеркалом моего сайта я назначил домен без www.

Редирект 301 мы будем настраивать в файле.htaccess. Если у вас на сайте такой файл отсутствует, то его легко сделать из текстового файла – кликаете правой кнопкой мышки: Создать -> Текстовый документ, и задаете ему название.htaccess.

Открываем этот файл в простом блокноте, и вносим туда нужный вам код, пример которого я привожу ниже (при этом, не забываем изменять название домена моего сайта на своё):

Все, как видите мы задали главное зеркало тремя возможными способами. Вообще то, для поисковых роботов достаточно и 301-го редиректа, однако, я советую для надежности использовать все три метода.

Главное зеркало – основная версия сайта. Зеркалом именуют полную или практически полную копию сайта, размещённую по другому интернет-адресу. Она повторяет контент на 80% и выше. Для поисковых роботов, наличие приставки www перед адресом делает сайт совершенно другим, то есть www.названиесайта.ru и названиесайта.ru – понимаются, как физически отличающиеся адреса.

Яндекс и Google индексируют сайты по-разному: первый может считать главным сайтом www.сайт.ru, а второй – сайт.ru. Или наоборот. Именно поэтому важно «тыкнуть их носом» в главный и зеркальный сайты.

Почему важно чтобы сайт имел главное зеркало?

Обычно зеркало сайта возникает из-за www-префикса.. Но случаются и переезды на другой домен с оставлением того же контента сайта, но без настройки редиректа.

Но если не сделать это по-умному, то ТИЦ и PageRank только снизятся для каждого сайта, разделившись, из-за непонимания поисковиками, что должно считаться главным зеркалом, а что – второстепенным. Поэтому, чтобы не навредить себе, вебмастер должен дать понять роботам Яндекс и Google – какая версия сайта является главным зеркалом.

Также перестанет работать часть ссылок и поведенческие факторы. Если по ссылкам переходят на сайт.ru и проводят там долго времени - это сигнал поисковой системе о качестве сайта. При этом переход по ссылке на www.сайт.ru - никакого влияния на сайт.ru не окажет.

Как проверить и определить, указано ли главное зеркало.

Проверка правильности настройки зеркала проста – в адресной строке используемого браузера вводится адрес сайта.

Возьмём адрес www.сайт.ru, как и в прошлых примерах. Если после ввода адреса и символы www не исчезли, перенаправив пользователя на сайт.ru, то далее следует проверка сайт.ru тем же способом.

Если после перехода адрес снова не изменился – то есть к нему не добавились символы www, – то значит, что зеркало не настроено. Получается, что оба указанных адреса индексируются поисковыми системами как самостоятельные сайты.

Виртуальный хостинг сайтов для популярных CMS:

И это плохо, поскольку все показатели распыляются на 2 сайта. Как поправить ситуацию – рассмотрим ниже.

Какую версию выбрать основной – с www или без?

Большинство сайтов сейчас отображаются без приставки www, поскольку она являла собой некую отличительную черту адреса на заре становления Internet как глобальной сети. Тогда буквы www считались прогрессивным префиксом, который отождествлялся с Интернетом как жутко интересной новинкой.

По мере того, как он плотнее входил к нашу жизнь, сайтостроители задали тенденцию к упрощению. В том числе это коснулось и самих адресов. Поэтому, выбирая основное зеркало сегодня, следует задавать адрес без www, который стал уже анахронизмом, пережитком времени.

Главное зеркало в инструментах Яндекс Вебмастер и Google Search Console.

Значения главного и второстепенного зеркала задаются с помощью файлов.htaccess и robots.txt, которые должны быть помещены в корневую директорию домена. В первом необходимо прописать условие – если пользователь заходит на www.сайт.ru, то он перенаправляется на сайт.ru. Какой вид это имеет в коде – можно найти в интернете для каждого конкретного случая (в зависимости от того, какая CMS используется).

Поскольку файл.htaccess не гарантирует абсолютно одинакового понимания роботами от Яндекс и Google какая версия является главным зеркалом, то в инструментарии web-мастера нужно проделать нижеследующую работу.

Для Яндекса:

  1. Зайти в инструменты вебмастера, пункт «Настройка индексирования» – «Главное зеркало».
  2. Указать в нём один из трёх имеющихся вариантов: «на усмотрение робота», «www.сайт.ru» или «сайт.ru» (вместо «сайт.ru» следует подставлять нужный адрес сайта). В этом случае выбор должен быть остановлен на «сайт.ru».

Для Гугла:

  1. Зайти в Google Search Console, в раздел – «Сообщения».
  2. В пункте «Выберите предпочтительную версию» – указать желаемую версию сайта.

Директива host в robots.txt для Яндекса

Для Яндекса указание в.htaccess и инструментах вебмастера не гарантирует стопроцентный результат. Поэтому следует в файле robots.txt в корне директории с сайтом прописывать директиву, отправляющую Яндекс на нужный сайт – Host. В файле прописывается следующее:

User-agent: Yandex
Disallow: /wp-admin
Host: сайт.ru

В сроке «Disallow:» указывается всё, что, по мнению вебмастера, не должен делать и куда не должен заглядывать робот от Яндекса – cgi-bin, админка и т.п. В приведенном примере от индексации закрыта администраторская часть wordpress.

После этого, Яндекс правильно определяет основное зеркало сайта.

Как сделать главное зеркало с SLL и HTTPS

После перевода сайта на протокол HTTPS, Google начинает https-сайты повышать в позициях выдачи, т.к. считает их сайтами с повышенной безопасностью. Поэтому, кроме перехода на безопасный протокол шифрования, после такого шага необходимо выполнить редирект зеркала на основное, содержащее HTTPS.

Если до этого сайт http://сайт.ru был основным, а http://www.сайт.ru – вспомогательным, то теперь основным станет https://сайт.ru, а два указанные – вспомогательными зеркалами. Причиной переезда сайта на новый адрес, с буковкой «s» является установка на сайт сертификатов SSL, повышающих безопасность (данные, которые передаются на сайт шифруются).

Мониторинг проиндексированных страниц сайта.

Роботам требуется определённое время, чтобы «прочитать» изменения, произошедшие на сайте. А потому проверяются показатели посещаемости и количество страниц в индексе спустя 2-4 недели.

Это делается, чтобы удостовериться, что выполненные ранее действия привели к желаемому результату. Если что-то не получилось – необходимо проверить – возможно, где-то закралась ошибка. Даже лишняя запятая, закравшаяся в код, может сделать файлы robots.txt и.htaccess бесполезными для поисковых систем.