Что такое зеркало сайта и как указать поисковикам рабочий актуальный вариант

Что представляет собой зеркало сайта?

Понятие «зеркало сайта» описывает несколько явлений:

• Две версии одного сайта с доменом, написанным с использованием «www» в начале и без них – эти версии появляются при создании сайта и иногда их склеивают в один позже;
• Когда один сайт находится на нескольких разных серверах. При этом, если выходит из строя один сервер, то начинает действовать один из рабочих;
• Зеркальными часто называют сайты, имеющие другие домены, отличные от исходного, но практически полностью (от 80%) копирующие основной – оформление, содержание.

Создание зеркальных ресурсов преследует следующие цели:

• Обезопасить компанию от потери клиентов в случаях, когда основной сайт не работает определенное время (переезд, внесение изменений, проблемы с сервером);
• Занять домены, связанные с деятельностью компании, чтобы их не зарегистрировали конкуренты;
• Продвижение. Регистрируются несколько доменных имен, по которым покупатели могут искать услуги или продукты компании. Также создаются копии на разных национальных доменах для охвата международной территории.

Боты поисковых систем видят контент зеркальных сайтов, некоторые показатели они суммируют по всем ресурсам. Но в выдаче будет показан только основной портал (при условии, что все настроено правильно). Сайты, на которых содержимое практически полностью идентично, даже если не происходит перенаправления на один из них, считаются зеркальными. Как в этом случае поступит бот, если не прописаны инструкции, какой сайт считать основным, предугадать трудно. Это еще одна причина, по которой компании борются с сайтами, копирующими контент без их разрешения.

Что это

Частичный или полный дубликат Интернет-ресурса — это зеркало сайта. Что такое «зеркальное копирование», в чем его смысл? Под ним понимается наличие у сайта двух версий: с «www» и без него. Поисковые системы оба этих варианта считают разными, даже если адреса совпадают.

Когда сайт создают, у него будет два адреса. Выглядит это следующим образом: www.free.ru и free.ru. Для удаления дубликата потребуется склейка доменов. Зеркалом также считается домен, прикрепленный к главному варианту сайта (когда основной адрес соединяется с новым).

В этом случае один домен становится главным, а зеркальный перенаправляет пользователя на основной ресурс. Зеркалом сайта также называют частичную или полную его копию, которая имеет свой домен и находится физически на другом сервере. Например, работающее зеркало сайта «Фонбет» было заблокировано в соответствии с требованиями Законодательства РФ, но посетителям интересно узнать, как зайти на этот ресурс. Помогают в этом копии.

Особенности

Рабочее зеркало сайта — это копирование (частичное или полное). Среди профессионалов понятие «зеркало» используется в нескольких контекстах, поэтому имеет разные значения.

1. Дубликат-версия сайта, для перехода на который используются буквы «www». Если, например, вместо www.13star.ru написать в строке поиска 13star.ru, поисковик посчитает, что эти два адреса — разные, но сходные по содержанию. Поэтому необходимо их соединить (склеить) для корректной оптимизации.
2. Зеркальное копирование представляет другой домен, прикрепленный к главному сайту. В этом случае два адреса объединены одним содержимым. Они покажут копию главного ресурса, независимо от того, какой домен будет основным: старый или новый. Копию можно хранить на другом сервере. К примеру, роботы браузеров «Гугл» и «Яндекс» считают зеркалами полные копии, если у сайтов совпадает содержание по разным адресам.

Работающее зеркало сайта «Фонбет» (букмекерская контора) — один из вариантов получить к нему доступ. Большинство копий блокируется из-за ужесточения правил для компаний, которые предоставляют улуги азартных игр в Интернете. Однако многих игроков интересует, как попасть на «Фонбет». Для этого было создано несколько зеркал. С каждой новой блокировкой создаются дополнительные зеркала, где посетитель может делать ставки. У букмекерской компании выстроена целая сеть зеркальных сайтов. На них имеются ссылки с перенаправлением. Когда посетитель на нее нажимает, открывается новое работающее зеркало сайта «Фонбет».

Как настроить главное зеркало у сайта?

Рассмотрим, как настраиваются главные зеркала в разных ситуациях. Также в этой части статьи вы узнаете, как можно склеить домены.

Ситуация №1. Переезд с адресов www/без www

Допустим, ваш сайт доступен по двум адресам: www.site.com и site.com. Вы хотите сделать главным зеркалом версию site.com. Для этого выполните следующие действия:

1. Найдите на хостинге файл .htaccess. В нем пропишите команду:

Если ваш сайт работает на протоколе http, в третьей строке нужно прописать http, а не https, как в примере. Вместо site.com, соответственно, указываете адрес вашего проекта.

2. Проверьте, что на сайте появился редирект с адресов с www на соответствующие адреса без www (он должен появиться сразу после сохранения изменений в файле .htaccess).

3. В панели Яндекс.Вебмастер в разделе «Переезд сайта» снимите галочку «с www», если она была установлена, и сохраните изменения:

В Google ничего дополнительно делать не нужно. Он будет ориентироваться на настроенный редирект.

Ситуация №2. Переезд на https-протокол

Если ваш сайт переезжает на https-протокол, то вам нужно создать главное зеркало на защищенном протоколе. Для этого следуйте инструкции:

1. Активируйте защищенный протокол на сайте, чтобы ваш проект стал доступен по адресу с https.

2. Найдите на хостинге файл .htaccess. В нем пропишите команду:

3. Проверьте, что ваш сайт стал переводить посетителей на https страницы.

4. В панели Яндекс.Вебмастер в разделе «Переезд сайта» поставьте галочку «Добавить HTTPS», как показано на скриншоте ниже, и сохраните изменения:

В Google ничего дополнительно делать не нужно. Он будет ориентироваться на настроенный редирект.

Ситуация №3. У сайта несколько доменов

Давайте разберемся, как можно склеить несколько зеркал на разных доменах.

Например, есть сайт, который доступен по нескольким адресам. В этом случае на всех сайтах в коде страниц необходимо прописать канонические адреса на главном зеркале

Важно, чтобы на всех сайтах контент был одинаковым, иначе роботы поисковых систем могут игнорировать команды

Если контент будет одинаковым, индексироваться страницы будут по каноническим адресам.

Другая ситуация – вам нужно склеить несколько зеркал. Например, к домену А подклеить домен Б. В этом случае с домена Б необходимо поставить 301 редирект на домен А – и домены склеятся. При этом основным зеркалом станет домен А (куда ведет редирект).

Что такое зеркало сайта

Прежде всего, давайте определимся, что вообще такое зеркало сайта и для чего оно нужно.

Зеркало сайта – точная или почти точная копия какого-либо сайта, доступная под разными адресами, но содержащая одинаковый контент.

К примеру, у вас есть сайт с адресом «www.example.ru», но также он доступен по адресу «www.site.ru». В этом случае сайты считаются зеркалами.

Поисковые системы, индексируя интернет, часто сталкиваются с сайтами-клонами, нарушающими авторское право владельца сайта-прототипа. Естественно, что поисковики пытаются такие сайты наказать за воровство идеи, дизайна, контента и т.д. Но при этом нужно уметь отличать сайты-клоны от зеркал сайтов, что в настоящее время поисковики делают очень неплохо. Но все же мы можем помочь Гуглу, Яндексу и другим поисковым системам определить главный сайт и его зеркала, связав их в одну «кучу». Но об этом чуть позже.

Для чего же нужно зеркало или нужны несколько зеркал? Дело в том, что сайт, расположенный на сервере хостинг-провайдера, может быть загружен запросами пользователей. Особенно это заметно в тех случаях, когда сайт предлагает своим посетителям скачать какие-либо файлы. В этом случае скорость скачивания будет сильно зависеть от мощности сервера (вашего хостера), но в любом случае эта мощность конечна. Если же мы создадим копию сайта или несколько копий, то позволим нашим посетителям скачивать информацию с сайта намного быстрее. Это основной смысл зеркал, но далеко не единственный.

Итак, зеркало сайта нужно:

• для уменьшения нагрузки на сервер;
• для возможности проведения технических работ на «запасном» сайте без отключения самого сайта;
• для сохранности данных (резервные данные никогда не помешают);
• для того чтобы сайт был доступен по нескольким url-адресам.

Как указать главное зеркало сайта и зачем это нужно

Варианты одного и того же домена с WWW и без WWW являются для поисковых систем разными адресами. Таким образом, если главное зеркало сайта не выбрано, поисковый робот буде считать что на двух разных адресах (с WWW и без) присутствует абсолютно одинаковый материал. А что происходит с сайтами с неуникальным контентом мы знаем – они неизбежно вылетают из поиска, и их потом сложно туда вернуть.

Поэтому необходимо определить главное зеркало сайта, произвести, так называемую склейку домена – это означает, что необходимо указать поисковику, что варианты написания одного и того же домена с WWW и без WWW – это один и тот же сайт.

Главное зеркало сайта – это основной вариант написания одного домена, с WWW или без. Если не выбрать главное зеркало, то сайт не будет нормально индексироваться поисковыми системами, и в поиске участвовать тоже не будет.

Большинство хостингов самостоятельно предопределяют один из вариантов написания домена, как главное зеркало сайта. Проверить, делает ли это ваш хостинг, можно простым способом. Попробуйте записать в строку браузера адрес вашего домена с WWW и без. В одном из вариантов должно происходить автоматическое переключение на главное зеркало сайта, и адрес, как бы вы ни записали, в итоге должен оставаться только один (с WWW или без).

Такое переключение осуществляется благодаря редиректу 301. Если главное зеркало сайта всё ещё не установлено, то вам нужно установить редирект в файл конфигурации сервера .htaccess.

Чтобы указать главное зеркало сайта c WWW, вставьте в .htaccess такой код:

RewriteEngine On
RewriteCond %{http_HOST} ^example\.ru$
RewriteRule ^(.*)$ http://www.example.ru/$1

А если хотите сделать без WWW, то такой:

RewriteEngine On
RewriteCond %{http_HOST} ^www.example\.ru$
RewriteRule ^(.*)$ http://example.ru/$1

Не забудьте заменить в коде example.ru на свой сайт.

Чтобы проверить, правильно ли вы установили код, и склеились ли домены, проделайте процедуру, о которой я вписал выше. Впишите в браузер домен с WWW и без — в одном из случаев должно происходить переключение на главное зеркало сайта. Если так и происходит, то значит, теперь поисковики будут считать оба варианта написания домена как один и тот же сайт.

Помните, что главное зеркало для Яндекса указывается также и в файле robots.txt в директиве host. И ещё главное зеркало нужно настроить в панелях управлениях сайтом Яндекса и .

SEO оптимизацияSEO плагиныWordPressАнализ сайтаДоменЗащита сайтаНаполнение сайта контентомНастройка сайтаПлагины для дизайнаПлагины для записейПлагины для юзабилитиПоисковые системыПолезные сервисы и программыСистемные плагиныСоздание сайтаТемы WordPressТехническая оптимизацияХостингЯндекс

Оставьте комментарий:

Принцип работы

Что такое зеркало сайта, уже разобрались, но как оно работает? С одной стороны, дубликаты сайтов нужны, если к ресурсам был ограничен доступ по каким-либо причинам. С другой, копирование отрицательно влияет на оптимизацию (SEO). Поисковая система должна индекировать не дубликаты, а только главный сайт.

Для того чтобы создать зеркальное копирование, можно воспользоваться специальной программой. Скачайте ее бесплатно и получите доступ к контенту с сервера. Если пользователь создает копию сайта, ее нужно регулярно обновлять, иначе поисковая система перестанет индексировать его. Копия сайта будет популярной, если она оптимизирована, как в случае с работающим зеркалом сайта «Фонбет».

Как склеивать зеркала

Существует несколько способов, позволяющих склеивать два или большее количество зеркал в один сайт.

Файл роботс

Чаще всего это делается в файле robots.txt, где можно прямо указать основное зеркало таким образом:

Host:  www.site.ru

Но этот способ отлично воспринимает только Яндекс, для Гугла придется использовать другие методы.

Редирект

Второй по популярности способ – настройка 301 редиректа. В этом случае вам нужно на всех сайтах-зеркалах отредактировать файл .htaccess, добавив в него несколько строк:

RewriteEngine on
RewriteCond %{HTTP_HOST} ^site.ru
RewriteRule ^(.*)$ http://www.site.ru/$1 
RewriteBase /

Панель вебмастеров

В панелях Яндекс.Вебмастер и Вебмастерс.Гугл также можно настроить главное зеркало.

Вот где можно сделать это в Яндексе (в качестве зеркал учитываются только проиндексированные сайты)

А так можно поступить с Гуглом.

Использовать www или нет

Префикс с www появился еще в конце 80-х годов ХХ века и считался обязательным для всех сайтов. Сегодня он становится все менее популярным, но многие сайты продолжают его использовать. Давайте разберемся, какие преимущества и недостатки есть у данного элемента в адресе сайта.

Преимущества использования www:

• Известные поисковые системы Яндекс и Гугл продолжают использовать данный префикс;
• Считается, что он способен повысить привлекательность коротких доменов (очень спорный момент);
• При продвижении проекта в оффлайне, префикс подразумевает, что речь идет именно о сайте;
• Некоторые пользователи по привычке могут вводить адрес с этим префиксом.

Недостатки использования www:

• Пользователям при вводе адреса в строке браузера приходится набирать на 4 символа больше, что может негативно отразиться на юзабилити;
• Использование префикса не несет никакой смысловой нагрузки.

Какой именно вариант использовать для своего проекта, решать только Вам. Главное при этом правильно настроить основное зеркало сайта, о чем будет рассказано далее.

Как поисковики относятся к зеркалам.

В глазах поисковой системы зеркало – это дубликат сайта. А дубликаты он выкидывает из индекса

Поэтому важно, чтобы поисковик признал главным зеркалом нужный Вам сайт

Яндекс, Рамблер, Апорт — директива Host в robots.txt поддерживается русскими поисковиками.

Для этого веб-мастер сообщает поисковой системе яндекса с помощью файла robots.txt по какому адресу находится основной сайт, а какие URL есть зеркала.

Файл роботс размещается в корневой папке всех существующих зеркал, а также в корне главного сайта. Файл robots.txt создается в простом блокноте. При переносе данного файла на сервер, ftp-клиент должен быть настроен на текстовый режим обмена файлами.

Пример:

User-Agent: *

Disallow:

Host: www.mysite.ru

Google — 301 редирект

По официальной рекомендации Платона Щукина, для гугла и пользователя лучше ставить 301 редирект после того, как зеркала будут склеены Яндексом.

301 редирект – перенаправление на новый адрес. Используется также при переносе на другой домен. Происходит склейка старого и нового адресов: параметры, вес сайта передастся новому URL. Есть несколько способов выполнить переадресацию, один из них файл htaccess. Об этом не здесь, иначе уйдем далеко от зеркальной темы.

Главное зеркало в инструментах Яндекс Вебмастер и Google Search Console

Значения главного и второстепенного зеркала задаются с помощью файлов .htaccess и robots.txt, которые должны быть помещены в корневую директорию домена. В первом необходимо прописать условие – если пользователь заходит на www.сайт.ru, то он перенаправляется на сайт.ru. Какой вид это имеет в коде – можно найти в интернете для каждого конкретного случая (в зависимости от того, какая CMS используется).

Поскольку файл .htaccess не гарантирует абсолютно одинакового понимания роботами от Яндекс и Google какая версия является главным зеркалом, то в инструментарии web-мастера нужно проделать нижеследующую работу.

Для Яндекса:

1. Зайти в инструменты вебмастера, пункт «Настройка индексирования» – «Главное зеркало».
2. Указать в нём один из трёх имеющихся вариантов: «на усмотрение робота», «www.сайт.ru» или «сайт.ru» (вместо «сайт.ru» следует подставлять нужный адрес сайта). В этом случае выбор должен быть остановлен на «сайт.ru».

Для Гугла:

1. Зайти в Google Search Console, в раздел – «Сообщения».
2. В пункте «Выберите предпочтительную версию» – указать желаемую версию сайта.

Как сделать

Новое зеркало сайта создается для стабильной работы ресурса. Таким копированием часто пользуются популярные сайты, если хотят увеличить посещаемость. Особенность в том, что они будут находиться на нескольких серверах. Кроме этого, зеркальное копирование дает вторую жизнь ресурсу, если он под фильтром «Яндекса». Для того чтобы создать зеркало, воспользуйтесь краткой инструкцией:

• зарегистрируйте второй домен;
• во время регистрации укажите DNS-серверы;
• откройте панель управления хостингом;
• перейдите в раздел «Веб-хостинг»-«Сайты»-«Имя исходного сайта»-«Синоним»;
• укажите в качестве синонима имя домена с www или без них;
• при появлении предупреждения зеленого цвета о включении поддержки DNS — согласитесь;
• делегирование домена продолжается в течение восьми часов.

Хороший пример копирования — работающее зеркало сайта «Фонбет».

Мониторинг проиндексированных страниц сайта

Роботам требуется определённое время, чтобы «прочитать» изменения, произошедшие на сайте. А потому проверяются показатели посещаемости и количество страниц в индексе спустя 2-4 недели.

VPS SSD хостинг — Ваш сайт будет работать быстрее в несколько раз!

Это делается, чтобы удостовериться, что выполненные ранее действия привели к желаемому результату. Если что-то не получилось – необходимо проверить – возможно, где-то закралась ошибка. Даже лишняя запятая, закравшаяся в код, может сделать файлы robots.txt и .htaccess бесполезными для поисковых систем.

iPipe – надёжный хостинг-провайдер с опытом работы более 15 лет.

Мы предлагаем:

• Виртуальные серверы с NVMe SSD дисками от 299 руб/мес
• Безлимитный хостинг на SSD дисках от 142 руб/мес
• Выделенные серверы в наличии и под заказ
• Регистрацию доменов в более 350 зонах

Для чего нужны зеркала?

1. Обычно зеркала создаются для популярных ресурсов — таким образом с них снижается нагрузка, они всегда доступны пользователям.

Например, на сайт зашло предельное количество посетителей, и еще +один попросту выведет его из строя. Если он все-таки заходит на ресурс, то автоматически перенаправляется на зеркало (на такой же, но другой сайт) и даже не замечает этого. При этом сайт продолжает работать.

1. Часто пользователи забывают, как именно пишется название ресурса — с www или без? Чтобы не терять посетителей, при разработке нового сайта сразу создают две его версии — www.site.ru и site.ru.
2. Несмотря на то что домены на рф существуют уже несколько лет, они по-прежнему имеют ряд недостатков, которые мешают при продвижении сайта (например, не полностью отлажены сервисы электронной почты на кириллице). В связи с этим приходится создавать зеркало с адресом на латинице — site.ru и сайт.рф.

Во всех случаях зеркало позволяет не потерять ни одного посетителя.

Очевидно, что нет смысла работать над индексацией зеркал (за исключением случая под 3-м пунктом). Ведь есть основной сайт, с которого посетитель перенаправляется на них.

Как используют оптимизаторы зеркала сайтов в раскрутке.

Копии сайта можно сделать точными или нечеткими. В первом случае, пользователь будет переадресован на основной ресурс, во втором случае попадет на не полный дубль сайта. Во втором случае, все равно будет присутствовать дубль контента с главного сайта и как к этому поисковик отнесется можно не гадать.

Но при индексации всех нечетких зеркал можно выйти в топ по продвигаемым запросам.

Еще, каждое зеркало отдельно раскручивается, обрастает ссылками и происходит склейка тиц. Таким образом, основной сайт, имея малое количество обратных ссылок, может получить высокий тиц.

Впрочем, алгоритмы постоянно меняются и для уверенности нужно проверять на своем опыте.

Как сделать главное зеркало с SLL и HTTPS

После перевода сайта на протокол HTTPS, Google начинает https-сайты повышать в позициях выдачи, т.к. считает их сайтами с повышенной безопасностью. Поэтому, кроме перехода на безопасный протокол шифрования, после такого шага необходимо выполнить редирект зеркала на основное, содержащее HTTPS.

Если до этого сайт http://сайт.ru был основным, а http://www.сайт.ru – вспомогательным, то теперь основным станет https://сайт.ru, а два указанные – вспомогательными зеркалами. Причиной переезда сайта на новый адрес, с буковкой «s» является установка на сайт сертификатов SSL, повышающих безопасность (данные, которые передаются на сайт шифруются).

Как проверить и определить, указано ли главное зеркало

Проверка правильности настройки зеркала проста – в адресной строке используемого браузера вводится адрес сайта.

Возьмём адрес www.сайт.ru, как и в прошлых примерах. Если после ввода адреса и символы www не исчезли, перенаправив пользователя на сайт.ru, то далее следует проверка сайт.ru тем же способом.

Если после перехода адрес снова не изменился – то есть к нему не добавились символы www, – то значит, что зеркало не настроено. Получается, что оба указанных адреса индексируются поисковыми системами как самостоятельные сайты.

И это плохо, поскольку все показатели распыляются на 2 сайта. Как поправить ситуацию – рассмотрим ниже.

Зеркало сайта – частичный или полный дубль интернет проекта

Под термином «зеркало сайта» чаще всего подразумевается две копии одного и того же ресурса с префиксом «www» и без него. Поисковики обрабатывают адреса yoursite.ru и www.yoursite.ru как два разных домена. Соответственно, ссылочное ранжирование и показатели ИКС/PR будут распределяться на оба адреса. Чтобы устранить лишний дубль, осуществляется склейка зеркал сайта.

Больше видео на нашем канале — изучайте интернет-маркетинг с SEMANTICA

Под зеркалом сайта может подразумеваться полная копия интернет ресурса, имеющая отдельный домен и размещенная на другом сервере. Вебмастер, который знает, как настроить зеркало сайта, может создать дубль в целях безопасности. Если главный интернет проект будет временно недоступен, то трафик перенаправляется на функционирующий сервер.

Как сделать зеркало сайта (запасной дубль)

Зачем зеркало сайта может потребоваться владельцу web-проекта? Необходимость в копии площадки на другом домене может быть вызвана следующими причинами:

• Защита данных от серверного сбоя;
• Обеспечение стабильной работы интернет проекта;
• Необходимость обойти блокировку, законодательные ограничения тех или иных стран;
• Вывод сайта из-под санкций поисковых систем.

Вас интересует, как создать зеркало сайта путем привязки нескольких доменных имен к web-проекту? Помочь с выполнением этой процедуры может служба поддержки хостинговой компании, на сервере которой размещается сайт.

Создание зеркала сайта можно осуществить при помощи программ, способных копировать структуру и html-код интернет проекта. К наиболее популярному софту для зеркалирования относится ПО под названием CVSup, wget, HT Track.

Может пригодиться: продвижение медицинских компаний — выгодное решение для вашего бизнеса

Директива host в robots.txt для Яндекса

Для Яндекса указание в .htaccess и инструментах вебмастера не гарантирует стопроцентный результат. Поэтому следует в файле robots.txt в корне директории с сайтом прописывать директиву, отправляющую Яндекс на нужный сайт – Host. В файле прописывается следующее:

User-agent: Yandex
Disallow: /wp-admin
Host: сайт.ru

В сроке «Disallow:» указывается всё, что, по мнению вебмастера, не должен делать и куда не должен заглядывать робот от Яндекса – cgi-bin, админка и т.п. В приведенном примере от индексации закрыта администраторская часть wordpress.

После этого, Яндекс правильно определяет основное зеркало сайта.

Предназначение

Что такое зеркало сайта и для чего его создают? Частой причиной создания становится желание или необходимость перейти на красивый домен. Для этого новый склеивают с уже имеющимся, а первый домен делают главным. Такая процедура не влияет на трафик, посещаемость и постоянных читателей.

Создают зеркало часто из-за слияния компаний, у которых имеется свой сайт в Сети. Создают его и для бронирования похожих или целевых адресов. Продвижение ресурса в разных странах, безопасность, вывод из-под фильтра — все это создает необходимость создать зеркальное копирование. Наглядным примером может послужить работающее зеркало сайта «Фонбет», главный ресурс которого заблокирован.