Как узнать главное зеркало для яндекса. Что будет, главное зеркало не указывать совсем? На что влияет

И от семантики мы плавно переходим к технической оптимизации. Первый шаг в рамках этого этапа - определение и настройка главного зеркала сайта.

Почему это важно?

Причин несколько. Во-первых, зеркала сайта - это дубли, от которых нам нужно избавиться, объяснив поисковой системе, что индексировать нужно только одно из них. Вторая причина заключается в том, что ссылки, проставляемые на сайт, как правило разношерстны - кто-то написал Url с WWW, а другой человек указал адрес без него. В итоге ссылочная масса размазывается между этими двумя вариантами. Описанные в данном материале действия призваны полностью решить подобные проблемы.

Как узнать главное зеркало сайта?

Если сайт уже не новый, то первым делом нам нужно определить, какое из зеркал (с WWW или без) было проиндексировано. Способ довольно прост - переходим на Яндекса https://webmaster.yandex.ru/addurl.xml и, прописав Url нашего сайта, получим следующее:

В случае, если введенный вами адрес и является главным зеркалом, то результат проверки будет иметь вид «Сайт www.site.ru уже проиндексирован».

Ну или второй способ определения основного зеркала, справедливый как для Яндекс, так и для - просто ввести в поиск адрес сайта и посмотреть вариант, который будет выведен на первой строчке.

Что если основное зеркало сайта в Яндекс не совпадает с Google?

Лучше оставить тот вариант, который прижился в Яндексе, подогнав Google под него же. По моим наблюдениям Яндекс куда дольше и значительно болезненнее переживает смену главного зеркала, нежели Google. Как «подогнать» - будет описано ниже.

Главное зеркало сайта: с WWW или без

Практической разницы нет - выбирайте то, что вам больше нравится. Мне сугубо из олдскульных привычек импонирует вариант с WWW, но я не могу не признать, что без WWW адрес сайта короче и внимание акцентируется сразу на его названии, а не на приставке-анахронизме (World Wide Web) из времен зари глобальной сети, когда она была обязательной.

Как указать главное зеркало сайта?

В целом этот процесс состоит из трех этапов. Первым делом нужно прописать директиву host в конце нашего файла следующим образом:

User-agent: *
...
Host: www.site.ru
Sitemap: http://www.site.ru/sitemap.xml

В первую очередь это необходимо для Яндекса, так как для Google данная директива ничего не значит. Далее мы переходим ко второму этапу, который для каждой поисковой системы свой и заключается в настройке кабинетом веб-мастеров.

Настройка главного зеркала в Яндекс

Далее - «Настройка индексирования» - «Главное зеркало», где мы и выбираем вариант, которому отдаем предпочтение.

Настройка главного зеркала в Google

Дважды добавляем сайт в панель вебмастера Google - то есть адреса с WWW и без, как будто это два разных сайта. Затем для каждого из них в настройках выбираем нужный вариант и сохраняем.

Как склеить зеркала сайта?

Последним этапом станет прописывание серверных в файле htaccess, которые окончательно положат конец неуместному зеркалу, переадресовав все его страницы на нужный вариант.

Options +FollowSymLinks
RewriteEngine On

RewriteEngine off

RewriteCond %{HTTP_HOST} ^www.site.ru$
RewriteRule (.*) http://site.ru/$1

Данный пример справедлив для случая, когда главное зеркало - без WWW. Для обратной ситуации просто поменяйте «www.site.ru» и «site.ru» местами. Участок «FilesMatch» запрещает переадресацию файла robots.txt неосновного зеркала - это необходимо для того, чтобы была директива хост, при обращении поисковой системы к неглавному алиасу, указывала на главное.

Вот, вроде, и всё. Этот небольшой, но важный этап окончен. Вопросы?

Главное зеркало сайта или основной домен сайта следует указывать поисковым системам для того, чтобы они точно знали какой из доменов считать основным, а какой зеркалом.

Указание главного зеркала сайта является одним из пунктов по технической оптимизации сайта. Это действие можно сделать тремя способами:

1. Настройкой файла robots.txt
2. Настройкой файла.htaccess
3. Настройкой соответствующих разделов в инструментах для вебмастеров поисковых систем Яндекса и Google.

Уточняю один момент. В данном посте мы рассмотрим самый распространенный случай по определению главного зеркала сайта – с WWW или без WWW.
Другие ситуации, которые возникают, например, при переезде сайта на другой домен мы опустим.

Честно говоря, современный аналитический уровень возможностей поисковых систем, на мой взгляд, может легко обеспечить решение этой задачи.

Но все ведущие специалисты по продвижению все-таки настоятельно рекомендуют проводить такую настройку.

Причем настаивают выполнять все три вышеперечисленных пункта, несмотря на то, что пункт с robots.txt носит рекомендательный характер для поисковых систем.

Настройка robots.txt

Файл robots.txt представляет собой текстовый файл с набором определенных директив. Расположен этот файл в главной директории сайта. Редактируется простейшими редакторами типа «Блокнот».


Очень хорошо и подробно описано применение этого файла и его команд в справочном разделе сервиса Яндекс Вебмастер. Также можно расширить свой кругозор в этом вопросе на сайте robotstxt.org.ua.

В этой публикации нам следует указать поисковым системам главное зеркало сайта. Делается это при помощи директивы Host следующим образом:

Обращаю Ваше внимание, что эту директиву используют только для поискового робота Яндекс. Фрагмент выглядит примерно таким образом:

User-agent: Yandex
Crawl-delay: 4
Disallow: /cgi-bin
Disallow: /wp-admin
……………
Disallow: /tag
Disallow: /feedback
Host: сайт

Проверить корректность заполнения файла robots.txt можно в том же Яндекс Вебмастере. В разделе «Настройка индексирования» есть подраздел, который так и называется «Анализ robots.txt».

Отмена директивы Host в Яндексе

Поисковая система Яндекс объявила, что с марта 2018 года директива Host в файле robots.txt больше поддерживаться не будет.

Хорошо это или плохо? Скорее хорошо. Ведь Google и ранее не учитывал эту директиву. Теперь правила указания основного зеркала сайта становятся более унифицированными.

Настройка файла.htaccess

Определение главного зеркала сайта в файле.htaccess осуществляется путем настройки 301 Редиректа.


Как это делается можно . Здесь даны примеры настройки для блогов на CMS WordPress.

Файл.htaccess, как и robots.txt, также является текстовым файлом и располагается в главной директории сайта. В этом случае все его директивы должны выполняться для всего сайта. Если же такие файлы встречаются в других директориях сайта, то его команды будут действовать только в этой директории и в подчиненных ей поддиректориях.

Настройка главного зеркала сайта в инструментах вебмастеров.

Для настройки главного зеркала сайта в инструментах для вебмастеров Яндекса и Google следует иметь аккаунт в этих поисковых системах.

Также для этого следует подтвердить права на сайт. Как это делается, надеюсь, Вы уже знаете.

Заостряю Ваше внимание на одном нюансе. В инструментах вебмастеров Google следует подтверждать права как на домен с www, так и без www.

Это делается довольно просто, путем размещения небольшого файла в основной директории или указания специальных тегов.

Настройка зеркала в Яндексе

Указание главного зеркала в Яндексе происходит в разделе «Настройка индексирования». В подразделе «Главное зеркало» дается три варианта, которые следует указать. По умолчанию система выбирает – «На усмотрение робота».

Таким образом производилась настройка в старой версии Вебмастера. В новом Вебмастере Яндекса этот параметр настраивается несколько по другому. Думаю, что главное зеркало Яндекс определяет при регистрации сайта в этом сервисе. Вы ведь явно указываете протокол и URL основного домена с www или без него.

При необходимости главное зеркало можно перенастроить в разделе «Индексирование» — подразделе «Переезд сайта».

Настройка зеркала в Google

В инструментах для вебмастеров Google возможность настройки находится сразу при входе в раздел «Настройки сайта». Но еще раз повторюсь, что подтвердить права на домен придется дважды. Для домена с www и без www.

Вот такие нехитрые, но необходимые действия следует проделать, чтобы у поисковых систем не осталось вопросов о Главном Зеркале Вашего сайта или сайтов Ваших клиентов.

В этой статье я вам расскажу о том, что такое главное зеркало сайта, о доменах с WWW и без WWW и прочих вещах, связанных с этой интересной историко-технической темой. А для начала разберём понятие «WWW» и определим, как правильнее записывать адрес.

Коротко об истории WWW и как правильно писать

WWW – это английская аббревиатура, которая расшифровывается как world wide web, что можно перевести на русский язык, как «всемирная паутина». Понятие «WWW» ввели в 1989 году Тим Бернерс-Ли и Роберт Кайо – дядьки, которые изобрели Интернет. Этими тремя буками они отмечали текст, который являлся гиперссылкой, чтобы её было легко распознать.

С тех пор прошло более 25 лет и теперь каждый знает, где просто текст, а где гиперссылка. И поэтому надобность в WWW отпала. Сегодня WWW можно считать рудиментарным атрофированным органом, который хоть и есть, но не на что уже не пригоден.

Любой сайт будет доступен по адресу с WWW и без WWW, однако в строке браузера будет отображаться лишь один вариант – тот, который выбран главным зеркалом. Главное зеркало сайта может быть как с WWW, так и без него.

Чтобы указать главное зеркало сайта c WWW, вставьте в.htaccess такой код:

RewriteEngine On RewriteCond %{http_HOST} ^example\.ru$ RewriteRule ^(.*)$ http://www.example.ru/$1

RewriteEngine On RewriteCond % { http_HOST } ^ example \ . ru $ [ NC ] RewriteRule ^ (. * ) $ http : //www.example.ru/$1

А если хотите сделать без WWW, то такой:

RewriteEngine On RewriteCond %{http_HOST} ^www.example\.ru$ RewriteRule ^(.*)$ http://example.ru/$1

RewriteEngine On RewriteCond % { http_HOST } ^ www . example \ . ru $ [ NC ]

Приветствую вас, дорогие читатели моего блога!

Продолжаю серию статей на тему поисковой оптимизации, и в сегодняшней статье речь пойдет о зеркале сайта. Для кого-то это вовсе не новая информация, а кто-то услышит ее впервые.

Что такое зеркало сайта?

Если у вас есть сайт или блог, то он может существовать по двум адресам:

• sait.ru
• www. sait.ru

Дело в том, что сайт с тройным W и без него, это два совершенно разных домена с одинаковым содержимым. Получается, что в сети существует точная копия вашего сайта, но на другом домене.

Зеркало сайта – это сайт, являющийся полной или частичной копией другого сайта, либо если настроен серверный редирект со страницы одного сайта на страницу другого.

Поисковые системы автоматически склеивают зеркала сайтов, и в индексе остается только один сайт – главное зеркало. Соответственно они не будут учитывать ссылки, которые оставляют на не главное зеркало, а это значит, что тот ссылочный вес, который вы могли бы получить, попросту пропадет.

Кроме этого, порой случается так, что поисковый робот может посчитать главным зеркалом вовсе не то, что нужно. Поэтому необходимо указать роботу поисковой системы, какое зеркало является главным.

Если по какой-то причине 2 зеркала стали отображать разное содержимое и в структуре не прописан принудительный редирект, то через несколько недель робот автоматически расклеит зеркала.

Что говорят поисковые системы Google и Яндекс о зеркалах

Google как то не особо париться по этому поводу. Никаких предупреждений и рекомендаций. Но в панели управления Google Webmasters, можно самому указать главное зеркало. И после того, как вы подтвердите владение доменом, главным зеркалом будет считаться именно то, что вы указали.

Что касается Яндекс, он более капризен, и в разделе «Помощь вебмастеру» есть целый раздел посвященный зеркалу сайта. Этот раздел доступен по ссылке —

Описано там практически то же, что и в этой статье.

Как проверить и настроить главное зеркало сайта

Ну вот мы и подошли к главной теме этого поста – проверке и настройке основного зеркала.

Для начала попробуйте ввести домен своего сайта с WWW и без него. Если у вас идет автоматическое перенаправление только на один из этих доменов, значит все отлично. У вас настроен редирект и роботы ПС именно этот адрес считают главным зеркалом. Если перенаправления нет, то необходимо срочно прописать 301 редирект. Иначе вы попросту теряете часть ссылочной массы.

Теперь необходимо проверить по какому адресу индексируют наш сайт поисковые системы.

Для этого откройте поиск Яндекса и в поисковую строку введите следующее:

site:сайт

Вместо моего домена введите свой, и нажмите поиск.

Появиться список страниц вашего сайта. Вам нужно направить курсор мышки на любую ссылку своего сайта, и в нижнем левом углу отобразиться ваше главное зеркало. В моем случае оно без «W».

Теперь, то же самое нужно проделать с поисковой системой Google. Если главное зеркало отображается одинаково, и оно вас устраивает, то отлично. Если же нет, то нужно все исправить.

Для этого заходим в Яндекс Вебмастер. И в меню выбираем раздел «Настройка индексирования» — «Главное зеркало». Здесь нужно будет указать какое зеркало стоит считать Яндексу главным.

После этого переходим в Google Webmasters. В правом верхнем углу находиться иконка, изображающая настройки. Кликаем по ней и в появившемся меню выбираем «Настройки сайта».

Вам аналогично Яндексу предложат выбрать основное зеркало:

Теперь нужно указать главное зеркало в файле robots.txt, чтобы Яндекс его определил. Выглядит это примерно так:

User-agent: * Disallow: /wp-includes Disallow: /wp-feed Disallow: /wp-content/plugins Disallow: /wp-content/cache Disallow: /wp-content/themes Host: сайт Sitemap: http://сайт/sitemap.xml User-agent: Googlebot-Image Allow: /wp-content/uploads/ User-agent: YandexImages Allow: /wp-content/uploads/

В моем случае надпись — Host: сайт как раз и указывает, на главное зеркало, оно без www. Остальные надписи у вас могут отличаться, в зависимости от того, какие файлы вы разрешаете и запрещаете индексировать.

После того, как вы указали поисковым системам главное зеркало, нужно настроить на главное зеркало, чтобы не терять ссылочной массы. Даже если на ваш сайт уже ссылаются по разным адресам, то редирект переправит пузомерки на основное зеркало через какое-то время.

Для того, чтобы сделать 301 редирект, нужно зайти на свой хостинг и скачать на компьютер файл .htaccess затем отредактировать его в блокноте или в и снова закачать на хостинг. Я советую именно второй вариант.

Внимание. Редирект в файле.htaccess будет работать только на web-сервере Apache.

Стандартный файл.htaccess для движка WordPress выглядит примерно так:

# BEGIN WordPress RewriteEngine On RewriteBase / RewriteRule ^index\.php$ - [L] RewriteCond %{REQUEST_FILENAME} !-f RewriteCond %{REQUEST_FILENAME} !-d RewriteRule . /index.php [L] # END WordPress

Для того, чтобы сделать редирект 301 с домена без www на домен с www, нужно добавить вот эти строки в этот файл:

RewriteCond %{HTTP_HOST} ^.*)$ http://www.сайт/$1

Вместо моего домена, введите свой. У вас должно получиться вот так:

# BEGIN WordPress RewriteCond %{HTTP_HOST} сайт RewriteRule (.*) http://www..php$ - [L] RewriteCond %{REQUEST_FILENAME} !-f RewriteCond %{REQUEST_FILENAME} !-d RewriteRule . /index.php [L] # END WordPress

Если же вы хотите сделать главное зеркало без WWW, то редирект нужно прописать наоборот, то есть следующим образом:

RewriteCond %{HTTP_HOST} ^www..*)$ http://сайт/$1

Видео по настройке главного зеркала

Здравствуйте уважаемые читатели, в этой статье я хочу вам рассказать о небольшом мошенничестве, с продажей зеркал сайтов. А также рассказать, как не попасться на уловки мошенников…

Здравствуйте уважаемые читатели, в этой статье я хочу вам рассказать о небольшом мошенничестве, с продажей зеркал сайтов. А также рассказать, как не попасться на уловки мошенников.

Что такое зеркало .
Само по себе зеркало представляет точную копию основного сайта на другом домене. То есть ни дизайн, ни логотип не должны отличатся.
Зеркало сайта делается по нескольким причинам. Самой важной окажется то, что разработчики хотят обеспечить своему сайту максимальный uptime, в связи с этим делают несколько копий сайта на разных серверах и в случае недоступности основного сайта, посетитель попадает на его зеркало.

Как относятся поисковики к зеркалам .
К зеркалам сайтов поисковые системы относятся довольно нормально. Просто дополнительный домен склеивается с основным и всё. И в выдаче участвует только основной сайт. Однако ссылки проставленые на сайт зеркало полным весом перетекают на основной сайт. ТИЦ и PR для таких сайтов высчитывается только на основной, а зеркалу даётся просто так. По этому не стоит бояться что пузомерки будет нарастить сложнее. Они поднимаются точно так, как и с одним доменом.

Мошенничество с зеркалами .
Уже не раз видел когда продают домены с показателями ТИЦ и PR, причём не дорого. Низкая цена всегда вызывает подозрение, но вот не каждый способен найти подвох. А подвох в том, что ТИЦ и PR у доменов не настоящий, а клееный. То есть он отображается, как у главного домена, к которому был приклеен продаваемый. Держаться он будет, но не долго, до первого апдейта, после чего отвалится и его не станет. По этому стоит быть аккуратным при покупке доменов с ТИЦ и PR.

Как узнать является ли домен зеркалом или нет .
Вообще вариантов проверки существует много, но я расскажу два самых простых. Первый — воспользоваться сервисом по анализу сайтов и доменов. Просто вбиваете интересующий вас домен и вам выдаёт его параметрыи если он склеен, то вам напишут рядом с показателями ТИЦ и PR. Сам сервис cy-pr.com
Второй способ — установка плагина в браузер. Называется RDS bar. Я в одной статье рассказывал, что данное дополнение проводит анализ сайта и при переходе на интересующий вас домен высветится надпись, клей или нет.

Надеюсь данная статья поможет вам избежать мошенничества с доменами. Да и вообще я считаю, что лучше не покупать домены с показателями, а начинать всё самому с нулёвым доменом. Тогда хоть можно будет гордится своими достижениями.