редирект на главное зеркало сайта
Редирект 301 с зеркала www на без www:
Обратный вариант — редирект 301 с зеркала без www на с www:
Только не забудьте вписать свой URL адрес. После этого еще необходимо прописать директиву Host в фале robots.txt, о чем читайте в следующем пункте.
Robots.txt — настройка индексации страниц сайта
User-agent — в этой директиве прописываются поисковые боты, для которых действуют указанные ниже настройки. Если указать символ *, то настройки будут относится ко всем поисковикам:
Вот список имен ботов самых популярных поисковых систем:
Директива Disallow используется для запрета индексации всего сайта целиком или каких-то его страниц. Allow наоборот разрешает индексацию, в ней можно задавать исключения из правил, указанных в директиве Disallow.
Следует соблюдать следующие правила:
Теперь рассмотрим примеры, чтобы все стало более понятно.
Звездочка в директиве User-agent указывает на то, что приведенные ниже настройки относятся ко всем поисковикам. Отсутствие параметров в Disallow соответствует разрешению индексации всего сайта.
Настройки относятся только к роботу Гугла. Они предписывают запретить индексацию всего сайта, кроме страниц из /zapisi. Порядок следования Allow и Disallow не имеет значения, главное длина URL — в директиве Allow он длиннее, поэтому является исключением из правил, указанных в Disallow.
Помимо этого можно использовать спец символы — «*» и «$»:
* — любая (в том числе пустую) последовательность символов. По-умолчанию в конце каждого правила добавляется символ «*»:
В этом случае запрет будет распространятся только на /indeksaciya, но не на /indeksaciya.html.
Директивы Host и Sitemap воспринимается только ботами яндекса и служат для указания главного зеркала и адреса карты сайта.
Обязательно отделите данный блок от остальных настроек robots.txt пустой строкой.
Для зеркала без www:
Порядок переезда со старого домена на новый
1. Купите новый домен и хостинг.
2. Перенесите на новый сервер все содержимое своего интернет ресурса.
3. На старом сайте в файле robots.txt в директиве Host укажите новый URL адрес.
Не забывайте указывать именно главные зеркала — с приставкой www или без нее.
5. Склейка займет определенное время, на протяжении которого оба интернет портала должны быть доступны.
На этом все, спасибо за внимание! Подписывайтесь на новости блога. Всех вам благ!
Узнавайте о появлении нового материала первым! Подпишитесь на обновления по email:
Настроить главное зеркало сайта в Яндекс.Вебмастер и Google Search Console
Зеркала сайта – точные копии сайта, которые участвуют в поиске, являются дублями и мешают продвижению. Поэтому нужно склеить все зеркала в один адрес.
Какие могут быть зеркала сайта
Проверьте всевозможные адреса вашего сайта:
Важно: Если на сайте нет безопасного соединения HTTPS, сначала подключите SSL-сертификат, настройте переезд с HTTPS на HTTPS, после этого переходите к склейке зеркал. Как перевести сайт на HTTPS, читайте в нашей статье.
Если на ваш сайт доступен по протоколу HTTPS и со всех адресов настроен редирект, то поздравляем! Можете сразу указывать главное зеркало.
Главное зеркало может быть: https://site.com или https://www.site.com. Если сайт уже давно индексируется с WWW, то можно оставить так, если же сайт новый, то лучше использовать формат без WWW, так как на современных сайтах не обязательно указывать принадлежность к всемирной паутине (WWW), это уже определяется автоматически.
Главное зеркало в robots.txt
Сообщите поисковым роботам о домене. Пропишите главное зеркало сайта в директиву host в файле robots.txt. Файл находится в корне сайта. Отредактировать его можно через хостинг или FTP.
Настройка редиректов на главное зеркало
После того, как вы определи, что у сайта есть зеркала, необходимо выбрать главное зеркало и настроить на него перенаправленияДля этого задайте редиректы с кодом 301 со старого ресурса на новый.
Например: сайта доступен по адресу https://site.com и https://site.com/idex.php. Нужно сделать перенаправление с https://site.com/idex.php на https://site.com.
301 редирект будет выглядеть так:
RewriteCond %<THE_REQUEST> ^[A—Z]<3,9>\ /index\.php\ HTTP/
RewriteRule ^index\.php$ HTTPS://site.com/ [R=301,L]
Главное зеркало сайта в Яндексе
Теперь Вы показали Яндексу, что нужно индексировать сайт по адресу «https://site.com».
Главное зеркало сайта в Google
Для того чтобы показать Google главное зеркало сайта, нужно добавить сайт в Google Search Console по тому адресу, который будет индексироваться. Функции переезда в Google Search Console нет. Если сайт уже добавлен в панель вебмастеров, то добавьте снова то адрес, который является главным зеркалом.
После этого Google определит главное зеркало автоматически.
Спасибо, что дочитали до конца. Переходите к следующей инструкции.
Как настроить главное зеркало сайта
Нередко бывает, что один и тот же сайт доступен по множеству адресов (зеркал). Например, с приставкой www и без нее, по протоколам http и https. Для вас ничего не меняется, вы видите один и тот же сайт, но для поисковых систем все эти зеркала являются разными сайтами. Поисковая система выберет одно из зеркал (главное зеркало сайта), которое и будет присутствовать в поисковой выдаче. И далеко не всегда этот выбор совпадает с мнением владельца сайта. Еще одним негативным фактором может стать дублирование контента, просадка позиций и трафика и распыление ссылочной массы между разными зеркалами, что затруднит получение максимального эффекта от SEO.
Какие бывают зеркала сайтов
Помимо классических вариантов с www и без и http-https, есть и варианты с различными доменами. Например, вы продаете автомобили Mitsubishi и ваш сайт mitsubishi.ru. Чтобы посетители, вводящие в адресную строку адрес вашего сайта, точно попали к вам, вы используете зеркала с доменами, содержащими наиболее очевидны опечатки. Например, mitsubisi.ru, mitcubishi.ru и так далее. Подобрать наиболее распространенные фразы с опечатками вам может помочь сервис Яндекс Вордстат.
По мнению поисковых систем, сайты являются зеркалами, если их контент совпадает на 80% (именно контент, а не дизайн, структура сайта и т. д.).
Зеркала сайта еще называют «алиасы».
Как же быть? Для того, чтобы правильно настроить главное зеркало сайта в поисковых системах, нужно воспользоваться встроенным функционалом Google Search Console и Яндекс.Вебмастер.
Как определить главное зеркало сайта
Сначала нужно убедиться, что поисковики выбрали главное зеркало правильно.
Как определить главное зеркало сайта в Google
В поисковой строке Google вводим выражение site:yoursite.ru (без пробелов), где yorsite.ru — ваш сайт.
Так это выглядит на примере моего блога:
Как видим, главным считается вариант с https и без www.
P.S. Если вы заметили звездочки и хотите себе такие же, то читайте как добавить звездочки в сниппет Google.
Как определить главное зеркало сайта в Яндексе
Если сайт и его зеркала добавлены в Яндекс.Вебмастер, можно посмотреть прямо в его интерфейсе:
Основное зеркало будет на первом месте, далее в древовидной структуре будут его зеркала.
Если сайта в Вебмастере нет, то проверяем через ту же конструкцию site:yoursite.ru, как и в Google.
Как настроить главное зеркало сайта в Google Search Console
Даже если все в порядке и Google верно определил главное зеркало, лучше подстраховаться и прямо указать ему на главное зеркало, чтобы в будущем не возникло никаких сюрпризов. Для этого необходимо добавить сайт в Google Search Console, если вы этого еще не сделали.
Затем откройте основной домен в Search Console, нажмите на значок шестеренки в правом верхнем углу и выберите пункт «Настройки сайта». На открывшейся странице производите необходимые настройки.
После чего нажмите «Сохранить».
UPD: После выхода новой версии Google Search Console процедура настройки зеркала изменилась и описанный выше метод больше не работает. Теперь непосредственно в Search Console нет настроек смены зеркала в рамках одного домена, есть только настройки, связанные с переездом на новый домен.
Теперь при добавлении https-версии сайта не надо делать никаких действий, Google будет автоматически отдавать приоритет версии с https. Но для верности можно настроить 301-й редирект.
В случае с www теперь необходимо либо воспользоваться тегами caconical, или настроить 301-й редирект.
Как настроить главное зеркало сайта в Яндекс.Вебмастер
Думаю, не нужно объяснять, что все необходимые домены уже должны быть добавлены и подтверждены в сервисе Вебмастера. Перейдите в раздел «Индексирование» и выберите пункт «Переезд сайта». Здесь вы можете выбрать новое главное зеркало из списка. Если домен полностью совпадает и требуется настроить только www или https, можете воспользоваться чекбоксами.
После завершения настроек не забудьте нажать «Сохранить».
Настройка переадресации
Если речь идет не просто о www и https, а о разных доменах (например, вы сделали ребрендинг и купили новый домен), то требуется также настроить 301-й редирект со старого домена на новый. Вообще, и в случаях с www и https также очень рекомендуется использовать данный тип редиректа.
Редирект позволит передавать ссылочный вес всех второстепенных зеркал на основное. Оно получит максимальный траст сайта и будет ранжироваться в поисковых системах на полную мощность.
Редирект с вариантами www
Как правило, и владельцы сайтов, и поисковые системы выбирают в качестве основного домен без приставки www. Но если ваш домен слишком короткий или вы успели разрекламировать свой сайт именно с www, есть смысл использовать приставку.
Перед внесением изменений обязательно сохраните бекап данного файла.
И добавьте в него следующий код:
Еще вариант кода (yoursite.ru заменяете на свой сайт):
Если нужно сделать наоборот, переадресацию с версии без www на www, то применяется следующий код:
Редирект с вариантами http и https
И наоборот, редирект с https на http:
Постраничный редирект
При переезде на другой домен важно, чтобы все страницы на старом домене перенаправляли на соответствующие новые страницы на новом домене. Делать редирект всех страниц просто на главную не рекомендуется.
Используйте следующий код, где yorsite.ru — домен, на который нужно переехать.
Вывод
Главным зеркалом сайта является то, которое отображается в поисковой выдаче. Самостоятельно указать поисковым системам, какое зеркало считать основным, можно с помощью функционала Google Search Console и Яндекс.Вебмастер.
Если планируется смена домена или создание дополнительных версий сайта, то используйте 301-й редирект. Лучше всего использовать его всегда, включая варианты с www и http-https.
Правильно настроенное основное зеркало поможет избежать возможных проблем с дублированием контента, просадкой позиций и трафика и с распылением ссылочной массы между разными зеркалами.
Как сделать 301 редирект на основное зеркало сайта
В интернете достаточно часто можно встретить такое явление, когда существуют два зеркала сайта.
То есть можно зайти на сайт как с тройным www, так и без него. Чтобы этого не происходило, рассмотрим, как сделать 301 редирект на основное зеркало.
Содержание:
Как работает 301 редирект
В случае, если 301 редирект, то есть перенаправление, не делать, то получится, что одни посетители заходят на сайт без www, другие с www. Им может что-то на сайте понравиться, и они поставят на него ссылку.
Одни поставят эту ссылку на сайт без www, другие — с www. В итоге ссылки разделятся и получится, что часть ссылок работать не будет. Немалая доля ссылочного веса при этом просто теряется.
Если же сделать 301 редирект правильно, то ссылочный вес всех ссылок будет объединяться. Эффект для сайта будет намного выше в плане роста позиций, увеличения посещаемости и роста параметров ТИЦ и PR.
При наборе адреса с www – http://www.webentrace.ru, нажимаем Enter и видим автоматическое перенаправление, то есть редирект на адрес без www – https://webentrance.ru.
В этом случае весь ссылочный вес ресурса направлен на зеркало без www. Многие считают, что тройное www применять незачем, это только удлиняет адреса.
Определяем основное зеркало сайта
В случае нового проекта можно изначально задать нужный вариант. Если же ресурс уже опубликован в интернете, то нужно выяснить, какое зеркало учитывают поисковики.
Есть много способов определения основного зеркала и один из самых простых, это воспользоваться бесплатной программой Site-Auditor.
Скачать ее можно по адресу http://site-auditor.ru на вкладке Скачать и установить на компьютер. Далее запускаем программу, вписываем адрес ресурса без тройного w — https://webentrance.ru и нажимаем Проверить.
Получаем данные. В пункте Проиндексировано – Яндекс будет две ссылки. Кликаем на каждую из них и то же самое у Google.
Теперь можно посмотреть, какие зеркала учитывает Яндекс и Google. В Яндексе нужно наводить на результаты поиска и в левом нижнем углу будет подсвечиваться адрес ресурса с www или без.
Бывает такое, что www на самом деле есть, но информация на поиске будет всегда выводиться без www. Поэтому надо навести на ссылку или перейти по ней, чтобы узнать, есть www или нет.
Данные можно еще посмотреть на сайте Яндекс.Вебмастер. Здесь также надо навести на ссылки, чтобы увидеть в каком варианте отображаются адреса страниц.
На Яндекс.Вебмастер так же можно проверить адрес в пункте Проверить URL. Введем адрес ресурса, к примеру, с www – http://www.webentrace.ru и нажимаем Проверить.
Если проверка выдаст сообщение, что сайт в данном случае является зеркалом – http://webentrace.ru, то все в порядке, то есть Яндекс учитывает ресурс без www.
Затем переходим на вкладку с информацией Google, также наводим курсор на выдачу и если зеркало с www учитывается, то Google так и выводит его.
Таким образом, выясняется с www учитывает Яндекс и Google или без. Бывают случаи, когда один поисковик, например, Яндекс учитывает ресурс без www, а Google – с www.
В этом случае следует сделать редирект на то зеркало и сделать его основным, которое учитывает Яндекс, так как в Google намного проще и быстрее все поменять.
Основное зеркало есть возможность указать в панелях Вебмастеров Яндекса и Google. Так для этого в Яндексе, в разделе Общая информация переходим – Настройка индексирования – Главное зеркало. В открывшемся окне предлагается перейти в раздел Переезд сайта и там указать нужный адрес.
В Google Вебмастере надо зайти в настройки. В пункте Основной домен указываем нужный адрес и нажимаем Сохранить.
При назначении основного домена может понадобиться подтверждение права собственности на ресурс, что надо будет сделать. Получаем подтверждение сервиса.
Как сделать 301 редирект на основное зеркало
Код редиректа с www на зеркало без www будет иметь вид:
Если надо напротив, сделать редирект с сайта без www на зеркало с www, то небольшое различие будет только в двух последних строчках кода редиректа:
Добавление директивы host в файл robots.txt
Для того, чтобы увидеть содержимое файла robots.txt, добавляем его написание к адресу сайта – https://webentrance.ru/robots.txt.
Используя FTP клиент помещаем директиву для Яндекса в файл robots.txt – Host: webentrance.ru, в данном случае без www.
Итак, мы определили, как сделать 301 редирект сайта на основное зеркало, чтобы не допустить потери посетителей.
Если редирект не происходит, то следует обратиться к хостеру. Потому что не все и не всегда настройки серверов с данным кодом редиректа нужным образом сразу срабатывают.