скрытый редирект только для поисковиков
Как спрятать ссылки от поисковиков
Из моей предыдущей статьи вы уже узнали, что прятать ссылки в javascript — бесполезное занятие: google их находит и индексирует. Вы спросите: Что же теперь делать? И как теперь скрывать ссылки от поисковых систем? На этот вопрос есть несколько ответов и каждый из них по своему хорош, в зависимости от цели которой мы хотим достичь скрывая ссылки.
Закрыть ссылки атрибутом rel=nofollow
Самый простой способ закрыть ссылки от индексации поисковиками, это — добавить в ссылку, которую вы хотите закрыть атрибут NOFOLLOW.
Скрыть ссылку PHP редиректом
При помощи небольшого php скрипта можно сделать из внешних ссылок внутренние и закрыть от индексирования в robots.txt.
Создайте в текстовом редакторе новый документ, назовите его: go.php и вставьте в него php код:
и закачайте на свой сервер в корень сайта.
Откройте для редактирования ваш robots.txt и добавьте туда строку:
User-Agent: *
Disallow: /go.php
Теперь вы сможете прятать неугодные вам внешние ссылки под редирект разместив их в виде:
Скрыть ссылку htaccess редиректом
Этот способ спрятать внешние ссылки от поисковых роботов подсказал наш читатель Magestic, он позволит уменьшить нагрузку на сайт, поскольку редирект будет делать сервер.
Откройте в текстовом редакторе ваш файл .htaccess И вставьте в его низ следующий кусок кода:
RedirectMatch 302 /go/(.*) http://$1
А я немного доработал этот вариант сокрытия ссылок для случая если RewriteEngine on (включен):
RewriteRule ^go/(.*) http://$1 [R=302,NC,L]
В роботс.тхт для обоих вариантов добавляем строку:
User-Agent: *
Disallow: /go/
А спрятанная под htaccess редирект ссылка будет выглядеть так:
По моему мнению, это самый лучший способ, такая ссылка и выглядит красивей и короче и нагрузка на сайт меньше.
Как сделать редирект и скрыть его от Google
Опции темы
В этой статье я вам расскажу, как сделать редирект и скрыть его от Google.
Гугл определяет редирект благодаря тулбару http://toolbar.google.com/
Этой софтинкой гугл палит, что посетители находятся на сайте менее 10 секунд и переходят на партнерский шоп.
Теперь нам нужно грамотно зашифровать редирект. На неправильно зашифрованный скрипт будут ругаться антивирусы (будут сообщать, что на сайте «crypted content»).
Вскармливаем шифратору скрипт без тегов
Такой скрипт Гугл не сразу палит 
Однако, если сделать редирект именно такой, в отличие от скриптового можно юзать отложенно.
Для начала дожидаемся полной индексации дорвея, а потом через CSS закрываем прокрутку.
В итоге потеря трафика не больше 8-10 % и в бан такие доры уходят не через 2 апа.
PS Топовые дорвейщики на Умаксе тратят тысячи долларов на покупку трастовых доменов с PR’ом, и для слива трафика ставят редиректы. Таким образом потери трафика стремятся к нулую. Пусть их дорвей в выдаче по ВЧ будет всего 24 часа, но за это время, такой дор не только окупит себя, но и пренесет колоссальные прибыли
Как скрыть партнерскую ссылку от Яндекса и Гугла (301 PHP-редирект или плагины WP)
Как скрыть партнерскую ссылку от Яндекса
“Нарушение: размещение на страницах сайта информации о товарах и услугах, предоставляемых другими сайтами в рамках партнерской программы. Как правило, такие сайты не имеют ценности для пользователя, поскольку не имеют собственного оригинального контента и не предоставляют никакого дополнительного сервиса”.
За это они обещают такое суровое наказание:
“Исключение из поиска страниц сайта, понижение в результатах поиска”.
Я испытал это на собственном опыте. Я писал статьи для своего блога, и трафик рос как на дрожжах – в разы, а потом я добавил на сайт много партнерских ссылок, и сколько бы новых статей я не писал, трафик больше не рос. Конечно, я не могу быть уверен на 100%, что трафик перестал расти именно из-за этого, но я думаю, что причина именно в этом.
Гугл относится лояльно к партнерским ссылкам, главное, размещать только оригинальный контент, представляющий интерес для пользователей. Также я читал в англоязычных блогах, что Гугл не любит, когда скрывают партнерские ссылки, и может пессимизировать за это, но в то же время многие советуют все-таки скрывать их через редиректы. Поэтому в англоязычном Интернете много сервисов, плагинов и скриптов, которые помогают скрывать партнерские ссылки именно через редиректы.
Рассмотрим, как скрыть партнерскую ссылку от Яндекса и Гугла.
Как скрыть партнерскую ссылку от Яндекса через 301 PHP-редирект
Header( “HTTP/1.1 301 Moved Permanently” );
Header( “Location: http://www.affiliate.com” );
?>
При этом в тег каждой страницы добавляем код:
Таким образом, мы закрываем этот файл от индексации поисковыми системами, но лучше положить все такие файлы в отдельную папку и закрыть только одну папку от индексации, а не закрывать каждый файл по отдельности.
Как скрыть партнерскую ссылку от Яндекса при помощи плагинов WordPress
Если у вас сайт на WordPress, то самый легкий и приятный способ скрывать партнерские ссылки при помощи плагинов. Помимо настройки самого редиректа, они еще позволяют легко управлять партнерскими ссылками и отслеживать статистику кликов по ним. Я отобрал все самые популярные плагины с большим количеством подписчиков, которые регулярно обновляются.
Мой выбор плагина WordPress для скрытия партнерских ссылок
Ну вот, это, пожалуй, все достойные плагины, которые мне удалось найти. Все остальные или совсем не популярны или не обновляются годами. Из всех перечисленных выше плагинов самым популярным является плагин Pretty Link (200 000 активных установок), затем идут плагины Thirsty Affiliates и Easy Affiliate Links (у каждого по 10 000 установок). Мне больше всего понравился бесплатный плагин Easy Affiliate Links. Это мой выбор!
Как скрыть партнерскую ссылку от Яндекса и Гугл при помощи фреймов
Этот способ я нашел в Интернете и сам его не проверял. Автор статьи писал, что у него не принимали страничку для рекламы в Яндекс Директ из-за наличия партнерской ссылки и после того, как он скрыл ссылку подобным образом, Яндекс Директ без проблем разрешил давать на эту страницу рекламу. Честно сказать, я не знаю, насколько этот способ рабочий или нет. Если у вас есть опыт его использования, напишите, пожалуйста, в комментариях. Работает ли этот способ?
Создаем отдельную HTML-страничку (файл) с произвольным названием и грузим ее на свой веб-сайт в корневую директорию или создаем специальную отдельную папку, в которой будут храниться все странички с вашими партнерскими ссылками. В этот файл вставляем такой HTML-код:
Переадресация и Google Поиск
При переадресации выполняется переход по новому URL вместо исходного. Это указывает посетителям сайта и поисковым роботам Google на то, что страница была перемещена. Использовать переадресацию целесообразно в следующих случаях:
Типы переадресации
Вероятнее всего, ваши пользователи не обратят внимание на то, какой тип переадресации вы используете. Однако он может в той или иной степени повлиять на то, будет ли конечная страница считаться канонической в системе Google Поиска. При выборе типа переадресации руководствуйтесь тем, в течение какого времени вы планируете ее использовать и какой URL хотите показывать в результатах поиска Google.
В приведенной ниже таблице перечислены варианты настройки постоянной и временной переадресации. Первыми указаны те, при использовании которых выше всего вероятность, что Google обработает переадресацию корректно (самой надежной в этом отношении является серверная переадресация). Выбирайте подходящий вариант в зависимости от особенностей сайта.
| Типы переадресации | |
|---|---|
| Постоянная | |
| HTTP 303 (see other) | |
| HTTP 307 (temporary redirect) | |
| meta refresh (более 0 секунд) | |
| HTTP refresh (более 0 секунд) | |
Серверная переадресация
Постоянная переадресация
Если вы хотите, чтобы в результатах поиска показывался новый URL страницы, рекомендуем вам использовать постоянную серверную переадресацию. Это самый надежный способ направить поисковых роботов Google и пользователей на страницу с нужным адресом. Коды статуса 301 и 308 означают, что страница перемещена навсегда.
Временная переадресация
Такую переадресацию следует настраивать, если вы планируете перенаправлять пользователей на другую страницу лишь временно. В этом случае в результатах поиска Google ещё на какой-то срок останется старый URL. Например, если на вашем сайте временно недоступна определенная услуга, вы можете перенаправлять пользователей на страницу с объяснением причин, не затрагивая исходный URL в результатах поиска.
Инструкции по настройке
Процедура будет зависеть от особенностей хостинга и серверной среды или от того, на каком скриптовом языке написан серверный код сайта.
Пример кода PHP для настройки временной переадресации:
Если у вас есть доступ к файлам конфигурации веб-сервера, вы можете создать собственные правила переадресации. Следуйте инструкциям, относящимся к вашему веб-серверу.
nginx: ознакомьтесь с информацией о создании правил переопределения URL в блоге nginx. Как и при работе с Apache, переадресацию можно настраивать по-разному. Один из способов:
Для более сложных случаев используйте директиву rewrite :
Переадресация meta refresh и ее HTTP-эквивалент
Пример эквивалентной переадресации, заданной в HTTP-заголовке с помощью серверного скрипта:
Чтобы выполнялась отложенная переадресация, которую Google считает временной, укажите нужное количество секунд в атрибуте content :
Переадресация с помощью JavaScript-свойства location
Система Google Поиска интерпретирует и выполняет код JavaScript после сканирования страницы, используя сервис отрисовки веб-страниц (Web Rendering Service).
Crypto redirect – переадресация с помощью ссылки
Даже если у вас нет возможности настроить переадресацию стандартными способами, вы должны тем или иным способом уведомлять пользователей о том, что определенный контент перемещен. Проще всего будет добавить на страницу ссылку с новым URL и краткую сопутствующую информацию. Пример:
Так вы поможете пользователям найти новую страницу. Кроме того, Google обычно распознает такие ссылки как crypto redirect.
Альтернативные URL
Когда настроена переадресация, Google отслеживает и исходный URL (старый), и конечный (новый). Один из них будет считаться каноническим. Какой именно – зависит от нескольких факторов, в частности от того, является ли переадресация постоянной или временной. Второй URL станет альтернативным вариантом канонического. Альтернативный URL может появиться в результатах поиска, если запрос будет указывать на то, что пользователь с большей вероятностью перейдет именно по этому адресу.
Например, после смены доменного имени сайта старые URL иногда могут появляться в результатах поиска Google даже после того, как будут проиндексированы новые URL. Это нормальное явление. Постепенно пользователи привыкнут к новому доменному имени, и альтернативные URL исчезнут из результатов поиска без вашего вмешательства.
Except as otherwise noted, the content of this page is licensed under the Creative Commons Attribution 4.0 License, and code samples are licensed under the Apache 2.0 License. For details, see the Google Developers Site Policies. Java is a registered trademark of Oracle and/or its affiliates.
Что такое 301 редирект и как его настроить
При работе с веб-ресурсами возникают ситуации, когда происходит удаление, перенос или изменение url-адреса отдельных страниц или сайта целиком. При этом требуется сохранить индексацию в поисковых системах и перенаправить пользовательский трафик на новый адрес. Для решения этой задачи используется функция под названием 301 Redirect. Это один из инструментов SEO, который позволяет не только избежать ошибок при открытии отдельных страниц, но и добиться корректной работы ресурса. Правильные настройки редиректа дают дополнительную возможность получить синергетический эффект в поисковой оптимизации и увеличить количество органического трафика на релевантные страницы. Рассмотрим более подробно, как происходит настройка редиректа 301.
Что такое переадресация 301
Permanent Redirect 301 применяется с целью организации постоянной переадресации с неактуального доменного адреса или url отдельной страницы на рабочую версию. Редирект может понадобиться в связи с глобальным переносом сайта на другой домен, техническими изменениями в написании адреса, удалением страниц, необходимостью внутренней и внешней перелинковки. Один из вариантов использования перманентной переадресации – редирект с нескольких доменных имен, созданных в разных зонах, на один актуальный адрес. Грамотное использование редиректа позволяет перемещать контент без потерь в поисковой индексации, сохранить и даже увеличить прежний вес и позицию в выдаче.
Настроить код состояния HTTP 301 можно разными способами:
с помощью HTML и PHP;
через панель управления или плагины соответствующей CMS;
при помощи специальных скриптов (программ);
на уровне хостинг-провайдера;
Последний способ является наиболее простым и надежным. О нем чуть позже поговорим подробнее.
Альтернативные методы переадресации
В большинстве случаев постоянная переадресация является более правильным решением, чем временная. На практике это объясняется просто. Предположим, сайт сменил доменную зону, а затем еще и обзавелся защищенным протоколом https. При настройке временной переадресации в индексе Яндекса и Google по одним и тем же запросам появились три версии сайта с пропорциональным проседанием позиций в выдаче. После настройки редиректа 301 на приоритетный url произошло склеивание дублей, робот вернул сайт в топ выдачи.
Не рекомендуется использовать постоянный редирект при временном переносе сайта или наличии серьезных проблем со старым доменным именем. Если адрес забанен или попал под поисковую фильтрацию, смена дислокации с применением переадресации не поможет избавиться от этих ограничений.
В каких случаях используется постоянный редирект 301
Смена доменного имени, перенос сайта. Необходимо произвести тотальную настройку переадресации со старого адреса на новый, чтобы все без исключения запросы к old_site.ru перенаправлялись на new_site.ru.
Изменение написания url определенных страниц в целях SEO-продвижения, смены CMS или по иным причинам. Требуется настроить редирект с site.ru/1hdkr5 на site.ru/page_adress.
Перенос разделов на субдомены. Необходимо сменить адрес www.site.ru/example на example.site.ru.
Для аккумуляции трафика с адресов, купленных в разных доменных зонах, на один приоритетный ресурс.
Исключение дублирующихся страниц из индекса.
Склейка зеркал сайта – вариантов сайта с идентичным контентом, но разным написанием адресов: site.ru, www.site.ru, https://site1.ru и т.д. В этом случае выбирается один приоритетный домен и на него настраивается редирект со всех остальных зеркал.
Удаление ранее существовавшей страницы. В этом случае пользователи обычно видят ошибку 404. Большое количество таких сообщений негативно воспринимается как пользователями, так и поисковиками.
Для быстрого перехода пользователя на мобильную версию ресурса со смартфонов и планшетных устройств.
Создание постоянной переадресации 301 через настройки и плагины CMS
В большинстве популярных конструкторов сайтов и CMS (OpenCart, Joomla!, Битрикс, Wix, Тильда) предусмотрена настройка редиректов с помощью встроенных инструментов. Если сайт создан с помощью WordPress, для настройки переадресации можно воспользоваться следующими плагинами:
Redirection — самый популярный плагин для настройки редиректов. Кроме основной функции обладает следующими возможностями: сбором статистики переадресаций, отслеживанием ошибок 404, поддержкой регулярных выражений.
Safe Redirect Manager — простой плагин, который также поддерживает регулярные выражения, практически не влияет на производительность сайта.
Quick Page/Post Redirect Plugin — еще один удобный инструмент оптимизации. Один из недостатков — отсутствие поддержки регулярных выражений. К ссылкам можно добавлять атрибут «nofollow».
Simple 301 Redirects. Данный модуль обладает одним недостатком – url для переадресации необходимо прописывать вручную.
Для Битрикс кодировка будет выглядеть следующим образом:
В Joomla настройки переадресации производятся через панель администратора в разделе «Компоненты» => «Перенаправление». Здесь можно не только установить правила редиректа, но и отслеживать страницы с битыми ссылками и перенаправлять их на корректные адреса.
Но настроить редирект 301 довольно просто в базовом редакторе.
Найти файл можно через панель управления хостинга либо использовать FTP-клиент. При любом варианте нужно включить отображение скрытых файлов.
Для создания 301 редиректа перейдите в панель управления вашего сайта.
Рекомендуем все условия редирект записывать в блоке IfModule, дабы избежать ошибок при выполнении файла htaccess.
Перед тем как начать прописывать правила перенаправления, необходимо включить механизм преобразований (RewriteEngine) при помощи команды RewriteEngine On.
Хостинги применяют по умолчанию 302 или любой другой 3xx редирект. В связи с этим в правилах используются флаги. Рекомендуем дописывать в своих правилах [R=301,L].
Склейка зеркал сайта (www / без www)
Сайты http://name.site и http://www.name.site для поисковых систем являются разными. А по факту это разные адреса одного сайта.
Если произошла обратная ситуация и необходима переадресация с без «www» на «www», то в файл прописывается:
Редирект с http на https для всего сайта
Если данная конструкция не сработает, попробуйте другой вариант:
Если редирект не работает и в этом случае, попробуйте такой вариант:
В результате пройдет перенаправление на https всех пользователей и поисковых систем.
Постранично
Бывают случаи, когда необходимо создать редирект на https всех страниц, кроме одной. В этом случае используют постраничный редирект:
Для одной страницы
Для редиректа с http на https одной страницы (например page.php), в файл добавьте следующую конструкцию:
Редирект сайта с https на http
Если необходимо сделать 301 редирект всего сайта с https на http, в файл прописывается следующее:
Изменение домена
Редирект на страницу с другим url (без параметров)
Редирект для url (с параметрами)
Если адрес содержит параметр (например, http://name.site/articles.php?section=1, где параметром является «section=1» ), то прописывают следующую конструкцию:
Редирект с index.php на главную страницу
В тех случаях, когда главная страница сайта может быть недоступна по нескольким адресам одновременно, применяют следующую конструкцию:
Редирект со страниц со слешем на без слеша (для всего сайта)
Или более короткий вариант:
Редирект со страниц без слеша на слеш (для всего сайта)
Обратный вариант применяется, когда нужно использовать адреса со слешем.
301 редирект с 404 Not Found
Код 404 Not Found (страница не найдена) присваивается удаленной или несуществующей странице на сайте. Создание постоянного перенаправления с таких страниц актуально для контентных сайтов и крупных интернет-магазинов, где страницы часто удаляются по естественным причинам. Тогда возникает потребность перенаправить посетителей на одну из главных страниц сайта, чтобы они не уходили с ресурса при виде ошибки.
301 редирект для страниц 404 Not Found сделать совсем не сложно. Например, этот код перенаправит со всех 404-страниц на главную:
Однако делать такие редиректы в массовом порядке не рекомендуется, так как это может испортить SEO-статистику всего ресурса.
Пример файла htaccess, после добавления в него редиректов:
точка заменяет произвольный символ
обозначает перечень знаков, совпадающих с буквами a, b, или с
список символов вне указанного диапазона (кроме a, b, с)
указывает на то, что предыдущий знак может повторяться 0 или больше раз
команда найдет идущие подряд символы из заданного набора
приводит к противоположному эффекту
заменяет любой набор символов
ищет все подстроки между кавычками
начало строки (когда используется в начале выражения)
означает конец строки
цифра, буква или подчеркивание _
заменяет любую цифру
может заменить любой знак, кроме цифры
для замены любой цифры
для всех букв от a до z в нижнем регистре
для каждой буквы от A до Z в верхнем регистре
любая буква от a до Z во всех регистрах
Другие способы создания переадресации 301
Через PHP
Данный вариант подойдет тем, кто хорошо разбирается в web-программировании и PHP. Необходимо открыть файл index.php в корне CMS-движка и прописать там:
(в первой строке укажите старый url, а во второй — новый)
ASP-редирект
ASP.NET редирект
Найдите в корне своего сайта файл web.config и вставьте в секцию синтаксис:
ColdFusion редирект
JSP (Java) редирект
Данный способ подойдет для небольшой корректировки простых сайтов. Код можно прописать лишь в одном файле, а сам файл добавить на все нужные страницы, указав:
CGI-скрипт на PERL
Ruby on Rails
Редирект в Nginx
HTML-редирект
Этот способ подойдет для небольших статических сайтов, когда требуется настроить переадресацию для одной страницы. Для этого необходимо добавить специальный мета-тег внутри кода HTML. Пример записи редиректа на другой ресурс после 5-секундной задержки:
Если поставить значение 0 вместо 5, то переадресация на https://livepage.pro произойдет моментально.
Однако для больших сайтов HTML-перенаправление делать сложно и затратно по времени, поэтому лучше отдать предпочтение другому варианту.
Редирект 301 в панелях управления сервера
Большинство панелей управления сервера предоставляют возможность настройки переадресации с кодом 301. Рассмотрим варианты решения этой задачи на примере двух популярных ПУ для VDS.
Cpanel
Нужно перейти в блок «Домены» => «Перенаправления». В появившемся окне выполнить следующее:
В строке «Тип» выбрать «Постоянный 301».
В строке «https://www» из выпадающего списка выбрать домен сайта (например, example.ru).
В строке «Перенаправляет на» указать для домена адрес http://example.ru.
В блоке «Перенаправление www» поставить галочку напротив «Перенаправлять только с www».
Сохранить изменения кликом на «Добавить».
ISPmanager
Автоматическое создание переадресации
При отсутствии знаний и опыта самостоятельной настройки редиректа можно воспользоваться сервисами автоматической генерации:
Проверка корректности настроек 301 редиректа
Самый простой способ проверки переадресации – ручное тестирование. Для этого необходимо вставить в адресную строку браузера url сайта или страницы, с которой настроено перенаправление. Если при открытии будет доступен ресурс, на который настроен редирект, то переадресация выполняется правильно.
Для автоматической проверки можно воспользоваться специальными сервисами:
программой Screaming Frog Seo Spider, способной просканировать весь сайт.
Существует ряд ошибок, которые следует избегать при настройке редирект 301:
использование перенаправлений между страницами сайта без изменения их url в ссылках;
установка временной переадресации вместо постоянной;
неправильный выбор типа редиректа;
перенаправление файла robots.txt;
непонимание разницы между rel=canonical и кодом 301;
редирект на нерелевантный контент;
переадресация, которая не приводит к 200-й странице.
Стоит отметить проблему создания цепочки ссылок, которая может привести к появлению циклического редиректа — ошибки с кодом «ERR_TOO_MANY_REDIRECTS». Наиболее распространенные причины возникновения такого бага – неправильная настройка в процессе создания переадресации, вирусная атака, слишком длинная цепочка редиректов. Не рекомендуется настраивать редирект, содержащий более пяти адресов. Оптимальной является прямая переадресация со старого на новый url.
Заключение
Использование редиректа 301– очень важный способ поисковой и пользовательской оптимизации веб-ресурса. Использовать его следует с осторожностью. Неправильная настройка может привести к сбоям в работе сайта и потере поисковых позиций.