Зеркальщик

Зеркальщик – это робот поисковика, занимающийся склеиванием зеркал сайтов при их нахождении для очищения базы от ресурсов-дубликатов.

Зеркало сайта – это полностью идентичная копия сайта, созданная по иному адресу. Создаются они с такими целями:

  • распределение нагрузки на популярный ресурс с повышенной посещаемостью;
  • сохранность копии ресурса;
  • бронирование схожих по написанию или произношению доменов;
  • back up контента и прочее.

При нахождении ресурсов с точно такими же данными, зеркальщик определяет один из них как основное зеркало, другие же просто убираются из индекса. Чтобы робот определил именно тот домен, над раскруткой которого работают оптимизаторы, им следует сообщить поисковику, какое именно зеркало нужно считать основным. Также нужно учесть, что апдейт зеркальщика производится раз в 2–12 недель.

Процедура склеивания доменов

Главное зеркало для робота Яндекса обозначено в файле robots.txt посредством директивы host. Конечно, это не является гарантией того, зеркальщик выберет обозначенное в ней зеркало как главное, но значение директивы будет обязательно учтено. Прописка Host будет производиться так:

  • User-agent: Yandex
  • Disallow: /имя папки или файла/
  • Host: www.mysite.ru

По завершении склеивания зеркал роботом, новому сайту будет определено тИЦ старого ресурса.

Редирект 301

Для прочих поисковиков и юзеров требуются только настройки серверного подокументного 301-го редиректа (однако, лишь по завершении процесса склеивания зеркальщиком Яндекса). Поисковики или юзеры при запросе какого-то файла с зеркала ресурса будут перенаправляться посредством редиректа на требуемую страницу основного сайта .PR старого ресурса будет передан главному зеркалу.

Редирект устанавливается посредством модуля mod_rewrite, для этого в корневом каталоге веб-сайта в файле .htaccess нужно прописать следующие команды:

  • RewriteEngine On
  • RewriteBase /
  • RewriteCond %{HTTP_HOST} ^ (www\.)?site2\.ru$ [OR]
  • RewriteCond %{HTTP_HOST} ^ www\.site1\.ru$
  • RewriteRule ^ (.*)$ http://site1.ru/$1 [R=301,L] 

Комментарии

ОтменитьДобавить комментарий