Как индексируется сайт в Гугл и Яндекс
Чтобы веб-проект успешно продвигался по нужным нам запросам, необходимо прийти к очень важному моменту – каждая ПС должна проиндексировать все его страницы (те, которые оптимизированы под запросы).
Как проверить, что эта цель достигнута?
Стоит выяснить, какие страницы есть в индексе, а какие роботы поисковых систем «решили» обойти стороной.
Наиболее простая схема проверки индексации:
- Введите в строке поиска Google поисковый запрос и добавьте к нему слово «site:».
- С Яндексом дела предстоят так же.
Такая проверка должна выдавать одинаковые результаты для каждой поисковой системы. Отклонения могут быть, но они не должны превышать 10%.
В случае, когда отклонения более серьезные, то можно сделать вывод, что у одной из ПС проблемы с индексацией вашего ресурса. Нужно найти причины и устранить их.
К примеру, проблема может крыться в неправильной настройке файла robots.txt – там могут стоять запреты на индексацию определенных страниц.
Другие методы:
- В SearchConsole Гугла есть специальные профессиональные инструменты, которые позволяют проводить проверку индексации страниц вашего сайта. Там же есть данные о числе заблокированных страниц из-за неправильной настройки robots.txt.
- На Яндекс.Вебмастере есть такой же сервис – также позволяет проверить правильность и корректность составления файла robots.txt.
Более того, помимо числа проиндексированных страниц, вы сможете увидеть тут ошибки, которые нужно исправить для улучшения индексации своего веб-проекта. - Сторонние сервисы также предлагают схожие инструменты. Есть как бесплатные, так и платные методы. Со скудным, и обширным функционалом.
Но, стоит ли что-то искать, и за что-то платить, если каждая ПС уже предлагает вполне сносный набор инструментов для проверки индексации?
Выводы
Когда необходимо узнать число страниц в индексе ПС, можно воспользоваться любым из вышеперечисленных методов. Кто-то пойдет простым путем, и будет считать «вручную» с запросом «site:», кто-то зарегистрируется в консоле вебмастера на Яндексе или Google.
Но, абсолютно неважно какой именно метод будет выбран, так как цель – узнать, если ли проблемы с индексацией, будет достигнута в любом случае.
И помните – индексация крайне важный момент при продвижении сайта. Если она работает слажено, то вы не потратите драгоценное время на ее перенастройку и «закупоривание дыр».