Проверка индексации сайта в Яндекс и Google

Привет! Наверное, уже каждый вебмастер знает, насколько важно, чтобы все страницы сайта попадали в индекс поисковых систем, поэтому в прошлых статьях я в основном акцентировал ваше внимание на том, как загнать новые статьи в поиск.

И казалось бы все это хорошо, но возникает другой вопрос, как проверить индексацию страниц сайта, ведь важно знать какой контент роботы ПС плотно держат под своим крылом.

Вы скажите, а какой с этого толк, подумаешь, не окажется в индексе несколько страничек, попадут в следующий апдейт.

Дело в том, что если статьи нет в поиске, то ее контент можно запросто скопировать и выдать за первоисточник, лично мне будет жаль потраченного времени на написании статьи другому вебмастеру, да еще и бесплатно. В этом случае надо защищать тексты от копирования, всеми возможными методами.

Теперь рассмотрим пример связанный с продвижением и заработком на сайте за счет всеми любимых ссылок. Вот купили вы ссылку на трастовом сайте, а статья в индекс не вошла, в итоге деньги выкинули в трубу, толку то с нее никакого или наоборот страница выпала из индекса.

Тоже самое касается и заработка на ссылках, если уже решили продавать линки на сайте то будьте добры прилагайте все усилия, чтобы о таких страницах узнавали роботы ПС, а иначе хорошего заработка не ждите, тем более если работаете через биржи Ротапост или Гогетлинкс, то там это дело еще и контролируется.

Но есть и другая сторона медали, нередко в выдачу могут попасть мусорные страницы, пресловутые дубли (replytocom, feed, tag, attachment, page, category, comment, trackback и другие), присутствие которых 100% негативно скажется на развитии сайта, а в награду за это получите фильтр Панда от Google.

Проверка индексации сайта Яндексом

Начнем с тех инструментов, которые предлагает пользователям русских поисковик. Пожалуй, самым доступным был и остается поиск, где с помощью специальных команд вы узнаете всю подноготную о сайте целиком или его отдельных страницах.

Чтобы проверить каким количеством страниц пополнил Яндекс выдачу достаточно в поисковой строке к доменному имени сайта добавить оператор site (site:ваш_сайт).

Для того чтобы проверить находится ли в индексе конкретная страница сайта используйте оператор url (url:адрес_страницы)

Как видно на скриншоте искомая страница присутствует в выдаче, но не всегда все так гладко, поэтому если вместо страницы Яндекс отобразит предложение «По вашему запросу ничего не нашлось», тогда стоит предпринять ряд мер по скорейшему загону ее в поиск, о которых я рассказал в статье «Как ускорить индексацию статьи за считанные минуты».

И последним пунктом будут инструменты от Яндекс Вебмастер. Если по каким-то причинам вы еще не добавили туда сайт, то пора бы уже это сделать.

Переходим во вкладку «Индексирование сайта» далее выбираем «Страницы в поиске» и видим подробный отчет обо всех url, которые известны на данный момент Яшке.

Проверка индексации сайта в Гугле

Рассматривая забугорный поисковик стоит отметить, что Google держит страницы сайта в двух выдачах: основной и дополнительной (Supplemental Results).

В основной индекс попадают только качественный страницы площадки, которые и будут участвовать в ранжировании сайта. А в дополнительный (его еще называют «сопли») заносятся все дубли основных страниц, технические разделы, которые создаются движком (CMS) сайта, а также страницы закрытые от индексации в файле robots.txt.

Ввиду всего выше сказанного, если вы введет в строку поиска команду site (site:ваш_сайт), тогда получите общее количество страниц индексируемых Гуглом в обеих выдачах.

Если же надо узнать общее число страниц из основной выдачи, тогда в конце запроса надо добавить знак амперсанд (/&).

Прибегнул к простым формулам математики видим, что в дополнительную выдачу Гугл отправил 785 — 259 = 526 страниц блога seoslim.ru. Если хотите посмотреть какие именно страницы находятся в «соплях», тогда идите до конца списка страниц, а затем нажмете на ссылку «Показать скрытые результаты».

Для того чтобы увидеть информацию о конкретной странице в поиске стоит использовать оператор info (info:адрес_страницы).

Заключительный анализ, проиндексированных страниц делаем в панели Гугл Вебмастер. Переходим в меню «Индекс Google» далее «Статус индексирования», далее жмем на кнопку «Расширенные данные» и отмечаем все галочки.

Заблокировано в файле — те страницы, к которым Гуглу не удалось получить доступ по причине их запрета в файле robots.txt. Здесь надо быть внимательным, так как роботы ПС не всегда обращают внимание на предписываемые для них правила и могут забирать запрещенные страницы в дополнительную выдачу.

Проиндексировано всего — это общее число страниц, которые были добавлены роботом ПС в индекс. По мере добавления или удаления страниц этот показатель будет изменяться.

В качестве примера посмотрите на график индексации страниц моего блога. После того, как я в начале сентября поставил редирект на дубли replytocom, о чем рассказал в статье «Находим и удаляем одинаковый контент», с каждым днем из индекса начали выпадать мусорные url адреса.

На этом я заканчиваю свой рассказ, надеюсь новичкам статья придется кстати, а матерые блоггеры вспомнят и до того знакомые правила. Если кто-то проверяет, как индексируются страницы в известных поисковиках другими способами, жду ваших комментариев. Пока!