Как быстро проверить индексацию страниц в яндексе и google
Содержание:
- Как определить наличие страниц с помощью сторонних инструментов
- Поисковики ничего не знают о вашем сайте
- В Яндексе и Google разное количество проиндексированных страниц: что делать?
- Особенности индексации в Google
- Индексация страниц сайта в Яндекс Вебмастер
- Как проверить индексацию сайта в Яндексе через Yandex вебмастер
- Что такое индексация и зачем она нужна
- Как проверить индексацию страницы?
- Как ускорить индексацию – теория и практика
- Скрипт от seolib.ru
- Дополнительные сервисы
- Инструменты проверки поисковых систем
- Как узнать, сколько страниц проиндексировано?
- Особенности работы с поисковыми системами
- Используем панель Вебмастера
- Способ 2. Язык запросов
- Заключение
- Подводим итоги
Как определить наличие страниц с помощью сторонних инструментов
Помимо поисковых систем, проверка сайта в Google и Yandex может быть проведена и с помощью сторонних инструментов. Например, это специальные плагины или букмарклеты — программы на JavaScript (или других языках), автоматизирующие процесс сбора информации. Все, что нужно здесь, — это ввести адрес сайта и запустить систему. Тут не требуется работать с самими поисковиками.
Плагины доступны в большом спектре и для самых разных браузеров: Google Chrome, Firefox и пр. Некоторые из них бесплатны. Другие же за отдельную плату предложат вам расширенный функционал. Букмарклеты работают как закладки. Вы сохраняете сайт, потом открываете закладку и получаете всю необходимую информацию. Имеет смысл использовать несколько плагинов, чтобы с высокой точностью определить, прошла ли проверка индексации сайта. Дело в том, что у инструментов могут различаться алгоритмы работы. И по одной и той же странице могут быть получены разные данные.
Поисковики ничего не знают о вашем сайте
Если веб-проект только запустился, то на вопрос, почему Яндекс не индексирует сайт, будет очень простой ответ — потому что он его не видит. То же самое относится к Google. Поисковики быстрее начинают отслеживать те сайты, о которых им сообщают владельцы. Поэтому совет простой: запустили сайт — добавьте его в Яндекс.Вебмастер и Google Search Console.
В Яндекс.Вебмастере:
- Откройте главную панель.
- Нажмите на плюс, чтобы добавить сайт.
- Укажите адрес сайта и любым доступным способом подтвердите права на него. Можно добавить метатег в раздел <head> на главной странице, разместить в корне сайта HTML-файл, добавить TXT-запись в DNS домена.
В Google Search Console:
- Нажмите «Добавить ресурс».
- Укажите адрес сайта.
- Подтвердите права собственности.
Не нужно добавлять каждую страницу сайта — достаточно только главной. Так поисковые роботы узнают о существовании нового веб-проекта и будут периодически его проверять.
Вместе с сайтом рекомендуется добавлять карту сайта. Ее отсутствие также может стать причиной того, что Google или Яндекс не индексирует сайт.
В Яндексе и Google разное количество проиндексированных страниц: что делать?
На данном этапе вы уже знаете, какие страницы не проиндексированы. Но почему так произошло?
Вот причины, по которым поисковики могут индексировать не все (или лишние) страницы:
- Разные директивы для роботов Яндекса и Google в robots.txt. В этом случае – ошибочно или намеренно – запрещена индексация определенного типа страниц для Googlebot или Yandexbot; проверьте файл robots.txt и при необходимости исправьте директивы.
- Молодой сайт. Требуется время, чтобы поисковики добавили все страницы в индекс; если спустя 2-3 месяца после запуска сайта проблема не решилась, ищите другие причины.
- Нет XML-карты сайта. Она помогает роботам ПС эффективней сканировать сайт, поэтому ее стоит обязательно создать и указать путь к ней в robots.txt.
- Наличие дублей страниц. Возникают в силу специфики CMS, ошибок при разработке и настройке сайта, копировании контента. Решение – найти и устранить дубли.
- Низкая скорость работы сайта. Робот может попросту не дождаться ответа и уйти ни с чем. Решение – найти «узкие места» и ускорить работу сайта.
- Редкое добавление контента. Чем реже вы добавляете новые страницы, тем реже роботы посещают сайт. Естественно, скорость переобхода у Яндекса и Google разная, поэтому возникают расхождения. Решение — хотя бы раз в неделю создавать новую страницу с уникальным контентом, например, статьей для блога. Если у вас не хватает времени для работы над контентом, подключите модуль автоматического наполнения сайта от PromoPult – копирайтеры будут регулярно писать тематические тексты под ваш сайт, а верстальщики – размещать их на страницах.
- Редкое обновление устаревшего контента. Если существующие страницы не обновляются, то при выпадении из индекса повторная индексация произойдет не скоро. Избежать этого помогает настроенный Last-Modified и регулярная актуализация информации.
- Санкции поисковиков. Ваш сайт может попасть под фильтры одного из поисковиков. В этом случае стоит проверить сайт на наличие фильтров.
- Более 4-х уровней вложенности. В такой ситуации поисковик не успевает добраться до части «глубоких» страниц. Решение –переосмыслите структуру сайта, максимально упростите ее.
После устранения недостатков подождите пару недель, чтобы поисковики переиндексировали страницы, и повторно промониторьте ситуацию. Если все сделано верно, то расхождения минимизируются (ожидать, что совпадать будут 100% страниц, не стоит).
Особенности индексации в Google
Интернет – это необъятный океан различной информации, которая обязательно строго структурирована и находится на отведенном ей месте. Такая безупречная каталогизация возможна благодаря работе поисковых систем. В них хранятся важные данные о каждой странице всех имеющихся сайтов, что позволяет быстро находить пользователю нужную ему информацию.
Так как Интернет ежедневно пополняется огромным количеством новой информации на страницах сайтов, даже самые продвинутые поисковые системы не могут сразу выполнить их индексацию. На наиболее посещаемых сайтах обновление данных в поисковых системах производится ежедневно, а на всех остальных – еженедельно.
Индексация сайта в Гугле – самая быстрая индексация среди всех остальных. В зависимости от ряда параметров, Гугл способен вносить в свою поисковую базу данные о произошедших обновлениях на сайтах даже в течение нескольких часов
Индексация включает добавление ряда важной информации о материалах сайта: ключевые слова, ссылки и пр
Все web ресурсы индексируются с разной скоростью. На то, как быстро поисковая машина посетит сайт и внесет в свою базу данных информацию об изменениях на страницах, влияет ряд факторов. Предположим, если Гугл определит, что сайт посвящен новостям, то он будет регулярно индексироваться быстроботом – буквально каждые несколько часов. Существуют разные способы, при помощи которых можно добавить сайт на индексацию в Гугл. Например, для того, чтобы ускорить попадание сайта в индекс, часто используется один из действенных способов – размещение внешних ссылок на страницах, которые уже проиндексированы.
Когда поисковая машина Google посетила сайт, отметила все необходимые данные и внесла информацию в базу данных, системой осуществляется ранжирование авторитетности. Что оно из себя представляет? Ранжирование авторитетности – это выполнение сортировки по определенным параметрам. Авторитетность (PageRank), в свою очередь, определяется количеством и качеством ссылок, ведущих на сайт с других ресурсов. Выходит, что тот сайт, на который ведет большее количество ссылок, является более авторитетным
Чем выше авторитетность, тем выше и важность ресурса, определяемая ранжированием
Непосредственное влияние на индексацию сайта оказывает:
- количество посетителей;
- релевантность страницы – соответствие поисковым запросам пользователей, достигаемое определенной пропорцией ключевых слов в тексте или мета-тегах;
- внутренняя оптимизация.
Показатель PageRank может быть от 0 до 10. Для наиболее «продвинутых» сайтов обычно соответствует показатель 4-5. А вот сам Google имеет по шкале авторитетности 10. На данный момент тулбарный показатель PR отключен.
Те сайты, которые обладают высоким показателем авторитетности, располагаются в поисковой выдаче как можно выше. Следует учесть, что каждая страница одного сайта имеет свой показатель авторитетности, поэтому и место в выдаче будет для каждой страницы свое.
Как проверить индексацию сайта в Гугле с оператором «site:»
Мы уже разобрались с тем, что индексация сайта очень важна. С помощью определенных действий можно проверить проиндексирован ли сайт в Гугл. Существует много программ и сервисов, которые помогают в этом.
Один из способов проверки индексации в Гугл – это выполнить установку тулбара Google в браузер, после чего в правой верхней странице будет видна специальная диаграмма. Она выводит показатель авторитетности страницы сайта.
Еще один надежный способ для google – оператор «site:». Не забываем, что индексация Гугл является зависимой от географического положения, что влияет на количество страниц в индексе для google.ru и google.com.
Итак, как пользоваться данным оператором для проверки индексации:
- К оператору «site:» нужно добавить url интересующего домена. Между ними не должно быть пробелов. Выглядит это так: site:google.ru.
- Поиск по всему домену или отдельному каталогу: site: google.com/webmasters.
- Можно осуществлять и избирательный поиск. Для того, чтобы исключить ненужные страницы, перед оператором нужно поставить знак «-». Выглядит это следующим образом: site:google.ru -site: adwords. google.com.
Для того, чтобы определить индексацию страницы со ссылкой на главную сайта с помощью www.google.ru, можно воспользоваться запросами link:google.ru или link:www. Первый поиск всегда выдает гораздо больше результатов.
Поиск ссылок на определенные страницы сайта можно выполнить по запросу: link:google.ru/webmasters.
Индексация страниц сайта в Яндекс Вебмастер
Статистика обхода в Яндекс Вебмастер
Для начала зайдем в пункт «Статистика обхода». Раздел позволяет узнать, какие страницы вашего сайта обходит робот. Вы можете выявить адреса, которые робот не смог загрузить из-за недоступности сервера, на котором находится сайт, или из-за ошибок в содержимом самих страниц.
Раздел содержит информацию о страницах:
- новые – страницы, которые недавно появились на сайте либо робот их только что обошел;
- изменившиеся – страницы, который поисковик Яндекса раньше видел, но они изменились;
- история обхода – количество страниц, которые обошел Яндекс с учетом кода ответа сервера (200, 301, 404 и прочие).
На графике отражены новые (зеленый цвет) и изменившиеся (синий цвет) страницы.
А это график истории обхода.
В этом пункте отображены страницы, которые Яндекс нашел.
N/a – URL не известен роботу, т.е. робот её раньше не встречал.
Какие выводы из скрина можно сделать:
- Яндекс не нашел адрес /xenforo/xenforostyles/, что, собственно, логично, т.к. этой страницы больше нет.
- Яндекс нашел адрес /bystrye-ssylki-v-yandex-webmaster/, что тоже вполне логично, т.к. страница новая.
Итак, в моем случае в Яндекс Вебмастере отражено то, что я и ожидал увидеть: что не надо – Яндекс удалил, а что надо – Яндекс добавил. Значит с обходом все у меня хорошо, блокировок никаких нет.
Страницы в поиске
Поисковая выдача постоянно меняется – добавляются новые сайты, удаляются старые, корректируются места в выдаче и так далее.
Информацию в разделе «Страницы в поиске» вы можете использовать:
- для отслеживания изменений количества страниц в Яндексе;
- для слежения за добавленными и исключенными страницами;
- для выяснения причин исключения сайта из поисковой выдачи;
- для получения информации о дате посещения сайта поисковиком;
- для получения информации об изменении поисковой выдачи.
Чтобы проверить индексацию страниц и нужен этот раздел. Здесь Яндекс Вебмастер показывает страницы, добавленные в поисковую выдачу. Если все ваши страницы добавлены в раздел (новый добавятся в течение недели), то значит со страницами все в порядке.
Как проверить индексацию сайта в Яндексе через Yandex вебмастер
Для того чтобы узнать проиндексирован ваш сайт яндекс-ботами или нет нужно зарегистрироваться в Вебмастере Yandex. Весь процесс регистрации описывать не вижу смысла, он достаточно простой. Единственное, что вас в этом процессе может озадачить, это подтверждение прав на регистрируемый сайт. Нужно скопировать файл предложенный Яндексом и вставить его в корневую папку сайта и нажать кнопку подтвердить. После этого вам станут доступны все функции системы и можно перейти во вкладку – индексирование:
Если прокрутить страницу ниже будут видны страницы которые проиндексировал робот и дата индексации. Все мои статьи Яндекс-боты “кушают” просто мгновенно, прямо в день выхода. И это очень круто, так как моя проиндексированная статья сразу попадает в ТОП 10 выдачи Яши и начинает работать, привлекая трафик на сайт. Вот даты индексации моих последних опубликованных статей:
Многие начинающие хозяева сайтов недооценивают важность индексации. Я встречал интернет магазины публикующие карточки товаров по 1000 штук в день, которые попадали в индекс сайта только спустя месяцы
Представьте себе, что 1000 товаров не были видны в поиске Яндекс столько времени и значит они не работали. Товары соответственно из-за этого не покупали. Как следствие компания недополучила прибыль из-за того, что её SEO-оптимизаторы не удосужились ускорить индексацию страниц своего сайта.
Думаю с тем, как проверить индексацию сайта в Яндексе всё понятно. Давайте теперь разберёмся как индексацию сайта ускорить.
Как ускорить индексацию сайта
Для того чтобы опубликованные статьи на вашем сайте мгновенно индексировались, необходимо приручить Яндекс-бота как можно чаще посещать ваш сайт. В первую очередь необходимо установить на сайте файл Sitemap (карту сайта), благодаря которой роботы будут быстрее понимать, что и где на вашем сайте поменялось. Следующим важным моментом будет закрытие тех папок и документов на сайте, которые роботам смотреть не обязательно и тратить на их просмотр время. Такие действия выполняются с помощью файла Robots.txt. Грамотно составленный robots облегчит работу скролеров и уменьшит нагрузку на сервер.
Следующим этапом до публикации статьи на сайте необходимо добавить её в блог Вебмастера “оригинальные тексты“, чтобы исключить возможность воровства контента и обозначиться перед Яндексом, как первоисточник информации.
Затем переходим в раздел “переобход страниц” в Яндекс Вебмастере:
Вставляем URL добавленной на сайт страницы в графу и нажимаем кнопку отправить. Таким образом мы информируем роботов, что на нашем сайте появилась новая страница, которую необходимо проиндексировать. Тоже самое нужно сделать со всеми страницами на сайте, которые не попали в индекс.
Как установить расписание для индексирующего сайт робота:
Такая функция тоже есть в вебмастере в разделе скорость обхода:
С помощью ползунка вы можете задать скорость обода и индексации вашего WEB проекта вручную. Лично я этого не делал и оставил галочку в строке “доверять Яндексу”. То что Яндекс-бот приходит на мой сайт ежедневно это меня более чем устраивает.
Как я приручил робота Яндекс часто индексировать мой сайт
Поделюсь с вами ещё одной фишкой которая максимально ускоряет процесс индексации сайта. Для этого нужно публиковать свои тексты туда где Яндекс-ботов и Google-ботов очень много. Это социальные сети и новостные порталы. В них роботы скролеры просто живут и не выходят от туда. Как только у меня выходит на сайте статья, я сразу же её разпощиваю по социальным сетям, таким как Вконтакте, Одноклассники, Твитер, Фэйсбук, и так далее. Роботы видят новый контент, переходят на мой сайт и индексируют страницу. В дальнейшем они понимают частоту появления контента на сайте и приходят также часто, как появляются статьи. Как видите всё очень просто!
Процесс индексации – это первое с чего начинается SEO продвижение сайта. Но этого не достаточно, чтобы увидеть ваш интернет проект на первой странице Яндекса. Проиндексированная страница может занять к примеру 100-е место в выдаче и дальше хозяину сайта необходимо приложить все знания и усилия, чтобы загнать её в ТОП 10 выдачи. Как это сделать я подробно рассказываю на своих онлайн курсах по SEO обучению.
На этом сегодня всё, всем удачи и до новых встреч!
Что такое индексация и зачем она нужна
Мы уже не раз говорили о том, что зарабатывать на своем сайте можно только при условии достижения высокого уровня посещаемости, интересного потенциальным рекламодателям.
Большинство пользователей попадает на определенный ресурс из поисковых систем, вводя в них интересующие их запросы. Поисковые роботы сверяют эти запросы со своей базой данных и выводят оптимальные результаты поиска. Для того чтобы сайт попал в эту базу, он должен быть проиндексирован поисковой системой. В противном случае посетители просто не смогут найти его.
При этом очень важно, чтобы не просто ресурс, но каждая его новая страничка была максимально быстро учтена поисковиком. Оптимально, если она содержит внутреннюю перелинковку, позволяющую не только заносить в базу новый материал, но и по указанным ссылкам обновлять старый
Как проверить индексацию страницы?
Самый быстрый способ — написать в строку поиска команду site:. Такой поиск найдет все проиндексированные страницы сайта. Для того, чтобы просмотреть дату последнего сканирования страницы, напишите в строку поиска cache:. Если вам нужно проверить индексацию конкретной страницы просто скопируйте ее адрес и введи в поиск запрос site:. Этот метод будет работать как в Google так и в Yandex или Bing.
Как проверить индексацию всего сайта
Для проверки индексации сайта нужно выполнить 2 простых шага:
- Узнать сколько страниц на сайте. Для этого просканируйте свой сайт специальными инструментами. Если ваш сайт до 500 страниц вам подойдет бесплатная версия Screaming Frog , если этого недостаточно используйте, бесплатный Site Analyzer. В разделе «HTML» вы увидите общее количество страниц вашего сайта.
- Зайдите в инструменты для вебмастеров или Google Search Console (Что такое Google Search Consol ) откройте отчет «Покрытие» и просмотрите количество страниц в статусе «Без ошибок». Количество страниц в сканере Site Analyzer и страниц в Google Search Console должно приблизительно совпадать. Это, будет означать, что основные страницы сайта сканируются. Если часть страниц попала в группу «Исключено» вы можете изучить причины исключения страниц. В этом же отчете вы можете познакомиться с историей индексации вашего сайта за последние 3, 6 или 12 месяцев.
- Довольно часто в отчете «Покрытие» вы можете увидеть большое количество страниц в статусе «Страница просканирована, но пока не проиндексирована» — это означает, что поисковая система уже получила данные о ваших страницах но пока не обработала их до конца. Так же, страницы могут находиться в этом статусе по причине низкого качества: пустые страницы или страницы с повторяющимся содержанием. Если количество «пока не проиндексированных» страниц не сокращается попробуйте уникализировать, добавить содержание или увеличить количество качественных внешних ссылок на свой сайт.
- Если вам нужно массово проверить индексацию страниц вашего сайта, воспользуйтесь онлайн инструментом https://indexchecking.com
- Хорошая идея проверить свой сайт с помощью инструментов https://en.ryte.com — это поможет вам понять какие страницы закрыты от индексации. А так же, обнаружить страницы на которых есть технические проблемы.
Проверяем не закрыта ли отдельная страница от индексации
Если перед вами появилась задача, проверить запрет индексации конкретной страницы проще всего использовать инструменты для вебмастеров. Скопируйте адрес страницы которую вы хотите проверить и вставьте в инструмент «Проверка URL на ресурсе».
В результате проверки вы получите информацию о запретах индексации
Обратите внимание на информацию о запретах, статусе страницы и канонический адрес
Как добавить новый сайт в индекс поисковиков?
Сообщите поисковой системе о своем сайте в специальном инструменте Google или Yandex. Поделитесь своим сайтом в социальной сети или создайте на него ссылку с другого, уже проиндексированного сайта.
Узнайте больше о работе поисковой системы
Как ускорить индексацию – теория и практика
Давайте разберемся с основными способами ускорения индексации сайта, так сказать в теории и на практике.
Составил карты сайта
Карту сайта формата xml и карту сайта для людей (html) я составил в первую очередь. Карту xml добавил в панель Вебмастера.
Составил правильный robots.txt
Второе, что я сделал – составил файл robots.txt.
Вот он, по-моему, правильный:
Естественно в последних трех строках адрес сайта был заменен на новый.
При проверке в Яндекс.Вебмастере любой страницы нового сайта результат индексации – разрешен.
Минутку внимания 🙂
Постоянное обновление контента
Как и рекомендовал руководитель нашего марафона, контент обновляю ежедневно. Изначально публиковал записи каждый день, потом (на выходных) запланировал публикацию новых статей на неделю.
Статьи тематические, уникальные, объемные, в общем все как Яндекс любит…
Руками осуществляю перелинковку, организован вывод похожих записей в конце поста.
Посты с блога я анонсирую во многие социальные сети: вконтакте, фейсбук, твиттер, сервисы социальных закладок. Подробно обо всем этом (как автоматизировать весь процесс) писал в статье про получение блогом тиц-10.
Анонсы с сайта под РСЯ идут только в твиттер. В другие социальные сети не публикую. Создал для этих целей специальный аккаунт, зафоловил 20 тематических профилей. К сожалению, мой аккаунт пока мало кто добавил к прочтению.
Но надеюсь, что боты поисковых систем твиттер мониторят активно.
Прогон
Дмитрий в своих видео кастах рекомендовал сделать прогон. Планирую сделать его, когда сайт будет проиндексирован. Надеюсь, что ждать уже не долго.
Скрипт от seolib.ru
Во время поиска решения для проверки индексации страниц можно найти сразу несколько онлайновых сервисов, но ни один из них нормальные результаты не выдал. Ни один кроме онлайн скрипта от seolib.ru. Здесь вообще все элементарно просто — на странице в форме вводите ссылки, выбираете проверку индексации страниц в Google и (или) Яндекс, после чего запускаете скрипт.
Через пару секунд начнут появляться результаты в виде удобной таблицы. Проверка показала, то здесь если не 100% совпадение, то очень близкие к этому. Также большим плюсом и экономией времени есть то, что индексация проверяется сразу в двух поисковиках, в отличии от YCCY. Из минусов можно отметить, что бесплатная проверка слегка ограничена в количестве попыток — вы можете ее сделать лишь 5 раз в сутки с одного IP, причем не более 10-ти страниц за раз. Если для вас это важный момент и имеются большие объемы работы. то можно снять ограничение за небольшую плату — 0.001у.е. за 1 страницу. В целом, конечно, скрипт от seolib.ru — очень хорошая разработка.
Дополнительные сервисы
Ради интереса я решил проверить еще несколько онлайн сервисов для проверки. Они помогут проверить сайты конкурентов.
Первым я хочу посмотреть SeoGadget. Помимо простой проверки, за дополнительные деньги, здесь можно узнать проверку позиций по ключевым словам. Посмотрим для начала, как он справляется с обычной индексацией.
Сколько я ни старался, гугл проверка не осуществилась, постоянно вылезает ошибка. В Яндексе же он показывает всего 300 страниц. Эта информация далека от истины.
Далее идет pr-cy.ru. Проверка индексации входит в «Анализ сайта». Выбираем эту функцию и вводим url.
Этот ресурс более близок к реальности. Я настоятельно его рекомендую как для проверки своего проекта, так и для анализа чужих. Тут очень много полезной и достоверной информации.
Ну и последний xseo.in.
Сведения по Гуглу правдивы, а вот Яндекс мне показали неточно.
Ну что ж. В целом – неплохо.
Инструменты проверки поисковых систем
Мы рассмотрели методы проверки каждой конкретной страницы или сайта целиком. А как провести более точный и глубокий анализ? Для этого можно использовать инструменты поисковиков. К примеру, сервис Yandex Webmaster. Здесь можно проверить индексацию страниц, вбив адрес в строку и нажать «Проверить URL». По завершении анализа предоставляется подробная информация по конкретным страницам ресурса.
Вы можете нажать на ссылку «Готово» в строке «Статус», чтобы получить более детальные сведения:
- посещал ли этот адрес бот поисковой системы;
- прошла ли индексация сайта Яндексом;
- когда бот последний раз посещал ресурс;
- статус доступа страницы и пр.
Эта информация очень полезна, так как позволяет определить состояние вашего проекта. Возможно, бот не может проиндексировать страницу, так как она банально недоступна. Рекомендации по решению проблем вы можете получить в разделе «Помощь».
Как проверить индексацию сайта в Гугл? Здесь также есть инструмент для вебмастеров — Google Webmaster. Необходимо зайти в раздел «Индекс Google», выбрать пункт «Статус индексирования» и нажать на кнопку «Расширенные данные».
Здесь доступны подробные сведения:
- состояние ресурса;
- количество проиндексированных страниц;
- количество заблокированных страниц (в том числе недоступных для ботов через robots.txt).
Как узнать, сколько страниц проиндексировано?
Если же тебя интересует не статус какой-то конкретной страницы, а общее количество проиндексированных страниц сайта, ты также сможешь получить эту информацию, задействовав магию собственные навыки обращения с «Яндекс.Вебмастер» и Google Search Console.
В «Вебмастере» долго копаться не придётся. Количество проиндексированных страниц – прямо в сводке.
В Search Console нужно найти пункт «Покрытие» в разделе «Индекс» и кликнуть на него. Во вкладке «Страница без ошибок» (выделена зеленым) будет отображаться количество проиндексированных страниц.
Если у тебя нет возможности обратиться к «Вебмастеру» и Search Console (либо просто лень вводить пароли), воспользуйся одним из альтернативных способов: проверь через спецоператор или сторонний сервис.
Проверка индексации сайта в обоих ПС производится с использованием оператора site. После оператора ставится двоеточие, потом адрес самого сайта – как на примере ниже:
На моем сайте найдено 209 проиндексированных страниц.
В Google это работает точно так же – только количество проиндексированных страниц выводится под поисковой строкой.
Если разница в количестве проиндексированных страниц в двух поисковых системах составляет 30% и более, это повод провести технический аудит сайта и разобраться, не попадает ли в индекс одной из ПС что-то лишнее.
Массовая проверка индексации сайта с применением стороннего сервиса – предпочтительный для меня метод. Я проверяю индексацию с помощью программы a.pr-cy.ru. Хотя я не большой фанат этого сервиса, вынужден признать, что даже бесплатный отчет, который он даёт, позволяет узнать много чего интересного о сайте. Информация об индексировании размещена в блоке «Индексация».
Особенности работы с поисковыми системами
Яндекс и Гугл – два наиболее популярных поисковика в России и СНГ. В основном люди, работающие с информационными проектами, стараются оптимизировать их именно под эти сервисы.
Когда вы только создаете свой сайт, то поисковые системы еще ничего не знают о нем. Поэтому для того, чтобы ресурс попал в поисковую выдачу, вы должны каким-то образом сообщить сервисам о том, что он существует.
Для этого можно использовать два способа:
Способ 1. Разместить ссылку на каких-то сторонних проектах.
В этом случае проект будет проиндексирован максимально быстро. Поисковик посчитает, что ваш сайт полезный и интересный, поэтому он сразу направит роботов для анализа содержимого.
Способ 2. Сообщить поисковикам о ресурсе при помощи специальных инструментов.
В Яндексе и Гугле есть специальные сервисы для вебмастеров. С их помощью вы сможете отслеживать состояние своих ресурсов относительно поисковых систем: смотреть статистику, количество показов, кликов, добавленные или удаленные страницы и т. д.
При добавлении сайта в эти инструменты вы сообщаете поисковикам о том, что проект существует. И если нет никаких запретов через Robots.txt или мета-теги, то он будет проиндексирован и добавлен в выдачу.
Срок добавления сайта в базу данных может быть разным: от нескольких дней до недели. Но обычно с этим не затягивают, особенно если ресурс добавлен в Yandex.Webmaster и Search Console.
Не забывайте, что добавление в базу данных – еще не означает, что материалы сайта сразу будут доступны по определенным запросам. Для этого может понадобиться дополнительное время. Роботы тщательно изучат содержимое проекта, и только после этого статьи будут доступны к показу по запросам.
Если вы решите не открывать ресурс сразу, а подождать, пока он заполнится определенным количеством материалов, то после отправки на анализ может пройти чуть больше времени. То есть, чем больше информации на проекте, тем дольше придется ждать полной индексации.
В среднем между отправкой сайта в сервис и появлением статей в выдаче проходит 1 – 2 недели.
Помимо вышеописанных способов добавления ресурса в поисковую базу, существует еще один, менее эффективный. Вам просто нужно ввести в поисковую строку следующие команды:
- Для Яндекса: Host: Название + site.ru.
- Для Google: Site: Название + site.ru, где site.ru – ваш домен.
Также вы можете попробовать добавить ресурс при помощи автоматических сервисов. Какой будет результат – неизвестно. Но я полагаю, что эти сервисы просто воспользуются командами или размещением ссылки где-либо.
Используем панель Вебмастера
Каждая поисковая система имеет свою панель инструментов, специально предназначенную для вебмастеров. С помощью этой панели можно увидеть общее количество проиндексированных страниц. Рассмотрим на примере самых популярных ПС (Яндекс и Google), как выполнять такую проверку.
Чтобы использовать панель инструментов Яндекс в данном контексте, нужно завести аккаунт (если его еще нет), зайти в панель и добавить в нее свой сайт. Там будет показано общее количество страниц, которые уже проиндексированы.
Для использования панели инструментов Google также нужно обзавестись аккаунтом, чтобы иметь возможность зайти в панель. В нее нужно добавить свой сайт и зайти на вкладку «Состояние / Статус индексирования». Здесь также будет показано количество проиндексированных страниц.
Нередко можно заметить, что панель Вебмастера Google может показать значительно большее количество проиндексированных страниц, чем панель инструментов Яндекс. Представим, что на сайте 70 уникальных страниц, которые проиндексировались. И, скажем, Яндекс насчитал приблизительно такое количество ссылок, а Гугл, например, 210. Получается, что Яндекс показал правильное число, а Гугл в 3 раза больше. Так в чем же дело? А дело в дублях страниц, генерируемых движком WordPress. Такие дубли поисковикам не по душе. Использование robots.txt позволяет игнорировать индексацию дублей страниц поисковыми системами. И если на Яндекс это действует, то с Гуглом в этом плане могут возникать проблемы, так как он может действовать по своему усмотрению.
Есть также специальный сервис Pr-cy.ru, позволяющий получить вебмастерам различные данные по сайтам – в том числе, число страниц, проиндексированных в Гугле и Яндексе. Чтобы узнать эту информацию, нужно посмотреть на две нижние колонки соответствующих поисковых систем.
Что помогает ускорить индексацию сайта
Чтобы страницы быстрее индексировались, нужно придерживаться главных правил:
Регулярное размещение уникальных и оптимизированных статей. Поисковый робот возьмет себе за привычку регулярно посещать тот сайт, на котором с определенной периодичностью размещается качественный, полезный и интересный контент.
Анонсирование о размещении нового контента или полезных обновлениях на сайте через социальные сети. После того, как появилась статья, можно самостоятельно сообщить об этом в социальную сеть с помощью кнопки retweet. Поисковый бот отметит это и зайдет на сайт через социальную сеть значительно быстрее.
Поисковому роботу гораздо проще найти конкретную страницу с помощью ссылки, имеющейся на вашем сайте
То есть, не стоит забывать о важности внутренней перелинковки.
Добавив xml-карту в панель вебмастера, мы даем возможность поисковому боту пройти по ней. Также ее нужно добавить в robots.txt
Полезна и карта сайта (карта для человека), по которой бот отыщет все страницы сайта.
В материале мы рассмотрели основные способы, позволяющие проверить, попали ли страницы сайта в индекс различных поисковых систем. Некоторые из них более эффективные, а какие-то – менее, но каждый из них имеет право на существование и использование.
Читайте далее:
Методы ускорения индексации сайта в яндексе
Seo – проверка индексации текста и веса ссылок тест
Быстрая индексация сайта в Гугле
Проверить картинки на уникальность
Популярные бесплатные CMS системы
Как скрыть персональные данные в поисковых системах?
Способ 2. Язык запросов
Общее количество (приблизительное) проиндексированных страниц сайта можно получить сразу в выдаче Google, сделав такие запросы:
- site:www.example.ru
- site:example.ru
- site:https://www.example.ru
- site:https://example.ru
- site:http://www.example.ru
- site:http://example.ru
, в которых example.ru нужно поменять на свой домен. Без пробелов.
Нажав на кнопку «настройки» внизу поиска можно посмотреть, какие страницы поисковик проиндексировал за час, 24 часа, неделю, месяц.
Второй способ не очень корректный и дает выдачу со всеми страницами, где есть ваш сайт. Включая соцсети, сервисы проверок и т.д. Более точную информацию по количеству проиндексированных страниц в Гугле может дать одно из специальных расширений браузера.
Заключение
Главная цель владельца любого веб-ресурса – добиться индексации всех страниц, которые будут доступны поисковым роботам для сканирования и копирования информации в базу данных. Реализовать эту задачу на большом сайте может быть очень непросто.
Но при правильном комплексном подходе, то есть, грамотной SEO-оптимизации, регулярном наполнении сайта качественным контентом и постоянном мониторинге процесса включения страниц в индекс поисковиков, можно добиться положительных результатов. Для этого мы в этой статье и рассказали о четырех методах проверки индексации сайта.
Знайте, что, если страницы слишком резко начали вылетать из поиска – с вашим ресурсом что-то не так. Но зачастую проблема таится не в процессе индексации, а в самой оптимизации. Желаете быстро индексироваться и попадать в ТОП выдачу поисковых запросов? Предлагайте целевой аудитории контент, превосходящий конкурентов.
Подводим итоги
Зная спецоператоры поисковых систем, можно проверить индексацию сайта, даже не имея доступов к его «Вебмастеру» и Search Console. Достаточно запомнить 3 комбинации:
- URL – проверить индексацию страницы в «Яндекс».
- INURL – проверить индексацию страницы в Google.
- SITE – проверить общее количество проиндексированных страниц (актуально для обоих поисковиков).
Не стоит обходить вниманием и сторонние сервисы, которые способны выполнить подобные операции бесплатно. Например, «Серпхант» делает пакетную проверку в обоих ПС (до 100 адресов за раз), а PR-CY точно определяет количество проиндексированных страниц на сайте
Грех не воспользоваться таким альтруизмом!
