Проверка индексации сайта — как проверить количество проиндексированных страниц онлайн
Если тебе, мой друг, кажется, что поисковик незаслуженно обходит твои страницы вниманием, знай, что я, когда начинал работать над своим сайтом, сидел без трафика почти полгода. Публиковал записи и не понимал, почему же их никто не читает. Только немного поднаторев в SEO, я понял, что «собака зарыта» в Sitemap, который у меня находился в состоянии хаоса.
Тебе я советую не унывать и не переживать преждевременно по поводу того, что ты бесталанный писатель и никудышный блогер. Давай начнём анализ с технических проблем – а если точнее, определим, находятся ли вообще странички твоего сайта в индексе. Я по секрету расскажу тебе о нескольких способах сделать это бесплатно.
Как проверить индексацию страницы в «Яндексе»?
Начнём с «Яндекса», поскольку русскоязычный поисковик должен быть в приоритете в большинстве случаев – за исключением, скажем, тех, когда вы продвигаете услуги для иностранцев. Есть 2 простых способа проверки:
- Через «Яндекс.Вебмастер».
- Через спецоператор поисковой системы.
Первый, безусловно, проще – если твой сайт уже добавлен в «Яндекс.Вебмастер». Если нет, рекомендую не медлить с этим.
В самом «Вебмастере» нужно проследовать по пути «Индексирование» – «Проверить статус URL».
На экране появится поле для проверки:
Вбиваем в него URL и кликаем на «Проверить».
Результат появляется на экране в течение пары секунд. Если пишут, как на скрине выше – мол, обходится и находится в поиске – значит, страница проиндексирована. Справа две полезные кнопки: «Подробнее» и «Отслеживать». С помощью кнопки «Подробнее» можно посмотреть, когда поисковик в последний раз прошёлся по странице.
Чтобы поисковик не тратил краулинговый бюджет зазря и не нагружал сервер попусту, рекомендую настроить на сайте заголовки Last-Modified. Тогда ПС будет переобходить только те страницы, которые были изменены. О том, как правильно настроить заголовки Last-Modified и If-Modified-Since, я рассказывал в этой статье.
Назначение кнопки «Отслеживать» ясно. С ее помощью можно контролировать состояние важных страниц – например, коммерческой, с наивысшим процентом лидогенерации. Если отслеживаемая страница вдруг выпадет из индекса, на почту придёт оповещение об этом.
Второй способ проверки – через оператор поисковой системы. Им можешь воспользоваться, если сайт в «Вебмастер» еще не добавил. В случае с «Яндекс» это оператор URL. Просто вбей в поисковую строку запрос в формате URL:{адрес сайта}. Например:
url:https://kovalev-copyright.ru/
Если поисковик ответит, что «нашёлся 1 результат» – бинго! Значит, страница в индексе.
Если же ответом будет «По вашему запросу ничего не нашлось», это значит, что робот еще здесь не ходил.
Как проверить индексацию в Google?
В Гугл все примерно то же самое – только «Яндекс.Вебмастер» заменяем на Google Search Console, а спецоператор URL – на… другой (не будем бежать впереди лошадей).
В Search Console проверить страницу на индексацию можно при помощи вкладки «Проверка URL» в меню слева.
По результатам проверки на экране должна появиться примерно такая информация:
Обратите внимание: 3 зеленые галочки не являются гарантией того, что все идеально. В блоке «Покрытие», в частности, указано, что страница проиндексирована, но не добавлена в карту сайта. Это сигнал – стоит «маякнуть» программистам, чтобы разобрались, почему страницы не добавляются в Сайтмап автоматически при публикации.
Проверка через поисковую строку и специальный оператор в Google тоже доступна, однако в 2019 году она претерпела изменения.
В марте 2019 года Google упразднил спецоператор info, с помощью которого производилась проверка индексации страницы. Причина – им никто не пользовался.
Сейчас для этой цели можно задействовать оператор INURL. Вообще этот оператор позволяет вывести в SERP все URL, содержащие определенное слово (например, Apple). Но если его использовать в сочетании с URL статьи, результат в выдаче, понятное дело, будет один.
Правда, если проверять, скажем, сводную страницу рубрики сайта, в выдаче по понятным причинам появятся все странички, которые входят в эту рубрику. А если главную – вообще все страницы сайта.
Проверка индексации онлайн с помощью сторонних сервисов
Ладно, разобрались с тем, как проверить индексацию URL единственной страницы через поисковую строку или панели «Вебмастера» и «Серч Консоль». Но что делать, если таких URL куча и требуется пакетная проверка? Ответ – прибегнуть к одному из сторонних сервисов. Вот список тех, которыми я лично пользовался:
Когда я был молодым и глупым, юзал примитивный Raskruty.ru. Тогда он ещё стабильно «чекал» индексацию в Google. Но сейчас у него и двух следующих сервисов есть катастрофический общий недостаток: они проверяют только в «Яндекс».
С «Серпхант» я познакомился позже и, честно говоря, при знакомстве испытал дикий восторг. Скажу сразу, что ребята мне не платят, и заметьте: я здесь нигде не воткнул их партнёрскую ссылку. Просто они делают действительно эффективные SEO-инструменты. Это касается и инструмента проверки индексирования – считаю его лучшим по ряду причин:
- Проверяет и в Google, и в «Яндекс».
- Лимит в 100 УРЛов, когда у аналогов – максимум 50.
- Имеет привлекательный, не допотопный (как у Raskruty) интерфейс.
Вот так выглядит итоговый отчет на «Серпхант»:
С помощью «Серпхант» можно также совершенно бесплатно проверить позиции сайта или частотность запросов. Категорически рекомендую к использованию!
Как узнать, сколько страниц проиндексировано?
Если же тебя интересует не статус какой-то конкретной страницы, а общее количество проиндексированных страничек сайта, ты также сможешь получить эту информацию, задействовав магию собственные навыки обращения с «Яндекс.Вебмастер» и Google Search Console.
В «Вебмастере» долго копаться не придётся – информация об индексации размещена прямо в сводке.
В Search Console нужно найти пункт «Покрытие» в разделе «Индекс» и кликнуть на него. Во вкладке «Страница без ошибок» (выделена зеленым) будет отображаться количество URL в индексе.
Если у тебя нет возможности обратиться к «Вебмастеру» и Search Console (либо просто лень вводить пароли), воспользуйся одним из альтернативных способов: проверь через спецоператор или сторонний сервис.
Чтобы посчитать страницы в индексе в обоих ПС, используют оператор site. После оператора ставится двоеточие, потом адрес самого сайта – как на примере ниже:
На моем сайте найдено 209 проиндексированных страниц.
В Google это работает точно так же – только информация о количестве страниц в индексе выводится под поисковой строкой.
Если разница в количестве проиндексированных страниц в двух поисковых системах составляет 30% и более, это повод провести технический аудит сайта и разобраться, не попадает ли в индекс одной из ПС что-то лишнее.
Массовая проверка индексации сайта с применением стороннего сервиса – предпочтительный для меня метод. Я проверяю индексацию с помощью программы a.pr-cy.ru. Хотя я не большой фанат этого сервиса, вынужден признать, что даже бесплатный отчет, который он даёт, позволяет узнать много чего интересного о сайте. Информация об индексировании размещена в блоке «Индексация».
Подводим итоги
Зная спецоператоры поисковых систем, можно проверить индексацию сайта, даже не имея доступов к его «Вебмастеру» и Search Console. Достаточно запомнить 3 комбинации:
- URL – проверить индексацию страницы в «Яндекс».
- INURL – проверить индексацию страницы в Google.
- SITE – проверить общее количество проиндексированных страниц (актуально для обоих поисковиков).
Не стоит обходить вниманием и сторонние сервисы, которые способны выполнить подобные проверки бесплатно. Например, «Серпхант» делает пакетную проверку индексации страниц в обоих ПС (до 100 адресов за раз), а PR-CY точно определяет число проиндексированных страниц на сайте. Грех не воспользоваться таким альтруизмом!
Часто ли ты проверяешь индексацию страниц? И с какой целью? Поделись советом, какой из методов проверки наиболее точный, в комментариях!.
Полезен ли был этот пост?
Кликни на звездочку, чтобы оценить его!
Submit RatingСредний рейтинг / 5. Итог:
Еще никто не проголосовал :((
Статьи по теме
Как узнать проиндексирован ли сайт в Яндекс: бесплатно и быстро
Доброго времени суток, уважаемые читатели моего блога. Каждому разработчику (начинающему и не очень) важно, чтобы его сайт как можно скорее был проиндексирован в поисковиках. Ведь, если странички нет в Яндексе или Гугле, то найти ее практически невозможно. Недавно я рассказывал о том, как зарегистрироваться в поисковых системах.
Без этого можно с таким же успехом писать статьи и оставлять их в папке на рабочем столе. Но как узнать что ваш блог действительно проверили и когда этот вопрос становится менее актуальным для разработчиков?
Сегодня я подробно расскажу вам о том, как узнать проиндексирован ли сайт в Яндекс. Вы научитесь мгновенно понимать видят ли ваши страницы другие пользователи, что может этому препятствовать и как эффективно устранить проблемы.
Я научу вас быстро отслеживать информацию о «неподходящих» публикациях, чтобы не тратить время и деньги понапрасну.
Приступим? Но для начала.
Когда и зачем следить за информацией о индексации
Всех новичков заботит проверка собственного электронного ресурса. Поисковик может долгое время не посещать портал, а запретный плод сладок и желанен. Хочется как можно скорее увидеть свое детище на первом месте хоть по какому-нибудь запросу. Со временем эта мечта воплощается, а интерес к индексации угасает. Очень зря.
После первой проверки поисковик периодически заглядывает по уже знакомому URL, чтобы узнать новости и произвести переоценку. Существуют разные факторы ранжирования, к примеру, тИЦ и PR. Относительно них страницам присваивается определенное место в поисковой выдаче, но есть и факторы, которые мешают новым публикациям появляться в поисковиках.
Если странички нет в выдаче, то это означает, что вы потратили время и деньги (если вы заказывали статью у копирайтера) зря. В чем может быть проблема? Фильтр АГС, дублирование контента, тошнота или уникальность текста, технические сбои на хостинге или иной глюк в исходном коде. Причин может быть миллион.
Если вы знаете сколько всего статей на вашем портале и видите, что не все они находятся в выдаче, то нужно производить полную проверку, чтобы выявить какая именно неприятность приключилась на сайте. А они, как правило, есть практически у всех, вне зависимости от того, насколько вы подкованы в веб-строительстве.
Как узнать сколько всего страниц на портале
Итак, произвести анализ можно несколькими способами.
Если ваш портал на ВордПресс, то узнать точное количество страниц можно элементарно. Для этого достаточно зайти в панель управления. Сразу же, вам покажут число записей.
Очень просто можно узнать сколько страниц у вас в блоге, если на нем есть Sitemap. Я уже писал статью о том, как можно быстро ее добавить и зачем она вообще нужна. Если говорить в двух словах, то это очень удобное содержание. Которое хорошо сказывается и на поведении пользователей, и на ранжировании портала.
- Анализ сайта и проверка на ошибки.
Еще один удобный способ, который поможет не только понять какие проблемы есть на вашем блоге, но и поможет разобраться со всеми этими недочетами, сервис Seoto.me.
Он поможет избавиться от битых ссылок, картинок, осуществлять комплексную проверку уникальности, тайтлов, описания и так далее. Заинтересовались? Можете прочитать статью о том, как проверить электронный ресурс на ошибки и быстро их устранить или посмотрите этот ролик.
Сколько страниц проиндексировано
Отлично, если вы знаете сколько страниц есть на вашем сайте, то без труда можете понять сколько из них находится в поисковой выдаче. В идеале, их должно быть ровно столько, сколько и публикаций (плюс главная и страницы рубрик).
Если количество меньше, значит на сайте есть проблемы, которые нужно будет выявить и решить. Для начала я расскажу о простом способе проверки. Он не очень точный, удобный и красивый, но зато быстрый. Идеально подходит для первого раза.
Ручной метод
Откройте Яндекс и введите в поисковую строчку URL:доменное-имя-сайта*.
Естественно вместо «адрес-вашего-сайта» нужно ввести ваш url. Например, вот так. Мой тестовый портал совсем небольшой, но в выдаче нашлось аж 9 результатов. Это замечательно.
Вебмастер
Еще одна очень удобная штука – Яндекс.Вебмастер. Благодаря этому сервису вы можете узнать много полезного, уточнить кое-какую информацию, чтобы повысить свои шансы на первое место в поисковике, заставить Яндекс скорее индексировать свой сайт и, конечно же, проверить страницы.
Мой тестовый сайт еще не подключен к этому сервису. И статьи на тему подключения в моем блоге еще нет. Однако, я думаю, что совсем скоро эта ситуация изменится. Подписывайтесь на рассылку и узнавайте первыми о всем, что происходит с моим тестовым сайтом и с легкостью выполняйте важные задачи.
Как проверить конкретную страницу вручную
Если вам хочется узнать детальную информацию о конкретной странице со своего или чужого сайта, где вы, к примеру, купили ссылку, можно воспользоваться самим Яндексом. Это быстро и просто.
Копируете url и вводите в поисковую строчку Яндекса без каких-либо изменений.
На первом месте должен оказаться тот же URL, который вы вводили в поисковую строчку. Если этого не происходит, значит она не проиндексирована.
Теперь вы знаете как проверить проиндексирован ли сайт и без лишних телодвижений проверить портал на ошибки, а также устранить их.
В идеале у вас должен быть подключен Яндекс.Вебмастер, чтобы не морочиться с проверкой заново. Заходите и периодически проверяете не увеличилось ли количество исключенных страниц. Как только видите, что появились проблемы, заходите на www.seoto.me и он подсказывает чем вызвана проблема. Решаете ее и наслаждаетесь жизнью в интернете.
Ну вот и все. Подписывайтесь на рассылку и узнавайте больше. До новых встреч и удачи в ваших начинаниях.
Как проверить индексацию конкретной страницы и всего сайта в Яндексе и Google?
Индексация — процесс добавления сведений о сайте роботом в базу данных, которая потом используется для поиска. Бот индексирует ссылки, изображения, видео, и другие элементы на сайте. Если сайт или отдельная страница не проиндексированы, то поисковая система просто не их увидит. Рассказываем как проверить индексацию.
Яндекс
Проверка индексации страницы
Необходимо в строку поиска Яндекс написать следующий запрос:
url:domain.ru/page/
domain.ru/page/ — адрес проверяемой страницы. Важно! Вводить необходимо адрес с www, если страницы на сайте открываются с www, и без www, если на сайте они без www. Если вы не уверены — проверьте оба варианта.
url: — оператор для проверки индексации страницы.
Если в результатах поиска страница найдена, значит она проиндексирована данной поисковой системой. Пример.
Если по запросу ничего не найдено, страница не проиндексирована
Проверка индексации всего сайта в Яндексе
Для проверки индексации всего сайта в Яндекс необходимо использовать следующий запрос:
url:domain.ru/*
domain.ru — доменное имя проверяемого сайта.
url: — оператор для проверки индексации страницы.
* — оператор «любой символ».
Важно! Вводить необходимо адрес с www, если страницы на сайте открываются с www и без www, если на сайте они без www. Если вы не уверены — проверьте оба варианта.
В результате получаем список проиндексированных страниц, а справа от результатов выдачи написано, сколько всего страниц данного сайта находится в поиске. Пример.
Иногда данный запрос не работает и вместо него можно использовать оператор site:domain.ru
Проверка индексации страницы
Необходимо ввести в строку поиска Google запрос:
info:domain.ru/page
domain.ru/page — адрес проверяемой страницы.
info: — оператор для проверки индексации страницы.
Если страница проиндексирована, значит в результатах поиска будет ссылка на проверяемую страницу. Пример.
Проверка индексации всех страниц сайта в Google
Для проверки индексации страницы в поисковой системе Google необходимо ввести в строку поиска запрос:
site:domain.ru
domain.ru — доменное имя сайта.
site: — оператор проверки индексации всех страниц сайта.
В результатах поиска появится список страниц в поиске, а под поисковой строкой общее количество проиндексированных страниц. Пример.
Проверка индексации сайта в Яндекс и Google
При продвижении любого сайта я обязательно и регулярно делаю проверку и анализ его индексации в поисковых системах яндекс и google. И в этой статье я покажу способы, как сделать это быстро и максимально просто.
Яндекс вебмастер
Заходим в Яндекс вебмастер и выбираем разделы Индексирование — Статистика обхода.
Если страниц не много, то я проверяю их вручную. В столбце “Стало” находятся проверяемые статусы урлов. Нужно проанализировать, сравнить их со статусами “Было”, возможно, произошли какие-то изменения на продвигаемой странице и ее выкинуло из индекса. Или наоборот, мусорная страница попала в выдачу. В общем это все нужно проанализировать и исправить, если найдены ошибки.
Если сайт очень большой, то лучше сделать выгрузку отчета в Excel. В самом низу есть кнопка “Скачать таблицу XLS”.
И опять проанализировать и сравнить текущий индекс (currentHttpCode) с предыдущим (prevHttpCode). Если на каких-то важных страницах код статуса отличный от 200, то нужно смотреть, в чем дело, почему такое произошло. В идеале, у всех продвигаемых страниц должен быть код ответа 200.
Также я проверяю страницы в поиске и исключенные страницы на подозрительные предметы, которые нужно удалить или наоборот вернуть в индекс.
Для этого также нужно зайти в раздел Индексирование — Страницы в поиске.
И проверить разделы “Все страницы” в индексе и “Исключенные страницы”.
В разделе “Все страницы” я проверяю не попал ли в индекс какой мусор, который нужно удалить. А в разделе “Исключенные страницы” проверяю не выкинул ли робот важные страницы, которые должны быть в индексе.
Google Search Console
В новой версии гугл серч консоль есть хорошая статистика по представлению сайта в поиске. Для перехода в нее нужно в левом меню нажать Индекс — Покрытие.
И вот в таком виде консоль предоставляет отчет по индексированию сайта. Здесь представлены 4 раздела, в которых содержится информация по ошибкам индексирования, страницам без ошибок в поиске и исключенным страницам.
И по каждой ошибке можно посмотреть подробно, что за страницы исключены из поиска и почему, а также посмотреть все страницы без ошибок, нет ли там каких-то мусорных и ненужных страниц в индексе.
И опять же принять меры по удалению или наоборот возврату страниц в индекс гугла.
Операторы
Следующий способ проверить индексацию сайта в яндекс и гугл, это вбить соответствующие операторы.
Для яндекса оператор будет host вот в таком виде.
Яндекс покажет все страницы сайта, которые есть в индексе и вручную можно проверить, все ли в порядке с сайтом, возможно, в поиск попали мусорные или технические или служебные страницы, которые там быть не должны. Или наоборот, нет страниц важных, которые по каким-то причинам выпали из поиска.
Для google оператор site выглядит вот в таком виде.
Так вы сможете посмотреть все страницы сайта, которые есть в поиске гугла и опять же проанализировать, нужны ли там все страницы или нет.
Вручную вбить страницу
Если нужно проверить одну или несколько страниц, то достаточно просто вбить их в поиск и посмотреть, есть ли она в индексе или нет.
Вот так выглядит страница, которая ЕСТЬ в индексе.
А вот этой страницы в индексе нет.
Сервисы и плагины
Ну и наконец, сервисы и плагины тоже помогают узнать индексацию сайта. Я пользуюсь плагином RDS Bar. Здесь можно узнать, сколько страниц в индексе Яндекс и Google. Также можно перейти в поиск по ссылке и посмотреть более подробно.
А вот еще например сервис raskruty.ru/tools/index/
Здесь правда ограниченное количество проверок, и я ими не пользуюсь, так как хватает вполне инструментов, описанных выше.
Ошибки индексации
Теперь давайте разберем, почему сайт или отдельные страницы могут не индексироваться.
Вот самые распространенные причины:
- 404 код ответа — самая частая ошибка. Страницу например удалили с сайта и код ответа стал соответственно 404. Бывает такая ошибка из-за технических сбоев на сайте. То есть страницы существуют, но отдают 404 ответ сервера. Решается эта проблема восстановлением удаленной страницы или программным исправлением кода ответа на 200.
- 301 код ответа тоже частая ошибка. Целевая страница перенаправляет на другую не целевую страницу, в итоге в индексе оказывается не нужный документ. Исправляется эта ошибка снятием 301 редиректа, чтобы целевая страница отдавала 200 код ответа.
- 500 или 502 код ответа — проблемы с сервером. В этом случае нужно обратиться к хостингу и узнать, почему произошла такая ошибка. Они должны устранить ее, чтобы ответ был 200.
- Noindex — запрещен к индексированию. Такое тоже бывает, что по ошибке или невнимательности, например, программист поставит тег noindex для страницы, и она выпадает из индекса. Исправляется ошибка удалением noindex из кода.
- Закрыто в robots директивой disallow. Также случается, что по ошибке закрывают страницу или раздел в роботсе. Исправляется ошибка удалением директивы из роботса.
- Скорость загрузки низкая. Если у вас херовый хостинг или сервер, то возможно, что скорость загрузки сайта будет очень низкая и страницы могут не попадать в индекс. Исправляется проблема сменой тарифа хостинга или самого хостинга.
- Новый сайт также может долго не индексироваться, в гугле даже бывает, что месяц страницы нового сайта входят в индекс. И еще такая штука — если у домена была негативная история, то сайт может вообще не индексироваться. Поэтому перед покупкой домена нужно обязательно проверять его историю.
Вот и все способы проверки и анализа индексации сайта в яндекс и гугл. Если вам понравилась статья, если она была полезной, то поделитесь ею в соц сетях с друзьями, а также пишите ваши вопросы и комментарии.
Загрузка…