▷ Каким образом можно узнать сколько страниц проиндексировано в Google? — спроси Inweb, вопрос №107

Есть ответ Дата вопроса: 13.11.2019, 15:05 Каким образом можно узнать сколько проиндексированных страниц у гугл в базе по сайту? Я ввожу запрос site:site.ru и показывает 523 результата, а если пройтись по страницам пагинации до последней, то показывает 299. Почему так происходит? Где четкая цифра? Автор: Lola3 Просмотров: 1022 Категория: SEO Оцените вопрос Рекомендуйте нас друзьям Подписаться на уведомления Отписаться от уведомлений

ua/blog/answers/107/#answer-1245″ data-best-answer=»0″ data-spam=»0″ data-private=»0″ data-rating=»6″>

Частный ответ Рейтинг автора 188 Дано ответов 77 Рейтинг ответа Влад Наумов Head of SEO Добрый день. Для того чтобы узнать сколько страниц проиндексировано поисковой системой лучше воспользоваться инструментам для вебмастеров. Выдача поисковой системы Google не позволяет полностью ознакомиться со всеми проиндексированными страницы и цифрам, которые написаны не стоит верить. Особенно если на сайте очень много страниц. В выдаче показывается не совсем точное количество проиндексированных страниц. Как посмотреть количество проиндексированных страниц в Search Console и Яндекс Вебмастер В Search Console необходимо зайти в раздел «Покрытие» -> «Страницы без ошибок». Также не стоит забывать, что страницы могут быть ещё в разделе «Проиндексировано, несмотря на блокировку в файле Robots.txt«. В Яндекс вебмастере все проиндексированные страницы сайта можно найти в разделе «Индексирование» -> «Страницы в поиске». В случае, если хотите удостовериться на 100% есть страница в индексе поисковой системы или нет — пропишите в поисковую строку запрос: url:url-адрес страницы Дата сообщения: 13.11.2019, 18:55 Похожие вопросы Для того чтобы увидеть комментарии, в вашем браузере должен быть включен JavaScript.

Для того чтобы оставить вопрос, необходимо войти используя свой аккаунт одной из социальных сетей.

Сколько страниц проиндексировано поиском — как проверить и узнать

11 февраля 2022

Редакция Appfox

Поделиться

Время чтения: 6 минут

Индексация — проверка поисковыми роботами сайта и отдельных страниц. Во время индексации идёт обработка изображений, статей, видеофайлов и тд.

Индексация нужна для того, чтобы сайт был виден пользователям в поисковой выдаче.

Вначале робот сканирует сайт и осуществляет проверку. Если на ресурсе все корректно и нет ошибок, то идет добавление страниц в индекс.

Для чего нужна проверка?

Очень важно, чтобы вебмастер проверял индексацию страниц. Это нужно для того, чтобы проводить анализ алгоритма поисковых роботов при проверке (как быстро они проверяют, в какой последовательности) и своевременно устранять ошибки, если страницы не индексируются.

При увеличении количества страниц в поиске, сайт будет ранжироваться по большему количеству запросов, и, следовательно, подниматься в поисковой выдаче.

У каждой поисковой системы свои алгоритмы проверки и свои поисковые боты, поэтому SEO-специалистам важно верно настроить индексацию, чтобы пользователь быстрее увидел сайт.

Ручная проверка через оператор site:

Ручной способ проверки является самым быстрым. Нужно ввести в строку поиска site:адрес сайта.

Например: site:alohatur.ru

В поиске будут показаны все проиндексированные страницы этого сайта. Если нужно проверить только одну страницу, то также нужно ввести ее адрес после команды site.

В Яндекс и Google можно поставить нужный диапазон дат и посмотреть индекс за определенный период.

Иногда количество проиндексированных страниц может отличаться в зависимости от того, через какую поисковую систему осуществлялась проверка. Это может означать, что у сайта какие то проблемы, и он попал под фильтр в одном из поисковиков.

Также в поисковой системе Google не всегда показываются все проиндексированные страницы. Кроме того, в поиске могут отобразиться неиндексируемые страницы, запрещенные в robots.txt, на которые есть внешние ссылки.

После проверки нужно сопоставить количество проиндексированных страниц с реальным количеством на сайте.

Например, если страниц 20, а проиндексировано 10, это означает, что поисковый бот не видит половину сайта.

Вебмастера поисковых систем Yandex и Google

Осуществлять проверку индексирования нужно по каждому поисковику.

1. Индекс Яндекса.

Проверка осуществляется через панель Яндекс. Вебмастер. Количество проиндексированных страниц проверяется в разделе страницы в поиске. Можно сделать выгрузку со статусами.

2. Индекс Google.

В данной поисковой системе проверка индексации ведется через Google Search Console.

В Google можно увидеть проиндексированные страницы в разделе статус индексирования. Из-за применения фильтров данные не всегда точные, поэтому есть другой способ проверки — отчет “Файлы Sitemap”. Здесь можно посмотреть точное число индексируемых страниц, но только если они добавлены в файлы sitemap.xml.

Сервисы и плагины

С помощью различных сервисов и плагинов проверка осуществляется автоматически, для этого не надо открывать поисковую систему и вводить вручную адрес. Самые популярные плагины:

1. SEO Magic

Показывает, сколько страниц проиндексировано в Яндексе и Google. Через него можно сразу переходить в поисковик. Скачать можно через Google Chrome.

2. RDS bar.

Проверяет на индекс отдельные страницы и весь сайт.

Есть платная и бесплатные версии.

3. Проверка индексации.

Из файла нужно переместить ссылку на панель закладок, затем открыть нужный сайт и нажать на эту закладку. После этого откроется ещё одна вкладка с данными о выдаче.

Из сервисов самыми популярными являются:

1. https://en.ryte.com — проверить, какие страницы закрыты от индексации.
2. Netpeak Spider — производит сканирование всего сайта. Дает информацию о метатегах, заголовках, редиректах, внутренних и внешних ссылках.
3. Netpeak Checker — сюда загружаются данные из Netpeak Spider и идет только проверка на индексирование.
4. https://xseo.in/indexed — помимо проверки в поисковых системах Яндекса и Гугла, идет проверка в поисковой системе Bing.

Проверка индексации — важный этап оптимизации сайта. Все страницы должны отображаться корректно в поисковой выдаче для успешного продвижения ресурса. Мы рассмотрели несколько методов проверки.

Выбор того или иного способа зависит от масштаба работ (например, ручной используется, чтобы быстро проверить несколько страниц) и глубины (проверка в каждом поисковике или только в одном и тд).

В студии AppFox можно подать заявку на программирование, создание игр или заказать разработку приложений https://appfox.ru и получить бесплатную консультацию по ценам и услугам.

Удаление страниц из Яндекс Турбо · The New Leaf Journal

В этом посте я расскажу читателям, как я удалял устаревшие «Турбо-страницы» для нашего сайта из Яндекса, поисковой системы с собственным индексом и сканером, который в основном используется в Россия и некоторые другие части бывшего Советского Союза.

Содержание

• Использование Яндекса
• Настройка Яндекс Турбо
• Отключение Яндекс Турбо в 2022 году
• Обнаружение проблемы Яндекс Турбо
• Яндекс предупреждает меня, что мои Турбо-страницы не включаются в результаты поиска
• В RSS для Яндекса Турбо есть ответ
• Служба поддержки Яндекса
• Как выглядит лента удаления?
• Reflections

Наше использование Яндекса

Вернуться к индексу

Яндекс, который можно приблизительно назвать русской версией Google, предлагает англоязычные инструменты для веб-мастеров для своей поисковой системы. Я обнаружил этот факт примерно в то время, когда начал бегать The New Leaf Journal еще весной 2020 года. Наше оригинальное SEO-решение, Yoast SEO, позволяет легко подтвердить право собственности на сайт для порталов для веб-мастеров Google, Bing и Яндекс. Моим приоритетом была проверка нашего сайта с помощью Google и Bing, но я также проверил наш сайт с помощью Яндекса по двум причинам:

1. Это было легко сделать; и
2. В то время DuckDuckGo черпала часть результатов из поискового индекса Яндекса.

Когда я проверил с помощью Яндекса, у меня сложилось впечатление, что это может помочь нам появиться в результатах поиска DuckDuckGo. Вероятно, это предположение было в основном ошибочным. Даже когда DuckDuckGo вытянула около результатов из поискового индекса Яндекса, он никогда не смешивал результаты Яндекса с результатами из Bing, основного источника DuckDuckGo. Таким образом, вполне вероятно, что мои усилия по проверке нашего сайта в Яндексе практически не сыграли никакой роли в нашем появлении на DuckDuckGo.

Еще в октябре 2020 года я написал статью о своем опыте работы на портале Яндекса для веб-мастеров. В ней я изложил точку зрения английского веб-мастера на инструменты Яндекса. Одна вещь, которую я отметил, заключалась в том, что Яндекс не торопился индексировать Журнал «Новый лист» . Для достижения своих целей я включил функцию под названием Яндекс Турбо. Что такое Яндекс Турбо? Читай дальше что бы узнать.

Настройка Яндекс Турбо

Вернуться к оглавлению

Яндекс описывает Яндекс Турбо следующим образом (см. оригинал):

Турбо-страницы — это облегченные версии страниц, которые быстро открываются даже при медленном интернет-соединении.

Но как они работают? Мы читаем дальше, чтобы узнать больше…

Эти страницы загружаются примерно в 15 раз быстрее, чем их исходные версии. Для достижения такой скорости мы используем макет страницы, оптимизированный для мобильных устройств, и сетевую инфраструктуру Яндекса: данные Турбо-страницы хранятся на серверах компании.

В 2020 году моей целью было проиндексировать The New Leaf Journal как можно больше мест. В то время у меня сложилось впечатление, что добавление нашего сайта в Яндекс Турбо поможет Яндексу (я не уверен, насколько это предположение было верным). Хотя The New Leaf Journal не был самым эффективным сайтом в 2020 году из-за того, что мы тогда использовали дешевый виртуальный хостинг, я не особенно беспокоился о производительности. Я просто хотел, чтобы меня проиндексировали.

Единственный способ заставить Яндекс создать «Турбо» страницы для сайта — это накормить его специальными Турбо RSS-каналами. Как я объяснил в своей статье 2020 года, я использовал плагин WordPress под названием RSS для Яндекс Турбо. Хотя весь пользовательский интерфейс на русском языке, он легко читается благодаря машинному переводу и очень прост в настройке. Я использовал плагин для создания Яндекс Турбо-фидов и ввел фиды в соответствующие поля на портале Яндекса для веб-мастеров. Все работало именно так, как ожидалось, и Яндекс принял наши фиды. Я снимаю шляпу перед Флектором, разработчиком плагинов, за то, что он сделал что-то достаточно простое для меня, когда я действительно не имел четкого представления о том, что я делаю.

Отключение Яндекс Турбо в 2022 году

Вернуться к оглавлению

Весной 2022 года я решил отключить Яндекс Турбо. мало трафика с яндекса. Кроме того, DuckDuckGo приостановила свои отношения с Яндексом в начале 2022 года из-за вторжения России в Украину, что сводит на нет одну из причин того времени, которое я потратил на включение нашего сайта в индекс Яндекса.

Более того, у меня были проблемы с работой Яндекс Турбо. Я лучше понимал, как работает Turbo в 2022 году, чем в 2020, и в целом мне не нравится идея, что наш сайт будет обслуживаться третьими сторонами (обратите внимание, что мы никогда не использовали AMP или CDN, и мы не использовали третьи стороны). -партийные шрифты с октября 2020 г.). Более того, пока RSS для Яндекс Турбо — это легкий плагин, который не оказывает заметного влияния на производительность, я бы предпочел не иметь плагинов, которые нам особо не нужны. Я уверен, что Яндекс Турбо имеет смысл для многих сайтов, особенно для тех, которые сильно зависят от Яндекса в плане рефералов, но для нас в этом мало смысла.

Я удалил наши Турбо-каналы с портала веб-мастеров Яндекса, а затем удалил плагин. Теперь, если на первый взгляд вы думаете, что это звучит так, как будто я сделал это правильно, вы ошибаетесь. Я не сделал это правильно. Если бы я только прочитал мелкий шрифт в плагине, я бы сделал это правильно. Что я сделал не так? Перенесемся примерно на 10-11 месяцев вперед, в январь 2023 года.

Обнаружение проблемы с Яндекс Турбо

Вернуться к оглавлению

По какой-то причине Яндекс периодически отзывает привилегии веб-мастера — я предполагаю, что причиной является неиспользование учетной записи веб-мастера. Я один раз продлевал свои привилегии, но где-то в 2022 году я их продлил. Это мало на что повлияло — в 2022 году было пару месяцев, когда мы получили приличное количество рефералов Яндекса, и он занял 5-е место в нашем поиске. реферер двигателя несколько раз.

В середине января 2023 года Bing без объяснений и апелляций внес The New Leaf Journal в черный список из результатов своего веб-поиска (как ни странно, не из результатов поиска изображений). Я бы сказал, что DuckDuckGo последовал этому примеру, но, поскольку DuckDuckGo — это не более чем интерфейс Bing, возможно, правильнее будет сказать, что его притащили с собой. Более того, наш четвертый лучший реферер поисковой системы, Brave Search, похоже, попал в черный список Bing, хотя New Leaf Journal статьи все еще можно найти в Brave.

Потеря наших вторых и третьих по величине рефереров и четвертый по величине реферер становятся неэффективными для The New Leaf Journal . (Примечание: Google с большим отрывом является нашим крупнейшим поисковым реферером, и мы не заметили никакой разницы в нашей производительности Google после внесения в черный список Bing.) Яндекс, однако, не внес в черный список The New Leaf Journal . Меня осенило, что существует ненулевая вероятность того, что Яндекс теперь может претендовать на то, чтобы стать нашим вторым по величине поисковым реферером. Помня об этом, я решил повторно проверить наш сайт, чтобы снова получить доступ к инструментам Яндекса для веб-мастеров.

Я провел базовую чистку своей учетной записи веб-мастера Яндекса и проверил, нет ли ошибок или предупреждений, которые я мог бы устранить, чтобы убедиться, что у нас хорошая репутация в поисковой системе, которая не заблокировала нас. У нас не было серьезных проблем, но я нашел время, чтобы понять несколько предупреждений и примечаний, которые у нас были (намного лучше, чем в 2020 году), и решить их.

19 января 2023 года я получил своеобразное уведомление от Яндекса.

Яндекс предупреждает, что мои Турбо-страницы не попадают в результаты поиска

Вернуться к оглавлению

19 января 2023 года я получил следующее уведомление от Яндекса:

Уведомление от Яндекс Вебмастер.

С одной стороны, хотелось бы надеяться, что наши Турбо-страницы не попадут в результаты поиска. Как я уже объяснил, я удалил наши источники Turbo в начале 2022 года и одновременно прекратил вывод данных Turbo. Почему они должны быть в результатах поиска?

Однако в уведомлении мне было указано, что Яндекс немного запутался в статусе моей турбо-страницы. Я решил провести расследование.

Я зашел в раздел Турбо-источники данных в Яндексе и убедился, что Турбо-источников у нас нет. Однако в Яндексе осталось впечатление, что у нас несколько сотен Турбо-страниц. Это, конечно, было проблемой, потому что Яндекс не мог найти указанные страницы. Конечно же, я подтвердил, что у Яндекса все еще были URL-адреса Турбо-страниц почти для всех наших статей до того, как я удалил наши Турбо-фиды в начале 2022 года.

Страница «Источники данных» содержала ссылку «Удалить Турбо-страницу». Это вызвало текстовое поле, в которое я мог вставить URL-адрес. Поскольку у нас было около 500 URL-адресов, казалось, что это будет раздражать — но почему бы не посмотреть, что произошло? Я попробовал URL-адрес, и Яндекс не смог его удалить. Это было, конечно, потому, что Яндекс не мог удалить Турбо-страницу, которую он не мог загрузить.

Итак, как именно я могу удалить URL-адреса Turbo из индекса Яндекса?

Проверил документацию Яндекса по удалению Турбо-страниц. Второй предложенный метод был тем, который я только что попробовал — удаление отдельных Турбо-страниц. Это не сработает, так как Яндекс больше не может загружать страницы из-за того, что я удалил источники данных почти год назад. Второй метод заключался в добавлении кода ко всем уязвимым URL-адресам. Это звучало ужасно в свете того факта, что их было около 500 человек.

Я подумал, есть ли простой выход из трясины. Затем мне пришло в голову, что я могу переустановить плагин, который я использовал, и посмотреть, есть ли у него ответ.

У RSS для Яндекс Турбо есть ответ

Вернуться к оглавлению

Я переустановил RSS для Яндекс Турбо не для того, чтобы снова начать выводить Турбо-каналы, а вместо этого посмотреть, смогу ли я решить путаницу Яндекса. Я использовал Firefox Translate для перевода страницы настроек плагина, которая осталась полностью на русском языке.

О чудо, самая первая страница настроек объяснила как правильно удалить Турбо-ленты:

Мои последние настройки для создания Яндекс-Турбо-ленты удаления в настройках плагина RSS для Яндекс-Турбо.

Настройки поясняют, что для того, чтобы Яндекс очищал URL-адреса, для которых он создал Turbo, вы должны создать новый фид Yandex Turbo, который добавит атрибут «turbo=false» к URL-адресам, которые вы хотите удалить.

Чтобы не было неясности, инструкция к плагину объяснила недвусмысленно:

Это единственный способ заставить Яндекс отключить турбо страницы для вашего сайта.

(Чувак, если бы я это вообще прочитал.)

В настройках RSS для Яндекс Турбо есть два варианта. Первый — удалить выбранные статьи, а второй — удалить все Турбо-страницы. Я проверил оба, хотя и один подойдет. Для избранных статей я скопировал список Турбо-урлов из Яндекса в поле «Список удаленных ссылок» в плагине и создал «мусорную» Турбо-ленту. Затем я отправил этот фид в Яндекс Турбо, который принял его в течение 48 часов. По сути, идея состоит в том, что Яндекс проглотит этот мусорный Турбо-фид и узнает, что соответствующие URL-адреса больше не должны иметь Турбо-страниц.

Я отправил фид и стал ждать.

Служба поддержки Яндекса

Вернуться к оглавлению

После того, как я изменил некоторые настройки в Яндекс Турбо, пытаясь выяснить, как очистить наши старые статьи о Турбо, я получил электронное письмо от службы поддержки Яндекса с вопросом, не было ли у меня какая-то проблема с Turbo, и если они могли чем-то помочь. Из любопытства я объяснил, что больше не использую Turbo, потому что это не нужно для моего сайта, и попросил подтвердить, что я выполнил правильные действия по удалению старых статей Turbo, и если да, то сколько времени займет удаление. Сотрудник службы поддержки быстро ответил, заявив, что он понял, и подтвердил, что я правильно отправил фид удаления. Он посоветовал мне убедиться, что Яндекс Вебмастер указал, что все Турбо-страницы были удалены, прежде чем удалять ленту. Я поблагодарил сотрудника службы поддержки за его или ее быстрый и полезный ответ и уделил немного времени, чтобы оставить положительный отзыв о клиенте.

Как выглядит канал удаления?

Вернуться к оглавлению

Мы больше не выводим нашу ленту удаления Яндекс Турбо, так как Турбо страницы теперь удалены.

Однако я подумал, что было бы интересно показать вам, как это выглядело. В свете того, что в нем было около 500 статей, я просто скопирую фрагмент с первыми пятью статьями, чтобы дать вам представление о том, как это выглядит и как это работает (обратите внимание, в образце нет отступа).

 
<канал>
C125AEEC6018B4A0EF9BF40E6615DD17

<ссылка>https://thenewleafjournal.com
Где листья вечно зеленые
ru
<генератор>

<элемент турбо="ложь">
<ссылка>
https://thenewleafjournal.com/wordpress-resources-page/


<элемент турбо="ложь">
<ссылка>
 
 Об уходе Мори Повича на пенсию 


<элемент турбо="ложь">
<ссылка>
 
 Присоединение к AlternativeTo и повышение до ранга участника 


<элемент турбо="ложь">
<ссылка>
 
 Об отказе от майнинга Dogecoin 〜 Виньетка 


<элемент турбо="ложь">
<ссылка>
 
 Читайте мелкий шрифт — покупка дешевого мини-ПК для домашнего сервера 
 

 

Как видите, фид сообщает Яндексу, что ни один из перечисленных URL-адресов не должен быть в режиме Turbo.

Размышления

Вернуться к оглавлению

Читатели должны извлечь несколько уроков из моей истории.

Во-первых, прочитайте мелкий шрифт . Если бы я внимательно прочитал инструкции к плагину RSS для Яндекс Турбо перед тем, как удалить его и свои Турбо-каналы, у меня никогда не было бы проблем с потерянными Турбо-данными в Яндексе. Хотя я сомневаюсь, что это имело существенное значение, мы бы не хотели путать поисковые системы.

Во-вторых, здесь есть особый урок для администраторов WordPress. Когда вы удаляете функциональность из WordPress, в вашей базе данных часто остаются вещи. На самом деле в самом RSS для Яндекс Турбо такого нет — плагин убирает за собой. Но многие плагины WordPress этого не делают. Недавно я удалил некоторые старые данные из своей базы данных, оставленные плагинами, которые я установил в 2020 году . Урок Yandex Turbo показывает, что это выходит за рамки самого WordPress. Когда вы удаляете какую-либо функцию или функцию, убедитесь, что вы понимаете, как полностью удалить ее, чтобы у вас не возникло проблем позже.

В-третьих, хотя я был впечатлен обслуживанием клиентов Яндекса (особенно по сравнению с полным отсутствием обслуживания клиентов Bing), его процесс удаления старых данных Turbo излишне замысловат. В сценарии, подобном моему, должна быть возможность удалить старые URL-адреса Turbo из панели инструментов для веб-мастеров, не повторяя мои шаги и не создавая для этого целую RSS-ленту. Документация Яндекса по Турбо предполагает, что после того, как вы настроите Турбо-потоки, вы будете удалять только отдельные страницы. Сомневаюсь, что я единственный веб-мастер, который когда-то производил Турбо-каналы, а впоследствии изменил курс, тем более что многие сайты, скорее всего, используют для этой задачи дополнительные инструменты, такие как плагины. Яндекс должен сделать удаление старых данных Турбо более интуитивно понятным.

Наконец, хоть я и сомневаюсь, что у меня будет повод снова установить Яндекс для RSS Turbo, я благодарю Флектора, разработчика плагина, за его прекрасную работу. Как я уже заметил, в самом плагине очень понятно описаны настройки для создания Турбо-потоков и для удаления Турбо-данных. Он также подробно объясняет каждую опцию и то, как она работает. Плагин легкий и полностью убирает за собой. Если вы являетесь администратором WordPress и хотите, чтобы ваш сайт был в Яндекс Турбо, я даю полную рекомендацию RSS для Яндекс Турбо.

Мой веб-сайт исчез из Bing и DuckDuckGo · Джесси Сквайрс

Ранее на этой неделе я обнаружил, что мой веб-сайт больше не индексируется Bing и DuckDuckGo. На самом деле, похоже, что он был намеренно удален из их поисковых индексов. В Bing вместо отображения сообщения «нет результатов» отображается сообщение «Некоторые результаты были удалены» , что очень беспокоит. Примечательно, однако, что поиск Google работает нормально.

Я трижды проверил все конфигурации и настройки своего сервера и веб-сайта — записи DNS, robots.txt , вхождения метатега noindex (их нет) и т. д. Все выглядит нормально. Без вопросов. Нет ошибок. И снова поиск Google работает отлично, что говорит об отсутствии проблем с моей стороны.

* * *

Мой веб-сайт не отображается ни в каких поисковых системах Bing и DuckDuckGo, а поиск по моему имени не дает никаких релевантных результатов. Напротив, мой веб-сайт является первым хитом в Google, когда вы ищете мое имя. Я не из тех людей, которые регулярно ищут свое имя, но я обнаружил проблему, когда пытался найти одну из своих старых записей в блоге. Страница поиска на моем сайте реализована с использованием базовой HTML-формы, которая подключена к функции поиска DuckDuckGo для конкретного сайта. К моему большому удивлению, когда я попытался найти на своем сайте сообщение в блоге, их было 9.0031 нулевые результаты .

Обычно при поиске на моем сайте вы будете перенаправлены на DuckDuckGo с автоматическим поиском <ваши условия поиска> site:jessesquires.com , и вы сможете увидеть все страницы на моем сайте, содержащие ваш поисковый запрос . Я точно знаю, что когда-то это работало.

Вы также можете использовать оператор сайта : , чтобы убедиться, что ваш сайт проиндексирован. Например, site:jessesquires.com . Вы можете видеть, что в настоящее время это дает нулевые результаты, что указывает на то, что сайт вообще не проиндексирован. Чтобы увидеть рабочий пример, мы можем проверить блог Майкла Цая, используя site:mjtsai.com . Таким образом, помимо основной проблемы, заключающейся в том, что сайт больше не индексируется, это означает, что поиск на моем сайте также не работает.

Подобно сайту DuckDuckGo : оператор , Bing предоставляет оператор url: , который указывает, проиндексирован ли ваш сайт. Опять же, мы можем попробовать блог Майкла, используя url:mjtsai.com , что дает ожидаемые результаты. Если вы ищете что-то вроде url:thisIsNotARealWebsite.com , вы увидите сообщение «Нет результатов для…» . Однако при поиске моего веб-сайта вы видите сообщение «Некоторые результаты были удалены» , которое ссылается на эту страницу поддержки о том, как доставляются результаты Bing и почему результаты могут быть удалены. Я не знаю, но это кажется довольно плохим , верно? Мол, мой сайт был удалили?!

* * *

Вам может быть интересно, какое, черт возьми, Bing имеет отношение ко всему этому? (Кроме того, действительно ли люди используют Bing?) В отличие от других крупных поисковых систем, DuckDuckGo не предоставляет никаких инструментов для веб-мастеров, таких как Google Search Console и Bing Webmaster. Таким образом, вы не можете отправлять URL-адреса и карты сайта напрямую в DuckDuckGo, а также не можете запрашивать индексацию страниц. Вместо этого DuckDuckGo получает результаты из различных других источников, включая Bing и, в частности, , а не от Google. Согласно различным онлайн-форумам, лучший способ убедиться, что ваш сайт проиндексирован DuckDuckGo, — это отправить его в Bing и Яндекс.

Таким образом, моя текущая теория состоит в том, что, поскольку мой сайт был (по-видимому) удален из Bing, он впоследствии был удален из DuckDuckGo. Итак, теперь вопрос, на который нужно ответить: почему мой сайт был удален из Bing?

В какой-то момент у меня была учетная запись Bing Webmaster, которую я использовал для отправки своего сайта. Я помню, как тестировал его и видел результаты в Bing, а также в DuckDuckGo, но это было много лет назад. Однако я не знаю, что случилось с моим аккаунтом. Может и удалил, но не помню. Или, может быть, Microsoft удалила его через определенный период времени без активности. Я в основном никогда не входил в него после отправки моего сайта. Если моя несуществующая учетная запись Bing Webmaster действительно была удалена, возможно, это привело к удалению моего веб-сайта из поискового индекса? В противном случае это выглядит как преднамеренное удаление за какое-то нарушение условий Bing? Не имею представления.

* * *

Итак, не имея работающей учетной записи веб-мастера Bing, я решил создать новую. На этот раз я вошел в систему, используя свою учетную запись Google. Bing Webmaster позволяет вам войти в систему с помощью Google и будет удобно импортировать все ваши сайты из Google Search Console. Это привело к тому, что моя старая учетная запись была восстановлена, и мои сайты были готовы к работе. Я повторно отправил свои карты сайта, просканировал сайт, просмотрел отчеты SEO и проверил результаты поиска в Bing Webmaster. Все казалось в порядке.

Мой трафик в Bing довольно низкий по сравнению с Google. За последний месяц Bing сообщает лишь о нескольких кликах и показах, в то время как Google сообщает о более чем 10 000 кликов и более 368 000 показов. Я предполагаю, что это из-за популярности и предпочтений большинства разработчиков программного обеспечения? Я не уверен. В любом случае, все результаты сканирования выглядят нормально, что, по-видимому, указывает на отсутствие проблем с сайтом или способностью Bing его индексировать. На самом деле Bing сообщает, что он успешно проиндексировал сотни страниц моего сайта. Информация о сканировании также относится к 2017 году — так что я не сумасшедший, раньше это работало. Кроме того, все результаты и показатели в Google Search Console выглядят хорошо и указывают на отсутствие проблем.

Но затем я заметил в Bing Webmaster, что с 11 марта все показатели поиска упали до нуля. К сожалению, инструменты для веб-мастеров не предоставляют никакой дополнительной информации или понимания того, почему это произошло. Опять же, теория состоит в том, что мой веб-сайт был намеренно удален из Bing. Я также проверил страницу «Уведомления об удалении авторских прав» в веб-мастере, где вы можете увидеть «URL-адреса были помечены и подлежат удалению из результатов поиска Bing» , и есть ноль 9Перечислены уведомления 0249.

* * *

Это довольно затруднительное положение. Вроде бы все нормально. Тем не менее, по какой-то причине мой сайт был исключен из списка Bing. Я в недоумении. Но, если честно, меня не особо беспокоит Bing — я просто хочу, чтобы мой сайт снова проиндексировал DuckDuckGo.

В отчаянии, чтобы вернуть свой сайт на DuckDuckGo, я опозорился и создал учетную запись веб-мастера поиска в Яндексе. Я отправил туда свои карты сайта, запросил индексацию и т. д. На Яндексе все выглядит хорошо, и сайт: поиск уже дает результаты. Я надеюсь, что данные индексации из Яндекса в конечном итоге попадут в DuckDuckGo.

Тем временем я отправил запрос в службу поддержки Bing Webmaster, чтобы узнать об очевидном удалении моего сайта. Когда я получу ответ, я обновлю этот пост. В противном случае все, что я могу сделать, это ждать и периодически проверять, не начинают ли снова появляться результаты.

Если у вас есть какие-либо советы, пожалуйста, дайте мне знать!

* * *

И последнее. Описанная выше проблема также происходила с другим моим веб-сайтом, hexedbits.com. Поиск Google работал, но не Bing и DuckDuckGo. Однако Bing показал стандартные «нет результатов» сообщение для HexedBits. После отправки URL-адреса и карты сайта в Bing и Яндекс контент с hexedbits.com теперь корректно отображается в Bing, DuckDuckGo и Яндексе. Это действительно заставляет меня задуматься, что могло пойти не так. Надеемся, что проблемы с индексацией jessesquires. com скоро будут решены.

* * *

Все это подчеркивает разочаровывающую непрозрачность поисковых систем и их работы. Бесполезно быть по существу беспомощным, пытаясь отладить и решить проблемы с вашим сайтом, который не индексируется должным образом. Я всегда буду сожалеть о том, что поиск не был основным компонентом самого Интернета, а вместо этого был функцией, которую частные корпорации должны были прикрутить сверху.

Обновить

01 апреля 2022 г.

Хорошие новости! Ну вроде. Я получил ответ от службы поддержки Bing. Они подтвердили, что получили мой отчет и «передали этот запрос команде инженеров».

[Примечание редактора: не первоапрельские шутки.]

Также следует отметить, что Делиса указала, что это может быть связано с алгоритмическими изменениями, которые DuckDuckGo вносит в последнее время, и отметила, что в запросах по темам разработчиков в прошлом заметно отсутствовали некоторые вещи. несколько недель.

Помимо алгоритмических изменений, DuckDuckGo также «приостановил» отношения с Яндексом.

Обновить

20 апреля 2022 г.

Читатель Николас Маганд оставил комментарий о том, что у них тоже возникла та же проблема, и поделился этой записью в блоге: Эксплойт Bing позволяет владельцам веб-сайтов деиндексировать конкурентов . Суть статьи в том, что у Bing несовершенный поисковый алгоритм, который подвергается негативным SEO-кампаниям со стороны злоумышленников.0031 не имеет

. Общая проблема деиндексации вашего веб-сайта из Bing кажется гораздо более распространенной, чем я ожидал.

Повторюсь, мне на самом деле плевать на Bing как таковой — я просто хочу, чтобы мой сайт снова проиндексировал DuckDuckGo. Но, как отмечалось выше, кажется, что лучший (единственный?) способ сделать это через Bing. Сегодня я отправил дополнительное электронное письмо в службу поддержки Bing, чтобы проверить статус моего запроса в службу поддержки.