Страница 404 ошибки — как сделать, примеры красивых дизайнов

Когда я делаю технический аудит, то обязательно проверяю наличие правильной страницы 404 ошибки на сайте. И в этом посте я вам расскажу, что это такое и зачем нужно.

Ошибка 404 страница не найдена (404 page not found) — это такой код ответ сервера, который был принят консорциумом W3C в 1992 году. Клиент (браузер) отправляет запрос серверу через протокол HTTP. А сервер этот запрос обрабатывает и выдает ответ 404.

Что означают эти цифры:

Первая четверка значит, что есть ошибка со стороны браузера — например, пользователь не правильно написал url в адресной строке или страница раньше была на сайте, а сейчас ее уже нет.

Вторые две цифры (0 и 4) означают именно ошибку “Не найдено”, которая относится к группе ошибок 4xx, например, 403 Forbidden (доступ запрещен), 400 Bad Request (неправильный запрос), 401 Unauthorized (не авторизовано) и другие.

Причины, почему возникает страница 404 ошибки:

• У страницы сменился url адрес
• Страница вообще была удалена с сайта
• Пользователь написал адрес с ошибкой
• Сайт недоступен в данный момент
• Сайт вообще больше не работает
• Некачественное интернет соединение

Содержание:

• 1 Страница 404 и SEO
• 2 Правильная страница ошибки
• 3 Несколько примеров

Страница 404 и SEO

Для SEO продвижения сайта важно, чтобы на сайте не было внутренних ссылок на 404 страницы, то есть так называемых битых ссылок. Проверяется это с помощью разных сервисов и программ, самой популярной из которых является программа Xenu’s Link.

Смотрите видео, как пользоваться программой:

Просто загоняете адрес сайта в программу и она находит внутренние битые ссылки на сайте.

В конце краулинга прога формирует отчет, где можно увидеть, есть ли на сайте битые ссылки или нет.

Если на сайте есть такие ссылки (404 ошибка, страница не найдена), то нужно их исправить. Если возможно, то вручную, например, поменять старый неправильный url на новый правильный. Или если страницы нет и она не нужна, то просто удалить с сайта внутреннюю ссылку на нее.

Если же битых ссылок очень много (огромный интернет магазин), то здесь лучше искать программиста, чтобы он убрал все эти ошибки. Также часто бывает, что такие ссылки — ошибки технического плана, тоже устраняются программно.

Правильная страница ошибки

Рекомендации, как сделать правильную 404 страницу для сайта:

• Объясните пользователю, куда он попал, то есть, что эта страница ошибки, и ее не существует. Он должен понять, что находится на нужном сайте, просто не на нужной ему странице. Можно юморнуть, я часто встречал на таких страницах юмор, это вызывает улыбку и уже закрывать сайт не хочется.
• Обязательно нужно добавить ссылки на основные разделы сайта, в том числе и на главную. Пользователь не должен искать, как ему попасть на нужную страницу, вводить опять адрес сайта в строке браузера, иначе он просто уйдет и больше никогда не вернется.
• Сделать строку поиска на странице ошибки. Типа вы не туда попали, а если воспользуетесь нашим поиском, то найдете нужную страницу на сайте и уже попадете, куда хотели попасть.
• Страница 404 ошибки обязательно должна быть выполнена в дизайне сайта. Иначе у посетителя может сложиться впечатление, что он попал совсем на другой сайт, тогда он точно закроет страницу и больше не вернется. А если на вашей странице ошибки будет ваш логотип, название компании, общий фирменный стиль сайта, тогда будет сразу понятно, что посетитель попал на нужный ему сайт, просто не та страница.

В большинстве современных CMS 404 страница уже предусмотрена шаблоном и создавать ее не нужно, можно только сделать настройку, типа заказать новый дизайн или немного поменять верстку в соответствии с рекомендациями выше.

Если же страницы нет, то можно создать ее самостоятельно. Делается это очень просто: в корневом каталоге сайта находите файл .htaccess (если его нет, то нужно создать, просто блокнот файл). Открываете этот .htaccess и в любом месте прописываете с новой строки:

ErrorDocument 404 http://ВАШ_САЙТ/404.php

Теперь и на вашем сайте есть 404 страница.

Несколько примеров

А вот здесь я подготовил для вас примеры красивых страниц 404 ошибки. Возможно, вы здесь найдете что-то интересное для себя и возьмете интересные идеи на внедрение.

Запомните, что ошибка 404, когда вам пишет, что нет такой страницы — это всегда негатив. А нам нужно оставлять о сайте всегда положительные впечатления. Надеюсь, моя статья помогла вам понять, какая должна быть 404 страница, чтобы вы могли ее переделать на позитивный лад.

Ну и напоследок посмотрите мое подробное видео про страницу 404:

P.S. Если вам понравилась статья, то поделитесь ею в социальных сетях, пишите ваши вопросы или комментарии ниже.

Ошибка 404 страница не найдена (404 not found) ➔ что это и как устранить ✔ PROject SEO

В мире нет ничего совершенного и сайты – не исключение. Наиболее болезненной темой для многих владельцев интернет–ресурсов является часто выскакивающая ошибка 404. Либо, как ее называют некоторые, «Страница не найдена». Данная страница кажется на первый взгляд безобидной. В действительности, если ее неправильно оформить, можно потерять не только трафик, но и драгоценных клиентов.

Оглавление:

• Что такое ошибка 404 и с чем ее едят?
• Причины возникновения 404 ошибки
  
• Оформление страницы 404
• Интересная информация
• Ошибка 404 и конвертирующая страница
• Официальные советы от Google и Яндекс
• Способы создания страницы с ошибкой 404
• Типичные ошибки реализации 404 страницы
• Влияние страницы 404 на ранжировку и пользователей
• Способы нахождения и мониторинга 404 ошибки
• Настройка виджетов в популярных CMS
• Как избежать появления 404 ошибки
• Способы устранения 404 ошибки

Данная страница чаще всего появляется, когда посетитель переходит на пустое место на сайте, не заполненное необходимым контентом. Такая страница могла находиться на сайте раньше, но также ее могли удалить, переместить, либо скорректировать URL адрес. В данном случае возникает проблема, когда пользователь, переходя по внешним или внутренним ссылкам, видит всплывающее окно с надписью о несуществующей странице, хотя контент и прочая информация на месте. Но клиенты не попадают на нужный поисковый адрес.

Отчаиваться не стоит, такие ситуации с 404 ошибкой случаются часто. Главное – не паниковать и своевременно использовать свои знания для решения подобной неприятности.

Что такое ошибка 404 и с чем ее едят?

Error 404 not found – это системное сообщение, которое возникает в случаях перехода пользователей на несуществующую страницу сайта. Перед тем, как посетить определенный ресурс, браузер пользователя передает запрос на сервер. А он проверяет документ на работоспособность и выдает системное сообщение о результатах. При исправно рабочей странице система передает невидимый человеку сигнал, называемый 200 ОК, если работа происходит со сбоями, выскакивает традиционный код ошибки 404. Оттуда и традиционное название страницы.

Каждая цифра кода имеет свое собственное значение. Первая четверка может говорить либо о неверно введенном запросе, либо о том, что ответ сервера занимает слишком много времени. число 0 говорит о синтаксической неточности, последняя четверка чисел указывает на конкретный, узкопрофильный тип проблемы.

При идеально работающем сайте такой страницы, с 404 ошибкой, возникать не должно. Но таких случаев – единицы, поскольку обычно на сайтах размещается много информации на разных страницах. Своевременно уследить за работой которых порой не представляется возможным. Сложность также составляет и процесс ручного отслеживания кодов ответа. Для этого существуют специальные ресурсы, которые облегчают задачи владельцам сайтов.

Причины возникновения 404 ошибки

Для начала стоит подробнее ознакомиться с возможными причинами появления 404 ошибки на сайте.

К наиболее частым из них относят:

• битые ссылки, либо ошибка в изначальном URL страницы;
• удаление искомого документа с ресурса;
• некорректный редирект на страницу, сменившую адрес;
• некорректная работа самого сервера.

Если на сайте наблюдается рост количества подобных страниц, необходимо принять комплексные меры по их устранению и оптимизации работы самого ресурса.

Оформление страницы 404

Если страница ошибки оформлена по умолчанию, она станет ненужным грузом для сайта и бесполезной страницей для посетителя. Но если ее грамотно оформить, можно сгладить эмоции посетителей и удержать их внимание к сайту или Интернет-магазину. Помимо прочего, грамотно оформленная страница сможет стать ориентиром посетителю для дальнейших действий на веб-ресурсе.

В основные задачи страницы 404 входят:

• привлечение внимания посетителей;
• подсказка вариантов дальнейших действий;
• объяснение ситуации в лаконичной форме, юмор допускается.

Каждому владельцу сайта (вебмастеру) под силу сделать страницу 404 не только полезной, но и информативной для посетителей. К примеру, если страница – представительство фирмы, можно добавить на нее адрес, контакты и географические координаты офиса. В случае с интернет-магазином актуальным решением будет внедрение поисковой строки. Если обратиться к грамотному вебмастеру, он может настроить страницу 404 таким образом, чтобы она играла роль своеобразного лендинга, разместив на ней ряд коммерчески выгодных предложений.

Такой ход охладит гнев читателя и привлечет его внимание к нужным деталям. Учитывая специфику своего ресурса можно как предложить клиенту целевое действие, так и развлечь его, поднимая настроение и сохранив лояльное отношение.

Интересная информация

Среди вебмастеров существует легенда о том, что первый веб -сервер находился именно в комнате 404. Но в ходе проверок здания CERN такой комнаты обнаружено не было. Мистика или фальсификация фактов – каждый сам волен решать, что это была за история.

Ошибка 404 и конвертирующая страница

Многие новички на специализированных порталах часто задают вопросы о том, как должна выглядеть реально полезная страница с ошибкой 404. Ответ предполагает нахождение любой информации, которая будет интересна читателям. Чтобы достичь такого эффекта, можно использовать следующие приемы:

• переход на основную страницу сайта;
• сообщение о битой размещенной ссылке;
• список наиболее популярных материалов или товаров для магазина;
• форма поиска внутри ресурса.

Некоторые предприимчивые вебмастера добавляют карту поиска и сайта, которая позволяет читателям сориентироваться на месте и выбрать нужный маршрут на ресурсе, экономя свое время и нервы.

Официальные советы от Google и Яндекс

Популярные поисковые системы решили не оставаться в стороне от проблемы, а помочь новичкам советами по оформлению грамотных страниц с 404 ошибкой. Например, Яндекс рекомендует отказаться от использования графики и отдать предпочтение цветам, которые не использовались для оформления прочих страниц ресурса.

Google, напротив, считает, что для психологического комфорта посетителей важно, чтобы страница с ошибкой лаконично вписывалась в общий стиль ресурса. Также Google советует давать возможность пользователям участвовать в улучшении сервиса, например, сообщать разработчикам о возникающей ошибке через указанную форму обратной связи. Также для сохранения позиции в поиске сервис рекомендует исключить идентификацию роботами слов «не найдено».

Способы создания страницы с ошибкой 404

В случаях, когда страница выдает адекватный код работы, но должна выдавать ошибку 404, можно подойти к решению вопроса несколькими вариантами действий. Либо создать страницу самостоятельно, либо обратиться к следующим методам.

С помощью .htaccess

Настройка ошибочной страницы производится через корневой файл сайта. Необходимо создать страницу и поместить ее в новую папку, перед этим продублировав название в формате .htaccess. Далее необходимо прописать в документе строку с определенной командой. С помощью таких простых манипуляций можно заменить путь браузера с пункта «не найдено» на просто отсутствующую страницу.

При помощи html

При помощи тега Refresh можно направлять клиентов на прочие страницы сайта спустя определенный промежуток времени. Для такой манипуляции вписывается код в HTML формате. При смене адреса страницы или сервера данное решение будет наиболее корректным. Ошибка 404 перезагрузится, и посетитель увидит нужную страницу с другим URL.

Типичные ошибки реализации 404 страницы

Существует ряд типичных ошибок, совершаемых новичками при работе со страницей 404 ошибки. Эти косяки могут стоить им как трафика, так и лояльности отношения целевой аудитории. К типовым ошибкам в оформлении страницы 404 ошибки опытные вебмастера относят следующие действия:

• наличие кода 200 ОК на всех страницах, даже несуществующих;
• присутствие ошибки 404 только в нескольких разделах;
• излишнее количество выдачи кода 404;
• использование стандартного оформления страницы с белым фоном и типовыми словами;
• отсутствие в документе ссылок на прочие полезные материалы;
• отсутствие сообщений о нерабочей странице сайта, что вводит неосведомленных пользователей в тупик;
• на стилистике 404 стоит редирект 301 при ответе сервера 200 ОК.

Если сервер слишком часто будет выдавать коды с ошибкой или неверные команды ответов, у ресурса могут возникнуть проблемы с индексацией в общих поисковых системах.

Влияние страницы 404 на ранжировку и пользователей

Часто встречаются ситуации, когда пользователь в ожидании интересного контента переходит на страницу, но вместо полезной информации видит сообщение о некорректной работе запрашиваемого адресата. Согласно статистике, большинство неосведомленных пользователей предпочитают сразу с досадой закрывать  страницу. Остальные посетители либо возвращаются на главную страницу сайта. Либо на предыдущую страницу по поисковому запросу внутри сервиса.

Непродолжительный интерес к определённым страницам на сайте негативно влияет на поведенческий фактор клиентов и их лояльность к ресурсу. Также поведенческий фактор стал оказывать существенное влияние на ранжировку некоторых интернет площадок, например, блоги и интернет – магазины.

Роботам популярных поисковых систем тоже будет не по душе такое обилие ошибочных страниц. Такой код служит для них информацией о потере качества работы и контента со стороны сайта. Следовательно, ресурс теряет привлекательность для потенциальной аудитории. Поэтому они получают команду о снижении позиции сайта в своей поисковой системе.

Способы нахождения и мониторинга 404 ошибки

Сервис Яндекс. Вебмастер

На данном ресурсе нужно зайти во вкладку «Индексирование», «Страницы в поиске», далее перейти на подпункт «Исключенные страницы». Чтобы выделить проблемные элементы дизайна такого типа можно использовать фильтр по статусу «Ошибка HTTP: 404».

Сервис  Google Search Console

Работа сервиса такого плана строится по такому же типу. При необходимости проверки ресурса на наличие 404 ошибок нужно перейти на вкладку «Покрытие», после чего нажать на «Ошибки сканирования». Затем кликнуть на «Ошибку 404», после чего система сама проведет все необходимые операции.

Специальные сканеры ресурсов

Изучение наличия ложных ссылок на ошибочные страницы возможно при помощи использования платных сервисов, например,  Screaming Frog, а также бесплатных аналогов. Для такого действия нужно запустить сканирование ресурса при помощи вышеупомянутых программ, а также изучить отчеты по кодам сервера и его ответам. Таким образом, получится не только найти ошибочные страницы 404, но и можно получить список страниц с расположением подобных ссылок.

Отслеживание при помощи Яндекс. Метрики

Инструмент «Параметры визитов» от Яндекса позволяет видеть переходы посетителей по битым ссылкам. Для этого нужно в код счетчика добавить строку, а также внести ряд ссылок на страницу самой ошибки 404.

Отслеживание страниц при помощи Google Analytics

Для работы данного сервиса в код страницы с ошибкой 404 нужно вставить определенную команду. Сервис позволяет узнать количество не найденных пользователей во вкладке «Поведение», «Контент сайта», «Все страницы». Фильтр следует настраивать по названию ошибочной и несуществующей страницы.

Настройка виджетов в популярных CMS

Если сайт оформлен на движке WordPress, стандартным способом можно установить русифицированный плагин Broken Link Checker. После процесса активации он сам выдает битые адреса страниц, для этого нужно зайти в подкатегорию «Неправильные страницы» в панели Инструментов. При помощи расширения можно редактировать, удалять, а также корректировать ссылки, помечая их неправильными своевременно.

Проверка подлинности 404 ошибки

Совершить такую процедуру можно несколькими популярными и надежными методами:

• с помощью сервиса Яндекс вебмастера и грамотной настройки роботов, урл, дат. После манипуляций дать команду на странице Вебмастера «Проверить»;
• с помощью сторонних информеров, например, утилиты  https://httpstatus.io/ . Она позволяет за 1 раз работы изучить до 100 ссылок сайта. Быстрой и адекватной работой также славятся такие утилиты, как Bertal. ru и MainSpy;
• проверка при помощи плагинов, например, для браузера Хром есть специальное расширение  Redirect Path.

Чтобы быть уверенным в надежности методик и данных, не стоит останавливаться на одном варианте. Тестировать рекомендуется все, либо одновременно, либо спустя определенный временной промежуток. При помощи анализа полученных данных можно скорректировать работу любого сайта.

Как избежать появления 404 ошибки

Если произошло удаление большого количества страниц или товаров с интернет – магазина, вместо 404 кода ошибки роботу придет 410. Благодаря этому система автоматически удалит ненужные документы, предотвратив торможение работы всего ресурса из-за ненужных файлов, занимающих место на сервере. Если планируется смена УРЛ или движка, можно настроить код ошибки 301.

Способы устранения 404 ошибки

Как говорилось выше, ошибка 404 появляется чаще всего в результате перехода клиентов по битым ссылкам. Чтобы устранить корень ошибки, необходимо сначала найти ее источник. Его можно найти с помощью процедуры краулинга особыми программами, о которых писалось немного выше. Далее ссылки битых страниц исправляются на рабочие, сайт обновляется и снова запускается в более корректную работу.

Как можно увидеть, владельцам сервиса настоятельно рекомендуется уделять время на мониторинг и устранение 404 ошибок. А также потратить определённое время и деньги на грамотное оформление ошибочной страницы. Посетители и поисковые системы по достоинству оценят такой ответственный подход.

Стоимость HTTP 404 Страница не найдена

Знаете ли вы, сколько ресурсов потребляется исходными веб-серверами, чтобы определить, что запрошенный URL-адрес не существует, и отобразить страницу ответа «Не найдено»?

Многие владельцы сайтов не могут ответить на этот вопрос, и в большинстве случаев это нормально, потому что хорошо управляемый сайт редко должен обслуживать 404 в нормальных условиях.

Усилия, прилагаемые маркетингом и поисковой оптимизацией для привлечения трафика на ваш сайт, хорошие администраторы сайтов гарантируют, что старые страницы, которые больше не подходят, будут не просто удалены, а вместо этого будут перенаправлены на новый URL-адрес с соответствующим содержанием. Обслуживание 404 было бы упущенной возможностью.

Ненормальные условия

К сожалению, страницы, которые когда-то существовали и больше не существуют, не являются единственным источником ответов Not Found. Время от времени сайт будет сканироваться. То есть он получит шквал запросов для множества разных URL-адресов, чтобы увидеть, какие из них служат интересным ответом. Это очень похоже на сканер поисковых систем, но потенциально вредоносный или, по крайней мере, подозрительный.

Иногда запрошенные URL-адреса принимают форму возможных URL-адресов входа администратора для различных комбинаций веб-платформ и конфигураций. В других случаях будут запросы на URL-адреса, которые выглядят как общие имена файлов экспорта данных или резервных копий веб-сайтов.

Часто количество запросов исчисляется тысячами.

Много ошибок HTTP 404

Исходя из нашего опыта улучшения веб-сайтов наших клиентов, мы видим множество страниц с ошибкой 404, которые оказывают значительное влияние на ресурсы исходного веб-сервера.

Современные сайты обычно более динамичны, чем статичны. Определение того, что URL-адрес существует, больше не может просто проверять наличие файла на диске, а вместо этого должно выполнять код веб-приложения.

Это несколько усугубляется тем, что сайты предпочитают «чистые» URL-адреса, то есть опускают традиционные суффиксы .html , .php или .aspx . Я не предлагаю избегать дружественных URL-адресов, просто подчеркиваю, что это стало фактором, влияющим на затраты на обработку 404.

После обработки запроса кодом приложения мы видим дополнительные расходы. Наиболее распространенным является установление состояния сеанса на стороне сервера. Это состояние сервера часто никогда больше не используется, поскольку клиенты сканирования редко учитывают файлы cookie сеанса. В конечном итоге это может привести к тому, что все доступное хранилище состояния сеанса будет израсходовано, что потенциально может замедлить доступ к состоянию для законных пользователей.

Другим шаблоном, который регулярно появляется, является ответ «Не найдено», который запрашивает базу данных, чтобы найти список категорий или продуктов, которые могут иметь отношение, а затем предоставлять полезные ссылки на результирующей странице 404. Эти запросы к базе данных могут быть дорогостоящими и конкурировать за ресурсы базы данных, необходимые для обслуживания запросов других пользователей.

Для случайных запросов, которые приводят к ошибке 404, выполнение этой работы не имеет большого значения. Но когда многие из этих запросов выполняются быстро в течение короткого промежутка времени, эта рабочая нагрузка может быстро перегрузить веб-серверы и сделать их неспособными эффективно обрабатывать законные запросы от пользователей, пытающихся приобрести ваши товары или услуги.

Смягчение

К сожалению, решение не является тривиальным.

Кэширование в CDN часто неэффективно в этом сценарии по двум причинам:

1. Каждый запрошенный URL-адрес отличается, сканер не пытается дважды использовать один и тот же URL-адрес, поэтому каждый запрос является промахом кеша и проксируется к источнику.
2. Понятно, что люди часто неохотно кэшируют ответы 404 в целом, если это влияет на развертывание новой страницы, или пространство кэша, используемое ответами 404, конкурирует с другими ресурсами, необходимыми для реальных ответов.

Можно получить защиту с помощью брандмауэра веб-приложений (WAF) в зависимости от характера сканирования. Если в запросах есть надежные шаблоны, WAF можно настроить так, чтобы они отклонялись до достижения источника.

Такими шаблонами могут быть:

• Общий заголовок User-Agent , присутствующий во всех запросах, который отличается от любых браузеров, используемых вашими реальными пользователями.
• Общий клиентский IP-адрес или диапазон (если сканирование не распространяется).
• Заголовки запросов, которые отправляются современными браузерами, но отсутствуют в запросах сканера.

Однако есть два предостережения:

1. Вам следует опасаться ложных срабатываний, то есть использования шаблона, который также блокирует запросы от ваших реальных пользователей.
2. Доступ к вашему веб-сайту может быть прерван до того, как вы сможете определить шаблоны и настроить WAF для их блокировки.

Часто лучшим решением является эффективная обработка ошибок 404 в вашем веб-приложении.

Если возможно, используйте статический контент для ответов 404. Если это невозможно, рассмотрите возможность кэширования результатов запросов к базе данных в приложении, чтобы, например, избежать затрат на каждый раз запрос списка категорий.

Также рассмотрите возможность изменения логики состояния сеанса сервера, чтобы он не создавал и не обновлял сеанс в ответ на запрос ресурса, который не найден.

Если вы действительно хотите приключений, вы можете попробовать предварительно создать белый список всех возможных URL-адресов, допустимых на вашем сайте. Этот список будет аналогичен концепции sitemap.xml , который, возможно, у вас уже есть. Затем этот список можно использовать для создания некоторого VCL Varnish Cache, который будет отклонять все, что не входит в этот список, еще до того, как оно достигнет ваших исходных веб-серверов.

---

Вы заинтересованы в том, чтобы попробовать CDN Section и легко внедрить Varnish Cache? Нажмите ниже, чтобы начать работу с 14-дневной бесплатной пробной версией, кредитная карта не требуется, или прочитайте нашу документацию, чтобы узнать больше.

Попробуйте раздел бесплатно

Что такое код ошибки 404 и Soft 404? Как их исправить?

«Не найдено (404)» и «Мягкий 404» — это статусы Google Search Console, которые могут описывать некоторые из ваших непроиндексированных страниц. Они называются очень похоже, и оба могут сильно повредить вашему SEO, но имеют совершенно разные причины:

• контента не существует,
• В случае «Soft 404» ваша страница сбивает Google с толку. Несмотря на то, что ваш сервер говорит, что страница доступна, ее содержимое кажется отсутствующим.

То, как вы подходите к страницам «Не найдено (404)» и «Мягкая 404», может иметь важное значение для удобства пользователей, оптимизации краулингового бюджета и стратегии индексирования.

Давайте подробнее рассмотрим их различия и узнаем, как их устранить.

Что на самом деле означает статус «Не найдено (404)»?

Если вы видите «Не найдено (404)» в отчете об индексации страниц (покрытие индекса) в Google Search Console, это означает, что:

• Googlebot связывался с вашим сервером для получения данной страницы,
• Сервер не смог найти запрошенный URL-адрес, поэтому он ответил с кодом ответа HTTP 404.

Серверы взаимодействуют со сканерами и браузерами с помощью кодов состояния. Всякий раз, когда вы можете просматривать страницу без каких-либо проблем, сервер, скорее всего, отвечает на запрос вашего браузера с кодом состояния 200.

Также существует множество кодов состояния, относящихся к возможным ошибкам, из-за которых сервер не может предоставить вам доступ к странице. Код состояния 404 — один из них. Это означает, что страница недоступна, потому что сервер не смог ее найти.

Google не индексирует страницы 404, потому что они не представляют ценности для пользователей.

Что вызывает сообщение «Не найдено (404)» в Google Search Console?

Однако возможные причины, по которым сервер отвечает кодом состояния 404, могут различаться:

 

Удаление страницы

Управление веб-сайтом, может случиться так, что вы случайно удалите страницу. Если это важная страница с множеством ссылок, указывающих на нее, это может привести к значительной потере трафика для вашего веб-сайта.

Но вы также можете намеренно удалить свой контент.

Вот несколько причин, по которым вы можете это сделать:

• Оптимизация дублированного контента, который не имеет ценности для вашего бизнеса и пользователей, и вы не хотите его изменять.
• Наличие потерянных страниц, которые не привлекают трафик на ваш веб-сайт, но вы не можете ссылаться на них или перенаправлять их.
• Обращение к страницам продуктов, которых нет в наличии, которые больше не имеют поискового спроса или обратных ссылок и не возвращаются на ваш веб-сайт.
• Скрытие контента, который вы непреднамеренно опубликовали на рабочем сайте, например, во время переноса веб-сайта.

Нет ничего плохого в удалении страницы, которая не приносит пользы вашему веб-сайту или может повредить его SEO.

И пока вы не можете решить свои проблемы каким-либо другим способом (например, изменить или перенаправить свой контент), не стесняйтесь устанавливать код состояния 404.

Изменение структуры URL-адреса

Ваш веб-сайт постоянно меняется, поэтому изменение некоторых URL-адресов со временем является нормальным явлением.

Но помните, что если ссылка, указывающая на страницу, неверна, сервер не предоставит пользователям запрошенный контент, потому что не может его найти.

Другой случай — опечатка в URL-адресе при ручном добавлении ссылок или вводе текста для входа на данную страницу.

Такие ошибки могут касаться, например,

• слов с альтернативным написанием (optimi s ation vs. optimi z ation) или
• добавление пробелов к URL-адресу, поскольку они будут заменены строкой %20 (example.com/red- %20 автомобиль)

Изменение может показаться незначительным с вашей точки зрения. Однако для ботов поисковых систем даже незначительная разница в URL-адресе интерпретируется как другой URL-адрес.

Как ошибки 404 влияют на SEO?

Несмотря на то, что наличие некоторых страниц «Не найдено (404)» неизбежно, оставление их неоптимизированными может привести к дальнейшим проблемам на вашем веб-сайте.

Отрицательный пользовательский опыт

Скорее всего, независимо от того, как пользователи вводили ваш URL-адрес «Не найдено (404)», они не искали пустую страницу.

Отсутствие контента на целевой странице может негативно сказаться на пользовательском опыте. И то, как пользователи относятся к вашему веб-сайту, напрямую влияет на коэффициент конверсии.

Таким образом, вы должны убедиться, что ваши посетители не чувствуют себя потерянными при обнаружении 404 страниц на вашем сайте.

Хорошей практикой является создание пользовательской страницы 404, которая не только визуально привлекательна, но, прежде всего, информирует пользователей:

• Почему они видят страницу «Не найдено (404)» и
• Какие дальнейшие действия они могут предпринять на вашем сайте, например, прочитать ваши популярные статьи.

Создав надежную страницу 404, вы можете побудить пользователей оставаться на вашем веб-сайте, даже если они не могут просматривать именно ту страницу, которую хотят.

Узнайте, как создать пользовательскую страницу 404 для своего веб-сайта, прочитав статью моего коллеги.

Трата краулингового бюджета

У Google не бесконечные ресурсы для сканирования всего в Интернете.

Если боты могут свободно сканировать ваши страницы «Не найдено (404)», они могут никогда не добраться до наиболее ценных страниц вашего сайта до того, как ваш краулинговый бюджет будет потрачен впустую.

Если вы считаете, что это может быть вашим случаем, воспользуйтесь услугами по оптимизации краулингового бюджета, чтобы раскрыть весь потенциал сканирования вашего сайта.

Уменьшение вашего потенциала трафика и сигналов ранжирования

Если у вас много внутренних и внешних ссылок, указывающих на ваши страницы с ошибкой 404, накопленный PageRank теряется.

Как устранить неполадку «Не найдено (404)»

Сначала просмотрите список затронутых страниц в отчете об индексации страниц (покрытие индексом), чтобы проверить, не являются ли они следствием вашего преднамеренного решения.

Кроме того, если вы управляете большим веб-сайтом, навигация по страницам 404 упрощается с помощью поискового робота, такого как Screaming Frog или WebSite Auditor.

Еще одна вещь, которую вам нужно проверить, это убедиться, что ваша карта сайта XML не содержит страниц «Не найдено (404)». Вы можете отфильтровать уязвимые URL-адреса в верхнем левом углу до «Все отправленные страницы» на странице статуса.

В идеале, поскольку ваш файл карты сайта должен включать только страницы, отвечающие кодом состояния 200, вы не должны находить какие-либо URL-адреса в списке «Все отправленные страницы» (или, как это было в прошлом, в списке «Отправленные URL-адреса»). Не найдено (404)».

В противном случае это может означать следующее:

• Вы не хотите, чтобы страница больше индексировалась – вы удалили отправленную страницу, но не обновили файл карты сайта, или вы обновили карту сайта, но в любом случае он содержит страницу с ошибкой.

Обязательно обновляйте карты сайта каждый раз, когда вносите изменения на своей стороне.

И помните, что даже если вы внедрили свои изменения, они не будут сразу подхвачены. Проверьте отчет «Все отправленные страницы» еще раз, когда Google повторно просканирует вашу карту сайта.

• Вы хотите, чтобы страница была проиндексирована – вы добавили свою страницу в карту сайта, но затем по ошибке удалили URL.
• Ваша карта сайта содержит URL-адреса, которые вам не нужны для индексации. В этом случае следуйте рекомендациям по созданию XML-карт сайта для SEO, так как такой подход может привести к трате вашего краулингового бюджета.

Если вы подтвердите, что ваши страницы «Не найдено (404) не должны существовать и они не способствуют другим проблемам, вы можете игнорировать статус «Не найдено (404)».

Однако, если это не так для вас или вы не уверены, как URL-адреса «Не найдено (404)» могут повлиять на ваш веб-сайт, читайте дальше, чтобы узнать о дальнейших шагах.

Настройка перенаправления 301

Рассмотрите возможность перенаправления вашей страницы «Не найдено (404)» , если вы:

• Переместили свой контент на другую страницу, которая семантически связана,
• Ваша страница удалена, но у вас есть другая страница на вашем веб-сайте, связанная с ней, и вы хотите, чтобы ваши пользователи направлялись туда,
• Удалена страница, которая раньше приносила трафик или по-прежнему имеет поисковый запрос по ключевым словам, на которые она нацелена, и
• Имейте много внутренних и внешних ссылок, указывающих на ваш «Не найдено (404)», чтобы вы могли передать полномочия данной страницы.

В идеальном сценарии после надлежащего перенаправления (и после повторного сканирования URL-адреса Google) страница «Не найдено (404)» изменит свой статус на « Страница с перенаправлением » в поиске Google. Приставка.

Однако помните, что вам не следует торопиться перенаправлять страницы «Не найдено (404)» на страницы, не связанные с контекстом, только ради перенаправления. В противном случае это может способствовать возникновению других проблем на вашем веб-сайте, таких как ошибка «Soft 404», которую мы собираемся обсудить ниже.

Вы собираетесь перенаправить страницу 404? Погрузитесь в наше окончательное руководство по перенаправлениям, чтобы глубже изучить тему и избежать возможных ошибок перенаправления.

Мониторинг внутренних и внешних ссылок

Если вы считаете, что данная страница не должна существовать, поэтому она корректно возвращает код состояния HTTP 404, убедитесь, что на вашем веб-сайте и из внешних ресурсов нет многочисленных ссылок.

Вы можете заменить внутреннюю ссылку на страницы 404 ссылками на соответствующие страницы , которые отвечают кодом состояния 200.

Когда дело доходит до внешних ссылок, вы можете связаться с веб-сайтами, которые ссылаются на вас, и попросить их обновить уже не существующую ссылку. Однако я понимаю, что это не всегда возможно, особенно если на вашу страницу ведут тысячи обратных ссылок.

В этом случае выполните перенаправление 301 на существующую страницу (или рассмотрите возможность создания нового связанного контента, на который вы можете перенаправить), или задайте код состояния HTTP 410.

Что на самом деле означает статус «Soft 404»?

Soft 404 не возникает, когда сервер отвечает ошибкой 404. Google помечает страницы как программные 404, когда они соответствуют двум условиям:

• Кажется, что их содержимое отсутствует, но
• Сервер по-прежнему отвечает кодом состояния 200.

Другими словами, Google считает, что данный URL-адрес должен возвращать код состояния 404, несмотря на предоставление ответа 200. На этом основании он делает вывод, что страница не должна быть проиндексирована.

Как исправить ошибки «Soft 404» в Google Search Console?

Вы можете найти свои страницы со статусом «Soft 404» в отчете об индексировании страниц. К нему легко получить доступ с левой панели навигации в консоли поиска Google.

Вы можете получить дополнительную информацию об этих страницах, нажав на название статуса. Он покажет график, показывающий, как количество затронутых страниц изменилось с течением времени, и список URL-адресов. Вы можете экспортировать список с помощью кнопки, расположенной в правом верхнем углу.

Согласно тому, что сказал Джон Мюллер в SEO Office Hours в июле 2021 года, Google Search Console сообщает только о тех программных страницах 404, которые считаются таковыми на мобильных устройствах. Если некоторые десктопные страницы помечены как soft 404, но их мобильные версии не затронуты этой проблемой, возможно, вы не сможете увидеть их в GSC.

Чтобы обнаружить программное обеспечение 404 для настольных компьютеров, невидимое в отчете GSC, вашему веб-сайту требуется технический SEO-аудит.

Позвольте мне рассказать вам о возможных причинах статуса «Soft 404» и способах их устранения.

Убедитесь, что несуществующие страницы возвращают код состояния 404

Многие веб-сайты предоставляют настраиваемые страницы 404, которые не только сообщают об ошибке, но и помогают пользователям перейти к нужной им информации и побуждают их исследовать домен. Иногда процесс становится беспорядочным, если его оставить без присмотра, и эти страницы возвращают код состояния HTTP 200.

Это плохо для вашего SEO, потому что пустые 200 страниц заставляют Google тратить свой краулинговый бюджет. Решение этой проблемы состоит в том, чтобы настроить сервер так, чтобы он возвращал правильный код состояния для несуществующих страниц (даже если они настроены) ‒ 404 Not Found.

Растрата бюджета сканирования является ключевой проблемой SEO для всех крупных веб-сайтов. Услуги Onely по оптимизации краулингового бюджета могут помочь вам понять и устранить проблему.

Избегайте перенаправления на нерелевантные страницы

Столкнувшись с большим количеством устаревших или пустых страниц, у вас может возникнуть соблазн перенаправить их все в одно универсальное место, например на домашнюю страницу. Однако это решение бесполезно с точки зрения посетителей вашего сайта.

При обнаружении этого типа редиректа Google может пометить его как мягкую ошибку 404. Чтобы решить эту проблему, придерживайтесь более строгих правил при создании редиректов:

• Держите ваши перенаправления тематически релевантными,
• Если вы не можете найти другую страницу, соответствующую намерению пользователя, настройте страницу 404 вместо перенаправления.

Избегайте страниц с небольшим содержанием или без него

Хорошим примером страницы с небольшим содержанием или без него является пустая страница каталога на веб-сайте электронной коммерции, где товары часто появляются и исчезают со склада. Google, скорее всего, классифицирует это как мягкую ошибку 404.

Страницы с тонким контентом бесполезны для ваших пользователей и представляют угрозу для вашего SEO, например:

• Трата краулингового бюджета,
• Убедить Google в том, что весь ваш веб-сайт некачественный, что может помешать Google сканировать ваш веб-сайт так часто,
• Понижение рейтинга после ручного действия с недостаточным содержанием.

Лучше всего предотвратить индексацию страниц с небольшим содержанием или без него, используя метатег noindex. Также неплохо пересмотреть архитектуру вашего сайта и подумать, какие категории товаров не соответствуют своему назначению и не нужны.

Будьте осторожны со словами, подобными 404

Алгоритмы Google несовершенны и могут ошибочно идентифицировать страницу, если она содержит слова, которые обычно появляются на типичной странице 404. Это может произойти, например, на веб-сайтах электронной коммерции, когда на странице продукта используются такие термины, как:

• «нет в наличии»,
.
• «продукт недоступен»,
• «мы не доставляем в ваш город».

Вы можете попытаться исправить статус «Soft 404», удалив эти слова или используя нейтральные синонимы.

Устраните проблемы с рендерингом

Некоторый контент может быть невидим для Google, потому что он не смог его отобразить. Такие проблемы часто возникают, когда ваш файл robots.txt блокирует доступ сканеров к файлам CSS или JavaScript.

Вы можете узнать, правильно ли Google отображает ваши страницы, проверив их в Инструменте проверки URL. Все, что вам нужно сделать, это щелкнуть значок увеличительного стекла рядом с выбранным URL-адресом из списка «Soft 404».

Чтобы устранить проблему, убедитесь, что у Google есть доступ к ресурсам, необходимым для рендеринга. Проверьте файл robots.txt и убедитесь, что сканирование CSS и JavaScript разрешено.

Ошибки рендеринга могут быть более сложными, чем просто хаос robots.txt. SEO-услуги Onely позволят вам понять источник проблемы. Давайте избавимся от ваших проблем с рендерингом раз и навсегда!

Ознакомьтесь с другими статусами ошибок клиента 4xx в Google Search Console, прочитав наши статьи:

«Заблокирован из-за запрета доступа (403)»,

«Заблокирован из-за несанкционированного запроса (401)» и

«Заблокирован из-за к другому выпуску 4xx».

Основные выводы

1. Независимо от причины, когда сервер отвечает кодом состояния 404, это означает две вещи: он не может найти вашу страницу и Google не сможет ее проиндексировать.
2. Между тем, страница «Soft 404» возвращает код состояния 200, но Google убежден, что ошибка 404 больше подходит для нее.
3. Если вы уверены, что данная страница не должна существовать, рассмотрите возможность настройки перенаправления 301, чтобы сохранить поток трафика на другую страницу и передать накопленный авторитет страницы.
4. Создайте пользовательскую страницу 404, чтобы свести к минимуму негативное взаимодействие с пользователем и удержать посетителей на вашем сайте.