Валидатор файлов Sitemap в Яндекс.Вебмастере — Блог Яндекса для вебмастеров
Пост в архиве.
Вводная информация
Одним из способов улучшить индексацию сайта является использование файла Sitemap. C помощью файла вы можете сообщить Яндексу, какие страницы вашего сайта нужно индексировать, как часто обновляется информация на страницах, а также индексирование каких страниц наиболее важно.
Если ваш сайт содержит много динамически создаваемых страниц или страницы, для попадания на которые требуется много переходов по ссылкам, робот Яндекса может не найти некоторые из страниц сайта или неверно определить их важность. Файл Sitemap помогает решить эти проблемы.
Вы можете сообщить Яндексу о наличии файла Sitemap для своего сайта, добавив URL файла в разделе «Файлы Sitemap» сервиса Яндекс.Вебмастер.
Новое в Яндекс.Вебмастере: валидатор файлов Sitemap
Теперь перед отправкой файла Sitemap Яндексу вы можете проверить его корректность в специальном валидаторе, который доступен всем пользователям сервиса. В качестве источника данных можно указать файл, URL или вставить содержимое файла в текстовое поле.
Зачем это нужно?
По ошибке или незнанию правил составления Sitemap владельцы сайтов отправляют через Яндекс.Вебмастер файлы, в которых отсутствуют нужные теги, не соответствует стандарту формат даты, встречаются синтаксические ошибки и т.д. Это приводит тому, что страницы из файла Sitemap не передаются роботу для обхода.
Напомним, что Яндекс.Вебмастер в этом году начал предоставлять расширенную информацию о принятых от владельца сайта файлах Sitemap, а именно: статус их обработки, ошибки и замечания, дата последней загрузки файла поисковым роботом. Эта информация вместе с валидатором поможет продиагностировать файлы Sitemap, чтобы своевременно устранить проблемы и эффективно использовать этот метод улучшения индексации сайта.
Как создать файл Sitemap?
Создать файл можно вручную, воспользовавшись спецификацией и примерами кода. Можно воспользоваться автоматическими инструментами, онлайн-генераторами и дополнениями для популярных CMS. Желательно размещать получившийся файл в корневой директории сайта, чтобы он был доступен по адресу вида example.com/sitemap.xml
Полезные ссылки
Ответы на многие вопросы по созданию файла Sitemap, спецификацию и примеры кода вы можете найти на официальном сайте.
Часто задаваемые вопросы о Sitemap в помощи Яндекс.Вебмастера
Справочник по ошибкам обработки файлов Sitemap
Использование файла Sitemap — Вебмастер. Справка
Sitemap — это файл со ссылками на страницы сайта, который сообщает поисковым системам об актуальной структуре сайта. Яндекс поддерживает форматы XML и TXT. Формат XML позволяет передавать дополнительную информацию.
Примечание. Яндекс не гарантирует, что все указанные в файле URL попадут в результаты поиска.
- В каких случаях нужен файл Sitemap
- Поддерживаемые Яндексом форматы
- Требования к файлу
- Как создать файл и сообщить о нем Яндексу
- Вопросы и ответы
Яндекс разрабатывает специальные алгоритмы, по которым индексирующий робот узнает о сайте. Например, с помощью и ссылок — переходя с одной страницы на другую. Иногда робот может пропустить страницы. Используйте Sitemap, если на сайте:
большое количество страниц;
отдельные страницы без навигационных ссылок;
глубокая вложенность.
Яндекс поддерживает протокол Sitemap. Чтобы передать информацию, используйте следующие элементы:
Тег | Обязательно | Описание |
---|---|---|
loc | Да | Адрес страницы. |
lastmod | Нет | Дата последнего обновления страницы. Максимальный размер — 100 байтов. |
changefreq | Нет | Частота изменения страницы. Максимальный размер — 100 байтов. |
priority | Нет | Значимость страницы. Робот загружает страницы поочередно с учетом наличия и значения коэффициента от 0.0 до 1.0. Укажите коэффициент для тех URL, которые наиболее важны для сайта. Максимальный размер — 100 байтов. |
Пример:
Используйте этот формат, чтобы сообщить только об адресах страниц.<?xml version="1.0" encoding="UTF-8"?> <urlset xmlns="http://www.sitemaps.org/schemas/sitemap/0.9"> <url> <loc>http://www.example.com/page1.html</loc> <lastmod>2005-01-01</lastmod> <changefreq>monthly</changefreq> <priority>0.8</priority> </url> ... </urlset>
Пример:
https://www.example.com/page1.html
https://www.example.com/page2.html
Также с помощью Sitemap вы можете передать информацию о локализованных страницах сайта и об изображениях (см. раздел Справки Яндекс.Картинок).
Чтобы передавать информацию о видео, в файле Sitemap укажите ссылки на XML-фиды (см. подробно в Справке Яндекс.Видео).
Ограничение. Поиск Яндекса не поддерживает передачу RSS и Atom-фидов с помощью файла Sitemap.
- Используйте кодировку UTF-8. Кириллические URL робот Яндекса распознает как в закодированном виде, так и в оригинале.
- Максимальное количество ссылок — 50 000. Вы можете разделить Sitemap на несколько отдельных файлов и указать их в файле индекса Sitemap.
Максимальный размер файла в несжатом виде — 50 МБ.
Указывайте ссылки на страницы только того домена, на котором будет расположен файл.
Разместите файл на том же домене, что и сайт, для которого он составлен.
При обращении к файлу сервер должен возвращать HTTP-код 200.
- Определите канонические URL для страниц, которые будут указаны в файле Sitemap. Это необходимо, если на сайте есть несколько страниц со схожей информацией.
Выберите формат и с помощью одного из сторонних ресурсов сформируйте файл.
- Проверьте файл с помощью инструмента Анализ файлов Sitemap.
- Укажите ссылку на файл в robots.txt или в разделе Файлы Sitemap Яндекс.Вебмастера.
При необходимости вы можете удалить информацию о Sitemap.
- Как организовать Sitemap для большого сайта
Робот обошел файл Sitemap недавно и еще не успел обработать его. Подождите две недели. Если вы используете файл индекса Sitemap с несколькими файлами, то их обработка может занять больше времени, чем одного файла Sitemap.
Сайт ранее был недоступен для индексирующего робота. Необходимо дождаться следующего посещения сайта роботом.
- Доступ к Sitemap запрещен в файле robots.txt, при обращении к Sitemap сервер возвращает HTTP-код, отличный от 200. Проверьте доступность файла для робота с помощью инструмента Проверка ответа сервера, указав полный путь к файлу.
Что Sitemap относится именно к тому сайту, для которого вы добавляете его в Вебмастер. Убедитесь, что адрес сайта совпадает: протокол (HTTP/HTTPS), наличие или отсутствие префикса www.
- Ответ сервера при запросе Sitemap. Если доступ к Sitemap запрещен в файле robots.txt или при обращении к нему возвращается HTTP-код, отличный от 200, файл не будет обработан роботом. Если при проверке отображается статус «Запрещен метатегом noindex», это не говорит об ошибке. Метатег noindex запрещает включение файла в поисковую базу, но не мешает роботу обрабатывать его содержимое.
- Корректность файла с помощью инструмента Анализ файлов Sitemap. Устраните ошибки, если они обнаружены.
Если вы используете файл индекса Sitemap отметьте тегом lastmod файлы Sitemap, которые часто обновляются.
Определить, какие страницы сайта уже известны Яндексу, можно в Вебмастере на странице .
Sitemap отображается в сервисе как исключенная страница со статусом «Неверный формат документа»Отображение файла Sitemap и других XML-файлов как исключенных страниц носит только информативный характер и никак не влияет на индексирование сайта или обработку Sitemap.
Файл Sitemap может отображаться в группе исключенных страниц, так как робот попытался проиндексировать его как обычную страницу. Не смотря на это файлы Sitemap не участвуют в поиске.
При обработке Sitemap возникла ошибка «Неизвестный тег» Файл Sitemap может содержать только определенные XML-элементы. Если Вебмастер обнаружит в файле другие элементы, например, указание на мобильную версию, в Вебмастере появится ошибка «Неизвестный тег». Неподдерживаемые элементы игнорируются роботом при обработке Sitemap, при этом данные из поддерживаемых элементов учитываются. Поэтому менять файл Sitemap необязательно.Если содержимое файла будет изменено, потребуется до двух недель на обновление информации в Вебмастере.
Файл Sitemap находится в статусе «Не проиндексирован»Файл Sitemap может быть не проиндексирован по нескольким причинам:
Если проблема с доступом актуальна, обратитесь к администратору сайта или сервера, на котором он расположен. Если файл составлен корректно, он будет повторно обработан в течение двух недель с момента последнего запроса роботом. Проверить файл можно с помощью инструмента Анализ файлов Sitemap.
Файл Sitemap находится в статусе «Документ не содержит текст»Такой статус отображается в инструменте Проверка ответа сервера и сообщает, что робот не может проиндексировать файл как обычную страницу сайта и включить его содержимое в результаты поиска. На обработку Sitemap этот статус не влияет. Чтобы проверить корректность Sitemap используйте в Вебмастере инструмент Анализ файлов Sitemap.
Файл Sitemap находится в статусе «URL запрещён к индексированию тегом noindex»Такой статус отображается в инструменте Проверка ответа сервера и сообщает, что файл закрыт от индексирования — как правило, запрет прописан в HTTP-заголовке X-Robots-Tag. Директива запрещает файлу появляться в результатах поиска, но не влияет на обработку содержимого Sitemap. Чтобы проверить корректность Sitemap используйте в Вебмастере инструмент Анализ файлов Sitemap.
Sitemap не обрабатываетсяКак правило, файл Sitemap обрабатывается роботом в течение двух недель после добавления его в Вебмастер. Если этого не произошло, проверьте:
Не проиндексирован | Загрузка файла Sitemap закончилась неудачно. Возможно URL файла задан неверно. |
Размер файла превышает заданный предел | Размер файла Sitemap больше 50 МБ. |
Ошибка HTTP | При загрузке файла Sitemap получен HTTP-статус отличный от 200. |
Невалидный URL | Указан невалидный URL файла Sitemap. |
Соединение было прервано | В процессе загрузки файла Sitemap сервер прервал соединение. |
Ошибка DNS | Не удалось загрузить файл из-за ошибки DNS. Возможно указан неправильный URL файла. |
Ошибка при соединении | Файл Sitemap не удалось загрузить, так как не удалось соединиться с сервером. |
URL запрещен в файле robots.txt | URL файла Sitemap запрещен в файле robots.txt и поэтому не был загружен. Проверьте правильность файла robots.txt и адрес файла Sitemap. |
Неправильный HTTP-ответ | Файл Sitemap не удалось загрузить, т. к. ответ веб-сервера не соответствует протоколу HTTP. |
Ответ не содержит данных | При загрузке файла Sitemap сервер вернул пустой документ. |
Ошибка при разархивировании | Произошла ошибка при распаковке файла Sitemap, сжатого с помощью gzip. |
Тег встречается более одного раза | Указанный тег должен встречаться в данном контексте только один раз. |
Неизвестный тег | Указанный тег не должен встречаться в данном контексте. |
Тег не найден | Пропущен обязательный тег. |
Не правильный адрес страницы | URL не соответствует стандарту. |
Некорректный URL (не соответствует местоположению файла Sitemap) | Местоположение файла Sitemap определяет набор URL, которые можно включить в этот файл. Файл, расположенный в некотором каталоге, должен содержать URL, который размещен в этом же каталоге, либо в его подкаталогах. Подробнее см. Местоположение файла Sitemap. |
Слишком длинный URL | Длина URL превышает установленный предел (1024 символа). |
Тег не должен быть пустым | Указанный тег не должен быть пустым. |
Тег не должен содержать другие теги | Указанный тег не должен содержать дочерние теги. |
Превышено допустимое число данных | Указанный тег содержит слишком много данных. |
Нет данных в теге | Указанный тег не содержит необходимых данных. |
Неверная кодировка | Файл Sitemap не начинается с корректного префикса UTF-8 (0xEF 0xBB 0xBF). Он должен начинаться со строки |
Невалидный XML | Файл Sitemap не является правильно построенным (well-formed) XML-документом, то есть не соответствует правилам синтаксиса XML. |
Слишком много ошибок (обработка прекращена) | В файле Sitemap обнаружено более 100 ошибок. Дальнейшая обработка файла прекращена. |
Число URL превышает заданный предел | Файл Sitemap может содержать не более 50000 URL. Если необходимо перечислить более 50000 URL, следует создать несколько файлов Sitemap и включить их в файл индекса Sitemap (см. Использование файлов индекса Sitemap). |
Число файлов Sitemap превышает заданный предел | Файл индекса Sitemap может содержать не более 50 000 URL файлов Sitemap. |
Много некорректных URL в начале файла (обработка прекращена) | Файл Sitemap начинается с идущих подряд некорректных URL. Дальнейшая обработка файла прекращена, так как скорее всего файл имеет неверный формат. |
Файл Sitemap index не может содержать ссылки на файлы Sitemap index | Файл индекса Sitemap может содержать ссылки только на файлы Sitemap, но не на другие файлы индекса Sitemap. |
Ошибка в корневом теге | Произошла ошибка при обработке корневого тега. |
Как добавить сайт в поиск Яндекс
После того, как вы создали Сайт или Магазин Битрикс24, возникает вопрос – как посетитель узнает о нем? Основным источником, откуда узнает посетитель о вашем сайте, являются поисковые системы. В России основным поисковиком является Яндекс, поэтому добавим наш новый сайт Битрикс24 в эту поисковую систему.
Для индексации сайта и добавления его в свою поисковую систему сам Яндекс предоставляет такой инструмент, как Яндекс.Вебмастер.
Возможности Яндекс.Вебмастер по управлению вашим сайтом:
- индексация поисковой системой Яндекс вашего сайта;
- статистика проиндексированных страниц, ТИЦ;
- просмотр ошибок индексации;
- данные о внешних и внутренних ссылках;
- проверка файла robots. txt;
- добавление файла sitemap.xml;
- статистика обхода сайта роботом Яндекса;
- управление видом сайта в результатах поиска, изменение сниппетов и др.
Перед тем, как добавить сайт в Яндекс.Вебмастер, нужно зарегистрировать аккаунт в Яндекс, если у вас еще его нет.
На странице входа в Яндекс.Вебмастер нажимаем кнопку Войти:
Далее вписываем адрес вашего сайта (в нашем примере – https://test255.b24test.site
) и нажимаем кнопку Добавить1:
Для того, чтобы Яндекс удостоверился, что сайт действительно принадлежит вам, нужно подтвердить право владения доменом. Делается это несколькими способами, но для Сайтов Битрикс24 подходят 2 способа:
- Добавить метатег в код главной страницы своего сайта;
- Добавьте в DNS домена системы провайдера доменных имен TXT-запись.
Воспользуемся первым способом, как самым простым – добавим специальный метатег2 в код главной страницы нашего сайта:
Этот код нужно скопировать в настройки сайта, в поле Подтверждение прав Яндекс.Вебмастер3:
Проследите, чтобы в настройках главной страницы сайта была включена опция Индексация в поисковых системах4:
Сохраните и опубликуйте страницу сайта, чтобы изменения вступили в силу.
Проверьте, появился ли метатег в коде страницы – откройте исходный код страницы и по поиску найдите метатег:
Возвращаемся в Яндекс.Вебмастер и нажимаем кнопку Проверить5:
Все готово, ваш сайт зарегистрирован в поисковой системе Яндекс. Теперь можно пользоваться инструментами Яндекс. Вебмастер для вашего сайта:
Вы можете управлять индексацией сайта поисковыми системами c помощью файла robots.txt. В этом файле указываются страницы и разделы сайта, разрешенные или запрещенные для индексации различными поисковыми роботами.
Рекомендую также прочитать:
Как проверить файл sitemap в яндексе. Использование файла Sitemap
Как понятно из названия, Sitemap (карта сайта) отображает ваш веб-сайт. Это веб-страница, в которой описывается структура вашего сайта, включая разделы и ссылки. Это значительно упрощает навигацию по вашему сайту. И очень важно иметь обновленный Sitemap для поисковых запросов и результатов пользовательского опыта.Почему вашему сайту необходим файл Sitemap?
Проще говоря — вашему веб-сайту нужен Sitemap, чтобы его можно было найти на странице результатов поиска. XML Sitemap помогает поисковым системам, таким как Google и Bing, при сканировании легко понять структуру вашего сайта. И в случае, если ваш сайт имеет сложную структуру, или он недавно был создан или имеет динамические страницы, Sitemap значительно улучшит его рейтинг. Кроме того, у вас будет список всех URL-адресов вашего сайта, и вы получите приоритет сканирования поисковыми системами. Хотя вам и не обязательно иметь XML Sitemap, это важная часть любого SEO-продвижения.Как ошибки файла Sitemap влияют на ваш рейтинг?
Ошибки файла sitemap включают ошибку сжатия, пустой файл sitemap, ошибку HTTP или некорректное пространство имен. Эти ошибки могут «загрязнить» файл sitemap, что затруднит сканирование вашего сайта. Если некоторые страницы не могут сканироваться должным образом, они не могут быть проиндексированы. Если ваши страницы не проиндексированы, вы не сможете получить высокий рейтинг Google и потеряете много органического трафика.Sitemap или Карта сайта – специально созданный файл с перечнем страниц ресурса, которые необходимо проиндексировать.
Зачем нужен файл Sitemap
Существует два вида Карты сайта, которые различаются форматами и назначением:
HTML-картаЕё составляют для пользователей, чтобы упростить им навигацию по страницам сайта. Это необязательный элемент, такую карту можно составить на большом сайте со сложной иерархией для удобства пользователей.
XML-картаНужна для поисковых ботов, она важна для SEO, так как помогает ботам индексировать страницы ресурса.Наличие этого файла подсказывает поисковым роботам, как именно организована структура сайта. Соответственно, Яндекс, Google, Bing и другие поисковики получают возможность более качественно индексировать проект.
В этом материале разберем создание XML-карты .
Для чего нужна Карта сайта:- Ускорить процесс полной индексации .
Поисковые роботы Google могут пропустить недавно созданные или измененные страницы, а Карта поможет в них ориентироваться. - Дать дополнительную информацию.
В Карте указывают дополнительные рекомендации для робота: делают пометки о важности страницы, частоте и дате обновления. - Отобразить количество проиндексированных URL
Сигналы из Sitemap нужны в том числе для отображения проиндексированных ссылок в Search Console. - Ускорить процесс пакетной деиндексации.
Для этого создают временный файл Sitemap, в который включают страницы для удаления. Об этом , он рекомендует обязательно указать дату последнего изменения страниц, когда им был присвоен код ошибки 404 или атрибут noindex. Так Google будет знать, что необходимо заново просканировать содержимое сайта. Через несколько месяцев эту временную карту сайта можно будет убрать.
При этом даже если Google найдет ссылку в Sitemap, но ее не будет в навигации, он не придаст ей веса и не проиндексирует. Ссылки в Карте сайта — это рекомендации, важнее всего составить грамотную , в которой поисковый робот найдет все нужные страницы.
В большинстве случаев грамотной внешней и внутренней перелинковки страниц достаточно, чтобы поисковые роботы узнали о всем содержимом сайта. Лендингам, небольшим корпоративным сайтам из пары страниц, одностраничным визиткам Карта сайта и не нужна — бот разберется в страницах без труда. Карты нужны для сайтов, которые сложно краулить, поэтому для остальных проектов ее рекомендуют создать.
Карта обязательно нужна сайтам с такими признаками:
- Проект создан недавно, у него мало внешних ссылок. В этом случае поисковому боту сложнее найти сайт.
- В структуре сайта много архивов веб-документов, не связанных между собой.
- У проекта большое количество страниц, разделов и подразделов;
- В структуре преобладают динамические страницы.
- На сайте есть мультимедийный контент. Бот сможет получить дополнительную информацию из Sitemap для показа в результатах поиска.
Поисковые системы могут не проиндексировать все нужные страницы таких сайтов, если не предложить краулерам файл Sitemap. Разберем, как его создать.
Базовые критерии создания файла Sitemap
У поисковиков есть свои требования к составлению Карты сайта, о которых нужно помнить веб-мастеру.
Общие требования к Sitemap:
- Количество URL-адресов в файле Sitemap не должно превышать 50 тысяч. Если их больше, необходимо создать несколько отдельных Карт сайта, которые прописывают в файле индекса Sitemap. По , для этого достаточно создать несколько отдельных файлов Sitemap, не больше 50 тысяч ссылок каждая, а в сумме ссылок может быть больше лимита. После этого для нескольких Карт создают общий материнский файл Sitemap.
- Максимальный размер файла – 50 Мб. Файл можно уменьшить при помощи сжатия , но в несжатом виде он все равно должен быть меньше 50 Мб.
- Файл Sitemap должен находиться на том же домене, что и веб-сайт, для которого он создан.
- Можно использовать кодировку UTF-8, а также латинские буквы и цифры.
- на обращение к файлу Sitemap должен быть HTTP-статус с кодом 200 OK.
- URL идентификаторы сессий не должны быть в Карте сайта.
- Ссылки должны иметь одинаковый синтаксис.
- В Карте указаны только канонические URL.
- Карта не конфликтует с информацией в robots.txt — если в robots.txt какие-то страницы закрыты от индексации, то их не должно быть в Карте.
Некоторые веб-мастеры беспокоятся о порядке ссылок в файле, но представитель Google , что очередность не имеет значения вообще, главное — поместить в Sitemap самые важные канонические ссылки.
Допустимые форматы Карты сайта
Особое требование предъявляется к формату файла Sitemap. Карту сайта можно создать в виде XML-файла, текстового файла или посредством RSS, mRSS и Atom 1.0. Яндекс указывает, что поиск не поддерживает передачу RSS и Atom-фидов с помощью Sitemap. Если ориентируетесь на разные поисковые системы, используйте формат XML. Правила создания файла описаны в стандарте .
Служебные теги Sitemap
Обязательные теги Карты сайта:
- — контейнер с указанием стандарта протокола;
- — родительский тег для каждой записи URL-адреса;
- — указание URL, начинается с префикса, к примеру, http или https.
Дополнительные теги:
- — частота обновления веб-документа с атрибутами never, always, yearly, monthly и так далее;
- — дата последнего обновления на странице;
- Указание разной важности страниц ресурса от 0,1 до 1, определяет очередность обработки URL на этом сайте. Google его не поддерживает. Приоритет можно дать самым важным страницам и нет смысла указывать высокий приоритет всем ссылкам, тогда тег вообще ни на что не повлияет.
Другие языковые версии сайта указывают с помощью атрибута hreflang .
Пример Карты сайта в формате XML
Sitemap для сайт, если бы он состоял из одной страницы и содержал упомянутые теги, мог бы выглядеть так:
http://www.сайт/2016-03-21daily0.8
Как создать и где разместить файл Sitemap?
При желании составить Карту сайта можно вручную, но это слишком трудозатратно и бессмысленно — Карта сайта должна быть динамической, если вы регулярно обновляете сайт — публикуете новые записи в блоге, развиваете интернет-магазин. Лучше создавать файл Sitemap автоматически, обратившись к услугам бесплатных онлайн-сервисов и плагинов для CMS.
Сервисы для создания Sitemap
Sitemap — это файл со ссылками на страницы сайта, который сообщает поисковым системам об актуальной структуре сайта. Яндекс поддерживает форматы XML и TXT. Формат XML позволяет передавать дополнительную информацию .
Примечание. Яндекс не гарантирует, что все указанные в файле URL попадут в результаты поиска.
- Требования к файлу
- Вопросы и ответы
В каких случаях нужен файл Sitemap
Яндекс разрабатывает специальные алгоритмы, по которым индексирующий робот узнает о сайте. Например, с помощью Ссылка, которая связывает страницы одного сайта. Страницы могут\n находиться в разных каталогах одного домена или на поддоменах.
«}}»> и Ссылка, которая расположена на другом сайте.»}}»> ссылок — переходя с одной страницы на другую. Иногда робот может пропустить страницы. Используйте Sitemap , если на сайте:большое количество страниц;
отдельные страницы без навигационных ссылок;
глубокая вложенность.
Поддерживаемые Яндексом форматы
Ограничение. Поиск Яндекса не поддерживает передачу RSS и Atom-фидов с помощью файла Sitemap .
Требования к файлу
Максимальный размер файла в несжатом виде — 50 МБ.
Разместите файл на том же домене, что и сайт, для которого он составлен.
При обращении к файлу сервер должен возвращать HTTP-код 200.
Как создать файл и сообщить о нем Яндексу
При необходимости вы можете удалить информацию о Sitemap .
Вопросы и ответы
Sitemap отображается в сервисе как исключенная страница со статусом «Неверный формат документа»
Отображение файла Sitemap (как и других XML-файлов) как исключенных страниц имеет только информативный характер и никак не влияет на индексирование сайта или обработку Sitemap .
Файл Sitemap может отображаться в группе исключенных страниц, так как робот попытался проиндексировать его как обычную страницу, в то время как файлы формата XML не индексируются в поисковой системе Яндекса и в результатах поиска не участвуют.
При обработке Sitemap возникла ошибка «Неизвестный тег»
Файл Sitemap может содержать только определенные XML-элементы . Если Вебмастер обнаружит в файле другие элементы (например, указание на мобильную или мультиязычную версию, адреса картинок), в Вебмастере появится ошибка «Неизвестный тег». Неподдерживаемые элементы игнорируются роботом при обработке Sitemap , при этом данные из поддерживаемых элементов учитываются. Поэтому менять файл Sitemap необязательно.
Если содержимое файла будет изменено, потребуется до двух недель на обновление информации в Вебмастере.
Файл Sitemap находится в статусе «Не проиндексирован»
Файл Sitemap может быть не проиндексирован по нескольким причинам:
Робот обошел файл Sitemap недавно и еще не успел обработать его. Подождите две недели. Если вы используете файл индекса Sitemap с несколькими файлами, то их обработка может занять больше времени, чем одного файла Sitemap .
Сайт ранее был недоступен для индексирующего робота. Необходимо дождаться следующего посещения сайта роботом.
Если основное предназначение robots.txt – это запрет индексации, то карта сайта sitemap.xml выполняет прямо противоположные задачи. Она отвечает за ускорение индексации сайта и полноту индексации сайта.
Sitemap.xml указывает поисковой системе частоту, с которой возникает необходимость в переиндексации страниц. В этом плане карта сайта особенно важна для сайтов с регулярно обновляющимся контентом (новостные порталы и т. п.). Кроме того, sitemap.xml содержит все важные страницы сайта с указанием их приоритета.
Требования, предъявляемые к карте сайта
Файл Sitemap представляет собой XML-файл, в котором перечислены URL-адреса веб-сайта в сочетании с метаданными, связанными с каждым URL-адресом (дата его последнего изменения; частота изменений; его приоритетность на уровне сайта), чтобы поисковые системы могли более грамотно сканировать этот сайт.
Общее число sitemap.xml на сайте не должно превышать 1000, при этом число записей (урлов) в каждом не должно превышать 50 000 штук.
Если необходимо перечислить более 50 000 URL-адресов, следует создать несколько файлов Sitemap.
Карту сайта можно сжать gzip архиватором для уменьшения его размера. Но объем каждого сайтмапа в развернутом (разархивированном) виде не должен превышать 10 мегабайт.
Карта сайта не обязательно должна быть в виде xml файла. Протокол допускает генерацию карты в виде синдикации (RSS или Atom) либо в виде простого текстового файла с построчным перечислением URL. Но такие «карты сайта» либо не включают в себя все URL сайта (в случае с синдикацией), либо не несут дополнительную важную информацию (дата и время модификации контента страниц), собственно ради которой и используют в SEO карты сайта.
Предоставляя отметку времени последнего изменения , Вы позволяете сканерам поисковой системы извлекать только часть файлов Sitemap в индексе, то есть сканер может извлекать только те файлы (страницы) сайта, которые были изменены после определенной даты. Этот механизм частичного извлечения файлов из Sitemap.xml позволяет быстро обнаруживать новые URL на сайтах больших размеров. Кроме того это позволяет снизить нагрузку как на сервер, так и на краулер поисковой системы. А последнее они (поисковые системы) крайне любят.
Сочетание карты сайта с robots.txt и метатегами robots
Инструкции sitemap.xml, при правильном их использовании должны дополнять друг друга. Существуют три важнейших правила взаимодействия этих инструкций:
- sitemap.xml, robots.txt и метатеги robots не должны противоречить друг другу;
- все страницы, исключенные (заблокированные) в robots.txt и метатегами robots, должны быть исключены также из sitemap.xml;
- все индексируемые страницы, разрешенные в robots.txt, должны содержаться в sitemap.xml
Исключения из трех правил
Есть и исключения из этих трех правил. И, как всегда, они связаны со страницами пагинации. Начиная со второй и далее страницы пагинации, мы прописываем noindex,follow в метатегах robots, при этом в robots.txt страницы пагинации не закрыты от индексирования.
Дату и время изменения страницы ставить равную дате и времени изменения главной (первой, основной странице) страницы каталога. В принципе, с этим можно согласиться.
Оптимизаторы старой школы советуют добавлять в файл sitemap.xls только непроиндексированные или изменившиеся страницы. Страницы, попавшие в индекс следует удалять из сайтмапа. А вот с этим мнением согласиться уже сложней. При наличии поля lastmod и его правильном заполнении, никакой нужды в таких вот изысках нет.
Основные проблемы при использовании sitemap.xml
При выполнении , мне наиболее часто встречались следующие ошибки:
- Несоответствие sitemap.xml страницам сайта, устаревший сайтмап. Эта проблема возникает, когда сайтмап генерируется не динамически, а эпизодически, запуском какой то службы в CMS, а то и сторонними сервисами. При этом возникает масса мертвых страниц, отдающих 404 ошибку (это если страницу физически удалили или перенесли в другое место, сменили адрес URL). Кроме того, новые страницы индексируются значительно медленнее, ибо не находятся в sitemap.xml.
- Следующая ошибка – неверная структура sitemap.xml. Эта ошибка возникает, как правило, на «самописных» CMS или при использовании неверных плагинов к популярной CMS. При этом генерируется файл sitemap.xml с нарушением структуры, описанной протоколом.
- Модификация этой ошибки – неверная работа с датой изменения записи. С точки зрения протокола — это не ошибка, так как поле lastmod не является обязательным. С точки зрения SEO и поисковых систем, отсутствие правильного значения в этом поле (совпадающее с непосредственным изменением контента) — полностью нивелирует значимость всего файла sitemap.xml. Как было сказано выше, ПС будут переиндексировать те страницы, поле lastmod которых изменилось.Что произойдет, если это поле меняется одновременно у всех записей (страниц) сайта. То есть дата модификации одинакова у всех файлов сайта. Скорее всего, ПС не будут обращать внимание на sitemap и сайт будет переиндексироваться обычным способом, при этом глубоко расположенные страницы либо не переиндексируются вовсе, либо будут переиндексироваться очень долго.Итак, Необходимо или вовсе не использовать поле lastmod (что плохо), либо ставить дату последнего значимого изменения страницы, например, когда поменялась цена или товар закончился или изменилось описание.
- Следующая группа встречаемых ошибок – логические, вызваны нарушением трех правил о сочетании robots.txt и sitemap.xml. В этом случае можно наблюдать постоянное попадание страницы в индекс и немедленный вылет оттуда. Однако, это не будет наблюдаться при наличии метатега noindex и записи в Sitemap.xml. В этом случае краулер (робот, паук ПС), зашедший на страницу индексировать её не будет.
- Ну и последняя ошибка, часто встречающаяся на сайтах — наличие «осиротевших страниц». Это такие страницы, на которые стоит ссылка из sitemap, но нет ни одной прямой ссылки с любой из страниц сайта. Часто это связано с тем, что страницы были удалены «логически» (например в WordPress помещены в корзину), а не физически. Это так же наблюдается на сайтах, где доступ к карточкам товаров сделано на скриптах и фильтрах способом, который не позволяет проиндексировать результаты работ этих скриптов. Возможны и иные причины возникновения таких страниц-сирот. Все это снижает доверие поисковых систем к сайту и является негативным сигналом ранжирования.
Согласно протокола, после изменения сайтмапа, можно перепинговать поисковые системы. Для этого нужно создать запрос следующего вида.
С помощью отчета о файлах Sitemap вы можете отправить в Google карту своего сайта, посмотреть историю ее отправки, а также сведения об ошибках, с которыми столкнулась наша система при анализе файла Sitemap.
Что такое файл Sitemap? Нужен ли мне этот тип отчета?
Файл Sitemap размещается на вашем сайте и содержит информацию обо всех его новых и измененных веб-страницах. Если ваш ресурс небольшой (менее 100 страниц), возможно, вам будет проще запросить индексацию главной страницы , при условии, что на ней (или на одной из тех, на которую она ссылается непосредственно либо через другие страницы) есть ссылки на все остальные страницы.
Управление файлами Sitemap
Как отправить файл Sitemap
Выполните следующие действия:
- Разместите файл Sitemap на своем сайте. Требования:
- Файл Sitemap должен быть в .
- Файл Sitemap должен быть доступен роботу Googlebot.
- У вас должно быть разрешение владельца . Если его нет, вы можете вместо отправки файла добавить ссылку на него в файл robots.txt .
- Укажите относительный URL файла на странице с отчетом о файлах Sitemap и нажмите Отправить .
- Сразу же начнется обработка файла Sitemap. Учтите, что для сканирования перечисленных в нем URL может потребоваться некоторое время. Иногда отсканировать удается не все URL (это зависит от размера сайта, трафика и других факторов).
Внимание!
Если вы уже отправляли нам файл Sitemap, не нужно отправлять его повторно, даже если вы внесли в него изменения (мы заметим их при следующем сканировании сайта).
Как удалить файл Sitemap
Если вы удалите файл Sitemap, он будет удален из соответствующего отчета, но останется в Google, как и все URL, которые были в нем указаны. Если вам нужно, чтобы роботы Google перестали посещать ваши веб-страницы, добавьте правило в файл robots.txt .
Чтобы удалить файл Sitemap, выполните следующие действия:
Как интерпретировать отчет
- В отчете показываются только файлы Sitemap, отправленные с его помощью, а не обнаруженные по ссылкам в файле robots.txt или другими способами. Тем не менее, если мы уже получили ваш файл Sitemap из другого источника, вы все равно можете отправить его нам через этот отчет, чтобы мы могли убедиться в правильности данных и определить коэффициент ошибки.
- В отчете показаны только файлы Sitemap, относящиеся к текущему ресурсу.
- В файле Sitemap можно указывать URL изображений , видео и новостных статей . Но в настоящее время в отчете не отображаются сведения об этих типах адресов.
Для каждого файла Sitemap указывается следующая информация:
URL файла Sitemap Адрес, по которому размещен файл, относительно корневого каталога ресурса. Тип Тип файла Sitemap. Возможные значения:- Sitemap – обычный XML-файл или текстовый файл Sitemap .
- Файл индекса Sitemap – файл Sitemap с информацией о других файлах Sitemap .
- RSS – файл Sitemap в формате RSS-фида .
- Atom – файл Sitemap в формате фида Atom .
- Неизвестно – файл имеет неизвестный формат или ещё не обработан.
Моего файла Sitemap нет в списке
Вот несколько причин, по которым файл Sitemap может отсутствовать в отчете:
- Он относится к другому ресурсу. Файлы Sitemap, связанные с одним ресурсом, недоступны для других. Например, файлы в домене http://example.com не будут представлены в отчете по доменам http://m.example.com или https://example.com . Чтобы решить эту проблему, убедитесь, что вы добавили все версии URL своего ресурса.
- Вы не посылали в Google файл Sitemap с помощью отчета. Если вы отправляли файлы Sitemap другим способом, они не будут показаны в списке, даже если Google может найти и использовать их.
Ошибки в файлах Sitemap
В отчете по файлам Sitemap может появляться информация об ошибках, перечисленных ниже.
Переход по URL не выполнен
Google не удалось просканировать все URL, указанные в файле Sitemap. Возможные причины:
- По URL выполняется слишком много переадресаций. Рекомендуем заменить такие URL на адреса, которые могут быть просканированы непосредственно.
- Если вы постоянно перенаправляете с одной страницы на другую, используйте окончательную переадресацию.
- Рекомендуем отказаться от переадресации с помощью JavaScript или метатега refresh.
- Роботам Google не удается просканировать относительные URL в вашем файле Sitemap. По возможности используйте абсолютные ссылки вместо относительных. Например, ссылаясь на другую страницу своего сайта, используйте URL https://www.example.com/moya-stranitsa.html , а не просто moya-stranitsa.html .
Недействительные URL
Некоторые URL-адреса находятся на более высоком уровне по отношению к файлу Sitemap или в другом домене.
Более высокий уровень. Если файл находится на странице http://www.example.com/mysite/sitemap.xml , то для него недействительны следующие URL:
- http://www.example.com/ – находится на более высоком уровне, чем файл Sitemap;
- http://www.example.com/yoursite/ – находится в дочернем каталоге файла Sitemap (необходимо перейти на более высокий уровень, а затем на более низкий).
Другой домен. Убедитесь, что все адреса начинаются с домена, в котором хранится ваш файл Sitemap. Например, если файл находится на странице http://www.example.com/sitemap.xml , то для него недействительны следующие URL:
- http://example.com/ – отсутствует www в начале.
- www.example.com/ – нет префикса протокола (http).
- https://www.example.com/ – указан протокол https вместо http.
Ошибка сжатия
Ошибка при попытке распаковать заархивированный файл Sitemap. Выполните сжатие ещё раз (например, с помощью gzip), а затем загрузите его на сайт и повторно отправьте в Google.
Пустой файл Sitemap
В файле Sitemap отсутствуют URL. Убедитесь, что он не пустой.
Превышен максимально допустимый размер файла Sitemap
Размер файла Sitemap в несжатом виде превышает 50 МБ. Разбейте его на несколько файлов и укажите их в индексе , а затем отправьте нам каждый из них отдельно.
Неверное значение атрибута
Атрибут, связанный с одним из тегов XML в файле Sitemap, имеет недопустимое значение. Проверьте файлы Sitemap и убедитесь, что все атрибуты используются согласно техническим требованиям к таким файлам. Проверьте, нет ли опечаток в значениях атрибутов.
Недопустимая дата
Одна или несколько дат в файле Sitemap имеет неверный формат или значение. Даты должны быть в формате кодировки даты и времени W3C . Время можно не указывать. Убедитесь, что все даты записаны в одном из допустимых форматов кодировки согласно W3C .
2005-02-21 2005-02-21T18:00:15+00:00
Время задавать не требуется (по умолчанию устанавливается значение 00:00:00Z), однако если вы все же делаете это, не забудьте указать часовой пояс.
Недопустимое значение тега
В файле Sitemap содержится один или несколько тегов с недопустимым значением. Проверьте спецификации для соответствующего типа файла Sitemap (индекс, стандартный, видео и т. п.).
Недопустимый URL
В файле Sitemap указан недействительный URL. Возможно, он содержит недопустимые символы (пробелы, кавычки и т. д.) или другие ошибки форматирования, например имеет префикс htp:// вместо http:// .
Отсутствует URL значка видео
В одной или нескольких записях о роликах отсутствует ссылка на значок видео. Убедитесь, что в тегах указаны URL всех таких значков.
Отсутствует название видео
В некоторых записях о роликах отсутствует название. Убедитесь, что в тегах
указаны названия всех видео.Неверный формат индекса Sitemap: вложенные файлы индекса Sitemap
В одной или нескольких записях файла индекса Sitemap указан его собственный URL или URL другого файла индекса Sitemap. Файл индекса Sitemap может содержать ссылки только на обычные файлы Sitemap, а не на индексы.
Удалите записи, указывающие на индексы Sitemap, и повторно отправьте файл.
Ошибка синтаксического анализа
Google не удалось выполнить синтаксический анализ XML-контента вашего файла Sitemap.
Часто это происходит из-за неэкранированных символов в одном из URL. Как и в файлах XML, любые значения данных (включая адреса URL) должны использовать экранирующие коды для некоторых символов, таких как & » » . Проверьте, правильно ли настроено экранирование URL .
Временная ошибка
Файл Sitemap не удалось обработать из-за временной ошибки системы. Как правило, при этой ошибке отправлять файл заново нет необходимости. Робот Google попробует получить его позже. Если это сообщение об ошибке будет отображаться и по прошествии нескольких часов, отправьте Sitemap ещё раз.
Слишком много файлов Sitemap в файле индекса
В файле индекса более 50 000 файлов Sitemap. Разделите его на несколько и убедитесь, что в каждом указано не более 50 000 файлов Sitemap.
Слишком много URL в файле Sitemap
В файле Sitemap более 50 000 URL. Разделите его на несколько, каждый из которых содержит до 50 000 адресов. Для удобства можно создать файл индекса Sitemap .
Неподдерживаемый формат файла
Вы создали некорректный файл.
Чтобы избежать самых частых ошибок XML, проверьте следующее:
- В файлах Sitemap должны быть правильные заголовки. Например, если содержание файла представляет информацию о видео, заголовок должен быть следующим:
- Пространство имен в заголовке должно иметь вид http://www.sitemaps.org/schemas/sitemap/0.9 (не .9 ).
- Все атрибуты XML нужно заключать в одинарные («) или двойные («) кавычки, которые должны быть только прямыми. Внимание! Текстовые редакторы, например Microsoft Word, могут автоматически менять их на фигурные.
Несоответствующий путь: отсутствует префикс www
Путь к файлу Sitemap не содержит префикс www (например, http://example.com/sitemap.xml), однако этот префикс есть во всех перечисленных в файле URL (например, http://www.example.com/myfile.html).
Измените файл Sitemap, удалив префикс www из всех URL.
Несоответствующий путь: имеется префикс www
Путь к файлу Sitemap содержит префикс www (например, http://www.example.com/sitemap.xml), однако этого префикса нет во всех перечисленных в файле URL (например, http://example.com/myfile.xml).
Измените файл Sitemap, добавив префикс www во все URL.
Неправильно указано пространство имен
В корневом элементе файла Sitemap неверно задано или отсутствует пространство имен, содержится орфографическая ошибка или неправильный URL.
Убедитесь, что пространство имен задано правильно с учетом типа файла. Пример:
- Файл Sitemap: xmlns=»http://www.sitemaps.org/schemas/sitemap/0.9″
- Файл Sitemap для видео: xmlns:video=»http://www.google.com/schemas/sitemap-video/1.1″
- Файл индекса Sitemap:
Файл Sitemap начинается с пробела
Ваш файл Sitemap начинается с пробела, а не с пространства имен. Файлы XML должны начинаться с декларации XML , в которой указана используемая версия XML.
Эта ошибка не помешает Google обработать ваш файл Sitemap, однако лучше удалить пробел, чтобы файл соответствовал стандартам XML и сообщение об этой ошибке больше не появлялось.
Ошибка HTTP (
конкретный код )При попытке скачать файл Sitemap произошла ошибка HTTP . В сообщении о ней будет указан код статуса (например, 404). Убедитесь, что URL файла Sitemap записан верно и файл находится в указанном месте. Затем повторно отправьте его в Google.
Значок видео слишком велик
Значок видео, указанный в файле Sitemap, слишком велик. Измените его размер до 160 x 120 пикселей. При необходимости обновите файл Sitemap и повторно отправьте его в Google.
Значок видео слишком мал
Значок видео, указанный в файле Sitemap, слишком мал. Измените его размер до 160 x 120 пикселей. При необходимости обновите файл Sitemap.
Местоположения видео и страницы воспроизведения совпадают
Указанные в файле Sitemap URL видео и страницы воспроизведения не должны совпадать. Если используются оба тега ( и ), URL должны различаться.
URL местоположения видео указывает на страницу воспроизведения
Файл Sitemap содержит URL, доступ к которым заблокирован в файле robots.txt
Роботу Google не удалось обработать файл Sitemap, поскольку доступ к нему или его содержанию запрещен в файле robots.txt . С помощью инструмента проверки URL выясните, какой именно файл вызывает проблему, и внесите в robots.txt необходимые изменения.
Эта информация оказалась полезной?
Как можно улучшить эту статью?
Яндекс Вебмастер — руководство по настройке сайта в поиске Яндекса
В этой статье, я подробно расскажу о том, как добавить ваш сайт в Яндекс Вебмастер.
Что такое Яндекс? – это ведущая поисковая система в России, занимающая более 60% рынка. А Яндекс Вебмастер – это инструмент, который позволит вам добавить свой сайт в поисковую систему Яндекса.
Яндекс предоставляет инструменты для веб-мастеров на русском и английском языках. Это облегчает веб-мастерам настройку и мониторинг своих сайтов.
Добавление вашего сайта в Яндекс, повышает вероятность привлечения миллионов пользователей из России, даже если контент вашего сайта в основном на английском языке.
Для чего нужен Яндекс Вебмастер
Для этого есть несколько причин, по которым вам следует добавить свой сайт и проверять его. С помощью инструментов Яндекса, вы сможете:
- Следить за статистикой и отчетами о вашем сайте, чтобы проанализировать ваш сайт в поисковых системах;
- Анализировать ваши страницы на совместимость с мобильными устройствами и узнать, поддерживают ли они мобильность;
- Обнаружить и устранить типичные проблемы сайта. Проверить, полностью ли вы соблюдаете правила поисковой системы. Вы получите уведомления в случае нарушений;
- Управлять индексированием и структурой сайта, с помощью инструментов поисковой системы;
- И многое другое.
Регистрация и вход в Яндекс Вебмастер
Для входа в Вебмастер, вам потребуется аккаунт Яндекса. Создайте учетную запись с вашими данными, и вы получите доступ к нескольким службам, включая Яндекс Вебмастер.
После авторизации, необходимо будет добавить сайт в систему, для начала процесса настроек. Помимо выпадающего меню «Выбрать сайт», в правом верхнем углу, вы увидите значок +. Нажмите на значок, чтобы добавить ваш сайт.
Затем, введите адрес сайта на этой странице. После чего, убедитесь, что вы ввели правильный URL-адрес, учитывая версию WWW и протокол HTTPS вашего сайта.
Подтвердите, что вы являетесь владельцем домена. Вам нужно будет добавить на свой сайт метатег, предоставленный Яндексом, чтобы доказать, что вы являетесь владельцем домена. Также можно можно подтвердить права с помощью HTML-файла, который необходимо загрузить в главный каталог сайта. Или же добавить в DNS домена TXT-запись. Ниже мы рассмотрим все эти способы и вы сможете выбрать любой, удобный для вас.
Добавление метатега, в раздел заголовка вашего сайта – будет самым простым способом.
Добавление метатега с помощью плагина Yoast SEO
Если вы используете плагин Yoast SEO, то есть возможность добавить метатег удобным способом, через настройки плагина.
В панели управления WordPress, перейдите в раздел SEO > Панель инструментов, для настроек плагина Yoast SEO.
В разделе общих настроек, перейдите во вкладку «Инструменты для веб-мастеров», и введите мета-тег в поле для верификации Яндекса.
Вы можете вставить как часть чисел из вашего уникального метатега, так и весь код целиком (в этом случае при сохранении плагин обрежет лишнюю часть кода). И обязательно нажмите на «Сохранить изменения». После добавления метатега, необходимо будет вернуться в Яндекс Вебмастер и пройти проверку (об этом смотрите ниже). Перейти →
Как Добавить TXT запись в DNS
Если вы знакомы с DNS и знаете, как добавлять записи TXT, этот способ будет самым простым, для проверки вашего сайта.
Нажмите на вкладку DNS-запись и скопируйте уникальное значение, предоставленное вам. Вам необходимо скопировать весь код, включая текст подтверждения.
Добавление TXT записи в DNS на примере REG.RU
Я приобретал свой домен у регистратора доменных имен: REG.RU. Поэтому, ниже, я покажу вам, как добавить TXT запись, на примере этого регистратора. Порядок добавления, у других провайдеров похожий. И так, для добавления TXT записи, необходимо перейти в раздел DNS своего домена:
После авторизации, в личном кабинете – перейдите в раздел ваших услуг.
Далее, переходим в раздел доменов, в списке выбираем необходимый домен, затем переходим в DNS-серверы домена.
Если при регистрации домена, вы выбрали для него DNS-серверы ns1.reg.ru и ns2.reg.ru, то у вас будет возможность добавить TXT запись в этом пункте. На этой странице нажмите «Добавить запись», и выберите тип записи TXT. Добавьте скопированную запись и нажмите «Готово».
Готово! После добавления TXT записи, необходимо будет перейти в Яндекс Вебмастер и пройти проверку (об этом смотрите ниже). Перейти →
Как добавить TXT запись в DNS через ISPmanager
Если вы используете хостинг на reg, и для домена указаны DNS-серверы ns1.hosting.reg.ru и ns2.hosting.reg.ru, то необходимо перейти в панель управления хостингом и там прописать TXT запись. Я покажу вам на примере панели управления ISPmanager.
В ISPmanager, на главной переходим в раздел «Доменные имена», выбираем необходимый домен из списка и жмем «Записи».
В открывшейся странице нажимаем «Создать», после чего – вводим домен вашего сайта, выбираем тип записи TXT, и в последней строчке вставляем текст записи.
После того, как мы добавили TXT запись, необходимо будет вернуться в Яндекс Вебмастер и пройти проверку (об этом смотрите ниже). Перейти →
Подтверждение прав с помощью HTML-файла
Если вам удобно, то вы можете использовать этот метод подтверждения. для этого необходимо создать и загрузить HTML файл, в корневой каталог вашего сайта. Рассмотрим метод на примере панели управления хостингом ISPmanager.
Для начала необходимо будет скачать HTML файл из Яндекс Вебмастера.
После того, как файл скачался, его необходимо будет загрузить в корень сайта. Рассмотрим пример на панели управления хостингом ISPmanager.
После авторизации, переходим в менеджер файлов и открываем корень сайта, который будет расположен по пути: /www/yrokiwp.ru/. В этом окне необходимо кликнуть по вкладке «Закачать», после чего выбрать нужный файл.
Готово! После того, как мы загрузили файл в корень сайта, необходимо будет вернуться в Яндекс Вебмастер и пройти проверку.
Завершение проверки вашего сайта
После завершения любого метода подтверждения, на странице подтверждения – нажмите «Проверить».
Яндекс проверит, успешно ли вы завершили процесс. В зависимости от метода проверки этот шаг может занять до двух дней.
Я использовал метод подтверждения, с помощью добавления html-файла в корень сайта. Проверка этим способом происходит в течение нескольких минут!
После проверки – ваш сайт должен появиться в списке сайтов, в раскрывающемся меню.
Теперь, в панели вебмастера вашего сайта – вам доступны настройки и отчеты, которые мы рассмотрим ниже.
Как добавить sitemap в Яндекс Вебмастер
Одним из важных пунктов, который я рекомендую сделать, после проверки вашего сайта, является добавление карты сайта вашего сайта.
Чтобы добавить карту сайта, в меню слева – перейдите в «Настройки индексирования» > «Файлы Sitemap».
Введите URL-адрес Sitemap вашего сайта и нажмите «Добавить». Инструмент веб-мастера начнет обработку вашей карты сайта.
Если у вас нет карты сайта, то для ее создания – воспользуйтесь одним из плагинов: Yoast SEO, All in One SEO Pack, Sitemap Google XML или JetPack.
Как создать sitemap с помощью плагина Yoast SEO
Для тех, кто использует плагин Yoast SEO, модуль XML карты сайта автоматически включается и создает XML, после активации плагина. А для того, чтобы проверить это – перейдите в раздел «Общие» > «Возможности», и посмотрите, включена ли функцию XML sitemap. Вы можете найти свою XML sitemap, добавив /sitemap.xml в конец URL вашего сайта.
Как создать sitemap с помощью плагина JetPack
Если вы используете плагин JetPack, перейдите в настройки и в разделе «Трафик» активируйте модуль Sitemaps, и вы получите файл Sitemap, в котором перечислены URL-адреса записей и страниц вашего сайта.
Проверка sitemap в Яндекс Вебмастере
В некоторых случаях, если у вас возникают проблемы с отправкой карты сайта, вы можете использовать встроенный в Яндекс инструмент проверки Sitemap. Чтобы проверить, нет ли ошибок в вашей карте сайта – перейдите в «Инструменты» > «Валидатор Sitemap».
Теперь вы можете начать изучать всю статистику, связанную с вашим сайтом. А также изменять настройки в инструментах Яндекс Вебмастера.
Сводка
В сводном разделе отображаются все основные сведения о выбранном сайте, например панель инструментов. Вы можете проверить проблемы сайта, поисковый трафик, ошибки сканирования и многое другое.
Диагностика сайта
Этот раздел состоит из двух частей – диагностика сайта и безопасность и нарушения. В разделе «Диагностика» будет показана последняя проблема, обнаруженная Яндексом за сегодняшний день. Нажмите на кнопку «Другие дни», чтобы просмотреть историю проблем на вашем сайте.
Ошибки
Нажмите на ссылку «Просмотреть все, что проверяет Вебмастер», чтобы просмотреть статус вашего сайта по каждой категории ошибок. Вы увидите, что все ошибки относятся к категориям фатальных, критических, возможных проблем и рекомендаций.
Убедитесь, что статус каждого типа отображается как «Все в порядке». В противном случае нажмите кнопку «Проверить», чтобы начать проверку. Для завершения проверки, может потребоваться до 14 дней.
Безопасность и нарушения
Раздел «Безопасность и нарушения» покажет все ошибки безопасности, присутствующие на вашем сайте. Убедитесь, что нет никаких нарушений, чтобы Яндекс-бот мог сканировать и индексировать ваш сайт в результатах поиска.
Поисковые запросы
Раздел поисковых запросов покажет вам все запросы, показы и клики по вашему сайту за выбранный период времени. Вы можете просмотреть данные, отфильтрованные по странам, устройствам, а также фильтр по позиции показов, кликов, средних результатов поиска и CTR %.
Яндекс позволяет создавать группы и классифицировать ваши запросы, чтобы вы могли отфильтровать соответствующие запросы на основе группы.
Индексирование
Раздел индексации – один из важных разделов в учетной записи инструментов для вебмастера, предлагающий различную информацию о состоянии индексации вашего сайта в поисковой системе Яндекса.
Проверьте статистику сканирования, чтобы убедиться, что Яндекс сканирует все ваши новые страницы, а также просмотрите ошибки сканирования, указывающие код состояния HTTP.
Используйте инструмент «Проверить статус URL» или «Мониторинг важных страниц», чтобы добавить важные страницы своего сайта и отслеживать статус индексации в Яндексе.
Помните, что этот инструмент не предназначен для сканирования или индексации, он предназначен только для отслеживания изменений в индексах важных страниц. Вы можете добавить до 100 важных страниц со своего сайта для мониторинга.
Используйте инструмент «Переобход страниц», для запроса индексации ваших страниц в поисковой системе Яндекса.
Переезд сайта
Используйте инструмент «Переезд сайта», при переносе сайта на другой домен. Сначала необходимо добавить и подтвердить право собственности вашего сайта на новый домен в учетной записи инструментов.
Затем используйте этот инструмент, чтобы отправить запрос на миграцию, чтобы сохранить свой рейтинг в поисковых системах. Вы также можете использовать этот инструмент при смене домена с помощью www или https.
Скорость обхода
Яндекс бот – один из агрессивных роботов для сканирования. Хотя вы не увидите много проиндексированных страниц, сканирование будет происходить часто. Это может повлиять на мощность сервера или повлиять на реальных пользователей на вашем сайте. Особенно если вы отправили сайт в другие поисковые системы, такие как Google, Bing и Baidu, тогда вам нужно ограничить скорость сканирования Яндекс-бота вручную.
Нажмите на опцию «Установить вручную» и выберите 3 запроса в секунду, чтобы установить скорость сканирования для Яндекс-бота. Это поможет сэкономить большую пропускную способность сервера.
Ссылки
Раздел внутренних ссылок покажет все ссылки вашего сайта с ошибками, такими как 403, 500 и другие типы. Вы можете легко найти неработающие ссылки на вашем сайте и исправить их, чтобы избежать ошибки 404.
Раздел внешних ссылок покажет количество, список внешних ссылок и сайтов, которые указывают на ваш сайт. Это общий признак того, что большее количество внешних ссылок поможет вам получить хорошие результаты в поиске.
Информация о сайте
В этом разделе, вы можете настроить региональность, регистр имени сайта (для названия сайта), быстрые ссылки и т.д. Как и все другие поисковые системы, Яндекс автоматически обрабатывает ссылки сайта. Вы не можете вручную добавлять ссылки на свою страницу.
Настройки регистра имени сайта позволяют изменить отображение вашего сайта в результатах поиска Яндекса. Например, вы можете изменить регистр имени сайта с «yrokiwp» на «YrokiWP».
Турбо Страницы
Турбо-страницы похожи на AMP от Google. Они нужны, для создания ускоренной мобильной версии вашего сайта. Вы должны настроить параметры, чтобы включить и настроить турбо страницы. Вместе с ними, я рекомендую использовать еще и Google AMP.
Инструменты
Яндекс предлагает следующие инструменты, чтобы помочь вебмастеру анализировать сайты:
- Анализ Robots.txt;
- Анализ Sitemap;
- Проверка ответа сервера;
- Удаление страниц из поиска;
- Проверка мобильных страниц;
- Валидатор XML;
- Валидатор микроразметки.
Эти инструменты доступны в меню «Инструменты», в левой части навигации. А также доступны непосредственно из выпадающего меню, расположенного в верхней панели навигации.
Настройки
Меню настроек содержит четыре опции – уведомления, права доступа, привязка к Яндекс Метрике и иконка ИКС. Установите, как вы хотите получать уведомления для каждого параметра, например, для получения еженедельного отчета и изменений в статусах вашего сайта.
Раздел «Права доступа» покажет вам подтвержденных на данный момент владельцев сайта, вместе с кодом подтверждения. Вы можете сбросить доступ и передать управление любому владельцу, из этого раздела.
Полезные сервисы
Это дополнительные услуги Яндекса, такие как Бизнес-справочник Яндекса, онлайн-чаты для бизнеса, электронная почта Яндекса для домена и т. д.
Смотрите видео о том, как добавить сайт в Яндекс Вебмастер.
Элитный отдых
Яндекс.Вебмастер webmaster.yandex.ru Возможность сообщить Яндексу о новых и удаленных страницах, настроить индексирование и улучшить представление сайта в результатах поиска. Формы для проверки орфографии, жалобы на спам и проч. Проверить файл Sitemap Валидатор поможет вам проверить корректность файлов Sitemap… Проверить орфографию Инструмент в Яндекс.Вебмастере поможет проверить… Проверить robots.txt Чтобы проверить правильность обработки вашего файла… Проверить XML-фид Валидатор поможет вам проверить экспортные XML-файлы для… Проверить микроразметку Проверка правильности микроформатов и микроданных… Содержимое сайта Вы можете передавать Яндексу данные о содержимом своего… Яндекс.Вебмастер — Станьте заметнее в Яндексе webmaster.yandex.ru›Передаче данных Станьте заметнее в Яндексе. Расскажите пользователям о содержимом сайта уже на странице результатов поиска Яндекса. Для партнёров Как стать партнёром Познакомиться Яндекс.Эксперт — …принципы индексирования в Вебмастер edu.expert.yandex.ru›Webmaster/3 В этом курсе мы расскажем, как добавить сайт в Яндекс, грамотно управлять его индексированием и настраивать видимость вашего ресурса в поиске. Яндекс Вебмастер: добавление сайта, анализ разделов… SEOslim.ru›yandex-2/panel…yandex-webmaster.html Яндекс Вебмастер — это один из таких сервисов, где оптимизатор с легкостью сможет отследить: уровень работоспособности сайта, количество индексируемых страниц… Яндекс Вебмастер — индексация, внешние ссылки… KtoNaNovenkogo.ru›…webmaster…vebmasterov-yandeksa… Инструменты Yandex Webmaster доступные без регистрации Добавление сайта в Яндекс Вебмастер Вход в панель Яндекса для вебмастеров Что такое Яндекс Вебмастер | Блог SEO Дилетанта amateurblogger.ru›chto-takoe-yandeks-vebmaster/ Поэтому сегодня пойдет речь о панели инструментов для веб-мастеров от Яндекса — Яндекс Вебмастер. План такой Яндекс — Википедия ru.wikipedia.org›Яндекс «Я́ндекс» — российская ИТ-компания, владеющая одноимённой системой поиска в Сети и интернет-порталом. Поисковая система «Яндекс» является четвёртой среди поисковых систем мира по количеству обработанных поисковых запросов… Яндекс вебмастер в новостях ЦБ назначил временную администрацию в банке «Интеркоммерц» malina.am11:33 сегодня Юлия Ахтамянова Служба информации Malina.am Фото: maps.yandex.ru. В «Интеркоммерце» введена временная администрация, сообщает пресс-служба Центробанка. Молодежный министр здравоохранения Романова Екатерина… karelinform.ru10:09 сегодня В Воронежском заповеднике выберут лучшие мягкие игрушки bloknot-voronezh.ru10:50 сегодня Яндекс Вебмастер — инструменты для анализа сайта… goldbusinessnet.com›…vebmastera/panel…yandeks/ Здоровья вам, дорогие читатели! Сегодня расскажу, какие инструменты предлагает панель Яндекса для облегчения оптимизации, а также продвижения сайта. Вебмастер Яндекс является комплексом средств поисковой системы… Центр Google для веб-мастеров: инструменты, справка… google.ru›webmasters/ Учебные материалы для веб-мастеров. Видео и статьи о том, что можно сделать, чтобы ваш сайт находили в Google Поиске. Вебмастер Яндекс (webmaster.yandex.ru) и Гугл… raskruty.ru›webmaster-yandex.html Чтобы войти в панель вебмастера от Яндекса — webmaster.yandex.ru необходимо либо зарегистрироваться на соответствующей странице, либо… Вместе с «яндекс вебмастер» ищут: гугл вебмастер яндекс директ яндекс вордстат google webmaster гугл аналитикс яндекс метрика google вебмастер метрика статистика ключевых слов на яндексе вордстат 12345дальше Москва BingGoogleMail.ru
файлов Sitemap — Webmaster. Справка
Используйте файл Sitemap, чтобы проинформировать Яндекс о текущей структуре сайта: укажите специальную директиву в robots.txt или добавьте ее в Яндекс.Вебмастер.
Формат файла Sitemap и требования.
- Скачать карту сайта
- Обновить карту сайта
- Удалить карту сайта
- FAQ
С Яндекс.Вебмастером вы можете:
- Перейти в раздел файлов Sitemap.
Выберите сайт из списка.
Введите URL-адрес файла. Например, https://example.com/sitemap.xml.
Нажмите кнопку Добавить.
Файл помещен в очередь обработки. Робот загрузит его в течение двух недель. Каждый добавленный файл, включая те, которые перечислены в файле индекса Sitemap, обрабатывается роботом отдельно.
После загрузки файла вы увидите один из статусов:
Статус | Описание | Примечание |
---|---|---|
«ОК» | Файл сформирован правильно и загружен в базу данных робота. | Дата последней загрузки отображается рядом с файлом. Проиндексированные страницы появляются в результатах поиска в течение двух недель. |
«Перенаправление» | URL-адрес перенаправляет на другой адрес. | Удалите перенаправление и сообщите роботу об обновлении. |
«Ошибка» | Файл сформирован неправильно | Щелкните ссылку Ошибка, чтобы просмотреть подробности. Отредактируйте файл и сообщите роботу об обновлении |
«Не проиндексировано» | Когда робот пытается загрузить файл Sitemap, сервер возвращает HTTP-статус, отличный от 200 | Проверьте, доступен ли файл роботу .Для этого воспользуйтесь инструментом проверки ответа сервера. Укажите полный путь к файлу. Если файл недоступен, обратитесь к администратору сайта или хостинг-сервера. Если файл доступен, уведомить робота об обновлении |
Доступ к файлу запрещен в robots.txt с помощью директивы Disallow | Разрешить доступ к Sitemap и сообщить роботу об обновлении |
Если вы меняли файл Sitemap, добавленный в Яндекс.Вебмастер, удалять и загружать заново не нужно. Робот регулярно проверяет файл на наличие обновлений и ошибок.
Чтобы ускорить индексацию файлов, щелкните значок. Если вы используете файл индекса Sitemap, вы можете запустить обработку каждого файла, указанного в нем. Робот загрузит данные в течение двух недель. Вы можете использовать эту функцию до 10 раз для каждого хоста.
Когда у вас закончатся все попытки, вы сможете повторить попытку через 30 дней после первой попытки. Точная дата указана в Яндекс.Веб-мастер.
Файлы, добавленные на страницу файлов Sitemap, можно удалить из Яндекс.Вебмастера.Выберите файл из списка.
- Щелкните значок рядом с файлом.
- Как мне настроить Sitemap для большого сайта?
Робот недавно просканировал файл Sitemap и еще не обработал его.Подождите две недели. Если вы используете файл индекса Sitemap с несколькими файлами, их обработка может занять больше времени, чем один файл Sitemap.
Сайт ранее был недоступен для робота-индексатора. Вам нужно дождаться следующего посещения сайта роботом.
- Доступ к Sitemap запрещен в файле robots.txt. Сервер возвращает код HTTP, отличный от 200, когда робот пытается получить доступ к Sitemap. Проверьте, доступен ли файл роботу. Для этого воспользуйтесь инструментом проверки ответа сервера.Укажите полный путь к файлу.
Что файл Sitemap принадлежит тому сайту, для которого вы добавили его в Яндекс.Вебмастер. Убедитесь, что адрес сайта совпадает, включая протокол (HTTP / HTTPS) и префикс www (если он есть).
- Ответ сервера на запрос Sitemap.Если доступ к Sitemap запрещен в файле robots.txt или при попытке робота получить доступ к нему возвращается код HTTP, отличный от 200, файл не будет обработан роботом. Если при проверке отображается «Запрещено метатегом noindex», это не указывает на ошибку. Мета-тег noindex предотвращает включение файла в базу данных поиска, но не мешает роботу обрабатывать его содержимое.
- Файл Sitemap с инструментом анализа файлов Sitemap. Исправьте ошибки, если они будут обнаружены.
Карта сайта обычно включает все важные страницы сайта.Если на сайте много страниц, вы можете удалить из карты сайта известные Яндексу страницы и добавлять в файл только новые или часто обновляемые.
Если вы используете файл индекса Sitemap, отметьте часто обновляемые файлы Sitemap тегом lastmod.
Чтобы узнать, какие страницы сайта уже известны Яндексу, перейдите на страницу в Яндекс.Вебмастере.
Sitemap отображается в сервисе как исключенная страница со статусом «Неверный формат документа».Файл Sitemap (и другие файлы XML) отображаются как исключенные страницы.Однако это используется только в информационных целях и не влияет на индексацию сайта или обработку файлов Sitemap.
Файл Sitemap может отображаться в группе исключенных страниц, если робот попытался проиндексировать его как обычную страницу. Несмотря на это, файлы Sitemap не участвуют в поиске.
Ошибка «Неизвестный тег» при обработке файла Sitemap.Файл Sitemap может содержать только определенные элементы XML. Если Яндекс.Вебмастер находит в файле другие элементы (например, ссылку на мобильную версию), он выдает ошибку «Неизвестный тег».Робот игнорирует неподдерживаемые элементы при обработке Sitemap и учитывает данные из поддерживаемых элементов. Следовательно, вам не нужно изменять файл Sitemap.
При изменении содержимого файла информация в Яндекс.Вебмастере обновляется в течение двух недель.
Файл Sitemap имеет статус «Не проиндексирован».Файл Sitemap может быть не проиндексирован по нескольким причинам:
Если есть проблема с доступом, обратитесь к администратору сайта или сервера, на котором он расположен. Если файл скомпилирован правильно, он будет повторно обработан в течение двух недель с момента последнего запроса робота. Вы можете проверить файл с помощью инструмента анализа файлов Sitemap.
Файл Sitemap находится в состоянии «Документ не содержит текста».Этот статус отображается в средстве проверки ответа сервера и уведомляет о том, что робот не может проиндексировать файл как обычную страницу сайта и включить его содержимое в результаты поиска.Этот статус не влияет на обработку Sitemap. Чтобы проверить правильность файла Sitemap, воспользуйтесь инструментом проверки Sitemap в Яндекс.Вебмастере.
Файл Sitemap имеет статус «URL был исключен из индексации с тегом« noindex »»Этот статус отображается в инструменте проверки ответа сервера и сообщает, что файл закрыт для индексации — как правило, записывается запрет в HTTP-заголовке X-Robots-Tag. Директива запрещает файлу появляться в результатах поиска, но не влияет на обработку содержимого Sitemap.Для проверки правильности файла Sitemap воспользуйтесь инструментом проверки Sitemap в Яндекс.Вебмастере.
Sitemap не обрабатывается.Обычно файл Sitemap обрабатывается роботом в течение двух недель после его добавления в Яндекс.Вебмастер. Если этого не произошло, проверьте:
Использование файла Sitemap — Webmaster. Справка
Карта сайта — это файл со ссылками на страницы сайта. Файл информирует поисковые системы о текущей структуре сайта. Яндекс поддерживает форматы XML и TXT. Формат XML позволяет передавать дополнительную информацию.
Примечание. Яндекс не гарантирует, что все URL в файле будут отображаться в результатах поиска.
- Нужен ли мне файл Sitemap?
- Форматы, поддерживаемые Яндексом
- Требования к файлам
- Как создать файл и сообщить о нем Яндексу?
- FAQ
Яндекс разрабатывает специальные алгоритмы, чтобы робот-индексатор узнавал о сайте.Например, с помощью и ссылки с одной страницы на другую. Иногда робот может пропускать страницы. Используйте файл Sitemap, если на вашем сайте есть:
Яндекс поддерживает протокол Sitemap. Для отправки информации используйте следующие элементы:
Тег | Обязательно | Описание |
---|---|---|
loc | Да | Адрес страницы. |
lastmod | Нет | Дата последнего обновления страницы. Максимальный размер — 100 байт. |
changefreq | Нет | Частота смены страниц. Максимальный размер — 100 байт. |
приоритет | Нет | Важность страницы. Робот загружает страницы одну за другой, отсортированные по наличию и значению коэффициента от 0,0 до 1,0. Укажите значение для URL-адресов, которые наиболее важны для вашего сайта. Максимальный размер — 100 байт. |
Пример:
Xml version = "1.0 "encoding =" UTF-8 "?>
http://www.example.com/page1.html
1 января 2005 г.
ежемесячно
0,8
...
Используйте этот формат только для информирования об URL-адресах страниц.Пример:
https: // www.example.com/page1.html
https://www.example.com/page2.html
Вы также можете использовать Sitemap для отправки информации о локализованных страницах сайта и об изображениях (см. раздел справки Яндекс.Изображений).
Для отправки информации о видеороликах в файле Sitemap укажите ссылки на XML-каналы (подробнее см. Справку Яндекс.Видео).
Ограничение. Поиск Яндекса не поддерживает отправку каналов RSS и Atom с файлом Sitemap.
- Используйте кодировку UTF-8.Робот Яндекса распознает кириллические URL как в исходном, так и в закодированном формате.
- Максимальное количество ссылок — 50 000. Вы можете разделить Sitemap на несколько файлов и указать их в файле индекса Sitemap.
Максимальный размер несжатого файла — 50 МБ.
Укажите только ссылки на страницы домена, в котором будет расположен файл.
Поместите файл в тот же домен, что и сайт, для которого он был создан.
При доступе к файлу сервер должен вернуть HTTP-код 200 OK.
- Определите канонические URL-адреса для страниц, которые будут включены в файл Sitemap. Это необходимо, если на сайте несколько страниц с похожей информацией.
Выберите формат и создайте файл с помощью одного из сторонних ресурсов.
- Проверьте файл с помощью инструмента анализа файлов Sitemap.
- Укажите ссылку на файл в файле robots.txt или в разделе Файлы Sitemap в Яндекс.Вебмастере.
При необходимости вы можете удалить информацию о Sitemap.
- Как мне настроить Sitemap для большого сайта?
Робот недавно просканировал файл Sitemap и еще не обработал его.Подождите две недели. Если вы используете файл индекса Sitemap с несколькими файлами, их обработка может занять больше времени, чем один файл Sitemap.
Сайт ранее был недоступен для робота-индексатора. Вам нужно дождаться следующего посещения сайта роботом.
- Доступ к Sitemap запрещен в файле robots.txt. Сервер возвращает код HTTP, отличный от 200, когда робот пытается получить доступ к Sitemap. Проверьте, доступен ли файл роботу. Для этого воспользуйтесь инструментом проверки ответа сервера.Укажите полный путь к файлу.
Что файл Sitemap принадлежит тому сайту, для которого вы добавили его в Яндекс.Вебмастер. Убедитесь, что адрес сайта совпадает, включая протокол (HTTP / HTTPS) и префикс www (если он есть).
- Ответ сервера на запрос Sitemap.Если доступ к Sitemap запрещен в файле robots.txt или при попытке робота получить доступ к нему возвращается код HTTP, отличный от 200, файл не будет обработан роботом. Если при проверке отображается «Запрещено метатегом noindex», это не указывает на ошибку. Мета-тег noindex предотвращает включение файла в базу данных поиска, но не мешает роботу обрабатывать его содержимое.
- Файл Sitemap с инструментом анализа файлов Sitemap. Исправьте ошибки, если они будут обнаружены.
Карта сайта обычно включает все важные страницы сайта. Если на сайте много страниц, вы можете удалить из карты сайта известные Яндексу страницы и добавлять в файл только новые или часто обновляемые.
Если вы используете файл индекса Sitemap, отметьте часто обновляемые файлы Sitemap тегом lastmod.
Чтобы узнать, какие страницы сайта уже известны Яндексу, перейдите на страницу в Яндекс.Вебмастере.
Sitemap отображается в сервисе как исключенная страница со статусом «Неверный формат документа».Файл Sitemap (и другие файлы XML) отображаются как исключенные страницы. Однако это используется только в информационных целях и не влияет на индексацию сайта или обработку файлов Sitemap.
Файл Sitemap может отображаться в группе исключенных страниц, если робот попытался проиндексировать его как обычную страницу. Несмотря на это, файлы Sitemap не участвуют в поиске.
Ошибка «Неизвестный тег» при обработке файла Sitemap.Файл Sitemap может содержать только определенные элементы XML.Если Яндекс.Вебмастер находит в файле другие элементы (например, ссылку на мобильную версию), он выдает ошибку «Неизвестный тег». Робот игнорирует неподдерживаемые элементы при обработке Sitemap и учитывает данные из поддерживаемых элементов. Следовательно, вам не нужно изменять файл Sitemap.
При изменении содержимого файла информация в Яндекс.Вебмастере обновляется в течение двух недель.
Файл Sitemap имеет статус «Не проиндексирован».Файл Sitemap может быть не проиндексирован по нескольким причинам:
Если есть проблема с доступом, обратитесь к администратору сайта или сервера, на котором он расположен. Если файл скомпилирован правильно, он будет повторно обработан в течение двух недель с момента последнего запроса робота. Вы можете проверить файл с помощью инструмента анализа файлов Sitemap.
Файл Sitemap находится в состоянии «Документ не содержит текста».Этот статус отображается в средстве проверки ответа сервера и уведомляет о том, что робот не может проиндексировать файл как обычную страницу сайта и включить его содержимое в результаты поиска.Этот статус не влияет на обработку Sitemap. Чтобы проверить правильность файла Sitemap, воспользуйтесь инструментом проверки Sitemap в Яндекс.Вебмастере.
Файл Sitemap имеет статус «URL был исключен из индексации с тегом« noindex »»Этот статус отображается в инструменте проверки ответа сервера и сообщает, что файл закрыт для индексации — как правило, записывается запрет в HTTP-заголовке X-Robots-Tag. Директива запрещает файлу появляться в результатах поиска, но не влияет на обработку содержимого Sitemap.Для проверки правильности файла Sitemap воспользуйтесь инструментом проверки Sitemap в Яндекс.Вебмастере.
Sitemap не обрабатывается.Обычно файл Sitemap обрабатывается роботом в течение двух недель после его добавления в Яндекс.Вебмастер. Если этого не произошло, проверьте:
200 | OK | |
403 | INVALID_USER_ID | Идентификатор пользователя, выдавшего токен, отличается от указанного в запросе. В приведенных ниже примерах |
404 | HOST_NOT_VERIFIED | Права на управление сайтом не проверены. |
HOST_NOT_LOADED | Данные сайта еще не загружены в Яндекс.Вебмастер. | |
SITEMAP_NOT_FOUND | Не удалось найти файл Sitemap для этого сайта. |
Как отправить карту сайта в Яндекс Инструменты для веб-мастеров?
Sitemap — это инструмент для информирования поисковых систем и пользователей о структуре вашего сайта.Это помогает легко перемещаться по сайту и понимать важность каждой конкретной страницы по сравнению со всем сайтом. Существует два типа файлов Sitemap: один — это карта сайта в формате HTML, а другой — в формате XML. HTML-карта сайта — это простая веб-страница, предназначенная для ориентации пользователей-людей, в то время как XML-карта сайта предназначена для управления сканерами поисковых систем.
В этой статье мы расскажем, как отправить карту сайта в поисковую систему Яндекса через учетную запись Yandex Webmaster Tools.
Получение учетной записи Яндекс Инструменты для веб-мастеров
Веб-мастера могут отправить свою карту сайта в поисковую систему Яндекса только через учетную запись Yandex Webmaster Tools.Чтобы добавить Sitemap, вы должны успешно добавить и подтвердить свой сайт. Вы можете прочитать отдельную статью, в которой объясняется, как зарегистрироваться и подтвердить свой сайт в Яндекс.
Добавление карты сайта в Яндекс
После того, как вы успешно добавили свой сайт в учетную запись Яндекса для веб-мастеров, перейдите на вкладку « Файлы Sitemap » в разделе « Индексирование ».
Добавление XML Sitemap в Яндекс
Введите URL-адрес XML-файла Sitemap в поле и нажмите кнопку «Добавить», чтобы отправить свой Sitemap.Убедитесь, что вы отправили правильную версию http или https и с www или без www в URL-адресе. После отправки вы увидите статус « Очередь обработки ».
Статус обработки карты сайта в Яндексе
Яндекс принимает форматы XML и текстовых файлов Sitemap.
Роботу Яндекса может потребоваться несколько дней для сканирования вашей карты сайта, после чего статус будет изменен на ОК.
Удаление и повторная отправка последней версии Sitemap
Яндекс не предоставляет возможность повторно отправить ваш Sitemap, следовательно, чтобы отправить новый Sitemap, вам необходимо сначала удалить существующий, а затем отправить новый.Вы можете удалить Sitemap в любое время, нажав кнопку «X» рядом с Sitemap.
Обработка новой версии вашей карты сайта Яндексом может занять до двух недель.
Валидатор карты сайта
Всегда рекомендуется проверять ваш Sitemap перед отправкой на предмет возможных ошибок. Инструмент валидатора помогает веб-мастерам проверить, может ли робот Яндекса получить доступ к следующим типам файлов Sitemap, принимаемых Яндексом:
- Текстовые записи — вводите URL-ссылки по одной в строке в текстовом поле
- URL-ссылка XML — введите URL-ссылку XML для вашего файла Sitemap
- Файл Sitemap — вы можете загрузить файл Sitemap XML для проверки
Самый простой способ — ввести URL-адрес XML Sitemap и нажать кнопку «Проверить», чтобы получить результаты проверки.
Яндекс.Валидатор карты сайта
« Sitemap validator » доступен в боковом меню «Инструменты». Вы также можете получить доступ к валидатору из меню « Инструменты » на верхней панели навигации.
Использование директивы Sitemap для Яндекс-бота
Помимо отправки файла Sitemap напрямую, веб-мастера также могут отправить местоположение Sitemap через файл Robots.txt в Яндекс-бот для индексации. Используйте следующих роботов.txt для информирования Яндекс-бота о местонахождении вашего файла Sitemap:
User-agent: ЯндексРазрешить: /
Карта сайта: http://yoursite.com/Sitemap_Location/Sitemap.xml
Карта сайта в исключенных страницах
Яндекс не будет индексировать URL вашего XML-файла Sitemap, чтобы он не отображался в результатах поиска. Отправленный URL будет исключен из поиска по умолчанию. Вы можете просмотреть эту информацию в разделе « Индексирование> Доступные для поиска страницы> Исключенные страницы ».
URL карты сайта в исключенных страницах Яндекса
Как отправить XML-карту сайта в Google, Bing и Yandex Webmaster Tool
Максимальный блоггер считает, что XML-карта сайта — это статический файл, но это не так. Он меняется, когда мы обновляем сообщение, удаляем сообщение или меняем URL-адрес любого существующего сообщения или медиа на вашем веб-сайте.
XML-карта сайта — это простой текстовый файл, который содержит все URL-адреса (адреса) всех ваших сообщений, страниц, изображений, видео и других медиа, существующих на вашем веб-сайте.
Если вы не знаете, «что такое XML-файл карты сайта», не торопитесь и сначала прочтите его?
Основная цель этой статьи — только изучить путь к;
- Отправить карту сайта XML в Google
- Отправить карту сайта XML в Яндекс
- Отправить карту сайта XML в Bing
Итак, приступим.
Отправить XML-карту сайта в инструмент Google для веб-мастеров
Карта сайта — это идеальный способ сообщить поисковой системе о последних изменениях на веб-сайте, отправив XML-карту сайта в инструмент Google для веб-мастеров, но, прежде чем мы начнем ее отправлять, мы должны создать XML-файл карты сайта и Загрузить XML-карту сайта в корневой каталог веб-сайта.
Вот, я предполагаю, что вы уже это сделали.
Итак, вот URL-адрес моих трех недавно созданных файлов XML Sitemap: Категория, Сообщение и Страница.
- https://www.hitechwork.com/post-sitemap.xml
- https://www.hitechwork.com/page-sitemap.xml
- https://www.hitechwork.com/category-sitemap .xml
У нас есть URL-адрес, поэтому пришло время отправить XML-карту сайта в инструмент Google для веб-мастеров
Процесс отправки очень прост.Сначала вам необходимо подтвердить сайт с помощью инструмента Google для веб-мастеров, а затем отправить URL-адрес файла карты сайта в инструмент для веб-мастеров.
консоль поиска GoogleЗдесь вы увидите обзор своей карты сайта, например
- Количество страниц, добавленных в инструменте для веб-мастеров
- Количество изображений, добавленных в инструменте для веб-мастеров
- Количество добавленных вами файлов Sitemap
- Карта сайта, добавленная вашим товарищем по команде
- , а также ошибка в вашем файле Sitemap.
Взгляните на снимок экрана учетной записи My Webmaster Tool.
функция вкладки карты сайта в поисковой консоли GoogleСоветы: Вы также можете добавить нового пользователя в поисковую консоль Google в качестве товарища по команде или поделиться своими данными с другими.
- Теперь нажмите «ДОБАВИТЬ / ПРОВЕРИТЬ КАРТУ САЙТА» и
- Введите URL-адрес URL-адреса вашей карты сайта в поле.
Примечание: Google уже показывает URL моего веб-сайта ( https://www.hitechwork.com/ ) перед окном. Итак, мне нужно ввести только пост-карту сайта .xml в коробке.
Перед отправкой XML-карты сайта в инструмент Google для веб-мастеров. Рекомендуется сначала протестировать его.
- Щелкните Test, а затем щелкните View Report , и вы увидите эту страницу.
Количество страниц и изображений, отправленных вами вместе с отчетом об ошибке.
Если вы обнаружите какую-либо ошибку в отчете о тестировании , проверьте свой XML-файл карты сайта и исправьте его, затем снова проверьте его в инструменте для веб-мастеров и убедитесь, что у вас нет ошибок (допустима одна ошибка в файле)
После тестирования XML-файла карты сайта снова введите URL-адрес «ДОБАВИТЬ / ТЕСТИРОВАТЬ КАРТУ САЙТА» и на этот раз нажмите кнопку «Отправить ».
Примечание:
- Google автоматически индексирует ваш сайт в течение 48–72 часов после добавления или обновления информации.
- Если у вас сайт с большим количеством изображений. Я предлагаю также создать отдельную карту сайта XML для изображения.
Посмотрите отчет о моем XML-файле Sitemap в Инструменте для веб-мастеров.
статус XML-файла карты сайта в инструменте для веб-мастеровВсе мои сообщения и страницы в поисковой системе, но не категории. Это полностью зависит от того, что вы хотите добавить в поисковую систему.
Но лучше не добавлять категорию в поисковую систему для целей SEO, но вы можете добавить категорию в карту сайта XML, чтобы увеличить видимость веб-сайта
Ping Google Webmaster Tool
Вы также можете отправить xml в Google, выполнив команду Ping to webmaster tool.
- Чтобы проверить связь с инструментом для веб-мастеров, введите следующую строку в свой браузер и нажмите кнопку ввода.
http://www.google.com/ping?sitemap=http://www.yourdomainname.com / sitemap.xmlИспользование Ping
Примечание. Не забудьте заменить www.example.com/sitemap.xml URL-адресом вашей XML-карты сайта.
Отправить XML-карту сайта в Bing Webmaster Tool
Этот процесс почти аналогичен Google. Вам не нужен другой файл Sitemap для другой поисковой системы. Все поисковые системы работают по стандартному протоколу карты сайта.
Итак, сначала вам нужно подтвердить сайт с помощью инструмента для веб-мастеров Bing.
- После этого войдите в Bing Webmaster Tool.
- Щелкните Dashboard >> Configure_my_site >> Sitemap и введите полный URL-адрес вашего файла Sitemap.
Примечание:
- В инструменте для веб-мастеров Bing необходимо ввести полный URL-адрес файла карты сайта.
- Обработка представленных карт сайта занимает время и может занять от нескольких часов до нескольких дней.
После отправки XML-карты сайта в bing. Нажмите кнопку «Отправить».
Ping Инструмент Bing для веб-мастеров
Если вы не можете подтвердить или не хотите создавать учетную запись инструмента Bing для веб-мастеров, вы можете отправить XML-карту сайта в bing, используя метод ping.
- Введите следующую строку в свой браузер и нажмите кнопку ввода.
http://www.bing.com/ping?sitemap=http%3A%2F%2Fwww.example.com/sitemap.xmlотправьте xml карту сайта методом ping
Примечание: Не забудьте заменить www.example.com/sitemap.xml на адрес вашей карты сайта.
Bing также относится к добавлению файла карты сайта XML в файл robots.txt WordPress.
Вот синтаксис файла карты сайта, который можно использовать для размещения карты сайта в файле robots.txt файл.
Карта сайта: http://www.example.com/sitemap.xml
Поместите карту сайта в файл robots.txt Итак, это метод отправки XML-карты сайта в инструмент Bing для веб-мастеров.
Отправить XML-карту сайта в Яндекс для веб-мастеров
Чтобы отправить XML-карту сайта в Яндекс для веб-мастеров. Сначала вам необходимо подтвердить сайт с помощью инструмента Яндекс для веб-мастеров, а после этого войти в свою учетную запись в Инструменте для веб-мастеров Яндекса
- Нажмите «Панель управления» >> Индексирование >> Файл Sitemaps.
- Скопируйте и введите полный URL карты сайта в формате XML в поисковой консоли Яндекса и нажмите кнопку ДОБАВИТЬ .
В моем файле карты сайта есть как сообщение, так и изображение в одном файле карты сайта XML. Но инструмент Яндекс для веб-мастеров не учитывает изображение. Таким образом, он показывает ошибку в отчете, но все сообщения проиндексированы им.
Примечание. Google автоматически индексирует ваш сайт в течение 48–72 часов после добавления или обновления информации.Вы не можете заставить Google повторно индексировать ваш сайт, но вы можете предложить им сделать это с помощью консоли поиска Google.
Что делать после отправки файла Sitemap?
После отправки XML-карты сайта в поисковую консоль google, bing и Яндекс. Следуйте этим 3 передовым методам, которые помогут вашему веб-сайту быстрее индексироваться поисковой системой.
Не забудьте поделиться этим сообщением со всеми, кто может извлечь пользу из этой информации, включая ваших друзей в Facebook, подписчиков в Twitter и членов вашей группы Google+!
Также поддержите нас, поставив лайк на нашей странице в Facebook, Twitter и Google+.
Если у вас есть какие-либо предложения или проблемы по отправке XML-карты сайта в поисковую консоль Google, Bing и Яндекс, пожалуйста, оставьте комментарий ниже.
Я профессиональный блоггер, SEO и эксперт по цифровому маркетингу. Я начал свой блог в 2016 году с целью поделиться своими знаниями и опытом с людьми, связанными с моей областью, а также с широкой публикой.
Последние сообщения Фавада Юсуфа (посмотреть все)Навигация по сообщениям
Как подтвердить свой сайт с помощью инструментов Яндекса для веб-мастеров
Уведомление: Для этого элемента нет устаревшей документации, поэтому вы видите текущую документацию.
Хотите добавить свой сайт в Инструменты Яндекса для веб-мастеров? All in One SEO делает это действительно простым, поэтому вы можете использовать их отличные бесплатные инструменты.
В этой статье мы покажем вам, как аутентифицировать свой сайт с помощью метода тегов HTML.
Что такое Яндекс Инструменты для веб-мастеров?
Яндекс — популярная поисковая система в России, а ее Инструменты для веб-мастеров — это бесплатный сайт, на котором вы можете увидеть, как ваш контент отображается в их результатах поиска.
Вам не нужно использовать Инструменты Яндекса для веб-мастеров, чтобы отображаться в результатах поиска, но это действительно помогает вам увидеть проблемы до того, как они повлияют на ваш рейтинг.
Добавление сайта в Яндекс Инструменты для веб-мастеров
Для начала вам необходимо войти в Яндекс Инструменты для веб-мастеров.
Если у вас нет учетной записи, вы можете либо зарегистрировать ее, либо использовать для входа свою учетную запись Facebook, Google или Twitter.
После входа в систему вы увидите страницу Мои сайты . Нажмите кнопку Добавить сайт .
Введите полный URL-адрес вашего сайта в поле и нажмите кнопку Добавить .
Важно:
Введенный URL-адрес должен точно соответствовать URL-адресу вашего сайта. Это включает https: // или нет и www или нет.
Затем вы увидите экран с надписью Подтвердите права на и увидите здесь некоторый код. Выделите код с помощью мыши, щелкните выделенный текст правой кнопкой мыши и выберите Копировать .
Откройте новое окно браузера и войдите на свой сайт WordPress. Нажмите Общие настройки в меню All in One SEO , а затем перейдите на вкладку Инструменты для веб-мастеров .
Теперь нажмите на блок Yandex Webmaster Tools и вставьте скопированный код в поле Yandex Verification Code и нажмите Save Changes .
Теперь все, что осталось, — это вернуться в Яндекс Инструменты для веб-мастеров в другом окне браузера и нажать кнопку Проверить .
Поздравляем! Вы подтвердили свой сайт с помощью Инструментов Яндекса для веб-мастеров!
Вы также заинтересованы в подтверждении своего сайта с помощью Google? Посетите нашу статью о том, как подтвердить свой сайт с помощью консоли поиска Google.
Уведомление: В настоящее время вы просматриваете устаревшую документацию.
Яндекс — ведущая поисковая система в России с долей местного рынка 50,38% (март 2019 г.). Если Россия является важным рынком для вашего бизнеса или блога, вам следует подтвердить свой веб-сайт в Яндексе для веб-мастеров, чтобы вы могли отслеживать индексацию и любые другие проблемы, которые могут возникнуть. Для этого All in One SEO Pack предлагает удобный способ аутентификации вашего сайта.
Сначала перейдите в Инструменты Яндекса для веб-мастеров и зарегистрируйтесь или войдите в существующую учетную запись.
После входа в систему вы должны увидеть кнопку «+» на панели навигации в верхней части экрана. Нажмите кнопку, а затем введите доменное имя вашего веб-сайта.
Теперь вы увидите экран, на котором вам будет предложено несколько различных вариантов подтверждения вашего веб-сайта — метатег, HTML-файл, запись DNS и WHOIS.
Чтобы аутентифицировать свой веб-сайт с помощью All in One SEO Pack, вам нужно выбрать вкладку «Мета-тег» и затем скопировать уникальный 16-значный код, заключенный в кавычки (см. Снимок экрана ниже).Не копируйте тег целиком и не копируйте двойные кавычки.
Теперь давайте перейдем на ваш сайт и зайдем в меню «Общие настройки» All in One SEO Pack. Если вы немного прокрутите вниз, вы увидите раздел под названием «Проверка веб-мастеров». Вставьте уникальный код, который вы только что скопировали, в поле «Инструменты Яндекса для веб-мастеров» и обязательно обновите настройки.
Теперь вернитесь в Яндекс Инструменты для веб-мастеров и нажмите кнопку «Проверить» в правом нижнем углу экрана (см. Второй снимок экрана).Яндекс просканирует ваш сайт, чтобы подтвердить, что вы являетесь его владельцем. Этот процесс проверки займет меньше минуты.
После того, как ваш сайт будет проверен в Инструментах для веб-мастеров Яндекса, вам следует потратить некоторое время, чтобы просмотреть различные меню и посмотреть, какие функции предлагает Яндекс. Вы должны хотя бы отправить карту сайта All in One SEO Pack в разделе «Индексирование> Файлы Sitemap», чтобы Яндекс знал обо всех URL-адресах вашего сайта.
04. Создание учетной записи в Яндекс. Инструментах для веб-мастеров
Примечание. Чтобы подключить свой сайт к Яндекс. Инструментам для веб-мастеров, у вас должна быть учетная запись на Яндексе.Им требуется номер телефона как часть проверки того, что вы настоящий человек.
Yoast SEO позволяет подключить ваш сайт к Яндекс. Инструментам для веб-мастеров, чтобы вы могли отслеживать, как Яндекс сканирует ваш сайт.
Начало работы:
Зайдите в Инструменты Яндекс для веб-мастеров, войдите в свою учетную запись на Яндексе и нажмите кнопку со знаком плюса, чтобы добавить свой сайт.
Добавьте свой домен:
Введите URL-адрес своего веб-сайта в поле и нажмите желтую кнопку, чтобы продолжить.
Скопируйте проверочный код:
Скопируйте проверочный код. Вы захотите использовать метатег на первой вкладке. Скопируйте только тот код, который находится в апострофах после контентной части разметки, как показано на изображении ниже.
Войдите на свой веб-сайт WordPress:
Когда вы войдете в систему, вы попадете в свою «Личную панель». В раскрывающемся списке перейдите к Отчетность> Yoast SEO> Общие.
Введите свой проверочный код:
Перейдите на вкладку «Инструменты для веб-мастеров» и добавьте код в «Инструменты Яндекса для веб-мастеров».Нажмите «Сохранить изменения».
Проверить с помощью Яндекса:
Вернитесь в Инструменты Яндекса для веб-мастеров и нажмите «Проверить». (См. Изображение в шаге 3).
Поздравляем! Вы подключили свой сайт к Инструментам для веб-мастеров Яндекса. Теперь вы можете использовать инструменты панели управления для отправки файлов карты сайта и robots.txt.
Примечание. Если Яндекс отказывается проводить валидацию:
Немедленно напишите на [адрес электронной почты защищен] и предоставьте полный HTML-код мета-верификации, предоставленный Яндексом.Наши команды вручную добавят его в заголовок вашего сайта, чтобы убедиться, что это соединение установлено и проверено.