Вопрос по sitemap.xml – Вопросы Timeweb Community

• Вопросы
• Маркетплейс

Войти

Олехов Алексей Андреевич

30 июля в 2017

3327

2 ответа

Друзья, помогите разобраться с проблемой!

Карта сайта http://brandservis.ru/sitemap.xml открывается по ссылке но Яндекс ругается! при анализе карты сайта в панели Веб мастера — пишет Не удалось скачать файл Sitemap

 

SEO

Похожие вопросы

vvv123 12 дек в 2022

508

Помочь настроить сайт на Joomla после установки SSL

Здравствуйте, нужна помощь в настройке корректной работы сайта после установки ssl. 

Ошибки SSL

2 ответа Алёна Карасёва 19 окт в 2022

404

Archiv

Подскажите, пожалуйста как избавиться от «Archiv» в Н1 «portfolio-category» и  «portfolio-tag»? Я в настройках Yoast SEO все «Archiv» убрала, с метками сработало, с «portfolio-category». ..

Администрирование

1 ответ Sonam Sharma 23 авг в 2022

481

I Need A Help With The SEO Of My Website

Hi, I’m Sonam Sharma. I am Digital Marketer. I need help with the SEO of my website. I am doing SEO for one of my clients. I ranked their website in the 2nd position. One day I suddenly got a claim about content. Then I bought DMCA certificate for…

Другое

Обсудить

Ваш баланс 10 ТК

1 ТК = 1 ₽

О том, как заработать и потратить Таймкарму, читайте в этой статье

Чтобы потратить Таймкарму, зарегистрируйтесь на нашем сайте

Зарегистрироваться

С помощью соцсетей

Забыли пароль?

Запомнить меня

У меня нет аккаунта Зарегистрироваться

Инструкции по восстановлению пароля высланы на Ваш адрес электронной почты.

Вернуться ко входу

Пожалуйста, укажите email вашего аккаунта

Вернуться ко входу

Войти в Комьюнити

ВК Yandex Google

Регистрация в Комьюнити

ВК Yandex Google

Восстановление пароля

Зачем нужна карта сайта sitemap.xml

22 октября 2021 SEO-продвижение

XML-карта — необходимый элемент сайта, хотя кому-то этот элемент может показаться устаревшим: она помогает ускорить индексацию веб-страниц. Объясним, как легко и без ошибок ее создать и настроить.

Что такое sitemap. xml

Карта сайта, она же файл sitemap.xml — документ с техническими данными для ботов поисковых систем. В нее входит иерархически организованный список веб-страниц, информация о графических файлах, обновлениях. Ею можно и пренебречь, но в ряде ситуаций без карты сайта могут быть сложности с индексацией: например, когда на некоторые страницы нет внутренних ссылок, сайт часто обновляется либо имеет запутанную структуру, в которой сложно разобраться.

Как выглядит карта сайта

Генерация карты

XML-карту можно без особых затруднений создать либо в онлайн-генераторе, либо в специальном модуле в CMS. Достоинство первого способа — в отсутствии привязки к определенному движку. В то же время, в нем есть ограничение на число страниц на сайте. Для интернет-магазина, в котором число страниц постоянно растет, этот способ вряд ли подойдет. Лучше использовать специальный плагин для CMS: так вы сможете управлять параметрами карты и обновлять ее автоматически.

Важно не забыть добавить ссылку на sitemap.xml в robots.txt и включить в нее те страницы, где выдача в поисковиках критична: для интернет-магазина это чаще всего категории и теги. Укажите периодичность индексации сайта и приоритетность отдельных веб-страниц (хотя можно оставить и настройки по умолчанию).

Готовую карту добавляем в Яндекс.Вебмастер и Google Search Console: если в настройке карты есть ошибки, обе системы выдадут соответствующие уведомления.

Как добавить карту сайта в Яндекс.Вебмастер

Подробнее про генерацию sitemap.xml читайте в статье: Карта сайта (Sitemap)

Когда нужна HTML-карта

В отдельных случаях целесообразно добавить на сайт HTML-карту: например, для больших сайтов с запутанной структурой, как это часто бывает у государственных организаций. Она нужна для навигации по сайту, и для ее создания также есть отдельные плагины.

Если вы решили создать интернет-магазин, то карту сайта можно сделать раз и навсегда, единожды воспользовавшись нужным модулем. Если она создана без ошибок, то о ней потом можно забыть, если же возникли затруднения, повторить процесс: дальше все будет работать автоматически.

Создать аккаунт на AdvantShop

На платформе вы сможете быстро создать интернет-магазин, лендинг или автоворонку.

Воспользоваться консультацией специалиста

Ответим на любые ваши вопросы и поможем выйти на маркетплейсы.

Связаться

Что почитать еще

SEO-продвижение 23.06.2023

Что должен знать руководитель о поисковой оптимизации: 9 базовых принципов

SEO-продвижение 31.05.2023

Интент поискового запроса: что это, как его определить и использовать в SEO интернет-магазина

SEO-продвижение 07.

03.2023

Где следить за позициями сайта в поисковиках: 8 инструментов

SEO-продвижение 07.02.2023

14 частых SEO-ошибок и способы их исправить

SEO-продвижение 16.01.2023

Как оптимизировать сайт под мобильные устройства

SEO-продвижение 16.11.2022

SERM и работа с репутацией интернет-бизнеса

Генерация

XML-карт сайта — Документация 4SEO

4SEO может создавать, обновлять и отправлять в поисковые системы карту сайта XML полностью автоматически. Вы также можете вручную добавлять или удалять страницы из карты сайта по своему вкусу.

Файлы Sitemap используются поисковыми системами по двум основным причинам:

• для обнаружения страниц, на которые нет естественных ссылок из других частей вашего сайта
• , чтобы помочь определить, какая страница является канонической на случай, если к одному и тому же контенту можно получить доступ через несколько URL-адресов

Для более крупных сайтов они также могут помочь решить, какие страницы будут или не будут сканироваться, или быстрее, путем определения приоритета канонических страниц.

Поскольку 4SEO сканирует весь ваш сайт, он может легко составить исчерпывающий список страниц вашего сайта. Но если бы мы просто поместили все эти страницы в карту сайта, это было бы ужасной работой с точки зрения SEO.

Таким образом, 4SEO уделяет большое внимание включению только правильных страниц в карту сайта XML для наибольшего преимущества SEO.

Файлы Sitemap почти никогда не должны содержать все страницы сайта.

В список должны быть включены только важные страницы со значениями SEO. Аналогичным образом, если к некоторым страницам можно получить доступ через несколько URL-адресов, должен быть указан только один канонический URL-адрес. И, конечно же, никогда не следует включать страницы с метатегами noindex или страницы, исключенные директивой robots.txt .

Точно так же карта сайта, состоящая только из ссылок из ваших меню, бесполезна: все они обнаруживаются сразу при загрузке домашней страницы и не добавляют информацию о канонизации.

Генерация файлов Sitemap

4SEO автоматически создаст карту сайта после завершения анализа сайта. Это не может произойти раньше, так как 4SEO должен просканировать весь сайт, чтобы определить канонические URL-адреса, а также выполнить такие проверки, как:

.

• наличие noindex метатега
• исключение страницы с файлом robots.txt

Когда карта сайта готова, она автоматически публикуется. Однако 4SEO также постоянно следит за изменениями и добавлением нового контента на сайт.

При обнаружении такого изменения или добавления новая или модифицированная страница анализируется повторно. Новые страницы добавляются в файл карты сайта, если они соответствуют всем требованиям. Измененные страницы проверяются повторно и могут быть добавлены (если они ранее были исключены) или удалены (если больше не соответствуют требованиям) из карты сайта.

На странице Sitemaps есть панель инструментов, которая сообщает вам все о статусе карты сайта:

Меньшие сайты, содержащие менее 500 страниц, как правило, не нуждаются в карте сайта, по крайней мере, согласно документации Google. Они достаточно малы, чтобы поисковые системы все равно просканировали их полностью.

Однако даже в этом случае карта сайта, ориентированная на SEO, может быть полезна, если она правильно указывает только канонические и важные страницы.

Картинки Карта сайта

4SEO также создает карту сайта изображения для вашего сайта. Обнаружение изображений можно контролировать в настройках карты сайта.

Изображения перечислены внутри основного файла карты сайта, поэтому конкретного файла карты сайта для изображений нет.

Как и в случае с основной картой сайта, 4SEO пытается включать в карту сайта только релевантные и полезные изображения. Например, по умолчанию будет только включают изображения шире 200 пикселей .

Вы можете настроить этот параметр и несколько других для точной настройки того, какие изображения включены, а какие нет, используя соответствующий раздел настроек.

4SEO в настоящее время выполняет поиск изображений только в содержимом, отображаемом с помощью HTML-элемента img . Это может привести к тому, что изображения, отображаемые через javascript, как это часто бывает с расширениями галереи изображений, будут отображаться только в более низких размерах.

Блокировка файлов Sitemap с помощью .htaccess или сторонних расширений

Карта сайта

4SEO, расположенная по адресу https://yoursite.com/sitemap-4seo.xml , не является реальным файлом, находящимся на диске вашего веб-сервера. Вместо этого она отображается в Joomla точно так же, как и любая другая страница вашего веб-сайта.

Однако некоторые сторонние расширения или ваш сервер .htaccess могут иногда блокировать .xml или .txt файлы. В этом случае при попытке доступа к карте сайта будет отображаться страница ошибки 404, созданная вашим веб-сервером.

Убедитесь, что файл .htaccess настроен правильно, чтобы оставить доступ к файлам .xml . Аналогичным образом настройте стороннее расширение, такое как Admin Tools , чтобы поисковые системы могли нормально читать файлы карты сайта 4SEO.

Ручное добавление или удаление страниц из карт сайта

Хотя процесс создания карты сайта является полностью автоматическим, включая выбор канонических URL-адресов и проверку исключения файла robots.txt, вы можете вручную удалить или добавить отдельные страницы по своему усмотрению.

Перейдите на страницу Pages и используйте столбец Sitemap для исключения/включения страниц:

Добавление страниц в карту сайта с помощью пользовательского файла

В некоторых редких случаях вы можете добавить в свою карту сайта страницы или активы, которые 4SEO не обнаружила или не сочла полезными с точки зрения SEO. Вы можете легко сделать это, перечислив их в файле, расположенном в корне вашего сайта.

Вы можете создать один или оба этих файла:

• карта сайта-4seo-custom.txt
• карта сайта-4seo-custom.xml

Если один или оба этих файла будут найдены в корневом каталоге вашего сайта, когда 4SEO создаст или обновит вашу карту сайта, они будут включены для чтения поисковыми системами.

Обратите внимание: если ваша карта сайта уже создана, вам нужно будет использовать кнопку Перестроить сейчас на панели инструментов страницы Sitemaps , чтобы 4SEO принял во внимание недавно добавленные пользовательские карты сайта.

карта сайта-4seo-custom.txt

Этот файл представляет собой простой текстовый файл, в котором вы можете перечислить только адреса страниц . Делайте , а не список изображений или видео в этом файле, поисковые системы будут принимать страницы веб-сайта только при использовании текстового файла.

Просто перечислите нужные адреса страниц, по одному в строке:

 https://example.com/some/url-1
https://example.com/some/url-2
https://example.com/some/url-3.html
 

Используйте только полные адреса, включая доменное имя: https://example.com например

Используйте инструменты | Пункт меню Custom sitemap для прямого редактирования этого файла из 4SEO.

карта сайта-4seo-custom.xml

Этот файл является обычной картой сайта. Вы можете перечислить там адреса страниц, а также изображения или видео. Однако для этого необходимо использовать допустимый формат карты сайта.

• Пример обычной карты сайта

 

  <ссылка>
    https://example.com/some/url-1
  
  <ссылка>
    https://example.com/some/url-2
    2021-01-20T16:45:08Z
  

 

• Пример с изображениями

 

  <ссылка>
    https://example.com/some/url-1
  
  <ссылка>
    https://example.com/some/url-2
    <изображение:изображение>
        https://example.com/images/logo. svg
    
    <изображение:изображение>
        https://example.com/images/product.jpg
        Замечательный продукт
    
  

 

Фактические и действительные карты сайта утомительно создавать вручную. Вы можете найти онлайн-генераторы карт сайта, которые могут помочь вам создать пользовательский контент карты сайта, который затем можно сохранить или скопировать/вставить в файл пользовательской карты сайта 4SEO.

Публикация файлов Sitemap

После создания карты сайта или при каждом ее обновлении (добавлении или удалении страниц) 4SEO будет публиковать ее.

Ваш сайт может рекламировать наличие файла карты сайта двумя способами: через ваш robots.txt и напрямую отправив его в поисковые системы.

4SEO выполняет и то, и другое, если вы не укажете иное с помощью кнопки панели инструментов Настройки на странице Sitemaps . См. страницу настроек для более подробной информации.

4SEO автоматически отправит вашу карту сайта, когда она будет готова, в Google. Конечно, вы также можете отправить его вручную, используя поисковые консоли поисковых систем, хотя это бесполезно. Однако, если вы отправляете карту сайта вручную, обязательно дождитесь ее готовности. Готова ли карта сайта, отображается на 4SEO Файлы Sitemap стр.

Если вы сами отправляете карту сайта в поисковые системы, адрес для отправки — http(s)://www.yoursite.com/sitemap-4seo.xml . Вы можете скопировать этот URL-адрес со страницы Sitemaps администратора 4SEO.

IndexNow

IndexNow — это механизм, используемый несколькими поисковыми системами для информирования о страницах, которые только что были изменены на вашем сайте. Вы можете думать об этом как о комплименте вашей карте сайта:

• ценные страницы перечислены в вашей карте сайта
• если один из них изменен, используйте IndexNow для информирования участвующих поисковых систем об изменении

Первоначально инициатива Microsoft Bing, следующие поисковые системы участвуют в IndexNow с начала 2023 года:

• Microsoft Bing (и, как следствие, Yahoo, Yahoo использует Bing)
• Яндекс
• Seznam. cz

Google не использует IndexNow . Хотя они объявили о начале процесса тестирования IndexNow в середине 2021 года, на момент написания, 18 месяцев спустя, из этого ничего не вышло. Google стать участником, как правило, не считается вероятным.

Вы можете отправить страницу в IndexNow сразу после внесения в нее существенных изменений. Все участвующие поисковые системы автоматически уведомляются о вашей заявке. Затем каждая поисковая система может вернуться, чтобы загрузить страницу и обновить свои данные.

Это может увеличить скорость индексации изменений вашего веб-сайта поисковыми системами.

Не отправлять существующие страницы, которые только что не были изменены. IndexNow рекомендует использовать вашу карту сайта для этих страниц, а 4SEO уже автоматически обрабатывает вашу карту сайта.

Что такое Sitemap XML и почему это важно для SEO?

Каждый владелец веб-сайта должен иметь некоторое представление о картах сайта. Чтобы страницы вашего сайта отображались в результатах поиска, поисковым системам нужна информация из вашей карты сайта. Файлы Sitemap также помогают аудитории перемещаться по вашему сайту, когда они попадают на страницу. Но что такое карта сайта XML и почему это важно для SEO? В этом посте мы постараемся ответить на эти вопросы.

Что такое XML Sitemap?

Проще говоря, XML-карта сайта служит дорожной картой для поисковых систем. Он описывает ключевую информацию о вашем веб-сайте в формате XML, чтобы поисковые системы могли быстро идентифицировать, индексировать и отображать ее на страницах результатов поиска (SERP).

Источник изображения: seobility.net

Любая веб-страница или XML-файл, которые вы хотите отображать в поисковых системах, должны быть указаны в вашей XML-карте сайта. Почему? Потому что карта сайта гарантирует, что ваш контент можно будет найти.

Предположим, у вас есть веб-страницы, не связанные ни с каким местом на вашем сайте или с Интернетом в целом. Веб-пауки не могут обнаружить эти страницы, если на них нет гиперссылок. Карта сайта в формате XML (загружаемая в поисковые системы) гарантирует, что любые страницы, которые вы хотите отобразить в поисковой выдаче, могут быть найдены поисковыми системами.

Но это еще не все. Карта сайта в формате XML может предоставить поисковым системам больше информации, например, когда последний раз обновлялся ваш материал и какие страницы являются более важными. Подробнее об этом чуть позже.

Компоненты карты сайта XML

Источник изображения: br.sharpspring.com

Все компоненты идентифицируются с помощью специальных тегов, имитирующих код HTML.

Обязательные элементы:

• Первая строка . В первой строке указывается версия XML и необходимая кодировка для файлов Sitemap — UTF-8;
• urlset> — тег, указывающий текущий стандарт протокола. Это родительский тег для тегов, следующих за ним;
• url> — тег для каждого ввода URL. Это родитель тегов ниже и дочерний элемент urlset>;
• loc> — адрес страницы. Если ваш веб-сервер требует этого, этот URL-адрес должен начинаться с протокола (например, HTTP) и заканчиваться косой чертой.

Дополнительные компоненты:

• lastmod> — тег, показывающий, когда страница была изменена в последний раз. Google оценивает значение этого тега только в том случае, если оно соответствует времени последнего обновления страницы.
• changefreq> — тег, дающий приблизительную частоту обновления страницы. Всегда, ежечасно, ежедневно, еженедельно, ежемесячно, ежегодно и никогда не являются допустимыми значениями.
• Priority > — тег, указывающий приоритет страницы по отношению к другим страницам. Диапазон значений от 0,0 до 1,0.

Несмотря на то, что теги changefreq> и priority> упоминаются как допустимые для использования в спецификации формата XML файлов Sitemap, согласно последним данным Google Search Central, поисковая система игнорирует указанные в них значения.

Типы файлов Sitemap в формате XML

Источник изображения: actiondigital. vn

Различные формы карт сайта в формате XML обмениваются информацией с поисковыми системами, что может помочь вашему веб-сайту подняться в поисковой выдаче. Вот множество XML-карт сайта, которые вы можете использовать, чтобы помочь поисковым системам сканировать ваш веб-сайт и собирать информацию, необходимую им для его эффективного индексирования:

1. Индекс XML-карты сайта

XML-индекс карты сайта служит картой сайта для ваших карт сайта, что значительно упрощает поисковым системам изучение большого сайта. Это может быть выгодно, если у вас есть огромный веб-сайт, который требует преодоления типичных ограничений карты сайта XML в 50 000 URL-адресов и размера несжатого файла карты сайта XML 50 МБ. Когда это произойдет, разделите свои карты сайта и создайте индекс карты сайта, который будет ссылаться на них все.

2. Динамические XML-карты сайта

Динамическая XML-карта сайта настраивается автоматически при добавлении или удалении материала с сайта и всегда поддерживает актуальную версию. Динамическая карта сайта в формате XML необходима для крупных веб-сайтов или сайтов с частыми изменениями контента. Например, веб-сайт электронной коммерции может захотеть использовать динамическую карту сайта XML, а не обновлять ее вручную при добавлении или удалении страницы продукта.

3. Карта сайта для изображений в формате XML

Сопоставление изображений в формате XML увеличивает индексацию изображений на вашем веб-сайте. Рассмотрите возможность использования этой карты сайта, если ваша компания в значительной степени полагается на графику для получения трафика и доходов. Это могут быть веб-сайты со стоковыми фотографиями или сайты электронной коммерции. Это может помочь вашим фотографиям появляться в результатах поисковой системы для поиска изображений.

4. XML-карта сайта для видео

XML-карта сайта для видео похожа на карту сайта страницы, но в основном фокусируется на информации о видео; поэтому это требуется только в том случае, если видео жизненно важны для вашей организации. Если нет, сэкономьте свой краулинговый бюджет (ограниченное количество сканируемых страниц и ресурсов на вашем сайте) и включите URL-адрес видео в свою карту сайта.

Почему карта сайта в формате XML важна для поисковой оптимизации?

Источник изображения: merkle.com

Как мы указывали ранее, XML-карта сайта необходима, поскольку она позволяет роботам поисковых систем просматривать ваш сайт без необходимости внешних подключений. Эта карта сайта может быть полезна, если на вашем сайте еще нет внешних ссылок. Ведь поисковые системы не смогут найти ваш сайт без ссылок, указывающих на него.

Поисковые системы не сканируют веб-сайты, ища внешние ссылки. Вместо этого они ищут термины в URL-адресах карты сайта веб-страниц при сканировании веб-сайтов. Новый веб-сайт не получит много ссылок, а те, которые это сделают, скорее всего, забудут об этом и удалят обратную ссылку.

Вместо того, чтобы ждать, пока внешние сайты уведомят поисковую систему, XML-карта сайта позволяет сканерам поисковых систем индексировать ваш веб-сайт, как только они его обнаружат. Любая SEO-стратегия должна включать индексацию вашего сайта поисковой системой. Таким образом, XML-карты сайта являются полезным инструментом для определения приоритетов, потому что они часто занимают всего несколько минут, чтобы разработать и предоставить поисковым системам необходимую им информацию о вашем веб-сайте.

Как отправить карту сайта в Google

Источник изображения: Elegantthemes.com

Несмотря на то, что поисковые роботы Google в конечном итоге сами найдут вашу карту сайта, по-прежнему рекомендуется отправлять URL-адрес карты сайта в Google.

В первую очередь потому, что

• Это облегчит поиск вашей карты сайта.
• Это поможет вам определить потенциальные проблемы с картой сайта в Google.

Это возможно с помощью Google Search Console:

1. Для начала перейдите на панель инструментов «Карты сайта» в Google Search Console. Эта опция находится в левом меню в разделе «Индексирование».
2. Скопируйте и вставьте URL-адрес вашей карты сайта в область «Добавить новую карту сайта», затем нажмите «Отправить». Вам не нужно отправлять каждую карту сайта отдельно, если у вас их несколько. Просто загрузите свою индексную карту сайта, которая содержит список всех других ваших карт сайта.
3. После того, как Google проиндексирует вашу карту сайта, рядом с ней в области «Отправленные карты сайта» появится зеленый статус «Успешно».
4. Если у вашей карты сайта есть проблемы, статус будет «Есть ошибки» или «Не удалось получить».
5. Щелкните строку, содержащую вашу карту сайта, чтобы изучить обнаруженные проблемы. Google также дает пошаговые рекомендации по каждой возможной проблеме.

Как удалить карту сайта из Google Search Console

Источник изображения: ahrefs.com

Если вы отправили файл sitemap_index.xml неправильно или вам нужно удалить другую карту сайта, вы можете удалить ее и повторно отправить. Ожидается, что это не повредит SEO вашего сайта.

1. Зарегистрируйтесь в Google Search Console.
2. Выберите свой веб-сайт на боковой панели.
3. Выберите «Карты сайта».
4. Пункт меню «Карты сайта» находится внутри раздела «Индекс». Если «Карты сайта» не отображаются, нажмите «Индекс», чтобы увеличить область.
5. Нажмите на карту сайта, которую хотите удалить, в разделе «Отправленные карты сайта».
6. Удалите карту сайта, нажав на трехконечную точку в правом верхнем углу страницы. Затем вы можете повторно добавить карту сайта, если это необходимо.

Как использовать инструменты для веб-мастеров для отправки файла Sitemap

Источник изображения: aioseo.com

1. Инструменты Bing для веб-мастеров

Если вы еще не добавили свой веб-сайт в Инструменты для веб-мастеров Bing, сделайте это в первую очередь.

1. Зарегистрируйтесь в Bing Webmaster Tools.
2. Выберите свой веб-сайт на странице «Мои сайты».
3. Нажмите «Настроить личный сайт», затем «Карты сайта» на левой боковой панели.
4. Удалите все устаревшие или недействительные карты сайта.
5. Заполните текстовое поле вверху URL-адресом вашей карты сайта.
6. Нажмите кнопку «Отправить».

2. Яндекс Вебмастер

1. Зарегистрироваться в Яндекс Вебмастер.
2. Выберите свой сайт на главной странице.
3. Нажмите «Параметры индексирования», а затем «Файлы карты сайта» на левой боковой панели.
4. Удалите все устаревшие или недействительные карты сайта
5. Заполните текстовое поле вверху URL-адресом вашей карты сайта.
6. Выберите Добавить.

Передовой опыт для XML Sitemap

Источник изображения: dynomapper.com

Соблюдение этих рекомендаций имеет решающее значение при внедрении XML-карт сайта.

1. Регулярно обновляйте XML-карту сайта

Текущее представление вашего веб-сайта должно быть предоставлено через XML-карту сайта. Каждый раз, когда страница удаляется, ваша карта сайта XML также должна удалять ее из списка. Когда страницы на вашем сайте изменяются, обязательно обновите метку времени, если вы используете необязательный тег lastmod.

Помните, что при определении того, содержит ли ваша XML-карта сайта все ваши индексируемые страницы, вы должны искать проблему «Проиндексировано, не отправлено в карту сайта» в отчете об индексировании Google Search Console.

2. Включите в XML-карту сайта только индексируемые страницы

В XML-карту сайта опишите только индексируемые страницы. Это означает, что вы должны исключить любые URL-адреса, относящиеся к отсутствующим страницам или перенаправлениям.

Кроме того, эти страницы должны быть индексируемыми, что означает, что они должны быть доступны для поисковых систем (т. е. без исключений robots.txt) и не должны содержать указаний поисковым системам не индексировать страницу (т. е. мета-роботы, канонические ссылки, или тег x-robots).

3. Сохранить имя файла и расположение по умолчанию

Расположение и имена файлов по умолчанию для вашей карты сайта XML (/sitemap.xml) и индекса карты сайта XML (/sitemap_index.xml) должны использоваться везде, где это возможно. Благодаря этому поисковые системы теперь могут легко их обнаружить.

4. В вашем файле robots.txt укажите XML Sitemap

Вы должны сделать пометку в файле robots.txt, если вы отклоняетесь от стандарта для адреса веб-сайта в формате XML Sitemap или файла XML Sitemap Index. Чтобы поисковые системы могли его найти, рекомендуется указать его в файле robots.txt, даже если вы придерживаетесь обычного URL-адреса.

5. Не зацикливайтесь на Lastmod, Priority и Changefreq

Хотя вы можете указать атрибуты lastmod, Priority и Changefreq для каждого URL-адреса, делать это необязательно. Однако общепризнанно, что поисковые системы не обращают на них особого внимания. Их определение не повредит, и может быть ничтожная вероятность того, что поисковые системы могут использовать эту информацию.

6. Соблюдайте ограничения для файлов Sitemap в формате XML

Убедитесь, что ваши файлы Sitemap в формате XML содержат не более 50 000 URL-адресов и максимальный размер несжатого файла 50 МБ.