как увеличить трафик креативным подходом к карте сайта

Рубрика: Теория и статистика | Время на чтение: 10 мин.

Вебмастер Оливер Мейсон поделился у себя в блоге с читателями интересной информацией, касающейся Sitemap XML. Оказывается, карта сайта, при альтернативном подходе к ней, может стать источником дополнительного трафика.

Вот скриншот статистики из Google Search Console, который Оливер сделал в прошлом году (декабрь 2019):

И вот тот же отчёт примерно через полгода (июнь 2020):

В первом случае количество отправленных URL-адресов – 159 тысяч, во втором – 156.6 тысяч. При этом количество проиндексированных URL-адресов увеличилось со 105 тысяч до 124 тысяч. То есть теперь Google видит дополнительные 19 тысяч страниц, которые могут получать от него органический трафик.

Конечно, это не экспоненциальный рост, но цифры всё равно чрезвычайно интересные. Дальше будут ещё графики, позволяющие всё наглядно продемонстрировать. Это просто для лучшего понимания сути.

Сайт, по которому выше приведена статистика – интернет-магазин с большим ассортиментом товаров. Навигация оформлена в лучших традициях классического SEO: страницы категорий, пагинация и продуктовые карточки.

Качество контента за обозначенный период не повышалось. Никакого активного линкбилдинга не проводилось. Внутренние ссылки на эти страницы, которые Google проиндексировал, существенно не улучшались.

Что же изменилось?

Думаю, многие сеошники, работающие в нише e-commerce, знают, что для упрощения аудита и понимания того, какой контент индексируется, файлы Sitemap XML можно делить по типам страниц. На этом сайте такая штука уже была реализована. А ещё владельцы магазина следовали рекомендациям Гугла:

Для всех форматов действуют следующие ограничения: файл Sitemap может содержать не более 50 000 URL, а его размер в несжатом виде не должен превышать 50 МБ.

Эти цифры очень часто можно встретить в рекомендациях SEO-специалистов по разбивке карты сайта. И поэтому многие владельцы интернет-магазинов делают именно так, как написано в инструкции поисковой системы.

Вместо нескольких XML-файлов Sitemap, содержащих не более 50,000 URL-адресов, автор перешёл к большему количеству XML-файлов Sitemap, содержащих 10,000 URL-адресов. В результате 5 Sitemap XML разбили на 15.

Эти небольшие XML карты сайта организованы в хронологическом порядке: products1.xml содержит самые старые продукты, а products14.xml – самые новые. После таких изменений индексация начала происходить иначе.

XML карта сайта старых товаров:

XML карта сайта новых товаров:

В таких графиках есть определённый смысл. Более старые продукты с большей вероятностью будут погребены глубже во внутренней архитектуре сайта и в результате получат меньше внутреннего PageRank.

Хотя есть и другое объяснение. На данном сайте много товаров, снятых с продажи. Это повышает вероятность того, что старые страницы будут «более низкого качества» и с большей вероятностью идентифицируются, как «мягкие» 404, в то время как новые добавляемые продукты имеются в наличии.

Вы, вероятно, заметили, что спад идёт постепенный? Происходит так, скорее всего, потому, что материалы на сайте не улучшаются, товарные запасы не пополняются.

Здесь уместно привести недавнюю цитату аналитика Google Гэри Иллиса из Твиттера:

Выбор индекса, хотя это в основном про объём места (RAM/flash/disk), тесно связан с качеством контента. Если у нас есть много свободного места, мы с большей вероятностью проиндексируем некачественный контент. Если нет, мы можем деиндексировать материалы, чтобы освободить место для более качественных документов.

То есть объём доступного краткосрочного хранилища влияет на индексирование контента более низкого качества. Вы можете использовать эту идею для определения областей веб-сайта, которые можно было бы классифицировать как «дерьмовые». Их Google может проиндексировать, а может и не проиндексировать.

Как это работает?

Эту идею мало обсуждают. И в основном это делают именно сеошники. Например, Барри Адамс. Вот цитата и парочка скринов из его статьи:

Я обнаружил, что ограничение файлов Sitemap только 10,000 URL-адресов приводит к более тщательной индексации. Я не уверен, почему, но подозреваю, что небольшие списки URL-адресов легче обрабатывать и сканировать для Google. Снова и снова оказывается, что меньшие карты сайта приводят к более высокой степени индексации.

Индексация XML карт сайта на 50,000 URL-адресов в каждой:

Индексация XML Sitemap на 10,000 URL-адресов в каждой:

Вот основные мысли Мейсона на этот счёт:

• Значительно проще обрабатывать файлы Sitemap с меньшим количеством строк. Они также, как правило, быстрее загружаются.
• Более легкие файлы Sitemap (с точки зрения размера файла) загружаются быстрее и их легче обрабатывать. Это похожий на первый пункт, но всё же от него отличается.
• Часто-обновляемые карты сайта чаще сканируются. Вы можете поэкспериментировать с изменяющимся порядком сортировки, чтобы смоделировать это. Переделывая ваши Sitemap XML таким образом, вы можете добавить им немного «новизны».
• Google не будет ждать, когда ваш сервер поднатужится и с трудом передаст большой файл. Ему не нравится тратить ресурсы на синтаксический анализ 50,000 строк.

Цитата с sitemaps.org:

Каждый предоставляемый вами файл Sitemap должен содержать не более 50 000 URL и не должен превышать 50 МБ (52 428 800 байт). При желании вы можете сжать файлы Sitemap с помощью gzip, чтобы снизить требования к пропускной способности; однако каждый файл Sitemap в несжатом виде не должен превышать 50 МБ.

XML карта сайта для Google Новостей

Рассмотрим формат файла Sitemap XML для Google Новостей. Если вы работаете с Google News, то знаете, что система активно сканирует эти карты. Очень активно! Почему? Давайте взглянем на официальные рекомендации:

Файл Sitemap должен содержать URL статей, опубликованных за последние два дня. Статьи, опубликованные более двух дней назад, можно удалить из файла. При этом они будут оставаться в индексе Google Новостей в течение стандартного срока – 30 дней.

И ещё вот это:

Файл Sitemap следует обновлять по мере публикации статей. Файлы Sitemap сканируются поисковыми роботами Google Новостей с той же периодичностью, что и другие данные вашего сайта.

По сравнению с обычными XML-файлами Sitemap, XML-файлы Sitemap для новостей часто меняются и содержат новый контент. Для многих крупных изданий каждый раз, когда Googlebot запрашивает XML-карту сайта, она будет отличаться. Скорее всего, новизна играет большую роль в этом процессе.

Чтобы добавить больше 1000 URL, создайте несколько файлов Sitemap и объедините их с помощью файла индекса Sitemap. Используйте формат XML, описанный в протоколе Sitemap. Общий файл Sitemap может содержать не более 50 000 файлов Sitemap. Эти ограничения гарантируют, что веб-сервер не будет перегружен обработкой больших файлов.

Видите, Google прямо нам с вами говорит, что не рекомендуется использовать большие файлы. Логично предположить, что файлы меньшего размера – лучше.

При публикации новых статей не нужно создавать отдельный файл Sitemap. Просто добавляйте URL новых статей в имеющийся файл.

Вебмастерам рекомендуется сохранять статический URL-адрес этой «шлюзовой» карты сайта, в то время как её содержимое изменяется.

Вероятно, это совершенно разные системы, и, возможно, тут работает не совсем обычный робот Google. По большому счёту это не имеет значения. Всё равно можно применить теорию к тому, как сеошники оптимизируют обычные карты сайта.

Альтернативный подход к XML Sitemap

Этот подход будет полезен тем вебмастерам, для которых очень важна скорость индексации. Ну и для тех, кто столкнулся с тем, что Google массово не индексирует страницы на сайте. Подобные случаи не сильно распространены, но всё же проблема существует. И есть решение!

Вы можете динамически заполнять XML-файлы Sitemap в зависимости от того, что сканирует робот Googlebot.

Вот краткая инструкция по реализации:

• У вас есть список URL-адресов, которые должен просканировать Googlebot.
• Вы генерируете XML Sitemap на основе самых свежих из этих URL-адресов (в данном конкретном примере ниже – 20,000).
• Затем просматриваете журнал на предмет посещения Googlebot.
• Каждый раз, когда робот запрашивает один из отслеживаемых URL-адресов, этот URL-адрес удаляется из вашего списка с помощью /uncrawled.xml.
• Дальше адрес добавляется в соответствующий долгосрочный XML-файл Sitemap (например, /posts-sitemap-45.xml). Этот шаг не является обязательным.

Чтобы всё работало так, как нужно, попросите профессионального программиста помочь вам с этим.

В итоге весь ваш новый высокоприоритетный контент индексируется с максимально возможной скоростью. И без дополнительных приблуд. После первоначальной настройки всё начинает работать довольно быстро:

Обратите внимание, что 20 тысяч URL-адресов в этом файле Sitemap постоянно меняются.

Здесь важно правильно понимать второй график. В XML Sitemap в день появляется гораздо больше, чем 20,000 URL, но размер карты сайта ограничен 20,000 записями.

Количество URL-адресов, по которым Google Search Console отображает тут информацию, представляет собой карту сайта только в определённый момент времени. При этом скорость индексации этого списка URL-адресов быстро увеличивается. В реальности ежедневно сканируется намного больше, чем 20,000 URL.

Конечно, успех этого веб-сайта заключается не только в правильном XML Sitemap…

Альтернативный подход к внутренним ссылкам

Вот вторая идея, основанная на том же подходе, что и первая:

Вы можете динамически управлять своими внутренними ссылками в ответ на URL-адреса, которые сканирует робот Googlebot.

При этом используется та же методология, что и при создании XML-карты сайта, но для заполнения виджета внутренних ссылок с сильно ограниченным размером. То есть организуется динамическая внутренняя перелинковка.

При таком подходе робот Гугла, посещая ваш сайт, будет постоянно насильно загоняться на ещё не проиндексированные страницы. Это что-то вроде кампании агрессивного ретаргетинга.

Виджет для перелинковки должен быть сквозным, то есть располагаться на всех страницах. Но боту не потребуется обходить много URL-ов. Так как новые адреса ему будут подсовываться регулярно, обновления начнут происходить чаще.

Причём, вам даже не обязательно показывать обычным посетителям этот виджет. Хотя его расположение всё же будет влиять на успех всего мероприятия.

Ну и не лишним будет подчеркнуть, что всё это сработает только при условии, что вы правильно базово оптимизируете свой сайт. Чтобы получать не только индексацию, но и хотя бы минимальный органический трафик, требуется годный контент, обратные ссылки и всё такое прочее.

Источник информации: ohgm.co.uk.

Пользуйтесь на здоровье!

ПОНРАВИЛСЯ ПОСТ? ПОДЕЛИСЬ ССЫЛКОЙ С ДРУЗЬЯМИ!

СТАТЬИ ИЗ РУБРИКИ:

• Гостевые посты: пустая трата времени или легальная и безопасная стратегия линкбилдинга
• Правильные главные мета теги для сайта и как их заполнять [10 примеров]
• Что не является фактором ранжирования в Google [подборка]
• Как попасть в топ 1 поиска Google или Яндекса: грязный секрет
• Скорость загрузки страниц сайта: Google разрушает SEO-мифы
• Поисковая оптимизация PDF файлов [инструкция от Ahrefs]
• Сообщество для клиентов поможет повысить продажи
• Ahrefs опубликовал самые популярные поисковые запросы на Ютубе в 2020 году
• Чек-лист на 64 пункта для контента, который точно взлетит
• Контент маркетинг в LinkedIn и других социальных сетях [стратегия продвижения]

Тематика: E-commerce, Google, SEM, Переводы

Дата публикации: 18. 08.2020

(некоторые ответы перед публикацией проверяются модератором)

Проверка Sitemap на ошибки: критерии верного Сайтмап

976

5 мин.

Карта сайта информирует поисковые системы о готовых к сканированию страницах сайта. Sitemap — XML-файл с URL-адресами ресурса и соответствующими метаданными о каждом.

Поисковый бот и сам способен просканировать страницы вашего ресурса, но благодаря настройке sitemap.xml становится возможным:

• сортировать страницы с учетом приоритетов;
• выявить периодичность обновления страниц, узнать, какие из них новые и точно нуждаются в индексации;
• вычислить время осуществления изменений в проиндексированных страницах;
• выполнить индексацию всех новых страниц, ничего не упустив.

Без sitemap робот может пропустить важные страницы.

Несмотря на то, что карта даст роботу возможность отыскать все страницы, есть вероятность столкнуться с другими сложностями:

• индексации могут помешать другие факторы, к примеру, технические неполадки;
• поисковик может признать страницу недостаточно качественной, чтобы попасть в поиск.

Для крупного сайта формируется более одного файла Sitemap с их объединением файлом индекса Sitemap:

Руками вводить огромное число ссылок вряд ли покажется интересной затеей, поэтому предусмотрена возможность массовой отправки URL через API.

Атрибут hreflang и альтернативные названия в XML взаимоисключающие — допустимо использование одного из них, чего чаще всего для поисковика достаточно.

Пример. У ресурса http://example.com/ru/ есть украиноязычная, русскоязычная и англоязычная версии:

Sitemap XML

В текстовом файле формата XML перечислены все обязательные к индексированию страницы ресурса с учетом их подчиненности. В xml sitemap допустимо обозначение до 50 тысяч ссылок. Файлы тяжелее 50 МБ нужно архивировать, соблюдая расширение xml.zip или xml.tar, также есть вариант формирования нескольких карт путем сбора их в группу. Ссылки из карты сайта должны указывать на полный путь файла, как здесь: http://www.example.com/.

Первая строка документа должна содержать версию xml, а также кодировку — UTF-8.

В Sitemap.xml применяются особые теги:

К слову, теги , игнорируются Google. Но Yandex рекомендует их к использованию.

HTML Sitemap

Формирование карты в HTML-формате первоначально осуществляется для юзеров, это страница, где показаны гиперссылки на все страницы веб-сайта. Но при этом HTML Sitemap способствует ускорению индексации и сокращению глубины некоторых страниц уменьшением числа кликов от главной до целевой страницы. Для карты в виде html-страницы есть строгие ограничения по числу ссылок на одной странице. При наличии слишком большого количества ссылок поисковый бот может проиндексировать только часть из них либо совсем исключить страницу Sitemap из поиска за переизбыток ссылок, в том числе внутренних. Не рекомендуется размещать больше ста штук на странице.

Image Sitemap

Чтобы картинки сайта оказались в индексе, требуется создать для них Image Sitemap. Эту карту можно разместить в Sitemap.xml, заполнив в robots.txt соответствующую строку. Для маленьких сайтов с неизменным числом изображений допустимо прописывание карты вручную. При работе с крупным ресурсом рекомендуется воспользоваться приложением. Заметьте, что в Image Sitemap применяются теги вместо ссылок на картинки:

При написании карты изображений сайта можно указывать до тысячи графических объектов для каждой его страницы.

Video Sitemap

Для улучшения сканирования и ранжирования поисковыми ботами видео-контента следует создавать карту сайта Video Sitemap. Индексация видео-контента Яндексом пока не связана с файлами sitemap.

News Sitemap для Google

Если основное назначение вашего сайта — публикация новостей, можно настроить динамическую генерацию карты с обновлением по графику, чаще всего раз в день. Эти функции работают только для ресурсов, подключенных к Google Новости и при их подключении в sitemap можно добавлять урлы только статей, опубликованных в течение 48 часов. Более ранние публикации можно удалять — они будут храниться в индексе Гугл еще месяц.

В одной карте сайта может быть не более 1000 ссылок, но если вы планируете публиковать больше новостей за двое суток, можно создать несколько файлов индекса sitemap. Правда сгенерировать их автоматически не получится — инструмент Гугл проиндексирует все урлы, а не только новости.

Теги:

Карта сайта относится к ключевым моментам SEO оптимизации. Существуют разные виды Sitemap, которые следует использовать, исходя из параметров своего сайта. Нет необходимости собирать карту вручную, ведь есть множество плагинов и модулей. Однако наличие карты не обязывает ботов сканировать все указанные в ней URL, а лишь облегчает для них этот процесс. Будьте внимательны при выборе ссылок для Sitemap, не забывайте ее обновлять, и карта сайта будет вам служить с пользой.

12 мая 2021

Перковская-Перлова Екатерина

SEO Specialist

Работаю в SEO c 2020 года. Считаю, что мечты не работают, пока не работаешь ты

Как внедрить реальные отзывы на сайте и когда это стоит делать

Как выявить и устранить дубли страниц сайта?

Кейсы из digital-маркетинга, дизайна, разработки интернет-магазинов, вебсайтов и мобильных приложений

Какие существуют форматы файлов Sitemap? Как и когда их использовать

Последнее редактирование: 24 января 2018 г.

, автор: Гаренн Бигби в файлах Sitemap

Инструментами Google для веб-мастеров поддерживаются 9 форматов карты сайта. Файлы Sitemap позволяют веб-мастеру информировать различные поисковые системы о ссылках на веб-сайты, которые доступны для сканирования. Карты сайта также предоставляют веб-мастерам информацию о каждом URL-адресе в XML-файле. Дополнительные сведения включают дату последнего обновления URL-адреса, частоту его изменений и важность по сравнению с другими URL-адресами на веб-сайте. Это позволит поисковым системам более эффективно сканировать сайт. Существуют различные способы создания карты сайта в зависимости от типа веб-сайта или публикуемого контента. Это необходимо, потому что аудиты контента используют карты сайта для сканирования, таким образом предоставляя информацию о том, как сделать его лучше. Разрешение правильных типов карты сайта не только способствует более успешному сканированию веб-сайта, но и лучшему успеху в поисковых системах.

Вся информация, содержащаяся в сгенерированной карте сайта, — это то, что ищут поисковые системы при предоставлении пользователям Интернета результатов поиска. Независимо от того, создает ли веб-сайт новичок или профессиональный веб-мастер, важно знать, какой тип карты сайта идеально подходит для веб-сайта (и содержимого на нем) и как его создать, чтобы максимально раскрыть его потенциал.

Эти файлы будут использоваться для отправки страниц с веб-сайта.

• Это предпочтительный формат веб-страницы для отправки. Не все поисковые системы поддерживают приведенные ниже карты сайта, XML-карта сайта для веб-страниц может поддерживаться всеми поисковыми системами с sitemaps.org.
• В простейшей форме это XML-файл, в котором будут перечислены URL-адреса веб-сайта вместе со всеми дополнительными метаданными, связанными с каждым URL-адресом. Это будет включать в себя, когда он был обновлен в последний раз, как часто он меняется, насколько он важен и как он соотносится с другими URL-адресами, которые можно найти на сайте. Это позволяет поисковым системам сканировать сайт более разумно и эффективно.
• Эти поисковые роботы обнаруживают страницы по ссылкам на сайте, а затем на других сайтах. Карты сайта будут дополнять данные, которые позволят поисковым роботам, поддерживающим карты сайта, выбирать все URL-адреса в карте сайта, а затем узнавать об этих URL-адресах, используя связанные с ними метаданные.
• Использование генератора карты сайта не гарантирует, что поисковые системы будут включать веб-страницы, но даст представление о том, как лучше сканировать ваш сайт.

RSS 2.0 и Atom 1.0

Каналы RSS 2.0 иногда создаются автоматически во многих блогах.

• RSS расшифровывается как Really Simple Syndication и представляет собой формат распространения контента веб-сайта. Это тип языка XML.
• На самом высоком уровне документ RSS представляет собой элемент RSS с обязательным атрибутом, называемым версией, который указывает, какой версии RSS документ будет соответствовать. Если он соответствует спецификации, версия 2.0 должна быть.

Каналы Atom 1.0 представляют собой документы на основе XML. Каналы состоят из «записей», и каждая запись состоит из большого количества метаданных, и у каждой записи есть заголовок.

• Атомы в основном используются в блогах и заголовках на новостных сайтах.
• Atom используется как альтернатива RSS, разработанная, поскольку считалось, что RSS имеет недостатки.
• Формат Atom считается четко и тщательно определенным, свободно расширяемым для всех, реализуемым всеми и абсолютно независимым от поставщиков.
• Многие приложения, включая iTunes, поддерживают использование Atom 1.0.
• Использование формата Atom позволяет снова использовать элементы вне контекста документа веб-канала, который не является Atom.
• Удобно использовать Atom, когда ссылки на ресурсы и содержимое содержат символы, не входящие в стандартный набор символов США ASCII.

Текстовые файлы с URL-адресами веб-страниц

Если вы не можете создать карты сайта в любом из вышеуказанных форматов, вы можете создать текстовый файл, содержащий ваш URL-адрес.

Карта сайта будет иметь один URL-адрес в строке, и многие поисковые системы, такие как Google и Yahoo, могут сканировать карты сайта в текстовых файлах. Чтобы убедиться, что карты сайта и поисковые системы совместимы. Выполните следующие шаги:

• Текстовые карты сайта не должны содержать более 50 000 URL-адресов.
• Для Yahoo основная текстовая карта сайта должна называться urllist.txt.
• Текстовые файлы Sitemap должны сохраняться как документы UTF-8. Это особенно важно, если вы имеете дело с веб-сайтом, на котором символы не английские.

XML-файлы Sitemap для поиска видео

Видео на вашем веб-сайте можно проиндексировать и сделать доступными для поиска в Google Video. Карты сайта Google Video предоставляют Google метаданные о видео и его содержании на веб-сайте. Видеосайт Google является крупнейшим объектом для поиска видео в Интернете, и с помощью карты сайта для видео владельцы веб-сайтов могут сообщить поисковой системе категорию, название, описание, продолжительность и аудиторию, предназначенную для каждого видео, которое находится на веб-сайт.

Это помогает поисковой системе получить информацию о богатом видеоконтенте на веб-сайте, и это, в свою очередь, улучшит список веб-сайта при просмотре в результатах поиска видео.

• Информация о видео (включая URL-адреса) доступна для поиска, если она представлена ​​в виде отдельной карты сайта или когда она включена в обычную карту сайта в поиске видео поисковой системы.
• После этого видео будут отображаться в виде эскиза видео вместе с соответствующей информацией, взятой из карты сайта.

Медиа RSS-каналы для поиска видео

mRSS-каналы являются расширением RSS-каналов, и основное отличие состоит в том, что в карте сайта указано, что это мультимедийное расширение RSS. Это необходимо для того, чтобы приложения для чтения новостей знали, что в ленте есть медиаданные, и, в свою очередь, знали, как их интерпретировать.

• Теги в ленте будут содержать такие дескрипторы, как «средний» и «элемент». Средой может быть изображение, документ, аудио или видео.
• В ленте также могут быть теги, чтобы дать зрителям больше информации о содержащейся информации. Размер файла, тип, высота, ширина и продолжительность будут дескрипторами, содержащимися в ленте. Здесь снова будет отображаться медиа, а также будет «isDefault», указывающий, будет ли этот элемент элементом по умолчанию или первым элементом для воспроизведения.
• Название, описание и миниатюра будут видны, и они говорят сами за себя.
• Должны быть включены следующие необязательные теги: рейтинг, ключевые слова, авторские права, игрок, кредит и текст. Тег «текст» позволяет включить текстовую расшифровку (или файл с субтитрами) для веб-сайта.

Файлы XML Sitemap для Google Code Search

Эта функция используется, когда Google ищет файлы исходного кода в Интернете. Это полезно для владельцев веб-сайтов, чьи веб-сайты содержат исходный код, поскольку они могут создавать карты сайта, которые помогают Google индексировать код. Карта сайта Code будет выглядеть как обычная карта сайта XML, но у нее есть некоторые дополнительные требования к карте сайта XML и теги.

• Помните, что при создании карты сайта для кода вы должны убедиться, что включены все соответствующие расширения файлов для файлов с кодом.
• Возможно, вам также потребуется ужесточить шаблоны имен файлов, которые принимаются в качестве файлов кода.
• Обе эти вещи можно сделать с помощью выходных фильтров при создании карты сайта.

XML-файлы Sitemap для мобильных веб-страниц

Этот формат позволяет разработчикам распознавать контент, оптимизированный для мобильных устройств, поскольку в последнее время в формат были внесены небольшие изменения.

• Карта сайта для обычных телефонов не должна создаваться, если только не существует специальной версии веб-сайта для обычных телефонов, предназначенной для обычных телефонов (не смартфонов).
• Можно создать отдельную карту сайта со списком видеоконтента или добавить информацию о видеоконтенте в уже существующую карту сайта. Это просто вопрос удобства для создателя сайта.
• Мобильная карта сайта для обычных телефонов использует протокол карты сайта с дополнительными требованиями к пространству имен и тегам.
• Если вы решили использовать инструмент для создания карты сайта, убедитесь, что он может создавать карты сайта для мобильных веб-страниц.
• Включите этот тег, чтобы обеспечить правильное сканирование мобильных URL-адресов.
• Список URL-адресов, которые обслуживают несколько языков разметки, в одной карте сайта.
• Search Console автоматически обнаружит и поддержит мобильный профиль XHTML, WML и cHTML.

Файлы XML Sitemap для геоданных

Используется, когда на вашем веб-сайте есть географические данные в виде файлов GeoRSS или KML.

• Поисковые системы совершенствуют и изобретают новые способы использования данных о местоположении.
• Если поисковая система знает местоположение пользователя, она поместит результаты в верхней части страницы результатов поиска любых искомых элементов.
• Это происходит, даже если пользователь не вводит свое местоположение в условия поиска. Вот почему для владельцев веб-сайтов так важно иметь точную информацию о местоположении, включенную в их веб-сайт.
• Географическая карта сайта — это особая форма XML, которая будет содержать всю географическую информацию для всех местоположений.
• Существуют специальные генераторы карт сайта для геоданных. Они полезны для начинающих веб-мастеров.
  • Найдите нужный инструмент для создания вашей географической карты сайта.
  • Правильно заполните информацию о своей компании.
  • Дайте информацию о сайте.
  • Теперь вы можете загружать как данные KML, так и географическую карту сайта, а затем загружать их на свой веб-сайт. Используйте FTP-загрузчик.
  • отправьте географическую карту сайта своему веб-мастеру.

XML-файлы карты сайта для новостей

Веб-сайты, предназначенные для новостей, теперь могут отправлять свой новостной контент прямо через этот специальный формат карты сайта. Эти пользователи должны сначала зарегистрироваться в Новостях Google, прежде чем файлы смогут быть обработаны.

• Карта сайта новостей должна быть «актуальной» — она должна содержать только URL-адреса статей, опубликованных за последние 2 дня. Статьи старше 2 дней могут быть удалены из карты сайта новостей, но останутся в индексе новостей в течение 30 дней.
• Создателям веб-сайтов рекомендуется постоянно обновлять карты сайта для новостей и добавлять свежие статьи по мере их публикации.
• При создании карты сайта новостей она может содержать не более 1000 URL-адресов. Чтобы включить больше, вы должны разбить URL-адреса на несколько карт сайта, а затем использовать файл индекса карты сайта, чтобы помочь в управлении ими.
• Используйте формат XML, указанный в протоколе карты сайта. Файл индекса карты сайта, в котором не должно быть более 50 000 карт сайта. Причиной этого ограничения является гарантия того, что веб-сервер не будет перегружен при обслуживании больших файлов.
• Когда новостная статья публикуется, вам не следует каждый раз создавать карту сайта для новостей. Вы должны обновить текущую карту сайта с новыми URL-адресами статей.
• Не используйте генератор карты сайта Google для создания новой карты сайта, так как она будет включать URL-адреса, не соответствующие определенным новостным статьям. Существует множество сторонних инструментов для создания карты сайта для новостей Google.
• После создания карты сайта загрузите ее в каталог верхнего уровня, содержащий ваши новостные статьи.

Веб-мастер должен либо выбрать правильный формат карты сайта для веб-сайта, либо создать карту сайта с помощью генератора, который предоставит правильный тип. При выборе типа карты сайта веб-мастер должен учитывать тип контента, который будет размещен на веб-сайте, а также любые соответствующие геоданные. Правильное выполнение всех этих действий не только облегчит сканирование, но и поможет обеспечить правильное форматирование веб-сайта и его точность в поисковых системах. Когда владелец веб-сайта не уверен, какой формат карты сайта использовать, он должен просмотреть свой контент и выбрать тот, который лучше всего подходит для них.

Дополнительные ресурсы:

Создание и отправка карты сайта

Полное руководство по XML-карте сайта

Форматы карты сайта

Назад

Очистка файла карты сайта

Как проверить карту сайта

Весна — пора различных уборок. Убирая свои квартиры, гаражи и сады, мы также должны думать об уборке нашего веб-сайта. Подробную инструкцию о том, как провести SEO-аудит, можно найти в нашей статье: «Как провести SEO-аудит на странице сайта». В этом тексте мы сосредоточимся на очистке файла карты сайта — файла, содержащего URL-адреса всех страниц веб-сайта.

Отображение структуры ссылок

Файл карты сайта должен отображать структуру ссылок веб-сайта. Он не должен содержать никаких редиректов, битых ссылок, битых хостов, ссылок на разные домены или неканонические адреса. Начнем с поиска нежелательных редиректов в файле карты сайта.

Перенаправления в файле карты сайта

В Pulno можно обнаружить перенаправления двумя способами. Один из способов — использовать фильтр, доступный на панели. Нажмите на опцию расширенного фильтра, выберите страницы, связанные только в файле карты сайта, и выполните поиск по коду ответа: 301, 302, 307, 308. Коды ответов, начинающиеся с цифры «3», должны быть удалены из карты сайта.

Ссылка на список адресов с редиректами также находится на боковой панели.

Перенаправления приводят к потере краулингового бюджета и затрудняют понимание поисковыми системами структуры веб-сайта. Google рекомендует размещать в файле карты сайта только канонические версии URL-адресов. Размещение редиректов настоятельно не рекомендуется.

Сломанные страницы

Следующим шагом является поиск битых страниц. Такие страницы возвращают код ответа 404 или 410.

Аналогично предыдущему примеру, ссылки на битые страницы находятся на боковой панели в разделе «Видимость».

Проверка карты сайта на неработающие ссылки с помощью Pulno

Ошибки страницы аналогичны редиректам. Каждая битая ссылка в карте сайта тратит ресурсы поисковых систем на посещение несуществующих страниц. По этой причине настоятельно рекомендуется удалить URL-адреса неработающих страниц из файла карты сайта.

Отсутствие https в карте сайта

Основываясь на данных, поступающих с миллиона самых популярных веб-сайтов, кажется, что трафик более половины доменов проходит через зашифрованный протокол https. За шесть месяцев, с февраля по август 2018 года, количество веб-сайтов, содержащих https в URL-адресе, увеличилось более чем на 13%. К сожалению, переход на https не всегда сопровождается обновлением файла карты сайта. Pulno анализирует ссылки в карте сайта и уведомляет пользователя в случае наличия устаревших URL-адресов.

Канонические страницы и блокировка индексации

По рекомендации Google файл карты сайта должен содержать ссылки на канонические версии страниц. По этой причине настоятельно рекомендуется убедиться, что в карте сайта нет ссылок на страницы с каноническим указанием на другую страницу. Дополнительно проверяем блокировку страниц в robots.txt, метатеге robots и заголовке x-robots-tag. Проверяя файл robots.txt, убедитесь, что он содержит ссылку на файл карты сайта. Инструкции о том, как должна выглядеть ссылка, можно найти в этой статье.

Внешние ссылки

Файл карты сайта не должен ссылаться на веб-сайты, отличные от того, на котором он расположен. Это касается как с www. и без www. версии. Настоятельно рекомендуется удалить любые адреса внешних веб-сайтов из файла карты сайта.

Заключение

Файл карты сайта строго указывает поисковым системам, какие страницы следует проиндексировать. Анализ веб-сайта с помощью Pulno облегчает поддержание порядка на веб-сайте и, таким образом, посылает более четкие сигналы роботам Google. Это приводит к более эффективному использованию обхода бюджета и лучшей оптимизации веб-сайта.