Яндекс Вебмастер – сервис для владельцев сайтов
Можно считать, что «Яндекс.Вебмастер» — сервис для владельцев сайтов, но на самом деле это больше, чем просто сервис. Это промежуточное звено, посредством которого поисковая машина общается с человеком. Данные, которые представляет «Яндекс.Вебмастер», невозможно подвергнуть сомнению. С другими, «рукотворными» сервисами не так — прежде чем им поверить, придётся разобраться, на каких алгоритмах они работают.
Ценность «Яндекс.Вебмастера» заключается и в том, что это абсолютно бесплатный инструмент. Если научиться использовать его потенциал «на полную», можно избавиться от необходимости платить за другие сервисы и существенно сократить сумму расходов на SEO-продвижение. В статье мы расскажем, как настроить «Вебмастер» «Яндекс» правильно и какие возможности он даёт.
Для чего используется «Яндекс.Вебмастер»
Когда SEO-специалист видит, что сайт «захандрил» — а главным признаком того является падение трафика — то первым делом отправляется в «Яндекс. Вебмастер». Благодаря «Яндекс.Вебмастер» проверить сайт удастся по множеству критериев:
- корректно ли отображается на мобильных устройствах;
- какие странички вылетели из индекса, изменилось ли их количество;
- изменилось ли количество внутренних и внешних ссылок;
- в порядке ли SSL-сертификат, а также файлы robots.txt, sitemap.xml;
- поменялось ли значение ИКС — индекса качества сайта;
- изменились ли позиции важных ключевых фраз.
Также благодаря сервису «Яндекс» вебмастер может проинформировать поискового бота, что на сайте появилась новая полезная страница, удалить ненужные страницы из индекса, настроить микроразметку с целью получить привлекательные и кликабельные сниппеты.
Как добавить новый сайт в «Яндекс.Вебмастер»: пошаговая инструкция
Процедура привязки сайта к «Вебмастеру» не такая сложная, но если вы делаете это впервые, могут возникнуть затруднения. Поэтому мы объясним, как добавить сайт в «Яндекс. Вебмастер» и как пользоваться им, буквально «на пальцах» и с иллюстрациями.
Прежде всего зайдите на https://webmaster.yandex.ru/ , используя учетные данные вашей «Яндекс.Почты». Затем нажмите кнопку «+» в верхней панели сервиса.
Введите в пустое поле адрес ресурса и нажмите «Добавить».
На следующем этапе подтвердите права на сайт. Сделать это можно при наличии доступа в админку ресурса или к хостингу. «Яндекс.Вебмастер» позволяет выполнить подтверждение одним из 3 способов:
- Добавить специальный метатег в раздел «head» главной страницы (1).
- Создать HTML-файл и добавить в корень сайта (2).
- Внести TXT-запись в DNS домена (3).
Первый способ проще прочих, но к нему прибегать не рекомендуется. За счёт дополнительной записи вы увеличиваете вес хедера, из-за чего страница загружается дольше — пусть и ненамного. Советуем выбирать способ с добавлением HTML-файла.
Подтвердили права? Теперь нажмите «Проверить». Проверка займёт несколько секунд, потом сервис вынесет вердикт: удалось вам связать ресурс с «Яндекс.Вебмастером» или нет.
Поисковой робот «Яндекс» индексирует ресурс спустя примерно 7 дней с момента его регистрации в «Яндекс.Вебмастере».
После привязки сайта к «Вебмастеру» вы можете сделать ещё одну полезную вещь — объединить сервис с «Яндекс.Метрикой» (конечно, если ею пользуетесь). Зайдите в настройки «Метрики» и нажмите кнопку «Отправить запрос ещё раз» напротив надписи «Не подтвержден в Вебмастере».
Удаление сайта из «Яндекс.Вебмастер»
Вопроса, как удалить сайт из «Яндекс.Вебмастер», у вас, вероятно, не возникнет. Ведь для этого достаточно нажать «крестик» напротив адреса сайта в общем перечне.
Однако удаление сайта из «Вебмастера» не приводит к удалению сайта из интернета вообще. Страницы продолжат индексироваться. Также важно понимать, что сайт удалится только у того пользователя, который его удалил — а не у всех, кто имеет права на управление.
Предварительная настройка «Яндекс.Вебмастер»
Представим, что вы успешно зарегистрировались в чудо-сервисе «Яндекс.Вебмастер» — что дальше? Предлагаем начать с основ и выполнить следующее:
- Проверить файл robots.txt. Путь: «Инструменты» — «Анализ robots.txt» — нажать кнопку «Проверить». Файл robots.txt в основном нужен, чтобы закрыть от индексации страницы, которые роботу не нужны — и тем самым избавить его от лишней работы.
- Добавить ссылку на sitemap. Путь: «Индексирование» — «Файлы Sitemap» — внести в окошко ссылку на карту сайта и кликнуть на «Добавить». Если вас терзает то, что пользователи «Яндекс» обходят ваш сайт вниманием несмотря на его солидный возраст, возможно, это простое действие позволит решить проблему.
- Задать региональность — указать поисковику, в каком городе вы предоставляете услуги. Путь: «Информация о сайте» — «Региональность». Напротив пункта «Вебмастер» стоит шестерёнка — нажмите на неё.
Теперь пропишите в появившемся поле название региона. Ниже укажите ссылку на страницу, которая содержит данные о региональной принадлежности — например, на страницу «Контакты». Наконец, нажмите кнопку «Сохранить».
При отсутствии на сайте страницы с информацией о региональной принадлежности ресурса задать региональность в «Яндекс.Вебмастере» не получится. Заявку можно подать, но её отклонят.
Какой регион выбрать? Если продвигаете интернет-магазин, выбирайте регион, в котором находится ваша компания. Если у вас блог или «новостник», подойдёт вариант «Россия».
Обзор разделов «Яндекс.Вебмастера»
Описанные нами процедуры предварительной настройки «Яндекс.Вебмастер» важны, но использовать сервис исключительно ради них — всё равно, что стрелять из танка по муравьям. «Вебмастер» — настоящий «мультитул», и мы попробуем познакомить вас с максимальным количеством его функций через подробный обзор разделов.
Сводка
Уже по названию «Сводка» понятно, что это раздел, в котором скомпилирована основная информация о сайте:
- Обновления поиска.
- Проблемы сайта.
- Индекс скорости сайта.
- Динамика показателя ИКС.
- Данные из «Яндекс.Справочника».
- Последние внешние ссылки.
Сюда же под видом важных сведений «Яндекс» подтягивает актуальные публикации из собственного блога и свои новые фичи. Например, на момент написания этой статьи сервис предлагает загрузить фид для улучшения сниппетов интернет-магазинов.
Диагностика
В этом разделе приводится информация о проблемах, имеющихся на сайте. Сам сервис классифицирует проблемы по степени серьёзности на:
- Фатальные — вероятно, сайт «лёг» и его необходимо реанимировать. Пример фатальной ошибки — наличие проблем с безопасностью.
- Критичные — влияют на ранжирование. Пример критичной ошибки — «отвалился» SSL-сертификат.
- Возможные — могут влиять на ранжирование. Пример возможной ошибки — отсутствие тегов Title и Description у страниц.
- Рекомендации. «Яндекс.Вебмастер» может порекомендовать изменить формат фавиконки или зарегистрироваться в «Яндекс.Справочнике». Следовать рекомендациям не обязательно.
Недавно появились ещё «Проблемы Турбо-страниц» и «Проблемы Турбо-магазина», но это может волновать только тех, кто Турбо-страницами пользуется.
Поисковые запросы
В разделе «Поисковые запросы» может «подзалипнуть» тот, кто отвечает за оптимизацию SEO-текстов. Например, информация в подразделе «Статистика запросов» позволяет понять, по каким запросам больше всего показов / кликов, а по каким — наиболее высокий CTR. Все эти данные можно упорядочить и выгрузить в форматах CSV и XLS.
Из примера выше легко сделать вывод, что веб-мастеру стоит поработать над привлекательностью сниппетов, поскольку CTR — просто катастрофа.
Также статистику в разрезе «Показов», «Кликов» и CTR можно выгрузить по страницам — в подразделе «Статистика страниц».
Однако наиболее ценная информация, на наш взгляд, представлена в подразделе «Рекомендованные запросы». Здесь перечислены запросы, по которым есть резервы. То есть релевантная страница по ним имеет низкие позиции, но если бы она сумела подняться, это дало бы существенный прирост трафика.
Запросы можно упорядочить по прогнозной цене клика в рублях. Из рисунка выше мы, например, видим, что рекомендуемый поисковой системой запрос «как продать рекламу в инстаграмме» является очень «сочным».
Индексирование
Этот раздел сервиса кажется самым важным, ведь прежде всего, чтобы отрегулировать индексацию сайта, вебмастер осваивает программу. Подразделов, как и возможностей, здесь очень много — мы остановимся на ключевых:
- Переобход страниц. Добавив адрес страницы на переобход в «Яндекс.Вебмастер», СЕО-шник даст поисковой системе понять, что на этой странице что-то изменилось и что её нужно переиндексировать вперёд остальных.
- Проверить статус URL. В этот подраздел можно добавить адреса важных страниц сайта, чтобы немедленно узнавать о выпадении их из индекса. Статус «Проверено», как рисунке ниже — признак того, что все в порядке. Если в инструменте «Яндекс.Вебмастера» «Проверить статус URL» «обрабатывается» стоит — паниковать не надо. Это значит, что проверка происходит прямо сейчас.
- Страницы в поиске. Подраздел полезен главным образом тем, что позволяет быстро получить список страниц, которые выпали из поиска — через пункт «Исключенные страницы».
- Переезд сайта. Здесь происходит настройка главного зеркала в «Яндекс.Вебмастер».
Представление в поиске
В большей степени рекламная витрина «Яндекса». Этот раздел, который позволяет сделать вывод, достаточное ли количество инструментов поисковой системы пользователь задействовал, чтобы сделать привлекательным сниппет и попасть в «специальные ответы» (читай — в нулевую позицию). Мерой здесь выступает статус подключения — шкала справа вверху.
Ссылки
В этом разделе 2 подраздела: «Внутренние ссылки» и «Внешние ссылки». В подразделе «Внутренние ссылки» отображается список нерабочих внутренних ссылок. Если их так много, как на рисунке ниже — это повод срочно приступить к проработке перелинковки.
В подразделе «Внешние ссылки» вы можете узнать, какие сайты ссылаются на ваш и через какие анкоры. Перечень сайтов-доноров выгружается в формате TSV.
Информация о сайте
Топом с точки зрения популярности из раздела «Информация о сайте» был инструмент «Оригинальные тексты». Однако его, как и инструмент «Товары и цены», «Яндекс» отключила.
Зато в разделе «Информация о сайте» «Яндекс.Вебмастера» региональность сайта задать по-прежнему можно. Причём не только для самого «Вебмастера», но и для «Яндекс.Справочника».
Турбо-страницы
Турбо-страницы — это версии страниц ресурса, облегченные ПС с целью увеличения скорости загрузки. Турбо-страницы на «мобильниках» загружаются втрое быстрее обычных.
Веб-мастера приняли эту новацию со стороны Yandex в штыки — хотя бы потому, что турбо-страницы изначально выглядели слишком куце. Со временем «Яндекс» проработал все возражения веб-мастеров, сделав турбо-страницы действительно толковым инструментом, без слабых мест. В частности, персонифицировать страницы стало возможно за счет добавления шапки и логотипа сайта.
В новейшей версии «Яндекс.Вебмастера» под турбо-страницы выделили сразу 2 раздела: первый — для контентных сайтов (блогов), второй — для интернет-магазинов.
Инструменты
Раздел «Инструменты» включает в себя набор важных для СЕО-шника сервисов. Эти сервисы позволяют:
- Выявить ошибки в файлах robots.txt и sitemap.xml.
- Проверить ответ сервера.
- Удалить страницы сайта из поиска. За день — максимум 500 штук.
- Проанализировать микроразметку и мобильную версию сайта.
Все инструменты здесь предельно просты. Работа веб-мастера сводится в основном к тому, чтобы вставить ссылку в пустое окошко и ознакомиться с результатом, который сервис выдаст через 2-3 секунды.
Настройки
В этот раздел вы, возможно, зайдёте один раз, максимум два. Скорее всего — для настройки уведомлений. По умолчанию настройки выставлены так, чтобы PUSH-уведомления возникали только при появлении критичных или фатальных проблем.
Через настройки вы также можете привязаться к «Яндекс.Метрике» и получить код для добавления иконки «Яндекс ИКС» на сайт.
Полезные сервисы
Заключительный раздел — подборка прочих сервисов, разработанных компанией «Яндекс». Здесь встретишь популярные «Метрику» и «Яндекс.Справочник», а также более экзотические варианты — например, «Яндекс.Формы», программу для создания интерактивных форм.
Итоги
Разбираясь, для чего нужен «Яндекс.Вебмастер», приходишь к интересному выводу: программа — не только про продвижение в «Яндексе». «Вебмастер» содержит много полезных сервисов, которые анализируют сайт безотносительно к поисковой системе. В частности, инструменты «Валидатор микроразметки» и «Проверка мобильных страниц» можно считать универсальными — данные, которые они дают, помогают сделать сайт лучше для обоих поисковиков.
«Вебмастер» (как и «Метрика») постоянно дополняется новыми разделами и инструментами. Поэтому, регулярно заглядывая в «Вебмастер», будешь в курсе всех новаций «Яндекс». Это гораздо удобнее, чем собирать крохи информации по SEO-форумам.
архитектура технологии быстрой загрузки веб-страниц / Хабр
Привет, меня зовут Стас Макеев. В Яндексе я руковожу разработкой технологии Турбо-страниц, которая обеспечивает быструю загрузку контента даже при медленном соединении. Сегодня я расскажу читателям Хабра немного об архитектуре нашего проекта.
На счастье пользователя во многом влияет то, насколько быстро он видит содержимое интернет-страницы. Скорость беспокоит многих: в магазине мобильных приложений только у Speedtest больше ста миллионов установок. Провайдеры, мобильные операторы, разработчики сайтов и приложений стремятся обеспечить максимально быстрый доступ к контенту, чтобы клиенты были довольны.
Средняя скорость загрузки в российских мобильных сетях составляет 16,26 Мбит/с — это довольно хороший показатель. Но скорость соединения неравномерна, мы всё ещё сталкиваемся с медленным интернетом — 3G, 2G, EDGE. Наверняка вы были в ситуации, когда в кафе или торговом центре, в дороге или на даче сильно снижается привычно высокая скорость: сайты загружаются десятки секунд, а то и дольше.
Технология Турбо-страниц решает проблему доступа к контенту, в том числе и при низкой или нестабильной скорости соединения. Это важно для владельцев сайтов, у которых снижается доля посетителей, «отваливающихся» на этапе перехода из поиска.
Как работают Турбо-страницы
Владелец сайта регистрирует RSS-фид в Яндекс.Вебмастере. Фид попадает в контент-систему Турбо-страниц, которая раз в несколько минут забирает из него обновления. Тяжёлый контент — в первую очередь картинки и видео — мы кешируем и раскладываем в CDN. Кроме RSS, контент можно передавать через API и автопарсер.
Объём закешированных изображений Турбо-страниц приближается к 100 Тб
Нам важна надёжность и отказоустойчивость системы, поэтому мы делаем несколько реплик данных и храним их в трёх своих дата-центрах. В каждом дата-центре сотни серверов обрабатывают тысячи запросов в секунду, что позволяет гибко балансировать нагрузку.
Контент-система Турбо-страниц заслуживает отдельного поста, и мы его напишем. Пока что ограничимся упрощённой схемой.
Что происходит, когда вы открываете URL в браузере?
HTTP adapter обрабатывает HTTP-запрос пользователя и делает запрос в нужный граф в AppHost и report-renderer.
AppHost — специальная компонента, которая инкапсулирует сетевое взаимодействие источников, описанное в виде графа зависимостей. Источники опрашиваются в порядке топологической сортировки на этом графе, вся бизнес-логика зашита в них самих и в конфигурации графа. В частности, на уровне графа опрашивается KV-storage и отправляется запрос данных в сторонние API.
Report-renderer — приложение, написанное на node. js, которое принимает на вход JSON, исполняет шаблоны, написанные на JS, и возвращает строчку.
Всё это происходит почти мгновенно.
Что влияет на скорость загрузки?
Мы работаем над всеми аспектами скорости: от внедрения HTTP/2 на балансере и оптимизации TLS-хендшейка до ручной оптимизации SVG. При этом нужно понимать, из чего складывается конечная пользовательская скорость.
Внутри команды мы выделяем три этапа обработки запроса: сервер, сеть и клиент.
Сервер
Сюда входит всё, что происходит в дата-центрах: от момента, когда HTTP-запрос поступает к нам на сервер, до генерации HTML-страницы, которая отдаётся непосредственно клиенту.
Время обработки запроса на сервере должно быть минимальным. Несмотря на относительно небольшие значения, оно затрагивает абсолютно все пользовательские запросы. К тому же все процессы происходят в нашей контролируемой среде — оправданий для больших задержек просто не может быть.
Серверное время состоит из сетевых взаимодействий между вершинами графа зависимостей источников и из времён работы каждой из вершин. Но не будем фокусироваться на особенностях сетевой инфраструктуры дата-центров Яндекса — они заслуживают отдельного поста.
Больше внимания хочется уделить второй составляющей — времени исполнения каждой из вершин. В качестве примера разберём наши принципы и инструменты работы над компонентой Report-renderer, которая отвечает за формирование HTML. Для других компонент они во многом схожи.
В нашем CI-процессе есть задачи, принимающие пулл-реквесты в dev, которые выполняют базовые проверки на каждый коммит в feature-ветку. Если какие-то показатели превысят заданные границы, влитие в dev замораживается до выяснения причин.
Основные метрики на данном этапе:
- время шаблонизации;
- размер итоговой страницы;
- размер статических файлов.
Мы собираем клиентскую статику (CSS и JS) для каждой страницы в зависимости от данных, но сами бандлы с блоками не зависят от запроса, поэтому достаточно сравнить размер файлов в ветке с аналогичными файлами в dev.
Для разных типов файлов у нас установлены различные пороговые значения, после которых задачу нельзя залить в dev без «ОК» от ответственных за скорость.Как правило, происходит совместный разбор кода и поиски путей для оптимизации.
С метриками размера страницы и временем шаблонизации приходится действовать иначе, так как они сильно зависят от конкретного запроса и необходима какая-то статистическая достоверность. Более того, нельзя брать синтетические запросы, ведь это будут нечестные замеры. Поэтому мы постоянно собираем случайные запросы пользователей по access logs, формируем из них «патроны» и «стреляем» ими по шаблонам в ветке с изменениями и по dev. Это позволяет отлавливать изменения даже на не очень популярных запросах.
У нас есть несколько «корзинок запросов», которые позволяют покрыть большую часть трафика на Турбо-страницы.
Кроме оптимизации наших шаблонов, мы следим за оптимизациями, которые происходят внутри V8. Например, переход на TurboFan дал отличные результаты: значительно уменьшилось время серверной шаблонизации.
Время серверной шаблонизации уменьшилось после перехода на TurboFan
Сеть
В сетевую часть мы включаем всё, что происходит между клиентом и сервером: время передачи данных, размер страницы и статики, а также кешируемость ресурсов. Это уже интереснее, так как из наших уютных дата-центров мы попадаем в дикий внешний мир, где от нас уже зависит не всё. Измерения становятся немного сложнее, а главное — можно получить действительно ощутимые результаты в сотни миллисекунд.
Вот, что мы делаем.
У нас подкручены параметры TCP и TLS, которые позволяют выиграть несколько RTT (Round Trip Time), это даёт отличные результаты в сетях с высокой latency. Наши коллеги уже писали об этом, так что углубляться не буду.
Размер передаваемых данных может сильно влиять на скорость загрузки, поэтому мы стараемся присылать только то, что нужно текущей странице, в наиболее эффективном виде.
Картинки в наших интерфейсах оптимизируются с помощью ImageOptim. Для оптимизации SVG мы используем не только SVGO, но и не ленимся заглянуть в содержимое и при возможности оптимизировать его руками.
Изображения от владельцев сайтов мы выкладываем на специальный CDN, оптимизированный для отдачи изображений. Мы обрезаем exif и цветовой профиль изображения, предварительно сконвертировав изображение в sRGB. Битность приводится к 8 битам на канал, уровень сжатия выставляется в 85. Для ресайза используется фильтр lanczos.
Мы создаём десятки вариантов каждой картинки под комбинации различных размеров экранов с учётом плотности пикселей (retina-дисплеи). И конечно же, автоматически кодируем изображения в формат WebP, если его поддерживает браузер.
Текстовые форматы (HTML, JavaScript, CSS) сжимаются с помощью gzip/zopfli и brotli, если браузер его поддерживает.
Важно не забывать и про удалённость пользователей от серверов. Турбо-страницами пользуются во многих регионах, и контент может быть любым. Так что мы не идём на компромиссы и для сокращения latency даже в самых удалённых регионах используем CDN, которая постоянно расширяется.
И конечно, быстрее всего работает запрос, который не делают вообще. Вся статика отдаётся с вечным кешированием с отдельного домена без cookies, а для повышения кеш-хита она ещё может дополнительно прогреваться на главной странице и странице с результатами поиска.
Клиент
Мало сформировать ответ сервера и доставить его в браузер по сети, его ещё нужно эффективно показать. Мы оптимизируем время начала отрисовки страницы, чтобы человек быстрее начал читать содержимое.
В заголовке HTML мы «разогреваем» соединение с нашими серверами, раздающими статику, и дополнительно предзагружаем её. Стили инлайнятся в страницу, что позволяет браузеру начинать отрисовывать страницу, не дожидаясь загрузки стилей по сети.
Контентные изображения, эмбеды и реклама загружаются не сразу, а по мере чтения страницы, когда приближаются к полю зрения пользователя.
JavaScript частично встраивается в HTML, а все остальные скрипты загружаются в конце отдельными HTTP-запросами. В страницу встраиваются скрипты, критичные для начала работы, сбор ошибок и метрик, а также компоненты, которые не часто встречаются на странице.
Мы собираем RUM-метрики загрузки страницы. Наиболее критичные: время до первого байта, первой отрисовки и наступления интерактивности, когда все скрипты закончили инициализацию и пользователь может использовать страницу.
Большинство пользователей заходит на Турбо-страницы не напрямую, а с других сервисов Яндекса, и нам захотелось оценить время загрузки страниц в контексте пользовательского опыта. Не просто получить абстрактное время в вакууме, а метрику того, как всё видит пользователь.
Так мы сформулировали интегральную метрику скорости:max (firstContentfulPaint, firstImageLoadTime, timeToVisible) — timeToClick
Где:
- timeToClick — абсолютное время клика, который привёл к показу Турбо-страницы. Это может быть клик по сниппету на странице результатов поиска или по карточке в Яндекс.Дзене.
- firstImageLoadTime — абсолютное время загрузки первого контентного изображения в первом экране.
- timeToVisible — абсолютное время перехода страницы в состояние visible. Это актуально для случаев, когда страница была загружена в фоне.
И получили метрику пользовательского опыта:
- если 2/3 экрана занимает изображение, которое ещё не загрузилось, честность метрики firstContentfulPaint довольно сомнительная;
- на ссылках бывает много обработчиков событий, между кликом и фактическим временем начала загрузки страницы может пройти ненулевое время, которое хотелось бы понимать.
Мы постоянно развиваем технологию, чтобы сайты привлекали больше посетителей. Сейчас Турбо-страница в среднем загружается в 15 раз быстрее, чем обычная мобильная версия. Десятки тысяч сайтов используют Турбо, и суммарное количество визитов на них — больше 12 миллиардов.
Всё это — результат труда разработчиков, службы поддержки, менеджеров, работающих с владельцами сайтов, и многих других. Со временем команда, конечно же, расширяется. Например, сейчас мы ищем специалистов по фронтенду и бэкенду и будем рады видеть новых коллег.
О каких компонентах технологии Турбо-страниц вы бы хотели прочитать в будущем более подробные технические материалы? Какой наш опыт вам был бы интересен? Мы также будем рады отзывам и идеям. Спасибо!
Google Search Console и Яндекс.Вебмастер. SEO-трилогия, часть 3
В первой части я рассказал про базовую настройку сайта для поискового продвижения, во второй – про оптимизацию контента на сайте. Теперь самое время залезть в настройки двух сервисов, которые имеют самое прямое отношение к продвижению сайтов. Посмотрим, как наши сайты выглядят со стороны поисковых ботов. Какие страницы индексируются, как смотреть историю поисковых запросов и многое другое.
Что это за сервисы?
У Google и Яндекс есть два сервиса, которые позволяют мониторить сайт и отслеживать динамику изменений на нем. И это не Яндекс.Метрика или Google Analytics – эти двое наиболее известны. В отличие от них, Google Search Console и Яндекс.Вебмастер стоят чуть в стороне, хотя они столь же полезны и нужны.
Вот, например, ваш сайт подключен к этим сервисам? Если да, то отлично. Если нет, то почему не подключен? Не знали про эти сервисы? Или знали, но по какой-то причине не стали их подключать?
Отслеживать количество посещений на сайте – это одна сторона аналитики сайта. Другая – знать, что происходит со страницами, какие из них уже попали в поисковую базу, а какие еще нет. И если не попали, то почему? Именно для этого и нужны Google Search Console и Яндекс.Вебмастер. Как к ним подключиться, я рассказал во второй части трилогии. Сейчас заглянем в их настройки поглубже.
Google Search ConsoleИзображение: скриншот главной страницы сайта search.google.com/search-console.Что есть такого интересного в этом сервисе, на что стоит обратить внимание? Пройдемся по интерфейсу и посмотрим, какие функции здесь есть. Основные пункты – на скриншоте ниже, все они расположены на левой колонке.
Обзор
Это стартовая страница, аналог главной страницы консоли сайта WordPress. Здесь собрана сводная информация по наиболее значимым показателям. О них ниже и чуть подробнее.
Скриншот страницы оценки эффективности представления в поиске.Под номером 1 на скриншоте строка, где можно выбрать период показа данных. По умолчанию там стоит за 3 месяца, обратите внимание. Ниже на цветных блоках видно количество кликов за этот период, показов, средний CTR сайта и средняя позиция. CTR – это процент показов, которые привели к кликам. Чем больше, тем лучше. А средняя позиция – это такой относительный показатель по месту в поисковой выдаче, то есть на каком месте находится ваш сайт. Но с учетом наивысшей позиции, когда-либо занятой сайтом.
Под номером 2 можно более детально посмотреть статистику по поисковым запросам, которые ведут на ваш сайт. На вкладке Страницы видно топ страниц сайта по кликам и показам. И вот здесь уже можно смотреть детали индексации. Например, если перейти на вкладку Страницы и напротив нужной нажать на иконку лупы «Проверить URL», то откроется новая страница с подробными сведениями.
Скриншот раздела эффективности показа страниц в поиске.Будет видно, есть ли эта страница в индексе Google. И если на ней есть изменения, то можно вручную отправить на переиндексацию. Тут же видно, оптимизирована ли страница для мобильных устройств. Эти данные можно получить и с главной страницы. Для этого нужно зайти в пункт «Проверка URL» и ввести нужный адрес.
Покрытие
Скриншот отчетов по ошибкам на страницах сайта.Здесь все оформлено в цветах, поэтому максимально наглядно. Красный – страницы, которые в поиск не попали. Почему? Нужно разбираться. Чуть ниже на странице нажимаем на строку с ошибкой и смотрим детали. Оранжевый – страница в поиск попала, но есть предупреждение. Тоже смотрим, в чем причина. Зеленый – самый классный пункт и цвет. Все отлично, эти страницы проиндексированы роботом и есть в поисковой базе Google. Серый цвет – эти страницы исключены из поиска. Возможно, это сделано прямым запретом через файл robots.txt.
Файлы Sitemap
Здесь можно указать путь к файлу карты сайта. В ней есть полный перечень всех страниц и постов. И этот самый перечень и попадает в поисковую базу. Если на сайте стоит плагин Yoast SEO, то карта сайта находится по адресу /sitemap_index.xml – допишите эту строку после имени сайта.
На этой же странице видно, когда карта сайта последний раз обновлялась и сколько в ней есть адресов.
Ссылки
Итак, смотрим, сколько есть внутренних и внешних ссылок. Внутренние – это ссылки внутри сайта на свои же страницы. Внешние – совсем другое дело. Их еще называют обратными ссылками. Это когда на каком-то сайте стоит ссылка на ваш. Очень важная штука. По возможности нужно обзаводиться такими ссылками. Они увеличивают трафик на ваш сайт и как следствие поднимают его позиции в поиске.
Но здесь важный момент – обратные ссылки должны стоять на подходящих ресурсах. Из вашей же тематики, в идеале. Потому что когда на ваш сайт ссылается какой-то сомнительный форум с не совсем адекватным контентом (каждый у себя в голове представьте свой вариант), то мало хорошего от такой ссылки. Если же их будет несколько, то еще хуже. И так далее. Google анализирует ссылки и делает свои выводы. Ссылка на другом сайте НКО с большой посещаемостью будет лучшим вариантом.
Краткое заключение по Google Search Console
Пунктом меню в Google Search Console не в пример меньше, чем в Яндекс.Вебмастере (сейчас сами увидите). При этом все, что нужно, делается, настраивается и мониторится. В первую очередь, рекомендую «скормить» сервису карту сайта, проверить страницы на мобильную адаптацию и отсутствие ошибок. Затем уже можно отслеживать динамику показа страниц и кликов. А там можно и оптимизацией заняться, по итогам тех отчетов, что выдаст сервис примерно через пару-тройку недель работы.
Но это работа постоянная, а не просто «поставил и забыл». Нужно смотреть динамику страниц, проверять отсутствие ошибок, вручную отправлять новые и измененные страницы на переиндексацию. Ну, это чтобы не ждать, пока до них вновь доберется поисковый робот.
Яндекс.Вебмастер
Изображение: скриншот главной страницы сайта webmaster. yandex.ru.Чего-чего, а пунктов меню в левой колонке в Вебмастере гораздо больше, чем в его аналоге от Google. Сейчас пройдемся по ним. Многие понятны уже из своего названия, на некоторых нужно будет остановиться подробнее.
Скриншот главной страницы кабинета Яндекс.Вебмастер.Индексирование
Внутри есть подпункт «Страницы в поиске», который показывает страницы, как находящиеся в поиске Яндекс, так и исключенные из него. Первым делом можно заглянуть сюда и посмотреть, что тут делается. В соседнем подразделе «Проверить статус URL» можно вручную проверить отдельно взятую страницу. Если в результатах проверки есть «Страница обходится роботом и находится в поиске», то отлично, это и нужно. Там же можно нажать «отслеживать страницу», после чего она появится в разделе «Мониторинг важных страниц».
Скриншот мониторинга важных страниц в кабинете Яндекс.Вебмастер.Здесь видно более подробное описание работы по индексации страниц. В колонке URL видно ссылку на страницу, ее заголовок и описание. Справа в колонках видно дату последнего изменения на странице, когда ее последний раз обходил робот и какой ответ был получен. Если код 200, то все отлично. Недавно созданные страницы не сразу попадают в поисковую базу, нужно немного времени. На скриншоте выше это первая строка. Этой страницы еще нет в поисковой базе. Но робот на ней был, все считал и дело свое сделал. Скоро появится.
В этом же разделе в пункте «Файлы Sitemap» можно добавить карту сайта. Дальше – по аналогии с сервисом Google, принцип работы такой же. В пункте «Обход по счетчикам» можно подключить Яндекс.Метрику и связать два сервиса.
Информация о сайте
Если ваш/а бизнес/деятельность/работа имеют региональную привязку, то стоит задать регион сайта. Это можно сделать в разделе «Региональность» здесь же в Вебмастере либо в карточке организации в Яндекс.Справочнике.
Другой подраздел здесь – «Оригинальные тексты». Написали новый текст (авторский, конечно), затем закинули его сначала сюда, а потом уже опубликовали на сайте. Этим вы говорите Яндексу, что текст изначально ваш. Если его будут перепечатывать другие ресурсы, то Яндекс будет это учитывать при индексации их страниц с вашим текстом.
Турбо-страницы
Яндекс.Вебмастер может отслеживать трафик с турбо-страниц. Их можно подключить по инструкции Яндекса, а можно воспользоваться плагином Теплицы социальных технологий. Важный момент – турбо-страницы работают по своему, скажем так, шаблону. Если у вашего сайта адаптивный дизайн и скорость загрузки на мобильных устройствах хорошая, то турбо-страницы можно и не использовать. Иначе многие элементы интерфейса с вашего сайта пропадут в режиме турбо-страниц.
Инструменты
Здесь можно проверить на ошибки файл robots.txt, сделать запрос на удаление страниц из поиска, проверить страницы на мобильную адаптацию. Все нужное, полезное. Всем рекомендую пользоваться.
Краткое заключение по Яндекс.Вебмастеру
К чему сводится текущая работа в сервисе? Добавляете важные страницы в список отслеживаемых и регулярно смотрите, что там с ними делается. Вышел новый пост или изменилась страница – отправьте ее на переобход роботу. На главной странице сервиса есть блок с уведомлениями об ошибках. Поэтому смотрим, чтобы там все было чисто и без ошибок. Это такой базовый набор, который помогает держать сайт в тонусе.
Дальше – дело за контентом. Пишете оригинальные тексты, добавляете свои фотографии и смотрите, как вся эта красота индексируется.
Итог по двум сервисам
Если у вас подключена статистика посещений, то это, безусловно, хорошо. Но для полной картины можно подключить еще и оба сервиса мониторинга. Если вы работаете преимущественно на зарубежную аудиторию, то вполне можно обойтись только Google Search Console. Если же ваши читатели пользуются и Яндексом, то тогда точно лучше подключить оба сервиса.
Да, вначале могут вылезти ошибки и предупреждения. Но это все поправимое. После этого, глядишь, и сайт начнет подниматься в результатах поиска. Оно же все взаимосвязано. Поисковые алгоритмы меняются день ото дня и нужно быть в курсе событий. А лучший способ для этого – смотреть на сайт глазами поисковых роботов. Как это делать, вы теперь знаете.
что это такое, для чего он нужен, как его настроить и работать
Мы увеличиваем посещаемость и позиции в выдаче. Вы получаете продажи и платите только за реальный результат, только за целевые переходы из поисковых систем
Заказывайте честное и прозрачное продвижение
Получи нашу книгу «Контент-маркетинг в социальных сетях: Как засесть в голову подписчиков и влюбить их в свой бренд».
Подпишись на рассылку и получи книгу в подарок!
Яндекс Вебмастер – это сервис, который предоставляет инструменты для анализа и отслеживания индексирования страниц, проверки технического состояния сайта и его позиций в выдаче
Любой человек, кто занимается продвижением сайтов, должен знать, для чего нужен Яндекс Вебмастер. Со временем в интернет-магазине или в блоге могут появляться ошибки. Чаще всего они связаны с техническими сбоями или новыми требованиями к качеству контента. Яндекс проверяет ваш проект и указывает на недочеты, дает рекомендации по их устранению и принимает только исправленную работу. Словно учитель в школе.
Вы исправляете ошибки. И сайт начинает лучше ранжироваться в поисковой системе. Его позиции растут, к вам приходит больше посетителей. Повышается конверсия, растет прибыль.
Использование Webmaster без регистрации
Полный функционал сервиса доступен только после авторизации. Но и без нее можно воспользоваться рядом опций. Это полезно не только для работы с собственными ресурсами, но и для изучения конкурентов.
- Проверка robots.txt. Вы можете просмотреть запреты и ограничения на индексирование служебных страниц. При вводе отдельно выделяются строки, которые принимает Yandex. Вы своевременно выявите и устраните ошибки.
- Анализ файлов Sitemap. Инструмент проверяет возможные сбои в карте разметки.
- Контроль ответа сервера. Указывает время отклика по конкретным ссылкам.
- Валидатор микроразметки. Позволяет убедиться в том, что данные хорошо структурированы для поисковых роботов.
- XML-валидатор. С его помощью можно проверить XML-файлы, которые нужны при работе с партнерскими программами Яндекса, например — Я.Маркет.
Добавление сайта в Яндекс Вебмастер
При активном продвижении проекта ограниченного функционала критически мало. Обязательно потребуется полный инструментарий. Он даст возможность просматривать всю значимую для участия в выдаче информацию:
- какие разделы и когда посещал web-паук;
- проиндексированные и исключенные страницы;
- наложение фильтров и санкций;
- ключевые слова, по которым приходят пользователи;
- технические ошибки и многое другое.
Благодаря этим сведениям каждый разработчик вносит исправления и поднимает позиции площадки. Чтобы воспользоваться опциями, нужно зарегистрировать аккаунт на Yandex и перейти в раздел webmaster.yandex.ru.
После ввода доменного адреса необходимо подтвердить принадлежность вам ресурса. Это можно сделать несколькими способами:
- Html-файл. Самый простой для новичков вариант. Скачайте предложенный системой документ и загрузите его в корневой каталог на сервере. Это доступно, как через ftp, так и через админпанель хостинг-провайдера.
- Мета-тег. Необходимо вставить предложенные данные в код шаблона. Многие CMS-системы предоставляют для этого специальное поле в админке. Если вы используете самописный движок, эту работу нужно поручить программисту.
- DNS-запись. Ее внедрение происходит на стороне регистратора домена. В панели управления dns добавьте текстовую запись и вставьте данные из Webmaster. Это самый долгий вариант. Обновление и проверка занимают до 72 часов.
Общая информация о сайте
После подтверждения прав необходимо детальнее разобраться как работать с Вебмастером Яндекс. Вам становится доступна расширенная аналитика и статистика:
- Страницы в поиске. Вы можете контролировать сколько из опубликованных материалов удовлетворяет требованиям системы.
- Внешние ссылки. Отображаются сторонние ресурсы, которые на вас ссылаются. Это помогает анализировать развитие органической вовлеченности пользователей и выявлять проделки конкурентов, которые упоминают вас на «серых» порталах.
- Исключенный роботом контент. Вы получаете уведомления о наложении санкций, ограничений и пояснения, которые помогут их убрать.
- Тематический индекс цитирования. Определяет авторитетность по отношению к другим площадкам.
Эта информация помогает при оценке состояния и оптимизации сайта. Чтобы устранить распространенные проблемы, выполните автоматический анализ и, следуя рекомендациям сервиса, устраните все недоработки.
Первичная настройка Яндекс Вебмастер
Вы можете направить нужным путем поискового бота и корректировать его действия. Облегчить ему работу и избежать лишних ошибок. Для этого проведите небольшую подготовку. Обязательно пройдитесь по следующим позициям:
- Robots.txt. Проверьте наличие файла на сервере, и укажите адрес на него в Webmaster. Проконтролируйте все ли директивы корректно работают. Закройте от роботов служебные разделы, RSS ленту и другие материалы, которые не должны попадать в выдачу. Укажите главное зеркало и путь к карте сайта.
- Региональность. Актуалена для интернет-магазинов и площадок, ориентированных на офлайн услуги. Она необходима чтобы поисковики смогли повысить приоритет ресурса при запросах по конкретному городу. Создайте блок контактов с указанием адреса офиса и телефонов. Для привязки к региону, укажите на него ссылку.
- Sitemap. Представляет собой своеобразный каталог, который помогает определить иерархию и быстрее обходить подразделы. Это особенно важно для больших порталов. Создайте файл и пропишите на него линк.
- Оригинальные тексты. Перед публикацией уникального контента добавляйте его в этот раздел. Это сохранит за вами авторство и убережет от понижения позиций, если информацию скопируют.
- Проверка мобильных страниц. В современных условиях преобладает трафик с телефонов и планшетов. Чтобы не терять его, убедитесь, что публикации соответствуют требованиям.
Обязательно нужно проверить ресурс на наличие ошибок. Их делят на 4 категории:
- Фатальные. Отсутствует доступ к индексированию или соединение с сервером.
- Критические. Превышение времени ответа сайта или количества нерабочих ссылок.
- Возможные. Контроль редиректов, дублей, несуществующих файлов и прочего.
- Рекомендации. Относятся к улучшению представления поисковых роботов о площадке.
Первые две проблемы обязательно устраните в кратчайшие сроки. Их игнорирование приведет к выпадению из поиска. Оставшиеся тоже важны, но они влияют только на ранжирование.
Как использовать Вебмастер Яндекса, чтобы повысить позиции сайта
Важно не только знать зачем нужен Яндекс Вебмастер, но и понимать, как им пользоваться для улучшения показателей в выдаче. Все сводится к повышению привлекательности каждой страницы для конечного пользователя. Этим вы улучшаете поведенческие факторы. Что в свою очередь является одним из самых важных параметров для поисковиков. Рассмотрим на примерах как это применять в рамках каждого раздела сервиса.
Диагностика
Вы устраняете явные проблемы. Читатели видят сайт, который корректно отображается и не выдает ошибок.
Поисковые запросы
Вы видите по каким фразам приходят посетители и предлагаете им больше интересного тематического контента.
Индексирование
Заказывая переобход роботами площадки, вы помогаете клиентам видеть в поиске более актуальные данные.
Ссылки
Вы получаете возможность полностью контролировать внутреннюю перелинковку. Восстанавливая битые линки, вы не допустите переходов на пустые разделы.
Информация о сайте
Владельцы интернет магазинов могут добавить сведения о товарах и сформировать специальные сниппеты. Они будут давать полное представление о наименованиях непосредственно из поисковика.
Турбо-страницы
Мгновенно отображают контент на мобильных устройствах. Экономят время и трафик.
Инструменты
Вы контролируете скорость загрузки, совместимость с телефонами и планшетами, удобство обхода ресурса поисковыми ботами и многое другое. Это делает лояльными не только людей, но и web-роботов.
В статье вы познакомились с сервисом Яндекс Вебмастер, узнали что это такое, как пройти регистрацию и продвигать с его помощью сайты в выдаче. Своевременная диагностика и скрупулезное изучение всех возможностей системы позволит занять со временем свое место в ТОПе.
Как работает Яндекс.Вебмастер? Откуда берутся данные?
- Eye 3 296
- Chatbubbles 1
- CategoriesВеб-Аналитика, Яндекс
В этой статье будет рассказано о том, как Яндекс.Вебмастер устроен изнутри, откуда он берет данные и как с ними работает.
Содержание
Зачем нужен Яндекс.Вебмастер
Зачем нужен Яндекс.Вебмастер? Для того чтобы ответить на этот вопрос, нужно осознать, что в работе поиска принимают участие три стороны:
- пользователи, которые приходят в Яндекс за ответами на свои вопросы;
- владельцы сайтов, которые предоставляют контент и хотят получить трафик;
- Яндекс, который предоставляет поисковую технологию.
Яндекс.Вебмастер – это один из инструментов, который позволяет удовлетворить потребность всех трех этих сторон. Владельцы сайтов могут заходить в Яндекс.Вебмастер и получить информацию о том, что происходит с их сайтом. Яндекс показывает им существующие проблемы и пути их решения. Вебмастера исправляют проблемы и улучшают контент, у Яндекса улучшается выдача, пользователи тоже довольны. Triple win!
Сервис Яндекс.Вебмастер умеет делать хорошо ровно две вещи – собирать данные и показывать их. Тому, как этот сервис собирает данные, где он их берет и как обрабатывает, и будет посвящена сегодняшняя статья. Надеемся, эта информация поможет Вам более эффективно использовать Яндекс.Вебмастер для решения своих задач. Также она может быть весьма полезной аналитикам и другим людям, занимающимся обработкой данных.
Nota bene: у Google есть свой сервис для контроля и поддержки трафика – Google Search Console.
Раздел «Поисковые запросы»
На данном скриншоте показана информация о каком-то запросе в сервисе Яндекс.Вебмастер. О запросе предоставляются максимально подробные данные: количество показов, количество кликов, ctr и т.д. Причем эти данные показываются для различных позиций. Это информация является самой точной, потому что предоставляет ее непосредственно Яндекс.
Разумеется, можно пользоваться другими инструментами – счетчиками, Яндекс.Метрикой и т.д. Но для того чтобы получить наиболее полные данные, вам нужны именно поисковые логи. А Яндекс.Вебмастер – это инструмент, который берет данные именно из этого источника. Каждый раз, когда пользователь совершает поисковый запрос, этот запрос уходит в поисковую программу, которая не только формирует выдачу, но и записывает в лог подробную информацию о нем (сам запрос, регион, список URL-адресов в выдаче и т. д.)
- Поиск Яндекса – большая программа;
- хорошие программы ведут лог;
- в логе поиска есть все что нужно.
Встает вопрос о том, как эту информацию можно обрабатывать, потому что поисковый лог Яндекса – это очень масштабный источник данных. Каждый день Яндекс отвечает на огромное количество запросов, и для того, чтобы предоставлять точную статистику, Яндекс.Вебмастер должен видеть их все.
Map Reduce
Map Reduce – это модель вычислений, которой активно пользуются разные команды Яндекса. Это довольно известная модель, для нее есть разные реализации и платформы, самой популярной из которых является Apache Hadoop.
В чем заключается идея Map Reduce? Возьмем классическую схему работы сервиса с данными. В такой схеме у сервиса есть кластер с базами данных и вычислительный кластер, где работают бэкенды, отправляющие и обрабатывающие запросы к этим базам. Нетрудно заметить, что в такой схеме всегда есть машины, у которых простаивают процессоры, потому что их основной задачей является хранение данных, и машины у которых простаивают жесткие диски, на которых ничего не хранится. Map Reduce – это концепция, которая призвана решить, в числе прочего, эту проблему. Согласно ей данные хранятся и обрабатывается в едином кластере, что позволяет снизить простой мощностей и минимизировать сетевой трафик. Яндекс.Вебмастер использует именно эту модель вычислений.
Поисковый лог
Каждый поисковый лог представляет собой строчку таблицы, в которой указан сам запрос и далее пункты выдачи, в соответствии с их позицией. Легко заметить, что в этой таблице записаны некие факты. Например, по запросу «котики» сайт котики.рф оказался на первой позиции – это факт. Map Reduce позволяет обработать эту огромную таблицу с помощью специальной программы и собрать факты в другую таблицу.
Теперь в каждой строчке находится не отдельный запрос, а отдельный факт. Например, говорящий о том, что по определенному запросу определенный сайт оказался на определенной позиции. Эта таблица существенно больше и уже немного ближе к тому, что показывает в интерфейсе Яндекс.Вебмастер.
Далее встает задача агрегировать полученные данные по хостам. Для этого выполняется операция Reduce, которая группирует все строчки с одинаковым ключом.
Nota bene: Если Вы занимаетесь обработкой больших данных, и Вам не хватает мощностей, Вы также можете использовать модель вычислений Map Reduce. Это отличный способ сократить расходы на «железо» для вычислений.
MapReduce в Яндексе
Яндекс использует собственную реализацию парадигмы MapReduce, которая называется YT (Ыть). Эта реализация развернута на кластере в несколько тысяч машин. При этом у сервиса Яндекс.Вебмастер есть гарантия доступности нескольких тысяч процессорных ядер, на которых в любой момент времени можно производить вычисления. И это действительно происходит – каждую минуту Яндекс.Вебмастер обрабатывает несколько гигабайт данных. В последнее время команда Яндекс.Вебмастер идет к тому, чтобы использовать MapReduce для всех типов данных, потому что это очень удобно.
Раздел «Страницы в поиске»
В раздел Яндекс.Вебмастера «Страницы в поиске» недавно были внесены два важных изменения:
- Добавлена возможность мгновенной доставки данных.
- Добавлена история изменений позиций сайта в выдаче.
Данные для этого раздела берутся из поисковой базы – реально существующего набора таблиц, данных и т.д. Все, что остается Яндекс.Вебмастеру, – это забрать эти таблицы и произвести нужные вычисления.
- Поиск берет страницы из поисковой базы.
- Поисковая база — это тоже данные.
- Любые данные можно обработать.
Как получить информацию об изменениях в поисковой базе? Для этого нужно просто сравнить две базы – старую и новую – и проверить в них наличие того или иного URL-адреса. Кроме того, в поисковой базе имеется дополнительная информация о причинах появления в ней или удаления из нее URL-адреса.
MapReduce – это технология, которая идеально подходит именно для таких задач по сравнению данных. Команде Яндекс.Вебмастер оставалось только написать соответствующую функцию сравнения.
Что касается мгновенной доставки данных, понятно, что это некоторое преувеличения – они доставляются не за одну секунду. На больших базах данных расчет может длиться часами. Тем не менее в течение 5–6 минут после переключения базы на поиске данные уже есть в сервисе.
Как у Яндекса получилось добиться такого результата? Дело в том, что поисковая база формируется не на самих поисковых машинах. Поэтому, после того как она сформировалась, ей нужно еще некоторое время, чтобы доехать до поиска – данные в ней проходят проверку, оценку и т.д. Этот процесс занимает несколько часов. А Яндекс.Вебмастер забирает поисковую базу еще до того, как она появилась на поиске. Далее над данными из этой базы проводятся все необходимые вычисления, и в тот момент, когда она появляется на поиске, Яндекс.Вебмастер включает ее и у себя.
Раздел «Нарушения и безопасность»
В этом разделе отображается информация о найденных на сайте вирусах. Т.к. Яндекс заботится о своих пользователях и не хочет, чтобы их устройства заражались вирусами или троянами, на борьбу с этой проблемой в нем тратится много ресурсов. Для этого в составе Яндекса есть отдельное подразделение, занимающееся обнаружением вирусов на сайтах. Информация о вирусах доставляется до пользователей двумя способами:
- непосредственно в выдаче – рядом с URL-адресом зараженного сайта;
- через Яндекс.Браузер.
Однако в такой схеме страдают владельцы сайтов, потому что, когда Яндекс помечает сайт как зараженный, у них происходит падение трафика. Поэтому одной из задач сервиса Яндекс.Вебмастер является доведение до вебмастеров информации о взломе или заражении сайта. Данные о зараженных страницах берутся Яндекс.Вебмастером непосредственно из первоисточника – оттуда же, откуда их забирает поиск и Яндекс.Браузер.
Хранятся они в простой таблице, где указаны адреса сайтов и обнаруженные проблемы. Размер этой таблицы относительно невелик, однако изменения в нее все равно вносятся частями. Она не переписывается целиком каждые 10 минут, поэтому в ней все время находятся примерно одинаковые данные.
Для того чтобы минимизировать время доставки информации об обнаружении вируса до вебмастера, Яндекс.Вебмастер раз в 10 минут снимает полную копию таблицы с вирусами и сравнивает ее с предыдущей версией. Благодаря технологии MapReduce, это занимает совсем немного времени. Получается небольшая таблица с изменениями, и именно она и загружается в Яндекс.Вебмастер. Благодаря этому время доведения до вебмастера информации о заражении сократилось до 10 минут.
Кстати о базах данных
MapReduce – это офлайновая технология. В большинстве случаев она нужна для того, чтобы что-то посчитать в офлайне в течение нескольких часов. С ее помощью нельзя быстро показывать данные пользователю в интерфейсе. Поэтому команде Яндекс.Вебмастера все равно были нужны классические базы данных.
Интересно, что команда Яндекс.Вебмастера и разработчики аналогичных аналитических инструментов сталкиваются с диаметрально противоположными проблемами. Обычно основной проблемой разработчиков является нехватка данных для анализа. В Яндекс.Вебмастере обратная ситуация – у разработчиков очень много данных, которые нужно уменьшить, чтобы была возможна их обработка.
Clickhouse
Для уменьшения объема данных команда Яндекс. Вебмастера также использовала технологию MapReduce, однако даже после обработки объем был слишком велик. Тогда они обратились за помощью к команде Яндекс.Метрики, которые для похожих целей разработали собственную базу данных Clickhouse.
- Clickhouse – это колоночная база данных, разработанная командой Яндекс.Метрики$
- поддерживает SQL-синтаксис;
- эффективно хранит данные.
Первым делом разработчики Яндекс.Вебмастера попытались поместить в эту базу данных раздел «Поисковые запросы». Оказалось, что Clickhouse очень эффективно хранит информацию – объем данных на входе и выходе оказался не сопоставимым. В результате на проект Clickhouse была выделена отдельная команда, и теперь эта база данных является opensource продуктом. Документация по продукту выложена на clickhouse.yandex. Так что, если у вас тормозит PostgreSQL, теперь есть хорошая альтернатива.
Тем не менее у Clickhouse есть и обратная сторона медали. Ради эффективности пришлось пожертвовать функционалом – в этой базе данных нельзя обновлять и удалять данные. Можно только делать insert и удалять таблицу целиком. По этой причине для некоторых разделов в Яндекс.Вебмастере используется еще одна база данных – Apache Cassandra.
Apache Cassandra
Apache Cassandra – это также опенсорсная база данных.
- Apache Cassandra – это распределенная база данных;
- более простой язык запросов;
- каждым данным выделяется своя база;
- умеет удалять данные.
Пирамида юзабилити
Можно заметить, что любые сложные системы растут предсказуемым образом – иерархически. Например, если в компании появляется больше людей, в ней появляются слои управления и т.д. То же самое происходило с интернетом, в который люди выходили, каждый раз забивая адрес нужного сайта в браузер. Потом появился поиск – производный инструмент, который привнес новый сценарий пользования интернетом. В свою очередь, поиск Яндекса также рос, и владельцам сайтов становилось все сложнее понимать его механизм. Для того чтобы дать обратную связь владельцам сайтов, появился Яндес. Вебмастер. Потом сам Яндекс.Вебмастер разросся до внушительных размеров, и у него появился свой производный инструмент – раздел диагностики сайта.
Раздел диагностики сайта
Раздел диагностики сайта – это страница, на которой перечислен список проблем и рекомендаций, о которых Яндекс хочет сообщить вебмастеру. Начиная от критических проблем, вроде вируса на сайте, и заканчивая отсутствием сайта в справочнике организаций Яндекса. Это полезная страница, которую можно посещать каждый день, чтобы следить за состоянием Вашего сайта.
Чтобы вебмастер точно ничего не пропустил, разработчики создали еще одну функцию. Теперь, если с Вашим сайтом что-то не так, в списке сайтов на странице диагностики рядом с ним появится красный треугольник с восклицательным знаком.
С технической точки зрения, раздел диагностики сайта также имеет некоторые особенности. Во-первых, в отличие от других разделов, источником данных является сам Яндекс.Вебмастер. Во-вторых, эти данные должны быть на 100 % консистентны с другими разделами. Недопустима ситуация, когда в разделе диагностики сайта, к примеру, выложена одна информация о наличии вирусов на сайте, а в другом разделе – совершенно другая.
Источник (видео): Вебмастер: Рассказ о данных — Андрей Халлиулин (Яндекс).
Магомед Чербижев
Поделиться:
Об авторе
Никита Пасечник
Эксперт в области продвижения и интернет-маркетинга. Специалист по бизнес-решениям. Опыт работы более 10 лет. Более 5 000 часов активных тренингов и практик.
Подробнее
Вебвизор: что это такое, как настроить и как пользоваться
Вебвизор — это бесплатный инструмент Яндекс. Метрики, который помогает анализировать поведение пользователей на страницах сайта. Действия фиксируются сервисом в виде краткого описания и видеофайла, поэтому маркетологи могут наблюдать за активностью посетителей сайта от начала и до конца визита.
Сервис хранит информацию обо всех визитах за последние 14 дней
Основная цель просмотра вебвизора — увидеть и проанализировать действия реальных пользователей на сайте. Маркетологи обращаются к сервису, чтобы решить следующие задачи:
- Протестировать новый функционал.
- Обнаружить ошибки вёрстки сайта или отдельных страниц.
- Выявить контент страницы, который наиболее интересен аудитории.
- Улучшить юзабилити (удобство пользования сайтом).
Возможности вебвизора для маркетолога
Все визиты пользователей на сайт в Вебвизоре представлены в виде таблицы, где каждая строка — отдельный визит. У пользователя и его визитов есть ряд характеристик, которые можно посмотреть в карточке «Информация о визите», а также вывести в качестве столбца в таблице нажав на «Настроить столбцы». Это полезно, когда нужно отсортировать визиты по какому-либо параметру
Информация о визите пользователя состоит из 10 характеристик
Информация о визите. Сервис хранит текстовую информацию о визите всех пользователей за последние 14 дней:
- Дату и время конкретного визита. Помогает проанализировать поведение пользователей в разное время суток.
- Время на сайте. Полезно, чтобы понять, почему продолжительные визиты не приносят конверсий.
- Регион. Например, чтобы выявить различия в поведении пользователей по гео-признаку.
- Операционную систему, браузер и разрешение экрана. Полезно, чтобы обнаружить ошибки отображения контента страниц на разных устройствах.
- Просмотры, или сколько страниц сайта пользователь посетил.
- Страницу входа и страницу выхода. Полезно для многостраничных сайтов.
- Источник трафика или захода. В вебвизоре можно отфильтровать и посмотреть заходы с определенного канала, например по рекламе.
- Метки. Для анализа заходов с рекламных источников при наличии utm-меток.
- Тип устройства. Мобильный телефон, планшет и компьютер (ПК).
- Достигнутые цели. Если в Яндекс.Метрике сайта установлены цели, то Вебвизор покажет, достигнуты ли они в этом визите.
Видеозапись посещения показывает действия пользователя на сайте:
- Перемещение курсора мыши. Помогает определить, куда направлен взгляд пользователя на странице, какие элементы сайта он просматривает более тщательно, на что обращает внимание.
- Клики. Вебвизор покажет, если пользователь кликнет в любом месте на сайте.
- Заполнение форм. В сервисе можно увидеть, если пользователь начал заполнять форму, но так и не отправил её. Сервис не записывает пароли и логины посетителей.
- Выделение и копирование текста. Иногда при просмотре сайта пользователь копирует текст или название продукта, вебвизор зафиксирует это действие.
- Перемещение между страницами. Если сайт многостраничный, сервис запишет весь пользовательский путь от страницы входа до закрытия вкладки сайта.
Запись посещения фиксирует поведение и действия пользователя
Как установить вебвизор
Перед установкой вебвизора маркетологу важно запомнить:
- Записи хранятся последние две недели, включая текущий день, и не более 150 000 визитов в день.
- Данные визитов обновляются с задержкой в 5-10 минут.
- Для корректной работы сервиса сайт должен использовать кодировку UTF-8. Также вебвизор может не работать при серверных ограничениях на отображение сайта во фрейме.
1. Для установки перейдите в Настройки Яндекс. Метрики, вкладка счётчик и проверьте, чтобы тумблер «Вебвизора, карты скроллинга и аналитики форм» был включен.
2. Теперь перейдите на вкладку «Вебвизор» и установите включенным Вебвизор 2.0. Отличие от версии по умолчанию в том, что в записи фиксируется именно тот контент, который видит пользователь: динамический контент сайта, переключение между вкладками, бездействие на странице, отображение контента на смартфонах.
3. Сохраните изменения и обновите код счётчика на сайте, чтобы изменения вступили в силу.
После того, как все действия завершены, сервис Вебвизор станет доступным. Перейти в него можно из левого меню Яндекс. Метрики.
Сервис может отключиться, если не просматривать записи последние 6 месяцев. Для возобновления работы зайдите снова в настройки Метрики и активируйте инструмент.
О технических нюансах установки сервиса, таких как настройка и запрещение записи, читайте в Справке Яндекс. Метрики.
Как пользоваться вебвизором
Анализировать данные визитов эффективнее не по отдельности, а по отфильтрованным сегментам. Например, посетители с мобильных устройств, визиты с контекстной рекламы, группа визитов по количеству просмотров. Все метрики для анализа перечислены в начале статьи.
Сервис «Вебвизор» доступен по ссылке в левом меню Яндекс. Метрики
Многие маркетологи любят залипать за просмотром всех подряд записей вебвизора. Однако важно помнить про основной плюс этого инструмента: с помощью сегментов можно «подсветить» тот вопрос/проблему, которая вас интересует в данный момент, и смотреть избирательно только ее. Например, «пользователи, которые приступили к оформлению заказа, но не дошли до конца».
Михаил Чиликин
руководитель отдела веб-аналитики в digital-агентстве i-Media
Чтобы сделать сегментацию по одному или нескольким признакам визита, выберите нужный параметр в таблице записей визитов.
Если необходимого параметра в таблице нет, его можно добавить по кнопке «Настроить столбцы»
Данные можно отфильтровать, нажав на название столбца или выбрав условия показа визитов по кнопке-воронке рядом. Визиты будут отфильтрованы, и можно начинать анализировать и просматривать посещения. Подробнее о просмотре записей визитов читайте в справке.
Также в вебвизор можно попасть из любых отчетов Метрики, кликнув на иконочке в строке. Это сразу откроет страницу вебвизора с примененным сегментом, который покажет только визиты из выбранной строки отчета.
Разберём несколько задач, которые маркетолог может решить с помощью вебвизора:
- Понять, что мешает пользователю совершить целевое действие.
На этапе заполнения форм обратной связи или подписки у пользователя могут возникнуть затруднения: не отображается текст, кнопка не помещается в экран телефона и др. Если обнаружить такие пробелы и исправить их, конверсия сайта увеличится.
Исключаем визиты с достижением целевого действия и выборочно просматриваем посещения
- Протестировать обновления страницы.
После значимых изменений на сайте, настройте цель на посещение пользователем обновлённой страницы. Фильтрация этой цели в вебвизоре позволит просмотреть визиты и оценить реакцию пользователей на изменения.
- Выявить проблемы с интерфейсом и контентом.
Если пользователь несколько раз перечитывает текст на странице, чтобы понять суть, или у него возникают трудности при заполнении форм, время его сеанса увеличивается. Поэтому отфильтровав визиты по времени на сайте, можно выявить проблемы в интерфейсе и контент, на котором пользователь задерживается при скролле.
- Отследить проблемы сайта на разных устройствах, операционных системах и разрешениях.
Чтобы обнаружить проблемы, сравните показатели отказов и время на сайте для разных сегментов. Например, ПК и смартфоны. Если визиты с определенной характеристикой отличаются отказами, отфильтруйте посетителей с этого устройства и выборочно посмотрите записи.
Фильтрацию по устройствам добавьте с помощью кнопки «Настроить столбцы»
Популярные вопросы о вебвизоре
Какие данные вебвизор не сохраняет? | Сервис не отображает пароли и логины пользователей (вместо них в сервисе будут звездочки), а также персональные данные (пол, возраст и пр. ) с целью сохранения конфиденциальности. |
Почему не работает Яндекс Вебвизор? | Сервис не запишет визит из-за некорректного HTML-кода на сайте или технических ошибок. Все ошибки в работе и рекомендации по их решению описаны в Справке Метрики. |
Уменьшится ли скорость сайта, если подключить вебвизор? | При включении сервиса скорость не уменьшится, так как нагрузка на сайт не меняется. Действия посетителей записываются уже после загрузки контента. |
Почему в вебвизоре меньше визитов, чем в других отчётах метрики? | Инструмент отображает до 150 000 визитов в день. Если посещений больше, сервис выдаст репрезентативные визиты за 24 часа, а не только за половину дня. |
Главные мысли
Яндекс — Что это? Определение
Что такое Яндекс? — Определение
Яндекс — российская поисковая система в Интернете, созданная в 1997 году, найти ее можно: https://yandex. ru. Его международную версию вы можете найти здесь: https://yandex.com. В России он популярнее Google — там у него около 50% рынка.
Интересные факты о поисковике ЯНДЕКС
Интересно, что Яндекс.ру занимает четвертое место в категории самых популярных сайтов в России и пятое в рейтинге поисковых систем мира. Яндекс , помимо России, также нацелен на украинский, турецкий, казахский и белорусский рынки. Он предоставляет пользователям множество дополнительных услуг, таких как: электронная почта, карты, переводчик и собственный веб-браузер.
Было ли это определение полезным?
Автор
Delante — агентство интернет-маркетинга, специализирующееся на привлечении трафика на веб-сайты из поисковых систем и платной рекламы (SEO / SEM). Более 80% наших клиентов представляют быстрорастущую индустрию электронной коммерции.
НЕДАВНО В НАШЕМ БЛОГЕ
Руководство покупателя по найму лучшей компании по SEO-аудиту в 2023 году
|
- SEO сотрудничество,
- SEO-руководство
Вы проводите ежемесячный финансовый обзор, чтобы убедиться, что вы имеете дело с неоплаченными счетами до того, как платежи будут просрочены. Вы регулярно отслеживаете ход выполнения задач, чтобы проверить, удалось ли вашей команде продвинуться к целям этого квартала. А как насчет вашего веб-сайта? Вы тоже регулярно его просматриваете?
ПодробнееLink Building Outreach — Стратегии охвата для получения обратных ссылок
|
- Линкбилдинг
Создание ссылок — важнейший аспект SEO, помогающий улучшить видимость сайта в результатах поиска. Обратные ссылки, также известные как входящие или внешние ссылки, играют важную роль в определении рейтинга и качества веб-сайта в глазах Google. В этой статье мы рассмотрим различные стратегии увеличения количества ссылок, которые помогут вам получить качественные ссылки на ваш веб-сайт и вывести ваши усилия на новый уровень. Готовы погрузиться?
ПодробнееHreflangs. Как пометить языковые версии вашего сайта?
|
- Международная поисковая оптимизация,
- Техническое SEO
Удивительный факт: согласно исследованиям, проведенным SEMrush в 2017 г., ок. 75% многоязычных веб-сайтов не имеют атрибутов hreflang или они реализованы неправильно. Поэтому легко может возникнуть вопрос: как и зачем использовать hreflangs?
ПодробнееПосмотреть все статьи
Что дальше?
Вас интересуют наши услуги? Напишите нам, и мы договоримся о встрече или телефонном звонке.
Оставьте сообщение
Отправьте нам адрес вашего сайта и ваш контактный номер – мы свяжемся с вами в течение 48 часов.
Пишите нам
Поговорим!
Затем мы позвоним вам или встретимся, чтобы обсудить ваши бизнес-цели и приоритеты. Мы также подробно поговорим о вашем сайте.
Получите предложение по действиям
На основе анализа потребностей и вашего веб-сайта мы подготовим предложения для конкретных действий с учетом ваших целей, а также коммерческое предложение.
Будьте готовы к изменениям
Если вам понравилась стратегия, которую мы подготовили для вашего сайта, и вы хотите начать сотрудничество – готовьтесь к изменениям! Мы начинаем путь к более высоким рангам и повышению конверсии вашего сайта!
Получить бесплатное предложение
Все, что вам нужно сделать, это отправить нам адрес вашего веб-сайта, и в течение 48 часов мы свяжемся с вами, чтобы обсудить рекомендуемые действия и расценки на услуги SEO для вас.
обзоров и оценок программного обеспечения Яндекс.Браузер | 2023
Review Highlights
Overall Rating
Ratings Breakdown
Secondary Ratings
Ease-of-use
Customer Support
Value for money
Functionality
Pros and Cons
- icon
» Что мне больше всего нравится в Яндекс.Браузере, так это замечательный пользовательский интерфейс».
- icon
«Яндекс.Браузер имеет множество полезных функций. Лично я использую встроенный Яндекс-переводчик, который позволяет получать переведенные предложения и слова, просто щелкнув (правой кнопкой мыши) по выделенному тексту.»
- icon
«Хорошая замена браузеру Chrome. Много функций, ориентированных на Яндекс.»
- icon
«Единственным недостатком программы является то, что она занимает много места. Чем больше вы пользуетесь приложением, тем больше она занимает памяти вашего телефона.»
- icon
«Таких минусов в яндекс браузере в моих личных представлениях нет.»
- значок
«Я не нашел ничего, что могло бы не понравиться в приложении.»
Вы пользовались Яндекс.Браузером и хотели бы поделиться своим опытом с другими?
Написать отзыв
1–12 из 12 отзывов
Сортировать по
По умолчанию обзоры отсортированы по категориям Рекомендовано покупателям программного обеспечения на основе нашего запатентованного алгоритма, отражающего глубину и качество обзора, новизну опыта и другие факторы. Как платформа для нейтрального обзора, звездный рейтинг обзора не учитывается в рейтинге «Рекомендуется», и в настоящее время не существует механизма голосования, который позволил бы посетителям сайта влиять на рейтинг.
Ali
Проверенный рецензент
Компьютерная и сетевая безопасность, 2-10 сотрудников
Используется ежедневно более 2 лет
Источник отзыва: Capterra
Поощрение не предлагалось
ОБЩАЯ ОЦЕНКА:
ПРОСТОТА ИСПОЛЬЗОВАНИЯ
ВЫГОДНАЯ ЦЕНА
ПОДДЕРЖКА КЛИЕНТОВ
ФУНКЦИОНАЛЬНОСТЬ
Отзыв от января 2022 г.
7
Лучшая альтернатива Google Chrome
0073
Это было неплохо, это был лучший выбор, чтобы избежать использования Google Chrome и Microsoft Edge.
PROS
Если вы ищете спасение от большой технологической тирании, Яндекс — наименее плохой выбор, который я смог найти, со встроенным переводом и синхронизацией закладок. Не уверен, как русский старший брат внедрился в компанию Яндекс, или когда эта компания переключится на правильные вещи, а не на зло, как Google. переход на Яндекс около года назад был реакцией на то, насколько страшными стали некоторые крупные американские технологические компании и насколько они прочно вошли в нашу жизнь. а также, кажется, что в последние несколько лет было много фильтрации и предвзятости, компании начали превращаться из сервисных компаний в организации, которые, кажется, пытаются управлять нами и владеть нами.
МИНУСЫ
иногда сам переключает некоторые вещи на русский с возможностью обратного переключения.
Причины перехода на Яндекс.Браузер
Google теперь явно Злой после того, как они отказались от своего старого лозунга «Не будь злым», который прочно укоренился в нашей жизни и имеет много предубеждений по отношению к вещам, которые служат их интересам или идеологии.
Артем
Проверенный рецензент
Финансовые услуги, 51-200 сотрудников
Используется ежедневно более 2 лет
Источник отзыва: Capterra
Мы пригласили этого рецензента оставить честный обзор и предложили номинальную награду в качестве благодарности.
Общий рейтинг:
Простота использования
Стоимость денег
поддержка клиентов
Функциональность
Обзор января 2022 г.
Один из лучших браузеров, если не лучший
, возможно, можно дневное веб -сайт для ежедневного веб -сайта. Пользуюсь более 5 лет. Перешел с Google Chrome на Яндекс Браузер и пока не пожалел. Кроме того, это быстрее, чем любые другие браузеры.
PROS
Яндекс.Браузер имеет множество полезных функций. Лично я использую встроенный Яндекс Переводчик, который позволяет получать переведенные предложения и слова, просто щелкнув (правой кнопкой мыши) по выделенному тексту.
МИНУСЫ
Иногда сохранение веб-сайтов в списке избранных вызывает затруднения. Если вы не сделаете процесс сохранения тщательно, вы можете легко сделать ошибку и сохранить изображение вместо веб-сайта.
Причины перехода на Яндекс.Браузер
Яндекс.Браузер имеет гораздо больше возможностей, чем Chrome.
Олег
Проверенный рецензент
Маркетинг и реклама, 51-200 сотрудников
Еженедельно используется более 2 лет
Источник отзыва: Capterra
Этот обзор был отправлен органически. Поощрение не предлагалось
ОБЩАЯ ОЦЕНКА:
ПРОСТОТА ИСПОЛЬЗОВАНИЯ
ОТЧЕТНОСТЬ ЦЕНЫ
ПОДДЕРЖКА КЛИЕНТОВ
ФУНКЦИОНАЛЬНОСТЬ
Отзыв от декабря 2021 г.
7