Закрыть от индексации ссылку: Как закрыть ссылки и тексты от поисковых систем — SEO на vc.ru

Как закрыть ссылки и тексты от поисковых систем — SEO на vc.ru

{«id»:13879,»url»:»\/distributions\/13879\/click?bit=1&hash=808a0c530ec912825ba626c7cd84497e1041fd8d717a0e885b6a31d33a4b2d2a»,»title»:»\u0417\u0430\u0447\u0435\u043c \u00ab\u0410\u0432\u0438\u0442\u043e\u00bb \u043d\u0430\u0437\u043d\u0430\u0447\u0430\u0435\u0442 \u0431\u0438\u0437\u043d\u0435\u0441-\u043a\u043b\u0438\u0435\u043d\u0442\u0430\u043c \u043f\u0435\u0440\u0441\u043e\u043d\u0430\u043b\u044c\u043d\u044b\u0445 \u043c\u0435\u043d\u0435\u0434\u0436\u0435\u0440\u043e\u0432″,»buttonText»:»»,»imageUuid»:»»,»isPaidAndBannersEnabled»:false}

SEO

SEO блиц

Встречаются такие ситуации, когда требуется закрыть контент от индексации. Это может быть:

16 272 просмотров

  • неуникальный контент;
  • шаблонный текст, встречающийся на всех страницах сайта;
  • ссылки на сторонние ресурсы.

Ссылки (внешние и внутренние)

Закрывать от поисковых систем внешние ссылки необходимо, если вы не хотите, чтобы страница, имеющая ссылку, теряла свой вес.

Это может происходить следующим образом:

  • Удалением внешних ссылок. Рекомендуется убирать внешние ссылки на сторонние ресурсы.
  • Если удалить ссылку нет возможности, то необходимо скрыть ссылку от индексации посредством скрипта так, чтобы в исходном коде страницы не было <a href=»» …></a>, а блок выводился в виде: <div></div>. Далее при формировании страницы скриптом выводилось содержимое данного блока в виде ссылок и прочего.
    Сам скрипт требуется закрыть от индексации в файле robots.txt.
  • Добавлением атрибута rel=»nofollow». Необходимо прописать атрибут rel=»nofollow» для внешней ссылки (<a href=»» rel=»nofollow» target=»_blank»>текст ссылки</a>).

Помимо внешних ссылок, аналогичное рекомендуют проводить с внутренними ссылками вида добавить в корзину, вход, авторизация, фильтр, сбросить фильтр и т.д. (для всех элементов, которые сверстаны ссылками <a href>, но при этом не ведут на реальные страницы).

Текст

Если у вас на сайте используется большое количество неуникального или дублирующегося контента, то его необходимо скрыть от индексации.

Это можно сделать двумя способами:

  • выделить кусок необходимого текста с помощью тега <!—noindex—>…<!—/noindex—>
  • прописать мета-тег <meta name=»robots» content=»noindex»/> странице.

Важно

Если вы прописали мета-тег <meta name=»robots» content=»noindex»/>, то ссылки на странице все будут доступны для поисковых систем и роботы будут переходить по ним. Поэтому необходимо добавить атрибут nofollow, если хотите полностью запретить индексацию страницы. Выглядеть это может следующим образом: <meta name=»robots» content=»noindex, nofollow»/> или <meta name=»robots» content=»none»/>.

Ждите новые заметки в блоге или ищите на нашем сайте.

Как правильно закрыть от индексации ссылки в WordPress

Хотите на своем блоге все внешние ресурсы скрыть от поисковиков? Хорошим вариантом будет закрыть от индексации ссылки WordPress. Разбираемся как правильно это сделать.

Нужно ли закрывать?

ДА! Большое количество линков на внешние ресурса поисковики расценивают как ссылочный переспам. Например, вы пишете статьи с обзорами продуктов и вставляете партнерские (или Affiliate) ссылки. Если их много, то вы рискуете попасть под фильтр. А это понижение видимости сайта в поиске или вообще исключение из него. Кроме этого, такая страница может потерять ссылочный вес.

Как удалить внешние ссылки

Есть 2 рабочих способа:

  1. Добавить атрибуты к каждому линку.
  2. «Спрятать» через скрипт JS.

Разберем оба способа.

С помощью атрибутов

Обычная ссылка выглядит так:

<a href="https://site.com">Текст ссылки</a>

С атрибутами:

<a href="https://site.com" rel="nofollow external noopener noreferrer sponsored">Текст ссылки</a>

Их можно проставить 2 способами: в редакторе или через плагин.

Плагин

Это просто сделать с помощью WP-плагина External Links. Расширение для всего сайта: контент, шапка, подвал, виджеты.

  1. Установите и активируйте.
  2. В админке перейдите External Links.
  3. На вкладке с таким же названием отметьте нужное.
  4. Сохраните настройки.

Редактор WordPress

Подойдет, если не хотите забивать свой ресурс лишними модулями.

  1. Откройте на редактирование пост и добавьте ссылку.
  2. Перейдите в режим Редактировать как HTML.
  3. Вставьте атрибуты.
  4. Перейдите в обычный режим (Редактировать визуально).
JS-скрипт

Для этого отлично подойдет плагин WP No External Links.

  1. Установите и активируйте.
  2. Откройте Настройки > No External Links, перейдите в раздел Шифрование ссылок.
  3.  Задействуйте Кодировать ссылки при помощи base64.

В URL-Link будет зашифрован и добавлен атрибут для открытия ссылки в новой вкладке веб-браузера:

<a target="_blank" rel="nofollow" href="https://site.com/goto/aHR0cHM6Ly9wZXRyb3YucHAudWE=">текст ссылки</a>

Если вы захотите выбрать где на сайте маскировать линки, то для этого есть раздел Что маскировать.

Скрываем ссылки в комментариях

Если нужно закрыть от индексации ссылки в обсуждениях, то есть отличный вариант — премиум-плагин Clearfy Pro.

  1. Перейдите в раздел Clearfy Pro.
  2. На вкладке SEO отметьте все опции.

Активировать промокод на 15%

Любой ссылке можно задать свой цвет color a. В этом поможет наша палитра цветов css.

Нажмите, пожалуйста, на одну из кнопок, чтобы узнать понравилась статья или нет.

Если Вам понравилась статья — поделитесь с друзьями

Михаил Петров

Привет! Меня зовут Михаил Петров. Я копирайтер и занимаюсь этим с 2013 года. Скрупулезность и ответственность — моя фишка! Не могу делать как попало и добиваюсь, чтоб заказчик сказал минимум “неплохо”. За все время своей работы пришлось написать и отредактировать немало разной “текстовухи”, включая SEO-тексты, отзывы и прочую чушь. На сегодняшний день специализируюсь на написании информационных статей и руководств технического направления. Вижу смысл и светлое будущее в текстах для людей, а не для машин.

Как закрывать страницы от индексации и когда это нужно

6188

How-to – 9 мин чтения и соответствующие страницы должны быть открыты для поискового сканирования. Однако бывают случаи, когда индексация страницы нежелательна и может снизить эффект от оптимизации.

Причины закрытия страниц от индексации

Владелец сайта желает, чтобы потенциальный клиент нашел его веб-ресурс в результатах поиска, а поисковая система, в свою очередь, готова предоставить пользователю ценную и актуальную информацию. Только те страницы, которые имеют смысл в результатах поиска, должны быть открыты для индексации.

Рассмотрим причины, по которым следует убрать индексацию с сайта или отдельных страниц:

Контент не несет смысловой нагрузки для поисковой системы и пользователей или вводит их в заблуждение

Такой контент может включать технические и административные сайты страницы, а также информацию о личных данных. Кроме того, некоторые страницы могут создавать иллюзию дублирования контента, что является нарушением и может привести к штрафным санкциям на всем ресурсе.

Нерациональное использование краулингового бюджета

Краулинговый бюджет — это определенное количество страниц сайта, которое может просканировать поисковая система. Мы заинтересованы в том, чтобы тратить ресурсы сервера только на ценные и качественные страницы. Чтобы быстро и эффективно проиндексировать важный контент ресурса, нужно закрыть ненужный контент от сканирования.

Какие страницы нужно убрать из индексации

Страницы сайта в разработке

Если проект еще в разработке, лучше закрыть сайт от поисковых систем. Рекомендуется разрешить доступ для обхода полных и оптимизированных страниц, которые рекомендуется отображать в результатах поиска. При разработке сайта на тестовом сервере следует ограничить доступ к нему с помощью файла robots.txt, без индекса и пароля.

Копии сайта

При настройке копии сайта важно правильно указать зеркало с помощью 301 редиректа или атрибута rel=»canonical», чтобы сохранить рейтинг существующего ресурса и сообщить поисковой системе: где исходный сайт и где его клон. Скрывать рабочий ресурс от индексации крайне нежелательно. Тем самым вы рискуете сбросить возраст сайта и приобретенную репутацию.

Печатные страницы

Распечатанные страницы могут быть полезны посетителю. Необходимая информация может быть распечатана в адаптированном текстовом формате: статья, информация о продукте, схема расположения компании.

По сути, распечатанная страница является копией своей основной версии. Если эта страница открыта для индексации, поисковый робот может выбрать ее в качестве приоритетной и посчитать более релевантной. Чтобы правильно оптимизировать веб-сайт с большим количеством страниц, вы должны удалить проиндексированные страницы для печати.

Для закрытия ссылки на документ можно использовать вывод контента с помощью AJAX, закрыть страницы с помощью метатега или закрыть все проиндексированные страницы от индексации в robots.txt.

Лишние документы

Помимо страниц с основным содержанием, на сайте могут быть доступны для чтения и скачивания документы PDF, DOC, XLS. Наряду со страницами в результатах поиска можно увидеть заголовки pdf-файлов.

Возможно, содержимое этих файлов не соответствует потребностям целевой аудитории сайта. Либо документы появляются в результатах поиска над html страницами сайта. В этом случае индексация документов нежелательна, и их лучше закрыть от сканирования в файле robots.txt.

Пользовательские формы и элементы

Сюда входят все страницы, полезные для клиентов, но не несущие информационной ценности для других пользователей и, как следствие, поисковых систем. Это может быть форма регистрации и заявки, корзина, личный кабинет. Доступ к таким страницам должен быть ограничен.

Технические данные веб-сайта

Технические страницы предназначены только для официального использования администратором. Например, форма входа в панель управления.

Личная информация о клиенте

Эти данные могут содержать не только имя и фамилию зарегистрированного пользователя, но и контактную и платежную информацию, сохраненную после оформления заказа. Эта информация должна быть защищена от просмотра.

Сортировка страниц

Структурные особенности этих страниц делают их похожими. Чтобы снизить риск санкций со стороны поисковых систем за дублированный контент, рекомендуем убрать их из индексации.

Страницы

Хотя эти страницы частично дублируют содержание главной страницы, удалять их из индексации не рекомендуется; вместо этого нужно установить атрибут rel=»canonical», атрибуты rel=»prev» и rel=»next», указать, какие параметры разбивают страницы в разделе «URL-параметры» в Google Search Console, или намеренно оптимизировать их.

Как закрыть страницы от индексации

Метатег robots со значением noindex в html файле

Если в html-коде страницы есть атрибут noindex, это сигнал для поисковой системы не индексировать ее в результаты поиска. Чтобы использовать метатеги, вам нужно добавить в заголовок соответствующего html-документа.

При использовании этого метода страница будет закрыта для сканирования, даже если на нее есть внешние ссылки.

Чтобы закрыть от индексации текст (или отдельный фрагмент текста), а не всю страницу, используйте html-тег: text .

Файл robots.txt

Вы можете заблокировать доступ ко всем выбранным страницам в этом документе или запретить поисковым системам индексировать веб-сайт.

Ограничить индексацию страниц через файл robots.txt можно следующим образом:

 Агент пользователя: * #название поисковой системы
Disallow: /catalog/ #partial или full page URL to be close 

Для эффективного использования этого метода следует проверить наличие внешних ссылок на раздел сайта, который вы хотите скрыть, а также изменить все внутренние ссылки, ведущие на него.

Файл конфигурации .htaccess

С помощью этого документа вы можете ограничить доступ к сайту с помощью пароля. В файле паролей .htpasswd необходимо указать Username пользователей, которые могут иметь доступ к нужным страницам и документам. Далее укажите путь к этому файлу с помощью специального кода в файле .htaccess.

 Тип аутентификации Базовый
AuthName "Область, защищенная паролем"
AuthUserFile путь к файлу с паролем
Require valid-user 

Удаление URL-адресов через Webmaster Services

В Google Search Console вы можете удалить страницу из результатов поиска, указав URL-адрес в специальной форме и указав причину, по которой его необходимо удалить. Эта опция доступна в разделе Google Index. Обработка запроса может занять некоторое время.

Вывод

Управление индексами — важный шаг SEO. Он должен не только оптимизировать эффективность страниц для трафика, но и скрывать контент, который не имеет никакой пользы для индексации.

Ограничение доступа к определенным страницам и документам сэкономит ресурсы поисковых систем и ускорит индексацию всего сайта.


Эта статья является частью контрольного списка Serpstat.0003

Контрольный список — это готовый список дел, который помогает вести отчеты о ходе работы над конкретным проектом. Инструмент содержит шаблоны с обширным списком параметров разработки проекта, куда вы также можете добавить свои элементы и планы.

Попробуйте Контрольный список сейчас

Ускорьте рост вашего поискового маркетинга с Serpstat!

Возможности ключевых слов и обратных ссылок, онлайн-стратегия конкурентов, ежедневный рейтинг и вопросы, связанные с SEO.

Пакет инструментов для сокращения времени на SEO-задачи.

Получить бесплатную 7-дневную пробную версию

Оцените статью по пятибалльной шкале

Статью уже оценили в среднем 1 человек 2 из 5

Нашли ошибку? Выберите его и нажмите Ctrl + Enter, чтобы сообщить нам

Рекомендуемые сообщения

How-to

Denys Kondak

Как сделать резервную копию вашего сайта и восстановить резервную копию

How-to

Denys Kondak

Какая информация должна быть на сайте интернет-магазина

How-to

Денис Кондак

Как повысить узнаваемость бренда с помощью Google Ads

Кейсы, лайфхаки, исследования и полезные статьи

Нет времени следить за новостями? Не беспокойся! Наш редактор подберет статьи, которые обязательно помогут вам в работе. Присоединяйтесь к нашему уютному сообществу 🙂

Нажимая на кнопку, вы соглашаетесь с нашей политикой конфиденциальности.

Поделитесь этой статьей с друзьями

Вы уверены?

Спасибо, мы сохранили ваши новые настройки рассылки.

Сообщить об ошибке

Отмена

seo — Предотвращение индексации и перехода по ссылке на странице

спросил

Изменено 7 лет назад

Просмотрено 2к раз

Я прочитал сообщение о том, как значение nofollow влияет на сканеры/индексирование. Однако информация из ответов на посты заканчивается 2012 годом.

В моем случае есть страница с файлом, которая индексируется Google. Однако на этой странице есть ссылка для скачивания (оканчивающаяся на ?download ). Я не уверен, была ли ссылка также индексной, но мне бы очень хотелось знать следующее:

как я могу убедиться, что ссылка на странице не индексируется и не переходит по ней?

Использовать ли файл robots.txt и передавать что-то подобное? —

 Запретить: /*?download$
 

Или просто указать rel="nofollow" в ссылке для скачивания?

Кроме того, что мне делать с потенциально уже проиндексированными ссылками для скачивания?

Спасибо!

ОБНОВЛЕНИЕ:

Согласно документам Google nofollow :

В общем, мы за ними не следим. Это означает, что Google не передавать PageRank или анкорный текст по этим ссылкам. По сути, использование nofollow приводит к тому, что мы удаляем целевые ссылки из нашего общего график сети. Однако целевые страницы могут по-прежнему отображаться в нашем индексировать, если другие сайты ссылаются на них без использования nofollow, или если URL-адреса передаются в Google в файле Sitemap.

Итак, я полагаю, что заявление о том, что «страницы могут по-прежнему появляться в нашем индексе» , предполагает, что ссылки, использующие nofollow , обычно не индексируются — за исключениями, упомянутыми в документах.

Я думаю, что это все решает, но если у кого-то есть дополнительная информация, подтверждающая это, добро пожаловать.

  • SEO
  • google-search-console
  • поисковые роботы
  • гиперссылка

2

Если вы действительно хотите, чтобы ссылка не индексировалась и не переходила по ней, вы можете сделать следующее:

  1. страница, которая не будет проиндексирована, будет иметь прикрепленный к ней код состояния HTTP 410, что означает, что страница исчезла навсегда. Это фактически приведет к удалению предыдущей страницы из индекса Google.

  2. В HTML между и добавьте , чтобы запретить роботам индексировать страницу.

Теперь, что касается любых секретных страниц, которые вы хотите сделать в будущем, я предлагаю сделать форму, но с методом POST вместо GET, и со следующим типом кода:

 

Таким образом, вы можете использовать сценарии, чтобы пользователи не могли получить доступ к этому секретному URL-адресу, просто набрав его вручную в адресной строке.

Ничто в мире не сделает настоящую ссылку невидимой для Google.

Даже если вы закроете свою http://example.com/page?download от сканирования с помощью robots.txt, деиндексируете страницу загрузки с помощью noindex и разметите ссылку с помощью nofollow — этого достаточно, чтобы получить одну-единственную входящую обратную ссылку на ваш http://example.com/page?download, и страница будет просканирована.

Вот почему лучше использовать кнопку вместо ссылки

Добавить комментарий

Ваш адрес email не будет опубликован. Обязательные поля помечены *

Copyright © 2024
Дропшиппинг в России.
Сообщество поставщиков дропшипперов и интернет предпринимателей.
Все права защищены.
ИП Калмыков Семен Алексеевич. ОГРНИП: 313695209500032.
Адрес: ООО «Борец», г. Москва, ул. Складочная 6 к.4.
E-mail: [email protected]. Телефон: +7 (499) 348-21-17