Определение аффилиатов в Яндексе – поиск альтернативных способов

Наверное, трудно найти такого SEO-специалиста, который бы не слышал о понятии аффилирования сайтов в Яндексе. Суть его заключается в группировке нескольких сайтов одного владельца в поисковой выдаче. В итоге по общим запросам показывается только один, самый релевантный документ из всех сайтов аффилированной группы. В подразделе «Некачественные сайты» раздела «Помощь вебмастеру» документации Яндекса можно встретить такую фразу:

«Мы стараемся не индексировать или не ранжировать высоко:
…
Группы сайтов одного владельца/компании, предоставляющие пользователю одни и те же товары или услуги, созданные с целью заполнения нескольких позиций в результатах поиска и сбора трафика».

Немногим более года назад я опубликовал простой и эффективный способ проверки аффилированности двух сайтов в Яндексе. К сожалению, используемый в нем оператор отрицания был исключен из документации языка запросов и поддержка его официально прекращена. Видимо, по этой причине на протяжении некоторого времени данный способ вообще не работал (что сказалось на работоспособности некоторых SEO-сервисов, предлагающих автоматическую проверку сайтов на аффилированность), и только буквально недавно работоспособность способа опять восстановилась. Хотя анализ выдачи показывает, что оператор отрицания все равно работает сейчас не совсем корректно (что, впрочем, пока не сказывается на работоспособности обсуждаемого способа), и гарантировать, что способ сохранит свою работоспособность ни в коей мере нельзя.

Таким образом возникает задача поиска очередного лайфхака в виде альтернативного метода определения аффилированности двух сайтов, который не использовал бы недокументированных операторов языка запроса.

Напомню суть существующего способа. Нам необходимо построить выдачу по какому-либо запросу, в которой должны находиться главные страницы сравниваемых сайтов. Если они показываются на одной странице выдачи, значит, аффилирования нет. Если же показывается только одна из них, то значит, сайты саффилированы и сгруппированы в выдаче, и показывается только один из них, наиболее релевантный запросу. Рассматриваемый способ ограничивал выдачу главными страницами рассматриваемых сайтов с помощью оператора

url:. Однако использование данного оператора (равно как и других документных операторов url:, site:, host: и rhost: ) приводит к разгруппировке выдачи по доменам, и чтобы принудительно сгруппировать ее обратно, использовалась конструкция из последовательного примененных операторов отрицания и оператора url: с произвольным значением.

К сожалению, найти альтернативный способ принудительной группировки разгруппированной выдачи без использования оператора отрицания мне на данный момент не удалось. Поэтому изначальную задачу построения следует решать без применения документных операторов

url:, site:, host: и rhost: , дабы не разгруппировывать выдачу. Причем, необходимо построить выдачу с как можно меньшим количеством сайтов, так, чтобы все ответы уместились на одной странице (максимально возможное количество ответов на поисковой странице в Яндексе составляет 50).

В этом случае можно взять по одной достаточно редкой фразе с каждой из главных страниц исследуемых сайтов. Идеально, если это будут вообще уникальные фразы, но не всегда возможно найти таковые, да и сам поиск уникальных фраз на странице может стать весьма трудоемкой задачей. Однако, во многих случаях бывает достаточно взять содержимое тегов title.

Так, например, рассмотрим этот способ для сайтов, взятых в качестве примера аффилиатов в моей прошлогодней статье. Убеждаемся, что главные страницы сайтов находятся в поиске по точной фразе, взятой из тега title:

Теперь компонуем обе точные фразы в одном запросе через пока еще остающийся документированным оператор | (логическое ИЛИ):

Мы видим оба сайта рядом на странице поисковой выдачи, а это явно свидетельствует о том, что они на данный момент не аффилированы. Хотя еще год назад они распознавались, как аффилиаты. Проверяем с помощью старого способа – все верно, сайты уже не аффилированы:

Теперь возьмем для проверки другую пару сайтов, оба принадлежат одному информационному холдингу. Снова убеждаемся, что главные страницы сайтов находятся в поиске по точной фразе, взятой из тега title:

Компонуем обе точные фразы в одном запросе через оператор | и видим в выдаче только один из двух сайтов:

Отмечу, что все результаты помещаются на одну страницу выдачи, разбитую по 50 результатов, так что в этом легко убедиться. Проверка старым способом подтверждает факт аффилирования данных сайтов:

Таким образом, предложенный способ можно применять, как альтернативу прежнему. Однако, стоит признать, что необходимость поиска подходящих фраз в контенте исследуемых страниц, существенно повышает его трудоемкость и ограничивает возможность его автоматизации.

что это и как его избежать — SEO на vc.ru

Казалось бы, это отличная методика: сделать 2-3 копии сайта, оптимизировать их по максимуму и занять несколько позиций в выдаче. Три источника заказов лучше чем один, верно? На самом деле нет.

Эта идея посетила не одну умную голову, причем уже очень давно. Естественно, поисковики не могли на нее не отреагировать — нельзя вводить пользователей в заблуждение. Поэтому при обнаружении аффилиатов из выдачи убирают все сайты кроме одного, причем остаться может вовсе не ваш основной сайт. И все затраты на размножение сайтов просто вылетают в трубу.

Лучший способ не попасть под аффилиат-фильтр — не делать клоны.

Но давайте разберемся по порядку. Потому что — сюрприз — под фильтр сайт может попасть и не по вашей вине.

Поисковики ожидаемо не любят аффилиаты

Позиция поисковиков по отношению к таким манипуляциям однозначна. Сайты-клоны рано или поздно попадают под фильтры. Особенность санкций за аффилированность в том, что ни Яндекс, ни Google официально не признают само существование аффилиатов. Впрочем, тут вопрос скорее в терминах.

Яндекс: группа сайтов одного владельца

Яндекс в официальной справке для вебмастеров обещает исключение из поиска или понижение в ранжировании «группе сайтов одного владельца или компании»:

что такое аффилированный сайт и как проверить на аффилированность

Аффилированные сайты – это веб-ресурсы одной тематики, которые продвигаются по одинаковому пулу поисковых запросов. В 99% случаев такие «клоны» принадлежат одной компании. Аффилиаты создаются с коммерческой целью: с их помощью рекламодатели пытаются активнее раскручивать продукцию или бренд в Интернете.

В бизнесе существует понятие аффилированного или партнерского маркетинга. Например, крупный онлайн-магазин привлекает партнеров (аффилиатов) для размещения на их сайтах внешних ссылок на свою продукцию. Партнерские ресурсы ничего не продают, но генерируют трафик на «головной» сайт. Зарабатывают аффилиаты на процентах с продажи, если по ссылкам на их сайте совершился переход и покупка.

До поры ничего преступного в аффилированных сайтах не было, пока их не стало слишком много. По сути, многие рекламодатели «клепали» сайты-аффилиаты с одной лишь целью: заполнить поисковую выдачу по определенному запросу, чтобы получить больше трафика на основной сайт. Реакция Яндекса и Google была предсказуема – аффилированные сайты уходили под фильтры.

Далее мы расскажем, какие санкции применяют поисковики к аффилиатам. Сейчас же рассмотрим такой нюанс: можно ли считать аффилированным главный сайт и его поддомен?

Основной сайт и его поддомен

Если строго придерживаться позиции Яндекса и Google в отношении к аффилиатам, то и поддомены основного сайта можно смело отправлять под фильтры. Например, крупная компания из Москвы решает сделать отдельные страницы для филиалов в регионах страны. Нет смысла в новом URL, куда разумнее и проще создать поддомен с региональной привязкой.

Яндекс и Google не выпишет санкций поддомену, если владельцы учли следующие нюансы:

• В URL поддомена поместили название регионального города. Например, если филиал в Ростове-на-Дону, то адрес поддомена выглядит так: https://rostov.основной сайт.ru. Похожим образом прописываются поддомены для других городов;

• Присвоили региональность поддомена в сервисе Яндекс.Вебмастер, чтобы поисковик при ранжировании учитывал местоположение сайта;

• Указали контактную информацию по региональному поддомену в Яндекс.Справочнике;

• Разместили актуальный для пользователей регионального сайта контент;

• Выполнили перелинковку между основным сайтом и поддоменом, чтобы пользователь мог перейти с главной на региональную страницу.

Если создать поддомен по правилам, Яндекс и Google не удалят страницу из выдачи и не понизят ранг основного сайта.

Откуда берется аффилированность?

Поисковые роботы посчитают сайт аффилиатом и отфильтруют его, если обнаружат:

1. Домены зарегистрированы на одного владельца – это легко проверить по сетевому протоколу WHOIS. Например, популярный хостинг-провайдер Ru-Center предоставляет данные о владельцах доменных имен, IP-адреса. Робот сравнит контактные и персональные данные владельцев, если заподозрит сайт на аффилированность.  

2. Совпадает контент. Зачастую аффилирование сайтов – это обычное размножение, клонирование контента и структуры головного ресурса. Сравнить тексты на уникальность не трудно. Робот сочтет за аффилиат совпадения названий и описаний продукта/услуги. Не обойдет стороной даже ценники и артикулы, схожую структуру разделов и категорий. Словом, если сайт подозревают в аффилированности, то его проверят «вдоль и поперек».  

3. Совпадение 90-100% контактных данных на страницах. Одинаковые номера телефонов, адреса, ссылки на одни и те же группы в соцсетях, похожие e-mail.

4. Одинаковые IP-адреса.

5. Похожий дизайн страниц, вёрстка. Робот проверит структуру сайта, сравнят шрифты, визуальное оформление, цветовую гамму, размещение блоков контента на страницах.

6. Одинаковое семантическое ядро. Поисковик может наложить санкции на сайты, если они продвигаются по одним и тем же ключам. Конечно, должны совпасть ещё ряд факторов, которые описаны выше.

7. Одинаковые логотипы, внешние ссылки на один и тот же сайт, жалобы от конкурентов – всё это также учитывается, если нужно определить аффилированность ресурса.

Последствия аффилированности сайтов

К аффилиату поисковые системы относятся довольно просто – сайт удаляют из выдачи.

Например, робот определил, что  siteA.ru и siteB.ru – это аффилированные между собой ресурсы. Он передает информацию в поиск, что эти сайты не могут показываться одновременно по одному и тому же запросу. Один из сайтов удаляют. Но – какой?

Поисковик оставит в выдаче более релевантный запросу пользователей сайт. Поэтому даже если вы создаете похожие сайты на поддоменах основного, старайтесь наполнять их актуальной и полезной информацией. Перед отправкой на индексацию обязательно пройдись по общим признакам аффилированности, которые мы указали выше.

Признаки аффилированности сайта в Яндекс и Google?

Поисковики не занимаются целенаправленным поиском сайтов-клонов. Собственно и название фильтру придумали пользователи, а не сотрудники Яндекса или Google. Чем занимаются сервисы, так это улучшением качества поиска. По этой причине вам никто не скажет, что сайт попал под фильтр из-за подозрений на аффилиат. Проверку и выводы вы делаете сами по косвенным признакам.

Как понять, что сайт под фильтром Яндекса:

• Посещаемость ресурса резко снизилась по сравнению с прошлым отчетным периодом;

• Сайт не показывается в поиске по ключевым запросам, которые входят в семантическое ядро. Например, вы сравнили количество показов и кликов по ключевым фразам за два месяца. В первом – были показы и переходы, во втором – нет. Это – фильтр;

• Сайт теряет позиции и не ранжируется поисковиком. Очевидный признак фильтра от Яндекса – это понижение сайта в ранге и как следствие выпадение из ТОПа;

• Часть сайтов не проходит в естественную выдачу по ключевой фразе.

В Google схожая картина. Поисковик не работает целенаправленно по аффилированным сайтам, но считает такие ресурсы бесполезными для пользователей. По этой причине сайты-дубли просто не показываются в выдаче. Если ресурс предоставляет уникальный и полезный контент, пусть и схожей тематики, он никогда не попадет под фильтры. В противном случае, сайт будет скрыт. На скриншоте ниже можно видеть, как Google борется с аффилиатами.

Как проверить сайт на аффилированность?

Раньше аффилиатов вычисляли с помощью запросов: в поисковую строку вводили специальные операторы и смотрели выдачу. Сегодня этот способ не работает из-за того, что аффилиаты плохо ранжируются поисковиками. За ненадобностью спецоператоры перестали поддерживаться поисковыми системами.

Чтобы проверить сайт на аффилированность нужно:

1. Проверить позиции сайтов по одинаковым группам ключевиков в конкретном регионе. Например, по некоторым запросам в ТОПе показывается только часть сайтов.

2. Посмотреть больше страниц выдачи. Если вы нашли сайт, который раньше был в ТОП-10, ниже 50 или даже 100 позиции, вывод очевиден – это фильтр.

3. Проанализировать запросы для сайтов-аффилиатов, которые находятся в ТОП-30 выдачи. Если подобные запросы есть, то по ним наложены санкции поисковиков.

Как «вылечить» аффилированный сайт?

Аффилиат – это не приговор. Любой сайт можно вытащить из-под фильтра Яндекса или Google, если двигаться в верном направлении:

• Удалите со страниц весь неуникальный контент и создайте новый – актуальный, интересный, полезный. Потратьте больше времени на уникализацию описаний, карточек товара, закажите продуктовые статьи профессиональным копирайтерам;

• Поработайте с графикой, подберите уникальные фотографии продукции. Лучше потратить часть бюджета на покупку стоковых фото или съемку в студии, чем потом слить деньги на бесполезное продвижение аффилированного сайта-клона;

• Не злоупотребляйте названиями бренда или компании в Title и Description, также не пишите наименований фирмы больше 2-х раз в тексте;

• Перенесите сайт на другой хостинг. Так вы обезопасите новый сайт от аффилиата по IP;

• Если используете несколько сайтов для продвижения продукции или бренда, то используйте на всех «дублях» разный дизайн и уникальный контент.

Как избежать аффилированности?

К вышеперечисленным способам «лечения» сайта от аффилированности можно добавить следующие меры профилактики:

• Подбирайте разную семантику для сайтов. Допускается 20-30% совпадений по ключевикам, если вы используете одинаковые контакты на двух или нескольких сайтах;

• Избегайте похожих дизайнов, структур сайтов и даже CMS;

• Создавайте сайты схожей тематики на разных аккаунтах Яндекс и Google.

Резюме

Мы узнали, что сайт аффилиат – это веб-ресурс, схожий с основным сайтом по тематике, ключевым запросам, контенту и прочим параметрам. Аффилированность не приветствуется Яндексом и Google. Такие сайты попадают под фильтры. Мы рассмотрели в статье признаки аффилированности, способы «лечения и профилактики» сайтов.

Сайты-аффилиаты и аффилированность сайтов — что это такое?

  Аффилированные сайты

Решил продолжить тему, начатую в предыдущей статье о чёрном SEO, в которой рассказывалось о таких методах в поисковом продвижении сайтов, которые дают кратковременный положительный эффект, после чего убивают проект. Аффилированность сайтов — примерно то же самое, но кое чем отличается.

Affiliate — с английского можно перевести как «филиал». Но в интернет-маркетинге под этим термином обычно понимают партнёров, занимающихся продажей товаров и услуг, получая за это комиссионные. Таким образом, партнёры раскручивают бренд автора (предпринимателя, компании, сервиса) и увеличивают его доход, а он делится с ними прибылью.

Например, если вы сейчас зарегистрируетесь на сервисе Prospero.ru, то я буду получать часть прибыли сервиса от вашей деятельности, а сервис получит новых клиентов.

Сайты-аффилиаты — это такие веб-ресурсы, которые созданы для продвижения одного и того же бизнеса в ТОП поисковиков, с целью монополизации поисковой выдачи и охвата большей массы целевой аудитории.

Подобные сайты во многом похожи на сателлиты, отличие лишь в том, что цель сателлитов — в первую очередь, протолкнуть основной проект в ТОП. А аффилиатам важно занять как можно больше мест в ТОПе.

Методы борьбы с аффилированностью и сайтами-аффилиатами

Логично, что подобные веб-ресурсы не представляют интереса пользователям, т.к. не несут новой информации, а лишь «захламляют» ТОП выдачи одним и тем же и порой не уникальным контентом. Поэтому поисковики уже давно ведут борьбу с аффилированностью. В основном Яндекс и Гугл воздействуют следующим образом:

• Яндекс производит исключение всех сайтов-аффилиатов из выдачи (наложение т.н. аффилиат-фильтра), кроме одного. Один из них продолжает ранжироваться (причём по разным ключевым запросам могут показываться разные сайты из группы). Иногда это ещё называется склейкой аффилиатов.
• Google сильно ухудшает их ранжирование в связи с малой уникальностью предоставляемой ими информации и дублированием контента.

Кроме того, в сетях Яндекс.Директ и Яндекс.Маркет (контекстная реклама от Яндекса) запрещены к показу объявления на сайты-аффилиаты.

Про наложение фильтра и аффилированность сайтов подробнее расскажу в следующих статьях (web-ru.net/prodvizhenie-sajta/sem/proverka-affiliat-filtr-i-priznaki-affilirovannosti-sajtov.html).

Loading…

Блог

Игорь Клименко

01.12.2009

Аффилирование, или борьба с монополизацией поисковой выдачи

Авторы: Игорь Козлов, Игорь Клименко, Борис Горелик, Александр Фомин — компания «AdLabs»

 Создание нескольких сайтов с целью заполнения самых верхних позиций выдачи поисковых систем явление в Рунете не новое.

 Аффилирование группы сайтов (ограничение их присутствия в поисковых системах) стало ответом поисковых систем на первые шаги, предпринимаемые онлайновыми бизнес-проектами в направлении монополизации. Стремление бизнеса расширить свое присутствие в поисковых системах путем создания дополнительных сайтов, полностью или частично дублирующих товары/услуги, основного сайта, с целью увеличения охвата целевой аудитории и, как следствие, увеличение объема продаж, получило неожиданное противодействие со стороны поисковых систем.

 

 Поисковые системы пытаются решить проблему присутствия в поисковой выдаче подобных сайтов всеми возможными способами, постепенно совершенствуя свои алгоритмы. Однако, нередко под фильтры попадают случайные сайты. Поэтому актуальным является поиск способов выявления сайтов-аффилиатов до наложения фильтра, с целью избежать ложного аффилирования.

 

В докладе рассматривается классическое понятие аффилированности. Выявлены основные признаки сайтов-аффилиатов. В ходе исследований, проведенных компанией AdLabs, установлено, что одинаковые регистрационные данные доменов, адреса и телефоны на сайтах, однотипные карточки товаров и описания товаров, схожая верстка позволяют ПС без труда «фильтровать» похожие страницы и сайты. Кроме того, оказалось, что две крупнейшие поисковые системы характеризуются различным отношением к сайтам-аффилиатам.

 

Действительно, Яндекс разнообразит всю информацию для пользователей радикальными методами, в то время как Google менее категоричен в методах аффилирования.

Однообразная выдача поисковых систем, низкая информационная ценность сайтов аффилиатов привели к введению соответствующего фильтра для аффилированных сайтов.

Тема аффилированности в поисковых системах возникла достаточно давно. Вот такое определение дает Википедия:

Аффилированность — связь участника с явлением, о котором он пишет.

Аффилированные лица — физические и юридические лица, способные оказывать влияние на деятельность юридических и (или) физических лиц, осуществляющих предпринимательскую деятельность.

Проще говоря – явление аффилированности – причастность к чему-либо, возможность оказать влияние на чью-то деятельность.

В разрезе поисковых систем и их алгоритмов это понятие впервые массово проявилось в 2007 году.

Аффилирование в Яндексе

Точно ответить на вопрос когда впервые Яндекс применил процедуру аффилирования могут лишь представители самой поисковой системы. Уверенно можно сказать, что осенью 2007 года Яндекс уже использовал ее в ряде коммерческих тематик. Аффилирование сайтов Яндексом выглядело следующим образом: после очередного апдейта (обновления поисковой выдачи) Яндекса обнаружилось, что в ряде коммерческих тематик сайты, похожие между собой, были объединены в группы («склеились»), в результате чего в выдаче Яндекса остался только «лучший» сайт из всей группы. Данное явление в Яндексе получило название «фильтра аффилиатов», а сайты, которые попали под этот фильтр стали называть аффилированными.

Чего добился Яндекс-Поиск введением этого фильтра?

Появление фильтра аффилиатов в Яндекс-Поиске позволило освободить несколько мест в выдаче по ряду конкурентных запросов для других сайтов, находившихся ранее на более низких позициях. В результате компании, которые ранее были представленные в выдаче поисковых систем несколькими сайтами, продвигаемыми по одним и тем же поисковым запросам, после применения к ним фильтра аффилиатов потеряли свой больший охват целевой аудитории.

Сейчас аффилирование применяется не только для поиска. Оно применяется и в других сервисах Яндекса – Яндекс-Директе, Яндекс-Маркете:

Пункт 5 Правил показа Яндекс-Директа:

«…При этом сайты признаются сходными при совпадении значительной части ассортимента предлагаемых на сайтах товаров (работ, услуг), реализуемых в одном регионе, и/или наличии других признаков, позволяющих предположить, что предлагаются одни и те же товары одним и тем же (аффилированными, имеющими тесную взаимосвязь) поставщиком, вне зависимости от незначительного различия ассортимента, разного дизайна, структурной организации сайтов, отличия цен, а также от принадлежности (администрирования) сайтов разным(-и) лицам(-и)».

Пункт 14 требований к рекламным Материалам Яндекс-Маркета:

«Яндекс может по своему усмотрению отказать в размещении нескольких магазинов (либо сайтов, относящихся к одному магазину), предлагающих товары в одном регионе и позволяющих предположить наличие аффилированности, взаимозаменяемости или иной тесной взаимосвязи между этими магазинами (сайтами), либо произвести группировку пересекающегося ассортимента со скрытием дублирующих предложений таких магазинов (сайтов).

При этом сайты признаются сходными вне зависимости от различия ассортимента, разного дизайна, структурной организации сайтов, отличия цен и принадлежности сайтов разным лицам. Пересекающимся ассортиментом признаются товарные предложения сходных магазинов, относящиеся к одному и тому товару, включая как идентичные по описанию товарные предложения, так и имеющие отличия по отдельным характеристикам (модификациям) одного и того же товара».

Полный текст: http://partner.market.yandex.ru/legal/rm/

Аффилирование в Google

Поисковая система Google по другому относится к сайтам-аффилиатам.

Понятие аффилированных сайтов для Google появилось несколько ранее – в начале 2007 года и касалось не сайтов из органического поиска, а сайтов зарабатывающим в AdSense.

Выдержка из «Правил программы AdSense для доменов»:

«…Веб-страницы, участвующие в AdSense для доменов, не должны загружаться программами, которые могут вызывать всплывающие окна, перенаправлять пользователей на нежелательные веб-сайты, изменять настройки браузера или иным способом препятствовать свободной навигации по сайту. Вы обязаны следить за тем, чтобы в рекламных сетях и на аффилированных сайтах не использовались подобные методы с целью направления трафика на страницы, содержащие ваш код AdSense…».

Полный текст: http://adsense.google.com/support/bin/answer.py?answer=96332

Немного позже понятие аффилированных сайтов распространилось и на Google-Поиск.

Выдержка из справки Google — Веб-мастера/владельцы сайтов — Аффилированные программы:

«…сайты, основная часть содержания которых позаимствована из аффилированных сетей, могут иметь низкий рейтинг в результатах поиска Google, так как на них отсутствует уникальное содержание, отличающее их от других веб-сайтов.

Мы считаем, что аффилированные сайты не представляют для пользователей особого интереса, особенно если они являются частью программы, которая распространяет содержание среди сотен других аффилиатов. Поскольку в результатах поиска может оказаться несколько сайтов с одинаковым содержанием, это может вызвать у пользователей негативную реакцию».

Полный текст: http://www.google.com/support/webmasters/bin/answer.py?answer=76465

Как видно, в документе указывается причина, по которой Google принимает меры к сайтам аффилиатам. Во главу угла они ставят уникальную информацию, которой, в большинстве своем, лишены сайты участники партнерских программ с готовой информацией, предоставляемой основным сайтом партнерской программы.

Это практически вся доступная официальная информация по аффилированным сайтам от этих поисковых систем.

Подытожив вышесказанное, можно сформулировать основные идеи, которые вкладывают наиболее популярные в Рунете поисковые системы Яндекс и Google в понятие аффилированных сайтов:

Яндекс-Поиск чистит выдачу от сайтов-аффилиатов, различного качества, индексируя их, но всегда показывая только один сайт из группы. При этом остальные сайты-аффилиаты по этому запросу не показываются совсем.

Яндекс-Директ – удаляет рекламные объявления, которые направляют пользователей на сайты-аффилиаты.

Яндекс-Маркет – удаляет или группирует схожие предложения интернет-магазинов, чтобы не рекламировать один и тот же товар многократно.

Google-Поиск не желает высоко ранжировать сайты с дублированной информацией партнерских программ и говорит о занижении их в выдаче.

Google-AdSense против того, чтобы на нем зарабатывали с помощью сайтов-аффилиатов перенаправляя трафик на рекламу.

Итак, Яндекс и Google зачисляют в аффилиаты из-за неуникальности информации сайта, занижая его в поиске (Google), или, «вырезая» из выдачи (Яндекс). Различие состоит в том, что Яндекс исключает аффилированные сайты не только из поиска, но и из всех своих сервисов (Яндекс-Директ, Яндекс-Маркет).

Зачем создаются сайты-аффилиаты?

Создание и продвижение нескольких сайтов одной компании, которые рекламируют (продают) один и тот же фактический товар/услугу достаточно выгодно на первый взгляд. Ведь присутствие в выдаче поисковых систем по одним и тем же запросам нескольких сайтов одной компании значительно увеличивает вероятность привлечения большего числа клиентов в эту компанию. При таком подходе, вероятность покупки товара у владельцев сайтов-аффилиатов увеличивается. Есть другая сторона вопроса – присутствие в выдаче незафильтрованных сайтов-аффилиатов одной компании сильно уменьшает шансы по продаже товара другими компаниями. Для Яндекса скорее важно удовлетворение потребностей поиска как можно большего числа посетителей, а также новая философия поиска – ответ на вопрос.

Почему создание сайтов-аффилиатов выгодно только на первый взгляд?

Потому что:

алгоритмы определения аффилиатов постоянно совершенствуются;

конкуренты всегда имеют возможность указать на схожесть сайтов, даже если алгоритм поисковой системы пока не увидел схожести, т.е. сайты-аффилиаты все равно окажутся под фильтром рано или поздно;

создание и продвижение качественного сайта требует значительных финансовых ассигнований, которые в случае применения фильтра аффилиатов вряд ли окупятся;

Не лучше ли направить материальные средства и усилия на улучшение основного сайта, чтобы он мог занимать лидирующие позиции в своей тематике? Сайты можно улучшать и делать удобнее для пользователей почти до бесконечности.

Региональность аффилиатов

Введение Яндексом региональной выдачи коснулось и аффилированных сайтов.  По наблюдениям, предпочитаемый сайт из группы аффилированных выбирается для каждого региона свой, хотя запрос

запрос<< (url=»site1.ru»|url=» site2.ru»)

выдает одинаковые результаты вне зависимости от региона.

То есть, наблюдается ситуация, когда по запросу в выдаче может быть site1.ru для Москвы, site2.ru для России, тогда как

запрос<< (url=» site1.ru»|url=»site2.ru»)

показывает в обоих регионах site1.ru. Толковать это можно обработкой «специфичного» запроса нерегиональным алгоритмом или же временным заблуждением Яндекса в региональной выдаче. Будущее покажет, что же это на самом деле.

Известная информация об аффилиатах Яндекса:

Фильтр аффилиатов накладывается на группу из 2 или более доменов. По одному запросу в выдаче один домен, остальные домены скрыты; по другим запросам наблюдается та же картина, но вполне возможно предпочтение другого сайта из группы. Т.е. по одному запросу более релевантен один сайт, по другому запросу – другой и т.д.

В разных регионах выдаются разные сайты по одному запросу, то есть выбирается лучший по региону;

У сайтов-аффилиатов возможна смена лучшего по запросу, которого и показывают в выдаче. «Подмена» лучшего сайта в выдаче происходит при апдейте.

Сайты-аффилиаты понятие не только Поиска, но и Директа, Маркета.

Параметры &rd=0, &pag=u в url уже не помогают увидеть аффилиаты.

Сайты одной компании не попадают автоматически под фильтр-аффилиатов в Поиске, если на них минимум контактных данных, и контактные данные уникальны. Также не попадают автоматически под действие фильтра сайты с формами связи вместо контактной информации.

В наложении фильтра обязательно участвует человек, который может наложить фильтр на основе своего мнения и данных автоматического алгоритма, а также снять фильтрв в случае ложного срабатывания.

известный метод определения аффилиатов для Яндекса   запрос<< (url=»site1.ru»|url=»site2.ru»).

 

Эволюция в поиске Яндекса

 Идеи о сокращении накладных расходов на индексацию сайтов Рунета не новы.

 Постоянный рост количества страниц в Интернете, ограниченность дискового пространства также делают актуальной борьбу с сайтами-аффилиатами.

 Последовательность шагов, предпринятых Яндексом в разное время в направлении улучшения поисковой выдачи и сокращения дублированной информации, выглядит следующим образом:

директива Host -> явные и неявные дубли -> сайты-аффилиаты -> что дальше (возможно АГС-17)?

 Рассмотрим каждый шаг.

 Директива Host. Известно, что указать зеркала для поисковых систем можно несколькими способами, одним из них для Яндекса является директива Host. Директива Host не поддерживается никакими другими поисковыми системами является необязательной даже для самого Яндекса. Директива указывает предпочитаемое «зеркало» сайт, который, возможно, станет основным в поиске. Директива предназначена для правильной обработки и склейки «зеркальщиком» копий/зеркал сайта.

 Явные и неявные дубли информации. Анализируя содержимое страниц сайтов, принимается решение о частичном или полном исключении страниц дублей из индекса, причем как для похожих страниц одного домена, так и разных. Затрагивает исключительно Яндекс-Поиск.

 Сайты-аффилиаты.  Яндекс не позволяет одновременно рекламировать в системах Яндекс-Директ и/или Яндекс-Маркет одни и те же товары/услуги нескольким разным сайтам одной компании, несмотря на то, что он теряет при этом прибыль. Похожие сайты группируются в поиске, полностью, или частично удаляются из Директа, Маркета. В Google сайты-аффилиаты занижаются в поиске из-за неуникальности информации и удаляются из рекламной программы AdSense из-за нечестной «накрутки» рекламы.

 

 Логичным развитием борьбы с засорением выдачи может быть введение жесткого определения первоисточника информации и отсева вторичных источников. В подобном случае будут удаляться все явные и неявные дубли информации, кроме первоисточника. Возможно, подобная технология уже частично реализована в Яндекс-Новостях и будет спроецирована на основной Яндекс-Поиск.

 Подозрительно похож на идею с первоисточником признанный Яндексом алгоритм АГС 17, как раз и направленный на сокращение всевозможной неуникальной информации в индексе поисковой системы.

Необходимо отметить, что дублирование информации очень часто позволяет определить важность и значимость информации.

Признаки того, что сайт аффилирован Яндексом

 

·                    В обсчете позиций сайта должны явно выпадать группы запросов, при сохранении индексации продвигаемых страниц в поисковой системе;

 

Отчет до наложения фильтра:

Отчет с наложенным фильтром-аффилиатов:

Соответствующие страницы по продвигаемым запросам сайтов A, B, C, D проиндексированы Яндексом, однако в большом поиске выдается только один домен из четырех.

 

·  Для нахождения сайтов, попавших под фильтр аффилиатов, необходимо выполнить ряд запросов к Яндексу:

1.            Определяем сайты, которые находятся  в топ 10 Яндекса по выпавшему запросу.

2.            Задаем Яндексу запрос

запрос<< (url=»siteN.ru»|url=»siteA.ru»),

где: siteA.ru – главное зеркало сайта-аффилиата которого уже нет в выдаче по «запрос»у, а siteN.ru – первый, второй, …, N-й сайт в выдаче Яндекса по запросу. Запросы задаются до тех пор, пока сайт в выдаче не останется один – искомое найдено — siteN.ru и сайт siteA.ru находятся под фильтром аффилиатов.

Обязательное исключение – быстроробот. Если в выдаче наблюдаются оба сайта и один из них в базе быстроробота, однозначного вывода об аффилировании сайтов сделать нельзя.

 

В результате некоторых экспериментов по исследованию фильтра аффилиатов было установлено, что Яндекс достаточно долго не применяет фильтр даже для очень похожих между собой сайтов. С одной стороны это может свидетельствовать о достаточно осторожном применении Яндексом фильтра, исключающем его ложное срабатывание. С другой стороны длительное присутствие нескольких сайтов-аффилиатов в выдаче по одним и тем же запросам наводит на мысль об обязательном участии человеческого фактора при наложении фильтра. Фильтр оценивает не только адреса, телефоны, названия компаний, данные регистраторов и хостинг сайтов, но и совпадение ассортиментов, цен, описаний продукции.

Признаки аффилированных сайтов для Яндекса.

При определении «схожести» сайтов, можно сравнивать и учитывать такие данные:

·                    Данные регистраторов доменов: кто зарегистрировал домены, какие контактные данные были указаны при регистрации, насколько они совпадают. При совпадении адресов и/или телефонов регистраторов высока вероятность сайтов-аффилиатов даже если регистраторы разные.

·                    Сходная верстка сайтов может указывать на распространенную систему управления сайтом или шаблонный дизайн сайта. Подозрение могут вызвать сайты с похожим дизайном, которые сходны и по другим признакам.

·                    IP-адреса хостингов, на которых расположены сайты. Подозрительно, если сайты, подобные по многим признакам, еще и расположены на одном хостинге.

·                    Контактные данные, указанные на сайтах: при совпадении адресов, телефонов, почтовых индексов и других контактных данных на сайтах высока вероятность того, что сайты являются аффилиатами.

·                    Сходность ассортимента товаров и цен на разных сайтах. Многие торгуют одними и теми же популярными товарами, но значительное совпадение ассортиментов товаров и их цен у разных сайтов вызывает подозрение, что эти сайты являются аффилиатами.

·                    Сходность описаний разделов каталога и товаров (для интернет-магазинов). Описания товаров могут быть «позаимствованы» из других источников, а могут быть сформированы из общего каталога для «своих» сайтов-аффилиатов.

 

Как избежать ложного попадания под фильтр аффилиатов в Яндексе?

·                    Не создавать сайты-аффилиаты.

·                    Использовать уникальные данные регистратора домена.

·                    Реализация сайтов с разными системами управления контентом.

·                    Составление уникальных описаний товаров/услуг.

·                    Продвижение сайтов-аффилиатов по непересекающимся группам запросов, позволяет сайтам «жить» не мешая друг другу.

 

 

борьба с монополизацией выдачи Журнал одного муркетолога

Создание нескольких сайтов с целью заполнения самых верхних позиций выдачи поисковых систем явление в Рунете не новое. Двигать несколько сайтов по одним и тем же словам можно но сложно. Читаем как. Пост нагло стырен с блога у компании Adlabs 🙂

Аффилированные сайты не пересекаются

Аффилирование группы сайтов (ограничение их присутствия в поисковых системах) стало ответом поисковых систем на первые шаги, предпринимаемые онлайновыми бизнес-проектами в направлении монополизации. Стремление бизнеса расширить свое присутствие в поисковых системах путем создания дополнительных сайтов, полностью или частично дублирующих товары/услуги, основного сайта, с целью увеличения охвата целевой аудитории и, как следствие, увеличение объема продаж, получило неожиданное противодействие со стороны поисковых систем.

Поисковые системы пытаются решить проблему присутствия в поисковой выдаче подобных сайтов всеми возможными способами, постепенно совершенствуя свои алгоритмы. Однако, нередко под фильтры попадают случайные сайты. Поэтому актуальным является поиск способов выявления сайтов-аффилиатов до наложения фильтра, с целью избежать ложного аффилирования.

В докладе рассматривается классическое понятие аффилированности. Выявлены основные признаки сайтов-аффилиатов. В ходе исследований, проведенных компанией AdLabs, установлено, что одинаковые регистрационные данные доменов, адреса и телефоны на сайтах, однотипные карточки товаров и описания товаров, схожая верстка позволяют ПС без труда «фильтровать» похожие страницы и сайты. Кроме того, оказалось, что две крупнейшие поисковые системы характеризуются различным отношением к сайтам-аффилиатам.

Признаки аффилированных сайтов для Яндекса.

При определении «схожести» сайтов, можно сравнивать и учитывать такие данные:

• Данные регистраторов доменов: кто зарегистрировал домены, какие контактные данные были указаны при регистрации, насколько они совпадают. При совпадении адресов и/или телефонов регистраторов высока вероятность сайтов-аффилиатов даже если регистраторы разные.
• Сходная верстка сайтов может указывать на распространенную систему управления сайтом или шаблонный дизайн сайта. Подозрение могут вызвать сайты с похожим дизайном, которые сходны и по другим признакам.
• IP-адреса хостингов, на которых расположены сайты. Подозрительно, если сайты, подобные по многим признакам, еще и расположены на одном хостинге.
• Контактные данные, указанные на сайтах: при совпадении адресов, телефонов, почтовых индексов и других контактных данных на сайтах высока вероятность того, что сайты являются аффилиатами.
• Сходность ассортимента товаров и цен на разных сайтах. Многие торгуют одними и теми же популярными товарами, но значительное совпадение ассортиментов товаров и их цен у разных сайтов вызывает подозрение, что эти сайты являются аффилиатами.
• Сходность описаний разделов каталога и товаров (для интернет-магазинов). Описания товаров могут быть «позаимствованы» из других источников, а могут быть сформированы из общего каталога для «своих» сайтов-аффилиатов.

Как избежать ложного попадания под фильтр аффилиатов в Яндексе?

• Не создавать сайты-аффилиаты.
• Использовать уникальные данные регистратора домена.
• Реализация сайтов с разными системами управления контентом.
• Составление уникальных описаний товаров/услуг.
• Продвижение сайтов-аффилиатов по непересекающимся группам запросов, позволяет сайтам «жить» не мешая друг другу.

Действительно, Яндекс разнообразит всю информацию для пользователей радикальными методами, в то время как Google менее категоричен в методах аффилирования.

Однообразная выдача поисковых систем, низкая информационная ценность сайтов аффилиатов привели к введению соответствующего фильтра для аффилированных сайтов.

Тема аффилированности в поисковых системах возникла достаточно давно. Вот такое определение дает Википедия:

Аффилированность — связь участника с явлением, о котором он пишет.

Аффилированные лица — физические и юридические лица, способные оказывать влияние на деятельность юридических и (или) физических лиц, осуществляющих предпринимательскую деятельность.

Проще говоря – явление аффилированности – причастность к чему-либо, возможность оказать влияние на чью-то деятельность.

В разрезе поисковых систем и их алгоритмов это понятие впервые массово проявилось в 2007 году.

Аффилирование в Яндексе

Точно ответить на вопрос когда впервые Яндекс применил процедуру аффилирования могут лишь представители самой поисковой системы. Уверенно можно сказать, что осенью 2007 года Яндекс уже использовал ее в ряде коммерческих тематик. Аффилирование сайтов Яндексом выглядело следующим образом: после очередного апдейта (обновления поисковой выдачи) Яндекса обнаружилось, что в ряде коммерческих тематик сайты, похожие между собой, были объединены в группы («склеились»), в результате чего в выдаче Яндекса остался только «лучший» сайт из всей группы. Данное явление в Яндексе получило название «фильтра аффилиатов», а сайты, которые попали под этот фильтр стали называть аффилированными.

Чего добился Яндекс-Поиск введением этого фильтра?

Появление фильтра аффилиатов в Яндекс-Поиске позволило освободить несколько мест в выдаче по ряду конкурентных запросов для других сайтов, находившихся ранее на более низких позициях. В результате компании, которые ранее были представленные в выдаче поисковых систем несколькими сайтами, продвигаемыми по одним и тем же поисковым запросам, после применения к ним фильтра аффилиатов потеряли свой больший охват целевой аудитории.

Сейчас аффилирование применяется не только для поиска. Оно применяется и в других сервисах Яндекса – Яндекс-Директе, Яндекс-Маркете:

Пункт 5 Правил показа Яндекс-Директа:

«…При этом сайты признаются сходными при совпадении значительной части ассортимента предлагаемых на сайтах товаров (работ, услуг), реализуемых в одном регионе, и/или наличии других признаков, позволяющих предположить, что предлагаются одни и те же товары одним и тем же (аффилированными, имеющими тесную взаимосвязь) поставщиком, вне зависимости от незначительного различия ассортимента, разного дизайна, структурной организации сайтов, отличия цен, а также от принадлежности (администрирования) сайтов разным(-и) лицам(-и)».

Пункт 14 требований к рекламным Материалам Яндекс-Маркета:

«Яндекс может по своему усмотрению отказать в размещении нескольких магазинов (либо сайтов, относящихся к одному магазину), предлагающих товары в одном регионе и позволяющих предположить наличие аффилированности, взаимозаменяемости или иной тесной взаимосвязи между этими магазинами (сайтами), либо произвести группировку пересекающегося ассортимента со скрытием дублирующих предложений таких магазинов (сайтов).

При этом сайты признаются сходными вне зависимости от различия ассортимента, разного дизайна, структурной организации сайтов, отличия цен и принадлежности сайтов разным лицам. Пересекающимся ассортиментом признаются товарные предложения сходных магазинов, относящиеся к одному и тому товару, включая как идентичные по описанию товарные предложения, так и имеющие отличия по отдельным характеристикам (модификациям) одного и того же товара».

Полный текст: //partner.market.yandex.ru/legal/rm/

Аффилирование в Google

Поисковая система Google по другому относится к сайтам-аффилиатам.

Понятие аффилированных сайтов для Google появилось несколько ранее – в начале 2007 года и касалось не сайтов из органического поиска, а сайтов зарабатывающим в AdSense.

Выдержка из «Правил программы AdSense для доменов»:

«…Веб-страницы, участвующие в AdSense для доменов, не должны загружаться программами, которые могут вызывать всплывающие окна, перенаправлять пользователей на нежелательные веб-сайты, изменять настройки браузера или иным способом препятствовать свободной навигации по сайту. Вы обязаны следить за тем, чтобы в рекламных сетях и на аффилированных сайтах не использовались подобные методы с целью направления трафика на страницы, содержащие ваш код AdSense…».

Полный текст: //adsense.google.com/support/bin/answer.py?answer=96332

Немного позже понятие аффилированных сайтов распространилось и на Google-Поиск.

Выдержка из справки Google — Веб-мастера/владельцы сайтов — Аффилированные программы:

«…сайты, основная часть содержания которых позаимствована из аффилированных сетей, могут иметь низкий рейтинг в результатах поиска Google, так как на них отсутствует уникальное содержание, отличающее их от других веб-сайтов.

Мы считаем, что аффилированные сайты не представляют для пользователей особого интереса, особенно если они являются частью программы, которая распространяет содержание среди сотен других аффилиатов. Поскольку в результатах поиска может оказаться несколько сайтов с одинаковым содержанием, это может вызвать у пользователей негативную реакцию».

Полный текст: //www.google.com/support/webmasters/bin/answer.py?answer=76465

Как видно, в документе указывается причина, по которой Google принимает меры к сайтам аффилиатам. Во главу угла они ставят уникальную информацию, которой, в большинстве своем, лишены сайты участники партнерских программ с готовой информацией, предоставляемой основным сайтом партнерской программы.

Это практически вся доступная официальная информация по аффилированным сайтам от этих поисковых систем.

Подытожив вышесказанное, можно сформулировать основные идеи, которые вкладывают наиболее популярные в Рунете поисковые системы Яндекс и Google в понятие аффилированных сайтов:

Яндекс-Поиск чистит выдачу от сайтов-аффилиатов, различного качества, индексируя их, но всегда показывая только один сайт из группы. При этом остальные сайты-аффилиаты по этому запросу не показываются совсем.

Яндекс-Директ – удаляет рекламные объявления, которые направляют пользователей на сайты-аффилиаты.

Яндекс-Маркет – удаляет или группирует схожие предложения интернет-магазинов, чтобы не рекламировать один и тот же товар многократно.

Google-Поиск не желает высоко ранжировать сайты с дублированной информацией партнерских программ и говорит о занижении их в выдаче.

Google-AdSense против того, чтобы на нем зарабатывали с помощью сайтов-аффилиатов перенаправляя трафик на рекламу.

Итак, Яндекс и Google зачисляют в аффилиаты из-за неуникальности информации сайта, занижая его в поиске (Google), или, «вырезая» из выдачи (Яндекс). Различие состоит в том, что Яндекс исключает аффилированные сайты не только из поиска, но и из всех своих сервисов (Яндекс-Директ, Яндекс-Маркет).

Зачем создаются сайты-аффилиаты?

Создание и продвижение нескольких сайтов одной компании, которые рекламируют (продают) один и тот же фактический товар/услугу достаточно выгодно на первый взгляд. Ведь присутствие в выдаче поисковых систем по одним и тем же запросам нескольких сайтов одной компании значительно увеличивает вероятность привлечения большего числа клиентов в эту компанию. При таком подходе, вероятность покупки товара у владельцев сайтов-аффилиатов увеличивается. Есть другая сторона вопроса – присутствие в выдаче незафильтрованных сайтов-аффилиатов одной компании сильно уменьшает шансы по продаже товара другими компаниями. Для Яндекса скорее важно удовлетворение потребностей поиска как можно большего числа посетителей, а также новая философия поиска – ответ на вопрос.

Почему создание сайтов-аффилиатов выгодно только на первый взгляд?

Потому что:

алгоритмы определения аффилиатов постоянно совершенствуются;

конкуренты всегда имеют возможность указать на схожесть сайтов, даже если алгоритм поисковой системы пока не увидел схожести, т.е. сайты-аффилиаты все равно окажутся под фильтром рано или поздно;

создание и продвижение качественного сайта требует значительных финансовых ассигнований, которые в случае применения фильтра аффилиатов вряд ли окупятся;

Не лучше ли направить материальные средства и усилия на улучшение основного сайта, чтобы он мог занимать лидирующие позиции в своей тематике? Сайты можно улучшать и делать удобнее для пользователей почти до бесконечности.

Региональность аффилиатов

Введение Яндексом региональной выдачи коснулось и аффилированных сайтов.  По наблюдениям, предпочитаемый сайт из группы аффилированных выбирается для каждого региона свой, хотя запрос

запрос<< (url=»site1.ru»|url=» site2.ru»)

выдает одинаковые результаты вне зависимости от региона.

То есть, наблюдается ситуация, когда по запросу в выдаче может быть site1.ru для Москвы, site2.ru для России, тогда как

запрос<< (url=» site1.ru»|url=»site2.ru»)

показывает в обоих регионах site1.ru. Толковать это можно обработкой «специфичного» запроса нерегиональным алгоритмом или же временным заблуждением Яндекса в региональной выдаче. Будущее покажет, что же это на самом деле.

Известная информация об аффилиатах Яндекса:

Фильтр аффилиатов накладывается на группу из 2 или более доменов. По одному запросу в выдаче один домен, остальные домены скрыты; по другим запросам наблюдается та же картина, но вполне возможно предпочтение другого сайта из группы. Т.е. по одному запросу более релевантен один сайт, по другому запросу – другой и т.д.

В разных регионах выдаются разные сайты по одному запросу, то есть выбирается лучший по региону;

У сайтов-аффилиатов возможна смена лучшего по запросу, которого и показывают в выдаче. «Подмена» лучшего сайта в выдаче происходит при апдейте.

Сайты-аффилиаты понятие не только Поиска, но и Директа, Маркета.

Параметры &rd=0, &pag=u в url уже не помогают увидеть аффилиаты.

Сайты одной компании не попадают автоматически под фильтр-аффилиатов в Поиске, если на них минимум контактных данных, и контактные данные уникальны. Также не попадают автоматически под действие фильтра сайты с формами связи вместо контактной информации.

В наложении фильтра обязательно участвует человек, который может наложить фильтр на основе своего мнения и данных автоматического алгоритма, а также снять фильтрв в случае ложного срабатывания.

известный метод определения аффилиатов для Яндекса   запрос<< (url=»site1.ru»|url=»site2.ru»).

Эволюция в поиске Яндекса

Идеи о сокращении накладных расходов на индексацию сайтов Рунета не новы.

Постоянный рост количества страниц в Интернете, ограниченность дискового пространства также делают актуальной борьбу с сайтами-аффилиатами.

Последовательность шагов, предпринятых Яндексом в разное время в направлении улучшения поисковой выдачи и сокращения дублированной информации, выглядит следующим образом:

директива Host -> явные и неявные дубли -> сайты-аффилиаты -> что дальше (возможно АГС-17)?

Рассмотрим каждый шаг.

Директива Host. Известно, что указать зеркала для поисковых систем можно несколькими способами, одним из них для Яндекса является директива Host. Директива Host не поддерживается никакими другими поисковыми системами является необязательной даже для самого Яндекса. Директива указывает предпочитаемое «зеркало» сайт, который, возможно, станет основным в поиске. Директива предназначена для правильной обработки и склейки «зеркальщиком» копий/зеркал сайта.

Явные и неявные дубли информации. Анализируя содержимое страниц сайтов, принимается решение о частичном или полном исключении страниц дублей из индекса, причем как для похожих страниц одного домена, так и разных. Затрагивает исключительно Яндекс-Поиск.

Сайты-аффилиаты. Яндекс не позволяет одновременно рекламировать в системах Яндекс-Директ и/или Яндекс-Маркет одни и те же товары/услуги нескольким разным сайтам одной компании, несмотря на то, что он теряет при этом прибыль. Похожие сайты группируются в поиске, полностью, или частично удаляются из Директа, Маркета. В Google сайты-аффилиаты занижаются в поиске из-за неуникальности информации и удаляются из рекламной программы AdSense из-за нечестной «накрутки» рекламы.

Логичным развитием борьбы с засорением выдачи может быть введение жесткого определения первоисточника информации и отсева вторичных источников. В подобном случае будут удаляться все явные и неявные дубли информации, кроме первоисточника. Возможно, подобная технология уже частично реализована в Яндекс-Новостях и будет спроецирована на основной Яндекс-Поиск.

Подозрительно похож на идею с первоисточником признанный Яндексом алгоритм АГС 17, как раз и направленный на сокращение всевозможной неуникальной информации в индексе поисковой системы.

Необходимо отметить, что дублирование информации очень часто позволяет определить важность и значимость информации.

Признаки того, что сайт аффилирован Яндексом

• В обсчете позиций сайта должны явно выпадать группы запросов, при сохранении индексации продвигаемых страниц в поисковой системе;

Отчет до наложения фильтра:

Отчет с наложенным фильтром-аффилиатов:

Соответствующие страницы по продвигаемым запросам сайтов A, B, C, D проиндексированы Яндексом, однако в большом поиске выдается только один домен из четырех.

• Для нахождения сайтов, попавших под фильтр аффилиатов, необходимо выполнить ряд запросов к Яндексу:

1.            Определяем сайты, которые находятся  в топ 10 Яндекса по выпавшему запросу.

2.            Задаем Яндексу запрос

запрос<< (url=»siteN.ru»|url=»siteA.ru»),

где: siteA.ru – главное зеркало сайта-аффилиата которого уже нет в выдаче по «запрос»у, а siteN.ru – первый, второй, …, N-й сайт в выдаче Яндекса по запросу. Запросы задаются до тех пор, пока сайт в выдаче не останется один – искомое найдено — siteN.ru и сайт siteA.ru находятся под фильтром аффилиатов.

Обязательное исключение – быстроробот. Если в выдаче наблюдаются оба сайта и один из них в базе быстроробота, однозначного вывода об аффилировании сайтов сделать нельзя.

В результате некоторых экспериментов по исследованию фильтра аффилиатов было установлено, что Яндекс достаточно долго не применяет фильтр даже для очень похожих между собой сайтов. С одной стороны это может свидетельствовать о достаточно осторожном применении Яндексом фильтра, исключающем его ложное срабатывание. С другой стороны длительное присутствие нескольких сайтов-аффилиатов в выдаче по одним и тем же запросам наводит на мысль об обязательном участии человеческого фактора при наложении фильтра. Фильтр оценивает не только адреса, телефоны, названия компаний, данные регистраторов и хостинг сайтов, но и совпадение ассортиментов, цен, описаний продукции.

Источник: //www.adlabs.ru/posts/139/