Клоакинг (cloaking) — что это такое, как клоачить: примеры
Клоакинг (cloaking, от англ. cloak- маска, прикрытие) — один из методов черного SEO, когда поисковому роботу и пользователю демонстрируются разные варианты одной и той же страницы.
Читабельные тексты трудно оптимизировать под все ключевые слова, поэтому вебмастера разрабатывают 2 варианта страниц сайта, для пользователя и для робота.
Клоакинг немного похож на метод дорвеев, правда, он не использует автоматическую или ручную переадресацию пользователя на нужную страницу, что снижает вероятность кражи оптимизированной страницы конкурентами. Но создание копий страниц – кропотливая работа, так как требуются не только основы программирования, но и наличие таких данных, как ip или user-agent роботов.
Клоакинг так же, как и дорвеи, можно разделить на:
- Черный – незаконный, пользователю показывают несоответствующий запросу текст, а роботу — оптимизированный текстовый материал для повышения ранжирования.
- Серый. Иногда представленный на сайте контент можно распечатать или продемонстрировать в виде текста, из-за чего один и тот же материал может быть представлен в 2 и более вариантах. Ссылки на такие тексты с других сайтов могут послужить причиной их индексации и отнесения в разряд неуникальных. Чтобы этого не случилось, на второстепенные ссылки устанавливают редирект, который перенаправляет ссылочный вес на статью-первоисточник. Такой метод не вредит пользователям и не влечет за собой накладывание фильтров.
- Белый — законный клоакинг. Сайты переадресовывают пользователей для облегчения работы с сайтом. По такой схеме работает геотаргетинг.
Как создать?
Пользователя от поискового робота можно отличить при помощи IP-адреса и User Agent. Роботу автоматически показывают оптимизированную страницу, а пользователю стандартный контент сайта. В разработке таких сайтов задействуют следующие программы:
- User Agent — самый простой способ клоакинга. Вебмастер просматривает данные User Agent, в которых присутствует имя поискового робота. Один из алгоритмов Яндекса известен под именем Yandex/1.01.001 (compatible; Win16; I), зная имена роботов, можно прописать функцию сравнения имен роботов и User Agent посетителей и показывать каждому из них требуемое содержимое. Легко обнаруживается – для этого, используя специальные программы, необходимо всего лишь зайти на сайт под именем робота и получить «подкорректированную» страницу сайта. Чаще всего таким способом клоакинг определяют конкуренты, чтобы «нажаловаться» на мошеннический сайт в службу поисковой системы, которая накажет нарушителей.
- IP-адрес – самый эффективный способ клоакинга, поисковые роботы определяются посредством IP-адресов, а фальсифицировать их довольно затруднительно. Можно показывать пользователям стандарт сайта, выбирая его страницы из специальной базы – вручную такую схему роботу не распознать. Но такой метод предусматривает доступ к базе данных адресов.
- Комбинированный клоакинг — сочетание проверки User Agent и IP-адресов. Метод показывает наивысший результат, но он наиболее трудоемкий.
Клоакинг и поисковые системы
Практически все поисковики признают клоакинг нелегальным и всячески пресекают его. Иногда страницы сайтов отличаются не только качеством оптимизации контента, но и его тотальным отличием от оригинала. Например, робот может видеть текстовый материал с ключевиками, а пользователь — рекламные объявления. Как уже было сказано выше, не всякий клоакинг — это мошенничество.
Клоакинг применяют Amazon.com (показывает товары в зависимости от ранее открытых страниц), Yelp.com, некоторые сервисы Google, NYTimes.com (зарегистрироваться можно только после 5 кликов), ComputerWorld.com (пользователи видят рекламу, а робот –html-текст) и Forbes.com (чтобы попасть на главную страницу, необходимо просмотреть один рекламный ролик).
wiki.rookee.ru
динамический контент против клоакинга / Yagla corporate blog / Habr
В интернете наступила эпоха персонализации. Интернет-магазины отслеживают поведенческие факторы и рекомендуют конкретному клиенту интересные ему товары; контент посадочных страниц меняется в зависимости от запроса и даже поисковики делают персонализированную выдачу.
При этом вокруг технологии персонализации в Рунете разгораются дикие страсти. Мы регулярно получаем обвинения в том, что динамический контент — это клоакинг. Где правда?
В чем дело
Для начала вспомним матчасть: клоакинг (от английского cloak — маска, прикрытие) заключается в том, что пользователю и поисковым роботам на одной и той же странице выдается разная информация.
Его создали для искусственного влияния на поисковую выдачу. Несколько лет назад факторы ранжирования Яндекс и Google были далеки от «человечности». Оптимизированная по всем правилам страница напоминала винегрет из ключевых слов.
Знакомая ситуация: сайт в ТОП-1, seo-шники потирают руки, владельцы бизнеса прыгают от радости, а потенциальному клиенту читать все это без слез невозможно. В итоге некие веб-мастера придумали гениальную вещь: «а давайте будем показывать роботам «нашпигованный» ключевиками текст, а пользователю человекоориентированный вариант».
Для различения роботов и посетителей проверяются IP-адреса или User Agent. С технической стороны все достаточно сложно, плюс необходимы имена поисковых роботов и база с IP-адресами.
Оказалось, что «овчинка стоит выделки» — сайт продвигается в выдаче, пользователи любят его за «близость к народу», если это коммерческая тематика — растет конверсия, соответственно, продажи.
Однако в действительности не все так радужно: метод больше использовался для манипуляций в погоне за трафиком.
Например, пользователь ищет бесплатные музыкальные треки, а его перебрасывают на страницу интернет-магазина с дисками. Про порно-сайты скромно молчим: вот уж где поисковые спамеры разгулялись по полной программе)
Легальный клоакинг
Яндекс & Google объявили за клоакинг жесткие штрафные санкции, от пессимизации до бана. При том, что сами используют его элементы. Как так? Но для начала скриншот из хелпа Яндекса, где клоакинг и похожая технология дорвеев в почетных лидерах запрещенных методов:
Яндекс и Mail.ru по IP-адресу учитывают местонахождение пользователя и показывают ему локальные виджеты (карта города, погода, пробки, новости). Для Москвы одно, для Перми другое, Владивостока третье: самый простой пример под названием геотаргетинг. Гугл делает редирект (перенаправляет) на региональную версию при заходе на google.com. Никто не против такого подхода, потому что это удобно: пользователь автоматически оказывается в «родной» среде.
Следующий пример легального клоакинга — товарные рекомендации в интернет-магазинах. Первым его освоил Amazon еще в 2005 году. Скажем, посмотрели вы детский рюкзак (карточку товара). При возврате на главную или при переходе в другие категории, в конце страницы видите блок «Рекомендации, связанные с тем, что вы смотрели»:
Если посетитель не купил одну вещь, магазин предлагает что-то похожее из ассортимента. Шансы на продажу существенно возрастают. По словам маркетологов Amazon, на товарных рекомендациях и апселлах (допродажа к основному заказу) они зарабатывают до 20% годовой выручки.
Далее идет колл-трекинг, когда под конкретный запрос показывается отдельный номер телефона. Подмена номера происходит автоматически. Владельцы сайта видят с какого запроса пришел лид, что позволяет сделать детальную аналитику.
По принципу клоакинга работают и системы a/b тестирования — для поисковиков одна страница, а для пользователей трафик делится поровну с исходной и тестовой версией (с другим заголовком, например). В результате одна часть видит вариант A, вторая — вариант B. Проанализировать эффективность страницы и повлиять на конверсию можно только с помощью a/b тестов.
Наконец, метод, который вызывает самые ожесточенные споры. Речь о динамическом контенте. Мы используем его в системе увеличения конверсии Yagla.
Динамический контент против клоакинга
Суть технологии в подмене части контента посадочной страницы под запросы пользователей из контекстной рекламы.
Напомним, что в 99% случаев все ключевики ведут на одну и ту же страницу (в первую очередь в случае с одностраничниками). При том, что у разных пользователей разные мотивы и критерии выбора. Для кого-то важен производитель, кто-то ищет по цене, в кредит, по условиям доставки и так далее.
Еще больший разброс в услугах. Пример одного из наших клиентов — свадебное агентство. Вот только основные потребности: люди ищут тамаду, ресторан, организацию праздника «под ключ». Агентство предоставляет все эти услуги, трафик «гонят» на один лендинг.
В этой статье мы показываем работу динамического контента в нише оптовых поставок: Как продать 10 000 товаров на одном лендинге
Более наглядно смотрите на примере лендинга автомастерской. Это оригинальный вариант:
А это вариант заголовка под запрос «замена топливного фильтра»:
Представляете, какая номенклатура услуг у автомастерской? Только основных категорий — 29, без углубления по маркам. Плюс допработы (установка сигнализаций, видеорегистраторов и т.д.) Море возможностей для гиперсегментации. Пользователь переходит по объявлению и не копается в списке работ, а сразу видит то, что ему нужно.
Да, владелец сайта синхронизирует рекламную кампанию с Яглой, сам указывает подменяемые элементы в редакторе и вписывает, например, новые варианты заголовков под каждую группу запросов. Либо подписи к лид-формам, кнопки CTA, изображения на первом экране.
Вот вкратце как работает и что дает бизнесу динамический контент.
Важный момент: подмены происходят только по запросам из контекста. Органический трафик не трогаем.
Позиция «против»
Претензии сводятся к тому, что мы отдаем разный контент пользователям и роботам (смотрите первую часть определения Яндекса на верхнем скриншоте). И алгоритму поисковиков сложно отличить сайт с динамическим контентом от спамерской махинации с целью повлиять на выдачу.
Позиция «за»
Самое интересное, что Яндекс и Google спокойно воспринимают динамический контент когда он работает в рамках персонализации. Теоретически, конечно, владелец сайта может радикально изменить содержание страницы. НО это уже на его совести и не имеет никакого отношения к задаче сервиса.
Несколько месяцев назад мы задали вопрос по поводу опасений попасть в разряд клоакинга в службу поддержки Яндекса и получили следующий ответ: «Если посадочная страница релевантна объявлению и ключевому запросу, не будет никаких проблем».
По мнению авторитетного интернет-предпринимателя Майкла Кэмпбелла, последствия зависят от того, с какой целью применяется технология. А вот слова его коллеги Джона Херда: «Неприятности могут ожидать только при попытке ввести посетителя в заблуждение. Когда вы создаете страницу, максимально релевантную запросу, вы помогаете и посетителю, и поисковой системе».
Банят за обман и манипуляцию. Вспомним вторую часть определения Яндекс: «… с целью повлиять на ранжирование в поисковой системе».
Учитывая стратегию персонализации, особенно у Google, это самое страшное преступление. Поэтому за клоакинг так жестоко карают. А вот любое улучшение user experience (пользовательский опыт) тем же Гуглом только приветствуется. К чему мы, собственно, и стремимся.
В заключение два экспертных мнения по поводу существующих опасений. Они четко расставляют все точки над i.
Максим Уваров, директор по развитию сервиса K50
Алексей Довжиков, основатель сервиса автоматизации контекстной рекламы eLama,
директор по развитию компании Trinet
P.S. Как видите, сама проблематика немного потеряла актуальность из-за серьезных перемен в концепции
интернет-продвижения по сравнению с временами рождения клоакинга. Даже для «олдскульных» seo-оптимизаторов.
Если же тема до сих пор мучает, с готовностью ответим на ваши вопросы в комментариях.
С уважением к вам и вашему бизнесу, основатель сервиса Yagla.ru Александр Алимов
habr.com
что это такое и как его используют для арбитража трафика в Яндекс Директ и AdWords
Мы увеличиваем посещаемость и позиции в выдаче. Вы получаете продажи и платите только за реальный результат, только за целевые переходы из поисковых систем
Мы выпустили новую книгу «Контент-маркетинг в социальных сетях: Как засесть в голову подписчиков и влюбить их в свой бренд».
Подпишись на рассылку и получи книгу в подарок!
Клоакинг – это полулегальный метод поисковой оптимизации. Его суть – пользователи и роботы поисковой системы видят при запросе две разные версии одной и той же страницы.
Больше видео на нашем канале — изучайте интернет-маркетинг с SEMANTICA
В переводе с английского этот термин означает «маска, прикрытие». Это и объясняет назначение такого способа подачи информации в сети. Сложно получить хороший текст, подогнанный под все ключевые слова. Поэтому оптимизаторы создают по две версии страниц сайта – ту, что смогут без труда прочитать пользователи, и ту, в которой есть все ключевые слова для роботов.
Очевидное преимущество такого приема в том, что сайт быстро достигает высоких позиций в выдаче, и каждый получает свое: роботы – оптимизированную страницу, а пользователь – читаемый текст без спама и словесного мусора.
Клоакинг часто используют в арбитраже трафика. Он перераспределяется и открывает разное содержание для рекламных модераторов и целевой аудитории. Это делается для того, чтобы подогнать необходимый текст под правила рекламной сети – используя всего одну ссылку показывать два различных сайта.
Не стоит думать что клоакинг и дорвей – это одно и то же. Отличие в том, что первый способ не перенаправляет пользователя на другую страницу.
Зачем нужен клоакинг
Клоакинг используют не только для обмана поисковых систем, но и для более простой и удобной работы на сайтах. Образцом черного клоакинга будут страницы, которые продвигаются по топовым ключевым словам, но в действительности содержат рекламу или ссылки, не имеющие отношения к пользовательским запросам.
Существуют и более безобидные причины для использования клоакинга:
- Защищать содержимое от кражи. Код, который владелец бережет от копирования, не виден пользователям.
- Выдавать сайты на нужном языке. Для этого используются настройки браузера.
- Распознавать местоположение пользователя по IP-адресу.
- Сохранять дизайн страниц с помощью методов, которые не учитываются поисковыми роботами при добавлении страниц в свою систему. Тот вариант, что создан для поисковиков, такой же по структуре и содержанию, предложен в наиболее выгодном для них свете.
Как работает клоакинг
Чтобы создать страницы-копии, требуются не только знания в области программирования, но и умение оптимизировать текст под поисковик. Также нужно располагать информацией об IP или User-agent.
Процесс клоакинга выполняется с помощью скриптов, которые работают на веб-сервере. Они получают запрос и направляют скрипт на поиск источника. Их задача, выяснить, кто к ним обратился – робот или пользователь, и показать нужный вариант страницы. Параметром для определения источника запроса является IP-адрес или User-agent.
Использование User-agent
Так называется метод проверки данных User-agent запросов в сервере. Задается имя поискового робота, скрипт ищет это имя в своей базе данных. Если сервер выдает имя этого робота, то демонстрируется оптимизированная страница. В случае, когда имя в списке не находится, выдается вариант показа страницы для пользователя.
Этот доступный и эффективный прием, но он имеет ряд минусов:
- Он легко распознается даже на уровне пользователей. Достаточно установить специальную программу, и пользуясь поддельным именем, выйти на версию для роботов.
- Поисковая система, сменив имя робота на то, которого нет в базе скрипта, откроет страницу, созданную для людей.
Использование IP-адресов
Такой способ очень схож с методом User-agent по принципу работы, но считается наиболее эффективным. Его суть в распознавании IP-адреса, который невозможно подделать. Любой пользователь или робот обладает собственным индивидуальным адресом. Скрипт сверяет IP пользователя со своими данными о поисковиках. После этой проверки открывается предназначенная для каждого страница: пользователю – своя, роботу – своя.
Владея адресами этих IP, можно легко обвести вокруг пальца не только робота, но и живых людей – работников поисковых систем, которые иногда вручную проверяют сайты. Перед ними откроется та же страница, что и перед пауком.
Самым надежным способом не стать обнаруженным при использовании клоакинга – совместить оба способа сразу. Скриптам ставится задача проверять при запросе данные User Agent и IP-адреса.
Поисковые системы против клоакинга
Почти все поисковики против таких методов работы. Они считают, что клоакинг, как спам засоряет базы данных и мешает нормальной работе поисковых систем. Когда боты распознают такие сайты, то применяют к ним штрафные санкции.
Яндекс борется с этим методом популяризации сайтов, применяя пессимизацию – сайт теряет позиции в выдаче по определенным поисковым запросам. Таким образом поисковик стремится, чтобы в ТОП-10 попали ресурсы с полезным контентом.
Не только Яндекс, но и другие поисковые системы борются с клоакингом и пресекают его разными способами. Часто случается, что версии страниц сервера разнятся не только качеством оптимизированного текста, но и абсолютным его отличием от изначального. Робот смотрит на текст с ключевыми словами, а пользователь видит рекламу и ссылки, не имеющие отношения к запросу.
Но все же еще раз напомним – не всегда клоакинг является злом. К примеру, Google подбирает версию главной страницы сайта по региону и языку пользователя.
Если вы намерены использовать клоакинг или похожие методы, помните, что это может послужить поводом для блокировки сайта. Но если вы сможете доказать что используете такой прием во благо пользователей, к вам проявят снисхождение.
semantica.in
Настраиваем клоакинг за 10 минут
Прошли те времена, когда большинству вебмастеров и арбитражников не нужно было заморачиваться с клоакингом. Стало гораздо сложнее зарабатывать много $ в день, в том числе на поп и редирект трафике. Это связано не только с ужесточением правил в Facebook, обновлениями браузера Chrome и новыми правилами размещения рекламы от Google, также мешает работать ботовый трафик и шпионские инструменты, в частности, Adplexity — один из самых современных мобильных шпионских инструментов в аффилиат-маркетинге.
Думаем, не стоит писать мемуары о том, зачем нужен клоакинг и все такое. Наверняка вы в курсе.
Как это работает в PEERCLICK
Чем может похвастаться сервис:
1. Составление на лету 2 типов отпечатков системы (FingerPrints). На основании анализа разрешения, версии Java/SilverLight/Flash, языка СИСТЕМЫ, часового пояса, установленных в браузере расширений, установленных в СИСТЕМЕ шрифтов, косвенного анализа видеокарты/драйверов, и другие. Аналоги такой системы есть у PayPal/Adwords, но пока еще не применялись в клоакинге никакими другими решениями. В результате смена IP, UserAgent’a и даже браузера (одновременно) не поможет скрыть то, что этот бот/шпион уже был на вашем сайте и попался в ловушку.
2. Система ловушек (Trap). Создайте некоторые из ваших объявлений ссылкой, в которой задан специальный параметр. Данный заход определит посетителя как нежелательного. Это удобно использовать для “оборачивания” серого объявления вперемешку с белыми: когда бот/шпион попадает на объявление со спецпараметром и уже попадает в черный список по Finger Print’ам — и когда он доходит до проверки нашего серого объявления, он уже увидит контент для нежелательного, т.к. будет в базе блэк-листов.
3. Черный и белые списки. IP-адреса, FingerPrint’ы, источники и ключевые слова, всё это на лету автоматически анализируется и заносится в черные и белые списки, чтобы вы видели, откуда у вас идет больше ботов, откуда больше живых людей, что нужно отключить, а что усилить, чтобы получать более качественный трафик. Также поддерживается проброс UTM-меток, subID, и даже PostBack’и. По результатам тестов вам будет отчетливо видно, по каким каналам идет более или менее «ботовый» трафик, то есть вы сможете отключать нерабочие связки, не дожидаясь тестовых сливов бюджетов. Всё, что вас требуется сделать — прописать UTM-метки при подаче URL в рекламу. Остальное сделает сервис и даст на выходе готовые черные и белые списки (в удобных CSVфайлах, раздельно).
4. Избыточная фильтрация. Если все локальные проверки пройдены (и разрешение экрана не 10х10 пикселей и в локальных блек-листах клик не засветился красным), то посетитель «пробивается» по внешней базе IP (агрегируется на сервере), и уж там точно будет видно: используется ли прокси/VPN/Tor/RDP дедик, или трафик идет чистый. Вкратце: анализируются все доступные в онлайне бесплатные и платные прокси, магазины Socks/SSH, дедиков, и собираются базы IP, суммарный объем базы «грязных IP» более 200 миллионов адресов. Если и этот фильтр пройден посетителем — он попадает (мета или иной тип редиректа) на ссылку, которую вы зашили в скрипт. Иначе ему выводится подменный контент.
Аналогичным образом фильтруется и по параметру FingerPrint-ов. Вам не придётся самим собирать базу фингерпринтов ботов/шпионов, эта база уже собрана и продолжает пополняться за счёт централизованной системы функционирования этого модуля.
5. Подменный контент. Указываете ссылку на любой чужой сайт или лендинг, и этот сайт выводится на вашем домене. Никаких WGET’ов, выкачиваний, создания лендингов, просто укажите чужой сайт и он будет выдаваться ботам и шпионам вместо редиректа (они не увидят, что редирект вообще задуман). Закаченный сайт будет кэшироваться на сервере, чтобы не нагружать ресурсы системы постоянным обращением к внешним источникам, к тому же вы всегда сможете подкорректировать контент закешированной страницы. Либо можете подгружать свой локальный контент/лендинг.
6. Система не требовательна к ресурсам, запустится даже на shared-хостинге и будет выдерживать 10000 человек в день без торможений.
Настройка
Начнем. Нам нужен облачный сервис PeerClick.
Мы переходим на главную и регаемся. Далее нам нужен тариф Gold с клоакой, он стоит 49 $ в месяц (в конце статьи можно найти промокод на скидку в 50 %).
Далее мы идем на свой хост или сервак и заливаем туда нашу белую прокладку/сайт/лендос — да все что угодно, чтобы он показывался при переходе ботов/модера той сети, которую вы выбрали для клоакинга.
Какие требования к домену ?
1. Домен должен иметь HTTPS протокол (ssl).
2. Домен, на котором будет “белый” сайт для ботов и шпионов, не должен рекламироваться ранее.
3. Домен, на котором будет основной сайт (для обычных пользователей), может быть любым.
Для примера я беру домен: fuckfacebook.com и заливаю в корень прокладку под дейтинг.
Дальше идем в панель PeerClick и начинаем настройку клоаки.
Идем в “Источники” и создаем новый источник который нам нужно, в нашем случае это будет FACEBOOK.
Жмем на кнопку Создать и выбираем Доверенные источники.
Вбиваем в поиске FACEBOOK и жмем на кнопку “Добавить ” и сохраняем всё это дело.
Переходим в “Кампании”, создаем новую и выбираем тип кампании “Клоакинг”.
Выбрали и тогда начинаем шаманить.
- Добавляем домен.
- Пишем любое название кампании.
- Далее выбираем страну, на которую планируем сливать, в нашем случаи Россия.
- Выбираем источник трафика.
- Назначение — выбираем “Клоакинг”.
- Далее смотрим фильтры и берем “Facebook”.
- Обязательно настраиваем дополнительные правила. К примеру если трафик будет на Россию, то все остальные страны должны быть ботами. Так же надо выбрать тип устройства (к примеру, только десктоп). Можно добавить еще фильтрацию VPN/PROXY трафика.
- Далее выбираем 301 редирект на url (ссылку ставим прямую на ПП).
- Далее нажимаем “Сохранить и закрыть”.
Как бы готово, но еще не все. Редактируем только что созданную кампанию и выбираем вкладку на скрине, “PHP script”.
Скачиваем скрипт себе на компьютер и далее бросаем этот файл на хостинг и подключаем его на сайте.
Видим в архиве скрипт с каким-то названием: 146–15FеYt, для удобства меняем название, к примеру, на playok или любое какое придумаете. После этого заливаем этот файл на хостинг в корень.
Далее заходим на главную сайта в файл index.html и пишем эти 2 строчки в самом верху:
И сохраняем изменения. После этого меняем формат файла из index.html на index.php, иначе наша клоака не подключится, как как нужно.
Если все сделали правильно, на вашем хостинге будет примерно такое:
Где index.php — главная страница ленда, playok.php — файл подключения клоаки.
Проверьте, PHP должен быть не ниже версии 7.0, иначе НИЧЕГО не будет работать .
Итак, подытожим что же надо еще сделать:
1. Вам нужно разместить “белый” сайт на домен, который ранее не рекламировался в Adwords/Facebook и т.д.
2. Настроить рекламу, указав “белый” сайт и дождаться прохождения модерации, предварительно поставив клоакинг на паузу.
3. После прохождения модерации включить клоакинг (нажать на ту же кнопку, когда станет зеленой).
Вот и все, боты и шпионы будут видеть “белый” сайт, а пользователи — сайт, который вы укажите. В итоге у нас получилась готовая клоака для слива трафа с Facebook.
Если вы все еще находитесь в поиске лучшего сервиса по клоакингу, посмотрите на это: мы попросили PeerClick о скидках специально для вас. С приведенным ниже промокодом вы получите 50 % скидку для GOLD аккаунта. Количество активации аккаунта с промокодом ограничено.
Промокод: CLOAKING-GOLD
Так что действуйте быстро и протестируйте этот мощный инструмент!
Источник
conversion.im
что важно знать об этом методе
Ни для кого не секрет, что большая часть офферов не модерируется без клоаки. Но если раньше с помощью клоакинга можно было получить доход в долгосрочной перспективе, то сейчас удается сорвать куш лишь на несколько дней, а затем настраивать всё заново.
Некоторые методы устарели или стали слишком понятны для служб модерации, которые стремятся избавить сеть от серых продуктов и банят ваши аккаунты. Чтобы аккаунты не отлетали так быстро — нужен свежий взгляд и новые подходы в работе с этим инструментом. Поэтому мы решили поговорить статью о том, какие есть методы, сервисы и инструменты для эффективной работы с клоакой.
Методы работы с клоакой
Возможно, не все сталкивались с этим методом работы или не пробовали его в действии, поэтому сначала дадим краткое определение:
Клоакинг (от англ. cloak- маска, прикрытие) — метод черного SEO, при котором посетители сайта разделяются на два потока — модераторы и боты попадают на отбеленную страницу, а остальные юзеры на целевую.
В основном клоака нужна для прохождения модерации в FB, Adwords и др. сетях, где офферы могут нарушать внутреннюю политику рекламной деятельности.
Какие есть методы работы?
Маскировка состоит из трёх элементов:
1) Белая страница — это отбеленная страница, которая будет показываться модераторам;
2) Реальная страница — реальная страница товара;
3) ПО для клоакинга — это либо трекер либо другой сервис, который разделяется набором правил для двух потоков.
Основной смысл в том, что отсеять всех возможных ботов и модераторов и получить на целевой странице только уникальный трафик, т.е. только тех, кто может заказать ваш товар. Основная проблема заключается в правильном определении модераторов. Существует несколько алгоритмов,по которым сервисы могут вычислять модеров:
1) User Agent — сравнивается поле User-Agent пользователя с заранее составленным списком значений, после чего выбирается вариант страницы для показа;
2) IP – сравнивается IP-адрес посетителя с заранее составленным списком, после чего подбирается вариант страницы для показа;
3) Referer — данные, которые передаются от самого посетителя. В случае, если посетитель перешел на ваш сайт с Google, то поле с его данными будет содержать указатель на этот источник;
4) Совокупный метод IP и User Agent.
Какие сервисы успешно зарекомендовали себя на рынке?
1) PeerClick — работает по принципу фильтрации на черные и белые списки. IP-адреса, FingerPrint’ы распределяются автоматически так, чтобы было видно ботов и живых людей. Фильтры можно настроить по наиболее популярным источникам трафика: FB, Google, Yandex, VPN, Proxy и др. Для того чтобы пользоваться сервисом с комфортом достаточно пакет BASIC — стоимость 99$ в месяц.
2) Кейтаро — трекер предоставляет детальную аналитику по потокам, сплит тестирование, можно провести симуляцию трафика для проверки правильности настройки фильтров. Базовый пакет сервиса стоит 25$;
3) IM KLO — программа хорошо подходит для работа с офферами, реклама которых нарушает правила Facebook. Лицензия для продукта приобретается разово и навсегда. Внутри есть множество фильтров по ГЕО, типу траффика, показателям User Agent и IP, Proxy и др. Для пользователей при покупке лицензии создается отдельный чат, в случае возникновения вопросов — менеджер на них быстро ответит;
4) FraudFilter — клоакинг можно настроить без редиректа, кроме того в сервисе есть множество фильтров, которые автоматически определяют и собирают себе в базу модераторов Facebook, Яндекса, Google и других источников трафика.
Подведем итоги
Друзья, сегодня разобрали тему работу с клоакой, поговори о том зачем она нужна, как она работает, какие есть методы работы и поделились с вами сервисами, которые уже заслужили положительную репутацию на рынке среди арбитражников.
А если у вас остались вопросы по работе с клоакой или вы хотите посоветовать свои оригинальные методы работы другим арбитражникам, то скорее заходите в ? LuckyChat — товарка и арбитраж
partnerkin.com
Клоакинг — часто задаваемые вопросы – статьи про интернет-маркетинг
Часто задаваемые вопросы по клоакингу:интервью с Дэном Крамером, создателем Kloakit
Не так давно я попросил Дэна Крамера из KloakIt дать мне интервью, в котором бы были ответы на вопросы, касающиеся клоакинга, которые мне довольно часто задают, и он согласился.
Как работает клоакинг?
Для того чтобы это объяснить, нужно вначале понять, что такое клоакинг. Клоакинг — это процесс показа разного контента разным посетителям в зависимости от определенных критериев, как-то: является посетитель поисковым ботом или же человеком или, например, в какой стране находится посетитель.
Клоакинг программа/скрипт обрабатывает несколько параметров, чтобы идентифицировать посетителя: IP адрес; User-Agent браузера; URL, по которому пришел посетитель. Все эти параметры содержаться в HTTP запросе к серверу. Основываясь на этих данных скрипт принимает решение, какой контент предоставить посетителю.
В оптимизации, клоакинг используется для того, чтобы предоставить поисковому боту оптимизированный контент, и скрыть его от обычных посетителей.
Насколько рискованно использование клоакинга?
Для каких типов сайтов применим клоакинг?
Многие поисковики не одобряют использование клоакинга. Они угрожают различными наказаниями и даже банном тем сайтам, которые будут уличены в клоакинге, поэтому, необходимо быть осторожным при планировании клоакинг кампании. Мой совет вебмастерам, которые хотят попробовать клоакинг — разместить клоакинг-сайты на разных доменах. В этом случае, даже если какой-то из сайтов будет пойман на клоакинге и наказан или забанен — это не повлияет на позиции основного сайта.
Типы сайтов, для которых применим клоакинг, делятся на две категории. К первой принадлежат сайты, нацеленные на широкий список запросов, чаще всего это партнерские сайты и им подобные. Для них, как правило, используется различный софт для клоакинга, который позволяет легко создавать тысячи оптимизированных страниц, которые хорошо ранжируются. В этом случае, ключевой фактор — количество.
Далее, мы имеем сайты, которые плохо индексируются поисковиками. Некоторые владельцы флеш-сайтов хотят, чтобы поисковики индексировали текстовую версию сайта, в то время как обычным пользователям предоставляется флеш версия по тому же URL.
Чем отличается IP-доставка от клоакинга?
IP доставка — это разновидность клоакинга. Я уже говорил, что существует несколько критериев, по которым скрипт идентифицирует посетителя. Одним из самых важных критериев является IP адрес посетителя.
Каждый компьютер в интернете имеет собственный IP адрес. Существуют специальные списки IP адресов поисковых машин. Когда посетитель заходит на сайт, клоакинг скрипт сравнивает его IP адрес с имеющимся списком IP адресов поисковиков. Если он обнаруживает совпадение, то он предоставляет оптимизированную версию страницы (сайта). Если же совпадений не найдено, он выдает страницу, предназначенную человеку. Так как для принятия решения используются данные об IP адресе, то это называется IP доставкой.
IP доставка — считается лучшим способом клоакинга, так как подделать IP адрес очень сложно. Существуют и другие методы клоакинга, такие как определение User-Agent, который не так безопасен. При клоакинге через User-Agent, последний определяется через HTTP запрос и сравнивается со списком User-Agent поисковиков. Примером поискового User-Agent является — «Googlebot/2.1 (+http://www.googlebot.com/bot.html)».
Проблема с клоакингом через User-Agent заключается в том, что его очень легко подделать, и ваши конкуренты могут запросто это сделать, что позволит им обнаружить клоак страницы и настучать на вас.
Насколько сложно поддерживать базу IP адресов в актуальном состоянии? Где можно раздобыть свежие IP адреса?
Обычный вебмастер вряд ли справится с этой задачей. Все время появляются новые IP адреса, которые нужно учитывать (хорошие программы делают это автоматически), и это бесконечный процесс. Прежде всего, необходимо установить сеть ловушек для ботов, с помощью которой можно будет получать данные о новых ботах, когда они посетят один из ваших сайтов. Это можно сделать с помощью CGI скрипта, который также может проверять IP адреса сравнивая их с уже имеющимся списком. После этого список подозрительных IP адресов нужно вручную проверить на принадлежность к поисковым машинам. Кроме того, нужно следить за появлением новых поисковиков Вы не поверите мне, если я скажу, сколько новых поисковиков появляется каждый месяц.
Вместо того, чтобы делать это все самому, вы можете взять списки IP адресов (уже готовые), которые выложены в сети. Я веду бесплатный список IP адресов поисковиков. Есть также несколько коммерческих ресурсов на эту тему (я не являюсь их партнером). В дополнение к этим ресурсам свежую информацию по теме можно найти на Search Engine Spider Identification Forum.
Этичен ли клоакинг? Или как это часто бывает в оптимизации,
слово этика — понятие растяжимое?
Кто-то скажет, что клоакинг вполне этичен, кто-то не согласится с этим. Мое личное мнение таково — я считаю, что вы можете делать на сайте все, что вы считаете нужным (если, конечно же, сайт принадлежит вам), до тех пор, пока вы не нарушаете закон. Вы имеете право выбирать какой контент, какому пользователю отображать. Клоакинг в оптимизации применятся с целью увеличить соответствие сайта поисковым запросам… кто же захочет, чтобы посетители принадлежали к нецелевой аудитории?
www.ashmanov.com
Клоакинг бедного, но умного арбитражника
Привет, сегодня поговорим о том, что же делать, если вы ещё не накопили на нормальное решение типа IM KLO, мысль о покупке Кейтаро и настройке фильтров вселяет в вас уныние, но мечта о том, чтобы лить членокремы на Азию не покидает вас даже во сне✨
Что делать, что делать. Клоаку, ясен хрен. Но, конечно же, не с нуля.
Необходимый набор скиллов, чтобы провернуть всё нижеописанное: умение редактировать текст в Блокноте и копировать файлы.
Итак, откуда растут ноги нашего решения? Однажды на просторах интернета (а точнее на хорошем форуме BlackHatWorld) мной был обнаружен широко известный в узких кругах скрипт под названием «Binomo cloaker». Кто автор сей поделки, а также почему её название так похоже на имя всем знакомого трекера — я хз. Если вы в курсе — напишите в комментах, плз.
Этот материал участвует в конкурсе «Жаркая Весна». Примите участие и выиграйте Macbook, Apple Watch, Playstation и другие призы благодаря спонсорам:
- Leadbit — лидирующая международная сеть по версии AffiliateFix.com. Любые вертикали: Dating, Gambling, Finance, Sweepstakes, Mobile subs и Nutra.
- Clickdealer.com — партнерка с мировым именем. Свыше 12 вертикалей, тысячи офферов и Smartlink, работающая на собственной платформе.
- Shakes.pro — партнерка с собственными эксклюзивными офферами, лидирующая в нише WOW-товаров. Крутые условия, собственные промо и индивидуальный подход.
- DatsPush — рекламная сеть нового формата: выгодно монетизируйте сайты и покупайте качественный, живой трафик. Более +250 ГЕО и своя свежая база.
Узнайте подробности, напишите свой первый пост и забирайте ценные призы здесь.
В
тот момент я лил оффер «Набор трусиков Popkees» 😂с Facebook, и фб очень
не нравилось обилие голых задниц у меня на лендингах. Трекера у меня не
было, а ленды хостились на бесплатном тарифе Макхоста (сразу скажу, что потребуется хостинг с поддержкой PHP).
Поскольку имелся хороший скилл в кодинге, я засучил рукава и полез во
внутренности скрипта, дабы допилить его до текущих реалий.
Что же на данный момент может эта штука?
- Клоакинг БЕЗ редиректов, путём подгрузки файлов
- Определяет ip и страну посетителя (геобазы на январь 2019)
- Определяет ОС и UserAgent пользователя
- Может отсеивать посетителей в зависимости от наличия/отсутствия Referer-а
- Может провести простейший A/B тест лендингов
- Ведёт учёт посетителей в текстовом файлике (пишет IP, страну, UserAgent и т.п.)
- Содержит IP базу ботов ФБ, собранную с мира по нитке, отсортированную и более менее годную
Качаем архив со скриптом клоаки вот отсюда.
Теперь, как с этим всем жить. Для простейшего варианта работы нам понадобится скачать себе на комп две вещи: ваш лендинг и whitepage. Надеюсь, рассказывать, где взять whitepage, не нужно?
Отлично, далее нам нужно объединить файлы лендинга, whitepage и всё из архива скрипта клоаки в одной папке: создаём новую папку и копируем туда всё по очереди. У whitepage переименуйте файл index.html в indexw.html, а у основного лендинга переименуйте его в indexb.html. Следите, чтобы имена файлов у whitepage и лендинга не совпадали и не перезаписывались!
Осталось настроить клоаку! Открываем файл index.php в любом текстовом редакторе: лучше, чтобы не ломать глаза, с подсветкой кода, типа Notepad++, но если лень, то и старый добрый Блокнот тоже пойдёт.
В целом, код хорошо прокомментирован, если вы вдруг умеете в PHP, то вам будет несложно разобраться, ну а если нет, то я вам сейчас всё расскажу 😉
У клоаки 2 режима работы: полный и обычный. Полный — это когда ВСЕ посетители отправляются на whitepage. Я его использовал на всякий случай при прохождении модерации. Если хотите делать также, то не забывайте потом переключаться на обычный, а не то нальёте в пельменную!
Обычный же — это когда трафик распределяется в зависимости от правил. По умолчанию включён именно он, а когда нужно переключиться на полный, меняем в строке #4 нолик на единицу:
В обычном режиме мы можем задавать различные правила, о них ниже.
В строках #7-8-9 указываем только те ОС на которые льём, например, если льём только моб траф, то убираем внутри кавычек всё кроме iOS и Android. Если льём и ПК и моб, то можно оставить всё, как есть.
На 10й строке указываем через запятую список тех стран, на которые мы льём. Страны указываем двухбуквенными сокращениями через запятую.
Если у вас есть свой набор ботов, либо вы просто хотите отключить пару-тройку ненужных ip, то добавьте их через запятую в строке 11, но если список большой, то лучше откройте в текстовом редакторе файл bots.dat и запихните ваш списочек туда.
Ну и наконец на строке #13 можно включить правило, чтобы пользователи с пустым referer-ом отсылались на whitepage. Чтобы включить — меняем 0 на 1, но сначала подумайте, надо ли оно вам.
Теперь небольшая плюшка номер раз: все посетители сайта будут записаны в файлик visitors.txt, можно его открывать прям в браузере и смотреть, кто и откуда заходит.
На скрине красным выделен отфильтрованный посетитель (в данном случае — бот), его можно определить по циферке 1 в соответствующем столбце + после этой единички написано, почему посетитель был отфильтрован: у него неизвестная нам ОС и неверное ГЕО. Когда вас будут банить (а банить будут, это всё же не коммерческое решение), то можете открывать этот файлик и брать айпишники последних зашедших юзверей и добавлять их в файл bots.dat, ибо перед баном, обычно, заходят модераторы.
Плюшка номер два: если вы вдруг хотите юзать не один лендинг, а сделать A/B тестировани нескольких, то всё, что вам надо сделать, это опять-таки объединить их все в одной папке и прописать их индексные файлы через запятую на строке 43, как в примере ниже.
Трафик будет каждый раз рандомно идти на один из указанных лендингов, равномерно распределяясь между ними.
Дело за малым — проверить работоспособность полученного Франкенштейна. Заливаем всю нашу папку на хостинг, заходим на сайт — должен грузиться лендинг. Чтобы проверить, как работает клоака, совершим простую манипуляцию: выясняем свой ip адрес путём соответствующего запроса в гугле и прямо на хостинге добавляем свой ip в строке #11
Не забываем сохранить файл. Теперь заходим на сайт — должен грузиться whitepage. Работает!
На этом всё, успешного клоакинга, лейте в плюс, господа, и пишите в комментах, сколько лидов вам удалось отлить с помощью этого скрипта!
P.S. Выкладываю исходный код на GitHub, если вдруг вы хотите внести вклад в общее дело — welcome!
conversion.im