Список юзер агентов: Список актуальных User Agent

Собираем сами список user agent для браузеров

В один прекрасный день вам обязательно понадобятся актуальные значения юзер агент (user agent). В своих поисках пересмотрите много специальных сайтов, размещающих такие списки, но свежих данных не найдете. Далее опишем способ получения списка значений user agent, наиболее актуальных на текущую дату. Не исключено, что несколько записей будет от старых браузеров так как наш метод основан на сборе статистики посещений сайтов, а некоторые пользователи пользуются старыми не обновленными версиями программ.

Для тех кто забыл: User Agent — это клиентское приложение, использующее определённый сетевой протокол. Термин обычно используется для приложений, осуществляющих доступ к веб-сайтам, таких как браузеры, поисковые роботы (и другие «пауки»), мобильные телефоны и другие устройства.

1 этап — сбор статистики с сайтов

Для сбора значений юзер агентов нам понадобятся свои работающие сайты, если нет своих, можно попросить друзей, если и у друзей нет, то можно за небольшое вознаграждение поискать исполнителя на каком-нибудь сео форуме или фриланс сайтах. Чем больше посещаемость сайта, тем лучше так как статистика соберется за короткий срок и по объему она будет значительно лучше.

Определившись с сайтами «донорами» идем в панель управления хостинга и в меню «Журналы» (такое название меню у хостинга beget, в другом может отличатся) включаем функцию «Журнал доступа к веб-серверу». После этих манипуляций в коневой папке сайта появится текстовый файл со списком записей к каким страницам вашего сайта были обращения, ip-адрес и юзер агент устройства. Далее нужно выждать время чтобы эти записи накопились.

На следующем изображении выделена запись user agent, которые мы и сможем узнать и будем собирать.

Пример записи user agent

2 этап — чистка списка user agent

Скачиваем получившиеся файлы к себе на компьютер, если их несколько, то открываем любой в блокноте, а все последующие добавляем в него копированием текста. Тем самым мы подготовим файл для загрузки через excel. В нашем примере получился файл на 86072 строки. Далее необходимо получившийся файл открыть через excel. Открываем программу, жмем «Файл»-«открыть», в следующем окне выбираем наш файл. Далее откроется мастер текстов (импорт) в котором нужно поставить чекбокс в положение «с разделителями» и в следующем окне в поле «другой» поставить двойную кавычку. На третьем шаге в таблице «образец разбора данных» выделить последний столбец и указать для него формат «текст».

После такого импорта данные о посещении разбиты по столбцам. Нужные нам юзер агенты находятся в столбце F, поэтому смело можно удалить столбцы от A до E. Далее необходимо воспользоваться встроенной в excel функцией удаления дублей. В 2007 версии кнопка «удалить дубликаты» находится на вкладке «данные». Нажимаем ее и видим, что вместо 86072 строк, осталось 1555. Но на этом не останавливаемся, а следующим шагом удаляем ненужные записи юзер агент от поисковых систем. Выглядят они так: Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html). Можно поставить фильтр по слову «bot» или «compatible». Далее идем по списку юзер агент и удаляем не нужные нам записи, например, от браузеров телефонов на андроид или айфон.

3 этап — итоговый файл

После всех чисток, получился довольно большой файл user agent, который можете использовать для смены записи в браузере, для добавления в программы парсинга и тому подобные. Актуальность списка — первая половина февраля 2016 года. Периодически он будет обновляться.

Скачать список юзер агент

В файле экселя есть 3 вкладки:

  1. Основной список, где найдете 823 записи user agent от yandex, mozila firefox, opera, internet explorer (IE), google chrome, safari и других браузеров. Записи собирались со статистики посещений сайта, поэтому могут попадаться старые браузеры и операционные системы, ведь не у всех они обновлены.
  2. Вкладка «Мобильные устройства» содержит лист с 530 записями от мобильных браузеров. Решено их не удалять, а перенести в отдельную вкладку.
  3.  Во вкладке «Мусор» собрали старые версии браузеров, использование которых не рекомендуется.

Заключение

Файл user agent браузеров не в фомате txt, но это легко поправимо обычным копированием. На сайтах донорах использовался протокол http. Если в строке встречается запись wow64, то она означает, что компьютер посетителя с таким юзер агентом использует 64-битную операционную систему. Большая часть посетителей — это Россия.

Способ сбора записей не самый быстрый и удобный, но лучше, чем использовать старые и не современные записи.

Рекомендуем обязательному прочтению статьи—здесь

Описание настроек — раздел Юзер Агенты (ОБЯЗАТЕЛЬНО) — Документация vkaccountsmanager Perfect.Studio



Просим Вас очень внимательно прочитать данный раздел
(если Вам важны Ваши аккаунты).

ЮзерАгент (UserAgent) — это строка, некая подпись браузера, в которой прописана информация о нем:

  • название браузера (Google Chrome, Firefox, Yandex Browser…)
  • версия браузера (69, 70, 78…)
  • операционная система, на которой браузер работает (Windows, Mac OS, Linux…)
  • версия операционной системы
  • и прочая, мене важная информация

Итак, что Вам обязательно нужно знать:

  1. Любой сайт видит как минимум операционную систему пользователя, название его браузера и версию браузера.
  2. Браузеры постоянно обновляются и в их ЮзерАгентах как минимум увеличивается версия браузера.
  3. Наша программа имеет встроенные (общие) ЮзерАгенты, которые мы обновляем по мере необходимости.
  4. Однако, мы настоятельно не рекомендуем Вам использовать встроенные (общие) ЮзерАгенты, так как на них производится очень много различной массовой активности во ВКонтакте: регистрация новых аккаунтов, разморозка старых аккаунтов, активация аккаунтов, рассылка личных сообщений, добавление в друзья, и многое, многое другое.
  5. Внимание ВКонтакте к встроенным в программу ЮзерАгентам всегда будет повышено и если Вы используете общие ЮзерАгенты — у Ваших аккаунтов возрастает вероятность получить вечный бан\временную заморозку как при создании аккаунта, так и при авторизации во ВКонтакте, да и просто при любой другой активности.
  6. Мы рекомендуем Вам собрать список из ЮзерАгентов от Ваших браузеров, а итоговый список уже дать программе, чтобы аккаунты работали на Ваших ЮзерАгентах.
  7. Если Вы сегодня получили ЮзерАгент от вашего браузера Google Chrome и вставили его в программу — через месяц этот ЮзерАгент уже будет считаться «не свежим», а условно через 2 месяца, аккаунты вообще могут получить из-за него вечные баны. Мы рекомендуем постоянно обновлять свои ЮзерАгенты до актуальных версий браузеров, условно 1 раз в неделю — идеально.

 

Что нужно сделать?

  1. Откройте в программе Настройки, а в них вкладку Юзер Агенты, удалите все ЮзерАгенты из списка.
  2. Установите все возможные браузеры на свой компьютер, либо обновите текущие к последним версиям.
  3. В каждом браузере откройте ссылку: https://whatsmyua.info/
  4. Скопируйте строчку ЮзерАгента, которую отображает сайт.
  5. Вставьте в программу каждый новый ЮзерАгент с новой строчки.
  6. Закройте окно Настроек в программе — программа сохранила новый список из ЮзерАгентов.
  7. Если у Вас уже есть в программе аккаунты, которые ранее работали или сейчас работают на старых ЮзерАгентах — остановите их работу, выделите такие аккаунты, нажмите на них правой кнопкой мышки и нажмите кнопку в выпадающем меню: Выделенные аккаунты->Очистить UserAgent.

    При следующем запуске каждый из аккаунтов возьмет себе один из новых ЮзерАгентов.

 



А теперь, описание самого раздела ЮзерАгенты в программе:

В этом разделе Вы можете указать ЮзерАгенты, которые аккаунты программы будут использовать. Каждый аккаунт, если ему ЮзерАгент не указан изначально, выбирает случайный из списка.
Далее аккаунт запоминает ЮзерАгент и постоянно работает с него, пока ЮзерАгент аккаунта не будет изменен или удален вручную.

Также нажав на кнопку, Вы можете обновить ЮзерАгенты на актуальные из сайта. 

Для ручного добавления ЮА или очистки, Вам нужно проделать следующие действия: