«Яндекс» выпустил второй отчёт о прозрачности за 2020 год
Компания рассказала, какие данные пользователей интересовали власти во второй половине прошлого года — больше всего запросов было, как и в прошлый раз, по «Яндекс.Паспорту» и «Яндекс.Почте».
«Яндекс» уже во второй раз раскрыл статистику по количеству запросов от российских госорганов на передачу информации о пользователях. С июля по декабрь 2020 года всего компания получила 16 874 запросов, из них она отказалась удовлетворить 3 705 (22%).
Во втором полугодии 2020 года госорганы направили в «Яндекс» 16,87 тыс. запросов о раскрытии информации о пользователях. В 78% случаях «Яндекс» согласился удовлетворить запросы и выдал запрашиваемые данные.https://t.co/4vzpvk8dQz
— РБК (@ru_rbc) March 29, 2021
Больше всего властей интересовали «Яндекс.Паспорт» и «Яндекс.Почта». Так, за рассматриваемый период по этим сервисам было 7 895 запросов (отклонено 1734, 22%).
«Яндекс.
Паспорт» — это сервис для управления аккаунтом на «Яндексе», в нём хранятся основные регистрационные данные пользователя, поэтому очень часто запросы к тому или иному сервису сводятся к предоставлению данных из «Яндекс.Паспорта».
На третьем месте находится «Яндекс.Такси» (5 975 запросов, 24% отказов). Гораздо в меньшей степени (от 1330 запросов и ниже) власти интересовались «Драйвом», «Едой», геосервисами, медиасервисами и пр.
В прошлом отчёте о прозрачности — за первую половину 2020 года — продукты «Яндекса» расположились на таких же местах. Показатели изменились незначительно. Так, запросов по «Яндекс.Паспорту» стало меньше (7895 против 8867), а отказов — больше (22% против 13%). А вот по «Яндекс.Почте» число отказов возросло (5975 против 5280) вместе с числом запросом (24% против 22%).
«В отчёте по-прежнему указаны не все сервисы, — анализирует изменения юрист «РосКомСвободы» Анна Карнаухова. — Но теперь, например, в разделе «Остальное» обозначили входящие в него сервисы, в том числе «Яндекс.Дзен», который был объектом нашего исследования («Рейтинг соблюдения цифровых прав соцсетями» — прим. ред.)».
Кроме того, добавился раздел «Обращения по закону» о так называемом «праве на забвение» с информацией за 2019 и 2020 гг., продолжает эксперт. Ранее было только одно упоминание за 2016 год. Из минусов юрист отметила отсутствие конкретики по виду требований и по тем субъектам, которые запросили данные о пользователях.
«Яндекс» отказывает в удалении информации в 53-77% запросов по закону «о праве на забвение». Эти запросы связаны с неактуальностью данных (4,5 тыс. обращений), их недостоверностью (2,6 тыс.) и нарушением законов (1,9 тыс).
Ранее «РосКомСвобода» составила «Рейтинг соблюдения цифровых прав 2021». Он состоит из двух частей — рейтинга популярных веб-сервисов Рунета и рейтинга соцсетей. Как и в 2020 году, первыми среди компаний стали Habr, «Яндекс» и «ВКонтакте». Последняя, правда, занимала вторую строчку, а «Яндекс» — третью. В свежем исследовании «Яндекс» поднялся за счёт как раз таки выпущенного в прошлом году первого отчёта о прозрачности.
«Мы верим, что «Яндекс» в том числе прислушался к нашим рекомендациям, и рады, что нам удается положительно влиять на отрасль», — заявила тогда Карнаухова.
Новый отчёт о прозрачности вряд ли пока поставит «Яндекс» выше, прогнозирует эксперт.
«Компания и так уже поднялась на высокое второе место по сравнению с прошлым годом, «Хабр» ей сейчас не обогнать, даже если мы добавим +0,5 балла за новую информацию о «праве на забвение». Но темп хороший, нужно держать такой курс», — похвалила организацию Карнаухова.
По российскому законодательству, ФСБ, МВД и другие силовики могут подать любой компании запрос на предоставление данных, если это необходимо для оперативно-разыскной работы. А ст. 161 Уголовно-процессуального кодекса РФ запрещает компаниям предупреждать пользователей, когда получают запрос на выдачу данных о них.
«“Яндекс” регулярно получает запросы от органов государственной власти, касающиеся пользовательских данных.“Яндекс” рассматривает те из них, которые пришли по официальным каналам и соответствуют всем формальным требованиям. В ответ на запрос компания предоставляет ровно столько информации, сколько необходимо для ответа. А если запрос не соответствует требованиям закона, “Яндекс” его отклоняет», — поясняют в организации.
С учётом возрастающего с каждый годом давления на онлайн-платформы и появления всё новых и новых законов, обязывающих соцсети ограничивать доступ к информации, для общества особенно важной становится подотчётность компаний в вопросах удаления и блокировки того или иного контента, комментировал «Рейтинг соблюдения цифровых прав 2021» ещё один из его авторов, глава юридической практики «РосКомСвободы» Саркис Дарбинян. По его словам, особое значение имеет и открытость обработки персональных данных, а также информирования пользователей о передаче их данных третьим лицам.
«Для компаний же это может стать неплохим конкурентным преимуществом в возвращении доверия пользователей, которые теряют лояльность к платформам, не уделяющим этим вопросам достаточного внимания и допускающим злоупотребления при распространении информации и передачи личных данных», — считает юрист.
«Яндекс» включил поиск реального времени → Roem.ru
ru-RU 2010 ООО «Роем» Медиа
Компания разработала и внедрила новую поисковую технологию, которая позволяет находить совсем свежие документы — через минуты после их появления в интернете
Яндекс сообщает, что разработал и внедрил новую поисковую технологию, которая позволяет находить совсем свежие документы — через минуты после их появления в интернете.
Робот «Orange Crawler», отвечающий за индексацию свежего контента, обходит не все известные Яндексу страницы, а только наиболее важную для поиска в реальном времени часть. А также учитывает недавние поисковые запросы и тематику новых сообщений в СМИ. Неизвестно, насколько автоматическим является процесс составления списка самых важных сайтов, служащих агрегаторами новой информации.
В блоге компании упоминается, что:
Люди обычно попадают на новые урлы через первые страницы любимых сайтов или по ссылкам с других новых сообщений. Поисковый робот должен находить эти же ссылки, часто освежая старые страницы, и ходить по ссылкам из новых уже скачанных документов.
Чтобы определять, нужна ли свежая информация в ответ на те или иные запросы, Яндекс разработал несколько детекторов. Они анализируют самую разную информацию — например, тематику сообщений в СМИ или рост количества поисковых запросов по той или иной теме.
«Быстрый робот» существовал в Яндексе и раньше, но методика добавления новых документов в индекс давала задержку до 20-ти минут. Новая система Real-Time поиска позволяет индексировать и выкладывать документы на поисковые сервера буквально за несколько секунд.
Несмотря на всё это, сейчас в поиске Яндекса задать временной диапазон для поиска можно только в «Расширенном поиске», а в предлагаемых на выбор диапазонах минимальным является диапазон в две недели.
12 комментариев
Поделиться
- Причины и последствия украинского кризиса — лекция профессора политологии чикагского университета Джона Миршаймера 24
- Фейковое цунами. Как распознавать фейки про спецоперацию на Украине 61
- Доклад Ашманова: как заставить платформы отказаться от плохого контента 189
- Пять главных ошибок в разговоре о средствах массовой информации. Для начинающих 25
-
О сложности создания Матрицы в Брянской области 17
- Ростелеком обнаружил опасный избыток российского ПО на рынке 3
- Яндекс открыл столичную «Лавку для бедных» 2
- Администрация президента США начала консультации по поводу введения мер контроля над ИИ 1
- Как создатели системы автоматизации ресторанов r_keeper продали её ВК, а потом выкупили обратно уже убыточную
- Forbes: МТС пожертвовали роумингом ради экосистемы
ограничений и рекомендаций. API Яндекс Директа. Версия 5
В этом уроке вы узнаете:
- Как узнать потраченные баллы и баланс баллов
- Как оптимизировать расход баллов
- Как отслеживать изменения с помощью сервиса «Изменения»
- Задача
- Полезные ссылки
- Вопросы
В этом уроке вы узнаете, какие ограничения применяются к API Яндекс Директа и как с учетом этих ограничений эффективно запускать приложение.
Различные типы ограничений применяются для балансировки нагрузки на сервер API. От имени одного рекламодателя может быть запущено не более 5 одновременных запросов. Каждый метод ограничивает количество объектов на запрос. Также API применяет систему начисления баллов.
Каждому рекламодателю (или агентству) предоставляется индивидуальный лимит баллов в день. Баллы начисляются через равные промежутки времени в течение дня. Баллы списываются за вызов метода, за изменение или получение объекта или за ошибку в запросе. Если у вас недостаточно баллов, вы не можете делать запросы к API.
В ответ на каждый запрос сервер API отправляет HTTP-заголовок Units, в котором указано количество баллов:
Units: потрачено на запрос/доступные баллы/дневной лимит.
- Пример ответа
HTTP/1.1 200 OK Соединение: закрыть Тип содержимого: приложение/json Дата:Пт, 28 июня 2018 г.
, 17:07:02 по Гринвичу
Ид запроса: 1111111111111111112
Единицы: 10/20828/64000
Сервер: nginx
Передача-кодирование: по частям
{
"результат": {
...
}
}
RequestId — идентификатор запроса.
Единицы — количество баллов.
Примечание. Если запрос к API делается от имени агентства, баллы рекламодателя тратятся по умолчанию. Однако агентство может потратить свои баллы вместо баллов рекламодателя.
Мы рекомендуем хранить все данные, используемые приложением, в кеше, например, в локальной базе данных. Получив с сервера параметры кампаний, групп, объявлений, ключевых слов, а также справочники регионов и часовых поясов, вы можете с помощью методов сервиса «Изменения» отслеживать их актуальность. Перед обновлением кэшированных данных проверьте наличие изменений. Вам не нужно снова получать объекты с сервера, если только они не изменились. Таким образом, вы можете уменьшить объем передаваемых данных, ускорить ваше приложение и сократить расходы на баллы.
1. При первом запуске приложения вызвать метод checkDictionaries сервиса Changes без каких-либо параметров. В ответ вы получите параметр Timestamp с текущим временем UTC, установленным на сервере.
- cURL
curl -k -H "Авторизация: ТОКЕН носителя" -d '{"метод":"checkDictionaries","params":{}}' https://api.direct.yandex.com/ json/v5/changes- cURL для Windows
curl -k -H "Авторизация: Bearer TOKEN" -d "{\"method\":\"checkDictionaries\",\"params\":{}} " https://api.direct.yandex.com/json/v5/changes- Запрос
{ "метод": "checkDictionaries", «параметры»: {} }- Ответ
{ "результат": { "Временная метка": "2018-06-03T12:48:27Z" } }
2. Чтобы получить список измененных кампаний, вызовите метод checkCampaigns. В каждом последующем вызове указывать Timestamp, полученный предыдущим вызовом: это гарантирует отсутствие промежутков между интервалами проверки изменений.![]()
- cURL
curl -k -H "Авторизация: ТОКЕН носителя" -d '{"метод":"checkCampaigns","params":{"Timestamp":"2018-06-03T12:48:27Z" }}' https://api.direct.yandex.com/json/v5/changes- cURL для Windows
curl -k -H "Авторизация: Bearer TOKEN" -d "{\"method\":\"checkCampaigns\",\"params\":{\"Timestamp\":\ "2018-06-03T12:48:27Z\"}}" https://api.direct.yandex.com/json/v5/changes- Запрос
{ "метод": "checkCampaigns", "параметры": { "Временная метка": "2018-06-03T12:48:27Z" } }- Ответ
{ "результат": { «Временная метка»: «2018-07-01T13:11:27Z», "Кампании": [{ «Идентификатор кампании»: 136200, "ChangesIn": [ "СЕБЯ", "ДЕТИ" ] }, { «Идентификатор кампании»: 136201, «Изменения»: [ «СТАТИСТИКА»] }] } }
Метод возвращает идентификаторы кампаний, которые были изменены. Параметр ChangesIn указывает, где были внесены изменения:
SELF — В параметрах кампании.

ДЕТИ — В дочерних объектах: группы объявлений, объявления или ключевые слова.
STAT — Исправлена статистика кампании (обычно за счет фильтрации ложных кликов).
3. Если метод checkCampaigns показывает, что дочерние объекты изменились, получите более подробную информацию об изменениях с помощью метода check.
- cURL
curl -k -H "Авторизация: ТОКЕН носителя" -d '{"метод":"check","params": {"Timestamp":"2018-06-03T12:48:27Z" ,"CampaignIds": [136200],"FieldNames": ["AdGroupIds","AdIds"]}}' https://api.direct.yandex.com/json/v5/changes- cURL для Windows
curl -k -H "Авторизация: Bearer TOKEN" -d "{\"method\":\"check\",\"params\": {\"Timestamp\":\"2018-06-03T12:48 :27Z\",\"CampaignIds\": [136200],\"FieldNames\": [\"AdGroupIds\",\"AdIds\"]}}" https://api.direct.yandex.com/json /v5/изменения- Запрос
{ "метод": "проверить", "параметры": { «Идентификаторы кампании»: [136200], "FieldNames": ["AdGroupIds","AdIds"], "Временная метка": "2018-06-03T12:48:27Z" } }- Ответ
{ "результат": { «Временная метка»: «2018-07-01T13:12:22Z», "Изменено": { «АдГруппИдс»: [22222222], "Реклама": [33333333,33333334] } } }
Внимание.
Если метод проверки показывает, что группа объявлений изменилась (идентификатор группы объявлений указан в массиве AdGroupIds), это может означать изменение либо параметров группы объявлений, либо ключевых слов.
Используйте методы get соответствующих служб (кампаний, групп объявлений, объявлений или ключевых слов), чтобы получить измененные объекты с сервера.
Создайте новую кампанию, группу объявлений и объявление в песочнице.
Используйте метод модерации службы объявлений, чтобы отправить объявление на модерацию.
Получить данные всех кампаний.
Получить данные об изменениях по всем кампаниям.
Используйте метод проверки, чтобы узнать, какие объявления изменились (статус отправленного на модерацию объявления должен был измениться).
Получить заголовки и тексты объявлений, прошедших модерацию объявлений.
Посмотрите, сколько баллов вы потратили на эти запросы.

Все аспекты работы с API Яндекс Директа подробно описаны в документации.
Удачи!
Документация:
Отслеживание изменений
Служба изменений
Ограничения, баллы
Сколько одновременных запросов может сделать приложение от имени одного рекламодателя?
Не более 1. Не более 5. Не более 10. Не ограничено.
Ложь.
Верно.
Ложь.
Ложь.
Нужно ли приложению учитывать, сколько баллов доступно пользователю?
Нет, баллы ни на что не влияют: приложение может отправлять запросы без учета доступного количества баллов. Да, потому что каждому пользователю начисляется ограниченное количество баллов.
не нужно контролировать свои расходы.Ложь.
Верно.
Ложь.
Какие методы можно использовать для оптимизации расходования баллов приложением?
Увеличьте количество запросов к API — чем больше запросов вы сделаете, тем больше баллов получите. Улучшите приложение, чтобы избежать чрезмерных запросов: храните некоторые данные локально и используйте службу изменений для отслеживания изменений. Измените тип доступа к API. с «пробной» на «полную» и количество ваших баллов увеличится в 24 раза.
Ложь.
Верно.
Ложь.
API поиска Яндекса — доступ к результатам поисковой выдачи Яндекса в режиме реального времени
Доступ к результатам поиска Яндекса с помощью нашего сверхнадежного, быстрого и доступного API поисковой выдачи Яндекса.
К сожалению, эта конечная точка больше не поддерживается. Наш API возвращает самые свежие свежие данные со 100% точностью.
Формат JSON или Raw HTML
Используйте нашу обычную конечную точку для получения результатов поиска Google в формате JSON или используйте нашу расширенную конечную точку, если вам нужны необработанные данные HTML.
Результаты для конкретного местоположения
Доступ к результатам из любой точки мира. Установите требования к местоположению по стране, городу или даже координатам GPS.
Что говорят клиенты
Мы использовали множество различных поставщиков API, и SerpsBot является лучшим с точки зрения времени отклика, цены и надежности. Поддержка тоже отличная. Очень приятно работать с командой SerpsBot.
Jens Brandt
Founder, Docoloc
PricingFeatures | Yandex Endpoint |
|---|---|
Real-time results | Yes |
Время отклика | Менее 3 секунд |
Количество результатов на запрос | 100 |
Multiple page requests | Yes |
Result formats | JSON or Raw HTML |
Concurrency (default) * | 500 requests per second |
Стоимость ** | 0,002 доллара за запрос 2 доллара за 1000 запросов |
| 23 Сотовый0318 К сожалению, поддержка этой конечной точки прекращена |
* Уровень параллелизма можно настроить, если требуется большее количество запросов в секунду.![]()
** Собираетесь ли вы делать большие объемы вызовов API (более 250 000 в месяц)? Мы можем предложить вам индивидуальную цену, свяжитесь с нами.
Что включено
Быстрая интеграция
Наш API прост в дизайне и совместим с большинством основных языков программирования.
Простая документация
Начните использовать наш API за считанные минуты с нашей простой документацией.
Служба технической поддержки
Наша служба технической поддержки работает каждый день, чтобы помочь ответить на любые вопросы или решить проблемы.
JSON или Raw HTML
Запросы отправляются с использованием HTTP GET, ответы доставляются в облегченном формате JSON или Raw HTML.
Любое местоположение/устройство
Собирайте данные из любого города, региона или страны по всему миру, используя любое устройство (настольный компьютер, мобильный телефон, планшет).
Все функции поиска
Получите все функции поисковой выдачи одним нажатием, люди также спрашивают, избранные фрагменты и многое другое.
faqВ каких форматах вы предоставляете результаты Яндекса?
Наша расширенная конечная точка Яндекса возвращает данные в формате JSON или необработанный HTML.
Налагаете ли вы какие-либо ограничения на скорость параллелизма? В нашем API используется параметр параллелизма по умолчанию, равный 500 запросам в секунду.
Если вам нужно делать больше запросов в секунду, мы можем настроить вашу настройку.
Да. Наш поисковый API Яндекса предоставляет данные в режиме реального времени. Данные зависят от устройства определения местоположения и языка, который вы укажете.
Какую поддержку клиентов вы предоставляете?Мы доступны с понедельника по пятницу с 08:00 до 19:00 по Гринвичу. Наша служба технической поддержки также доступна в выходные дни; однако ответы могут быть медленнее.
Существует ли верхний предел для вызовов API? Нет, верхнего предела нет. Мы можем и поддерживаем корпоративное использование (несколько миллионов звонков в месяц). Наш API поиска Яндекса работает на инфраструктуре автоматического масштабирования.
Если вам нужно совершать большие объемы звонков, пожалуйста, свяжитесь с нами для получения индивидуальных ценовых вариантов.
Мы предлагаем простую оплату по мере использования как для наших обычных, так и для расширенных конечных точек API. Ознакомьтесь с нашими тарифными планами, чтобы получить представление о том, сколько будет стоить наша услуга для вашего объема использования. Если вы планируете делать большие объемы запросов (например, более 250 000 звонков в месяц), мы можем предложить индивидуальные цены.
Вы предлагаете бесплатную пробную версию? Да. Зарегистрируйтесь и добавьте карту в свой аккаунт. Затем наша система применит тестовые кредиты, чтобы вы могли опробовать наш поисковый API Яндекса, прежде чем брать на себя какие-либо обязательства.


Дзен», который был объектом нашего исследования («Рейтинг соблюдения цифровых прав соцсетями» — прим. ред.)».
“Яндекс” рассматривает те из них, которые пришли по официальным каналам и соответствуют всем формальным требованиям. В ответ на запрос компания предоставляет ровно столько информации, сколько необходимо для ответа. А если запрос не соответствует требованиям закона, “Яндекс” его отклоняет», — поясняют в организации. 
, 17:07:02 по Гринвичу
Ид запроса: 1111111111111111112
Единицы: 10/20828/64000
Сервер: nginx
Передача-кодирование: по частям
{
"результат": {
...
}
} 

не нужно контролировать свои расходы.