Агентство национальной безопасности (АНБ) США разработало собственную поисковую систему наподобие Google.com, к которой имеют доступ более двух десятков силовых струтур, включая ФБР, ЦРУ и Управление по борьбе с наркотиками (Drug Enforcement Administration, DEA). Об этом сообщило издание The Intercept со ссылкой на новые секретные документы, обнародованные Эдвардом Сноуденом.

База данных поисковой системы ICREACH содержит миллиарды записей метаданных, касающихся частных сеансов связи иностранных граждан и миллионы записей, касающихся граждан США, к которым не были предъявлены какие-либо обвинения.

Метаданные, к которым поисковая система дает доступ, включают номера телефонов, уникальные номера SIM-карт, адреса электронной почты и др. Эта информация может быть использована для отслеживания перемещений людей, составления списка их друзей, родственников и знакомых, предсказания последующих действий, выяснения религиозной принадлежности и политических предпочтений.

Используя специальные указатели, пользователи системы могли искать информацию, связанную с определенными людьми. Например, список телефонных номеров, по которым определенный человек звонил за последний месяц. Система обладает максимально простым интерфейсом с поисковой строкой и выдает результаты на отдельной странице.

В одном из документов говорится, что работа над системой ICREACH началась в 2005 г. и была обусловлена необходимостью разведывательного сообщества иметь доступ к метаданным и способностью АНБ собирать такие данные в больших объемах.

Тестовый запуск состоялся в 2007 г. под руководством бывшего директора АНБ Кита Александера. Ежегодный бюджет на содержание был определен в интервале $2,5-4,5 млн. Когда система заработала в полную силу, неизвестно. Но предполагается, что в конечном счете АНБ удалось перевыполнить план и собрать свыше 850 млрд. записей метаданных, о которых говорилось изначально. В отчете за 2010 г. сообщалось, что ICREACH стала основным инструментам для обмена данными среди спецслужб.

Как пишет The Intercept, новые обнародованные документы впервые доказывают, что АНБ в течение многих лет предоставляла прямой доступ к секретным данным различным силовым структурам.
Помимо силовых структур США, доступ к ICREACH имели страны-партнеры, входящие в группу Five Eyes: Канада, Великобритания, Новая Зеландия и Австралия.

По мнению экспертов, опрошенных The Intercept, система ICREACH могла быть использована силовыми структурами США для слежки за подозреваемыми без разрешения суда. Когда они узнавали о том, что подозреваемый действительно нарушает закон, они представляли суду другие улики. При этом реальный источник информации скрывался.

«Мы очень сожалеем об этом, потому что каждый издатель всегда может решить, будет ли его контент отображаться нашими сервисами, и в каком виде это будет происходить. Мы не будем показывать фрагменты некоторых известных сайтов, таких как bild.de, bunte.de или hoerzu.de, являющихся издателями VG Media. Для этих страниц мы покажем только ссылку на статью и заголовок».

Как известно, немецкие издатели в лице консорциума VG Media подали в суд на Google, чтобы получить 11 процентов доли выручки компании Google от публикации отрывков из интернет-газет и журналов.

Другие поисковые системы в Германии полностью отказались отображать сайты издателей при наличии любого вида лицензирования и авторского права. Это решение касается более чем 20 немецких сайтов-издателей новостей и журналов.

Google утверждает, что он доставляет трафик, а также прямые и косвенные доходы газетным и журнальным сайтам в Германии. Однако издатели этого не ценят.

Немецкие издатели новостей и журналов уже давно ведут борьбу за оплату поисковой системой их контента.

Издатели первоначально стремились закрепить «налог на Google» в немецком праве, однако попытка не увенчалась успехом.

В 2013 году в немецком парламенте был принят закон о «вспомогательном авторском праве». Закон позволил Google и другим поисковым системам показывать только «отдельные слова или небольшие текстовые фрагменты».

Из неоднозначности трактования фразы Google был вынужден исключить контент немецких издателей из результатов поисковой выдачи и Google News, чтобы избежать потенциальной ответственности.

Издатели открыли антимонопольное дело против Google, утверждая, что они были вынуждены отказаться от своих авторских прав. Однако немецкий антимонопольный регулятор не согласился. У издателей была возможность отказаться от индексирования, а значит, Google не злоупотребил своим рыночным положением.

Мнения отраслевых источников по этому поводу разошлись. Одни считают, что Google закроет интернет-продавцам доступ к сторонним данным, измеряющим эффективность бизнеса, для борьбы со своим конкурентом Atlas Facebook, другие, что это обычное плановое укрепление защиты данных.

В частности, Googlе довел к сведению компаний Krux, BlueKai и Lotame, что их маркетологи больше не смогут использовать пиксели слежения в некоторых объявлениях. Такая информация необходима для лучшего выбора таргенинга и понимания того, сколько пользователь видел объявление на сайте.

Главный сотрудник Krux Майк Моро (Mike Moreau) сообщил, что платформам управления данными позволят добавлять пиксели слежения в показы лишь той креативной рекламы, показы которой закупаются через контекстно-медийную сеть Google. Также, если они покупают рекламу, действуя как автоматизированная система закупки. На самом же деле многие интернет-компании используют несколько систем для покупки объявлений и только одну платформу управления данными. В итоге они не смогут эффективно отслуживать кампании. Моро считает, что это приведет к тому, что маркетологи будут закупать лишние показы и не смогут контролировать частоту показа объявлений.

В компании Krux опасаются, что Google внедрит подобную практику в рамках всей биржи DoubleClick Ad Exchange (ADX). "Если нововведение распространится на ADX, это будет иметь действительно важное значение", - считает Моро.

Источник в другой компании данных был еще более категоричен. На условиях анонимности он заявил, что Google может поставить их бизнес под угрозу выживания. "Это может привести к проблемам для рынка сторонних данных, которые больше не смогут обеспечить измерение эффективности для клиентов", - сообщил источник.

А вот директор по маркетингу AdRoll Адам Берке (Adam Berke) считает, что Google затеял все для того, чтобы предотвращать утечку данных. "Еще до анонса Facebook Atlas Google начал процесс наведения порядка во взаимоотношениях со сторонними компаниями и сборе данных в его сети", - сказал он. Берке предполагает, что новшества от Google могут частью стратегии по обеспечению кросс-канального маркетинга для потребителей которые используют телефоны, ноутбуки и телевизоры. "Google движется вперед с более интересными приложениями, которые он не может реализовать, если возникнет проблема утечки данных", - сказал Берке.

В официальном заявлении самой компании Google говорится, что вышеупомянутые переговоры не означают изменения в политике компании. "Мы регулярно запускаем проверку наших систем", - говорится в нем.

29 сентября глава Atlas компании Facebook Эрик Джонсон (Erik Johnson) объявил о запуске новой рекламной платформы. Особенность Аtlas в том, что платформа может отслеживать конкретных людей по мере того, как они переходят от одного устройства к другому для выхода в Интернет. Например, пользователь нашел какой-то товар в интернет-магазине с помощью мобильного телефона, и затем сел за ноутбук, чтобы его купить. Для платформы это будет один и тот же человек, хотя и обезличенный.

"Atlas предлагает человеко-ориентированный маркетинг, помогая рекламодателям достигать потребителей вне зависимости от устройства, платформы и издателя", - заявил Джонсон. До этого рекламу на мобильных устройствах тормозило отсутствие cookies. Поэтому компании не могли задействовать такие же механизмы маркетинга, как и на десктопах.

В Facebook прогнозируют, что ноу-хау от Atlas увеличит мировые расходы на мобильную рекламу. В компании отказываются рассказать, как именно Atlas отслеживает потребителя. По версии WSJ, связующим звеном при использовании устройств различного типа служит аккаунт в Facebook.

В новом разделе Google ведет статистику о запросах и удалении по странам. Google уже удалил 497 695 URL-адресов по 144 954 запросам. Компания удалила почти 42% запрашиваемых URL:

Меньше всего запросов – около 24% - поступило из Италии и Португалии. Страны с самым высоким процентом запросов (50-54%) и количеством удаленных ссылок - Германия, Франция и Австрия.

Google получил запрос на удаление более 4100 ссылок на YouTube. Это ресурс с наибольшим количеством запросов на удаление.
На Facebook пришлось 3300 деиндексированных ссылок, ProfileEngine.com – 3289, YouTube - 2392

По данным другого исследования, 60% запросов получают отказ в удалении ссылок из поисковой выдачи. Наибольшая часть запросов касается социальных сетей и каталогов.

Интересным является тот факт, что две трети запросов касаются ссылок из первых трех страниц поисковой выдачи Google.

Новое решение суда в Японии может вызвать появление подобного «Право быть забытым» в этой стране, когда индексированные результаты «нарушают право на приватность».

Google продолжает настаивать на наличии неправомерных запросов на удаление. Конкуренты, используя «Право на забвение», могут уменьшать веб-присутствие друг друга в корыстных целях. Google подсчитал, что более 50% запросов на удаление направлены именно конкурентами.

Как отмечают разработчики, язык Dart, библиотеки и время прогона упрощают создание приложений командной строки. На самом деле все ключевые инструменты, включенные в Dart SDK - компилятор dart2js, пакетный менеджер pub, статический анализатор кода dartanalyzer, выполнены на языке Dart. В новой версии был упрощен способ установки и запуска написанных на языке Dart скриптов и утилит.
Также разработчики улучшили модель изоляции кода и добавили возможность запуска изолированных блоков с различными пакетами, а не только под базовым приложением, что позволяет создавать Dart-приложения с различными зависимостями.
Кроме того, был добавлен вызов errorCallback, позволяющий организовать перехват и обработку ошибок, изменен обработчик завершения соединения в HttpClient, а также в dart2js добавлена возможность использования механизма отложенной загрузки при наличии Dart-приложений на одной странице.
Для упрощения установки и обновления Dart SDK и Dartium добавлены АРТ-репозитории для Debian и Ubuntu, а также поддержка Homebrew для MAC.