Как новейшие Apple Watch прослушивают разговоры? Разбор функций Siri Recap и Live Rewind

Когда функция включена, Siri Recap слушает разговоры в течение дня и превращает их в резюме с заголовком, кратким описанием и ключевыми пунктами. Резюме появляется в приложении Siri, где его можно сохранить. Если не сохранить — удалится через семь дней.

Встроенная в процессор S11 модель ИИ определяет, соответствуют ли звуки маркерам разговора. Когда разговор обнаружен, аудио попадает в Secure Exclave — физически отдельный отсек внутри процессора часов, недоступный ни ОС, ни приложениям, ни пользователю, ни самой Apple. Затем аудио шифруется и отправляется в Secure Exclave на iPhone, где расшифровывается и транскрибируется. Локальная модель сжимает транскрипт менее чем до половины длины, сохраняя суть.

Этот сжатый текст — единственное, что покидает телефон. Он отправляется в Private Cloud Compute, где ИИ добавляет контекст (календарь, местоположение, метки мест) и превращает текст в готовый Recap. Результат выглядит как заметки со встречи, а не полный транскрипт. После извлечения текста аудио удаляется — без копий в облако.

На презентации показали пример: пара в ресторане слушает, как официант скороговоркой перечисляет специальные предложения. Один из посетителей дважды нажимает цифровую коронку — и на экране часов появляется транскрипция речи.

С включенной функцией владельцы часов могут в любой момент получить транскрипцию последних 15 секунд аудио. Secure Exclave постоянно принимает аудио в кольцевой буфер, который непрерывно перезаписывается. Двойной щелчок по коронке отправляет буферизованное аудио на iPhone (если телефон рядом нет — аудио удаляется).

Распознавание речи преобразует его в текст на экране часов. Аудио удаляется, и текст исчезает после просмотра, если его не сохранить. Ничего не покидает экосистему часов и телефона, если только вы не спросите Siri о транскрипции — тогда запрос уходит в PCC.

Siri Recap и Live Rewind — половина функций Audio Intelligence. Если Shazam и Sound Recognition вряд ли вызовут такие же вопросы, то Recap и Rewind пока выглядят пугающе.

Научный сотрудник по вопросам конфиденциальности и политики данных в Стэнфордском институте человекоориентированного ИИ Дженнифер Кинг отмечает: «Похоже, они приложили значительные усилия, чтобы не создавать аудиослед для правоохранительных органов. Но использование поднимает вопросы о том, в какой степени мы хотим, чтобы постоянная запись звука стала частью социальных взаимодействий».

Торин Клосовски из Electronic Frontier Foundation видит два аспекта. Первый — приватность пользователя, с которой «они, похоже, обращаются разумно — очень по-эппловски». Второй — «приватность всех остальных вокруг, которая практически не учитывается».

Он сравнивает часы с очками Meta Ray-Ban (Meta признана в России экстремистской и запрещена), которые хотя бы заметны. «Apple Watch выглядит так же, как и несколько поколений назад, поэтому вы не можете взглянуть на чье-то запястье и понять, что у него есть такая возможность».

Live Rewind предупреждает окружающих звуковым сигналом и анимацией на экране. Но пока неясно, будут ли люди понимать, что это значит. Siri Recap не дает никаких сигналов. Поскольку результат — не запись, а краткий обзор, Apple сравнивает функцию с заметками после разговора.