Apple официально анонсировала Audio Intelligence — новый класс функций искусственного интеллекта, доступный исключительно на Apple Watch Series 12 и Apple Watch Ultra 4. Эти возможности используют микрофоны часов, мощь чипа S11 и гибридную модель обработки данных (on-device и облако) для помощи пользователю в повседневной жизни, сохраняя при этом строгие гарантии конфиденциальности.
Четыре ключевые функции Audio Intelligence
Система включает четыре основных инструмента, каждый из которых можно активировать отдельно:
- Sound Recognition (Распознавание звуков): Детектирует важные звуки, такие как сирены, будильники и звонки в дверь, и уведомляет владельца даже без iPhone рядом. Функция особенно полезна для людей с нарушениями слуха.
- Music Recognition (Распознавание музыки с Shazam): Автоматически определяет играющую в фоне песню и выводит название и имя исполнителя в Smart Stack без необходимости открывать виджет.
- Live Rewind: Позволяет «перемотать» последние 15 секунд разговора. При двойном нажатии на Digital Crown на экране появляется текстовый фрагмент того, что было сказано. Это помогает уловить пропущенную информацию или непонятные слова.
- Siri Recap: Фоновая функция, которая делает краткие саммари ваших разговоров в течение дня. Она не создает транскрипты, а генерирует высокоуровневые заметки, которые можно использовать для освежения памяти.
Технические детали и приватность
Ключевым аспектом реализации является аппаратная защита. Аудиоданные обрабатываются в Secure Exclave — изолированном аппаратном блоке внутри чипа S11. Это означает, что:
- Аудиозаписи не сохраняются и не доступны ни системе, ни приложениям, ни самой Apple.
- Данные в Private Cloud Compute (PCC) используются только для формирования ответа и не хранятся.
- Синхронизация сохраненных саммари через iCloud защищена сквозным шифрованием (E2EE).
Функция Siri Recap автоматически удаляет данные через 7 дней, если пользователь не сохранил их явно. Live Rewind удаляет текстовые фрагменты через 30 секунд после затемнения экрана.
Сравнительная таблица функций
| Функция | Назначение | Активация | Хранение данных |
|---|---|---|---|
| Sound Recognition | Уведомления о важных звуках | Настройки iPhone > Accessibility | Нет записей |
| Music Recognition | Автоопределение треков | Настройки Watch > Smart Stack | Нет записей |
| Live Rewind | Текст последних 15 сек речи | Двойное нажатие Digital Crown | Удаление через 30 сек (если не сохранено) |
| Siri Recap | Саммари разговоров за день | Приложение Watch > Siri | Автоудаление через 7 дней (если не сохранено) |
Важно отметить, что Siri Recap не идентифицирует говорящих (нет speaker diarization) и фокусируется только на тех разговорах, в которых участвует пользователь, игнорируя фоновые беседы или медиа, воспроизводимые через наушники.
Источник: Apple ↗