Apple раскрыла принцип работы новой функции Audio Intelligence для Apple Watch и объяснила механизмы защиты приватности
Apple представила новый набор функций под общим названием Audio Intelligence, который дебютирует на новых моделях Apple Watch Series 12 и Apple Watch Ultra 4. Компания опубликовала подробное разъяснение о работе этих возможностей, уделив особое внимание вопросам конфиденциальности, в отдельном документе.
Что такое Audio Intelligence и какие функции она включает
По описанию Apple, Audio Intelligence — это новый класс функций, использующих микрофоны Apple Watch, вычислительные возможности процессоров Apple Silicon и как локальные, так и облачные модели искусственного интеллекта. Цель — помогать пользователю обнаруживать звуки, распознавать музыку и оставаться сосредоточенным и вовлечённым, при этом защищая приватность на каждом этапе обработки данных.
В стартовый набор Audio Intelligence входят четыре функции:
- Распознавание звуков (Sound Recognition).
- Автоматическое распознавание музыки с помощью Shazam.
- Live Rewind — возможность вернуться к недавно услышанному фрагменту речи.
- Siri Recap — сводка ключевых моментов, основанная на услышанном.
Apple отмечает, что Live Rewind и Siri Recap появятся в бета‑версии с поддержкой английского языка позже, и добавит дополнительные подробности при запуске. Каждая функция в составе Audio Intelligence требует явного согласия пользователя (опция включения по желанию), а Live Rewind и Siri Recap дополнительно позволяют легко включать или отключать их при необходимости.
Как работает Live Rewind
По словам компании, Live Rewind активируется исключительно при намеренном двойном нажатии на Digital Crown. Функция показывает только последние 15 секунд речи в виде текстового фрагмента на дисплее. Она не продолжает транскрибировать в фоновом режиме и не сохраняет текст, если пользователь сам не запросит у Siri содержимое фрагмента или не сохранит его в приложении Siri. Включение осуществляется через приложение Watch на iPhone: в разделе Siri включается функция Live Rewind и опция «Double Click Digital Crown».
Как работает Siri Recap
Siri Recap запускается только по выбору пользователя. В приложении Watch на iPhone можно включить эту функцию и задать расписание её работы по времени и/или местоположению (например, «только на работе» или «никогда ночью»), либо управлять включением вручную. Во всех случаях управление доступно и из Пункта управления на часах — можно включать и выключать в любой момент.
Apple подчёркивает, что Audio Intelligence не сопоставляет речь с конкретными говорящими, а Siri Recap разработан так, чтобы исключать потенциально вредоносный контент и чувствительную информацию. При активации Live Rewind устройство предупреждает окружающих звуковым сигналом и визуальными индикаторами.
Технические меры защиты приватности
Для тех, кто хочет глубже понять, как реализованы механизмы защиты приватности, Apple опубликовала подробный 11‑страничный документ. В нём компания разъясняет, как Live Rewind и Siri Recap устроены на аппаратном уровне.
По описанию Apple, аудиопоток для Live Rewind поступает в аудиобуфер, размещённый внутри Secure Enclave на чипе S11. Старые данные в буфере непрерывно заменяются новыми, поэтому накопление аудио не происходит, а необработанный звук недоступен за пределами этого защищённого буфера.
Для Siri Recap Apple объясняет, что чип S11 использует лёгкую модель ИИ для определения факта присутствия речи поблизости. Эта модель не транскрибирует и не записывает аудио — она лишь фиксирует начало разговора. При обнаружении разговора аудио поступает в защищённый буфер внутри Secure Enclave на чипе S11, изолированный аппаратно и недоступный пользователю, операционной системе, приложениям и даже сотрудникам Apple.
Каждая из описанных функций активируется только с явного согласия пользователя, и компания подчёркивает, что доступ к необработанному аудиопотоку ограничен аппаратными средствами Secure Enclave.
Дополнительные детали и сопутствующие продукты
В публикации также упоминается, что другие продукты и аксессуары Apple продолжают развиваться параллельно: в списке продукции фигурируют обновлённые наушники и аксессуары. Автор материала — старший редактор, освещающий изделия Apple, приложения и разработки в области ИИ; он работает в издании с 2013 года.
Вывод
Apple позиционирует Audio Intelligence как сочетание локальной обработки на устройстве и облачных возможностей с приоритетом защиты приватности. Новые функции ориентированы на удобство и безопасность пользователя: все они требуют явного согласия, часть возможностей запускаются только явно и снабжены аппаратными барьерами, препятствующими несанкционированному доступу к необработанному аудиопотоку.