Часы, которые слушают и конспектируют: Apple запустила бета-тестирование ИИ Audio Intelligence

Технологическая экосистема Apple делает очередной шаг в развитии искусственного интеллекта. Компания объявила о запуске новой системы Audio Intelligence для смарт-часов в режиме бета-тестирования. На первом этапе инновационный инструментарий становится доступен разработчикам в рамках обновления iOS 27.3. Впервые о наборе функций было объявлено во время сентябрьской презентации Surprise and Shine.

• Создан гаджет, который позволит переписываться незаметно для окружающих, — умные очки Subvocal

Новая технология предлагает владельцам Apple Watch Series 12 и Apple Watch Ultra 4 комплект из четырех инновационных функций на базе ИИ, разработанных для распознавания окружающих звуков, определения музыки и работы с разговорным аудио:

• Распознавание критически важных звуков: Инструмент создан в первую очередь для людей с нарушениями слуха. Часы способны фиксировать и идентифицировать важные акустические сигналы окружающей среды — сирены, сигналы тревоги или дверные звонки — и мгновенно уведомлять о них пользователя.
• Определение музыкальных композиций: Встроенная интеграция с сервисом Shazam позволяет распознавать фоновую музыку, предоставляя полную информацию об исполнителе и названии композиции.
• Функция Live Rewind: Возможность "прокрутить" разговор назад.
• Функция Siri Recaps: Система автоматического создания текстовых итогов и заметок на основе диалогов.

Live Rewind: быстрое возвращение к сказанному

Если вы пропустили важную деталь — например, устную инструкцию или названное официантом блюдо из меню, — дважды нажмите на колесико Digital Crown. На циферблате появится текстовый фрагмент того, что было сказано за последние 15 секунд.

Время хранения фрагмента: Если не предпринимать никаких действий, текстовый отрывок автоматически и безвозвратно удаляется через 30 секунд.

Сохранение и анализ: Пользователь может сохранить текст в специальном приложении Siri (входит в состав iOS 27) или нажать кнопку "Спросить Siri", чтобы уточнить непонятные термины или детали.

Предупреждение окружающих: Чтобы избежать скрытой записи, двойное нажатие сопровождается четким звуковым сигналом и визуальной анимацией на экране, информирующими собеседников о фиксации фразы.

Siri Recaps: интеллектуальное конспектирование

Эта функция предназначена для создания развернутых заметок во время рабочих встреч, родительских собраний или тренировок, когда руки заняты или необходимо полностью сосредоточиться на собеседнике.

• Без дополнительной записи и аудио: Система не сохраняет аудиофайлы, не создает дословных транскрипций и не идентифицирует конкретных говорящих. Вместо этого она анализирует суть разговора и формирует краткое резюме: одно обобщающее предложение и несколько пунктов с фактами (датами, дедлайнами, ценами, условиями).
• Этический фильтр: Siri Recaps программно заблокирована от обработки конфиденциальных данных — государственных идентификаторов, финансовой информации, паролей, а также высказываний, касающихся самоповреждения.
• Автоматические ограничения: Запись останавливается, если пользователь слушает музыку в наушниках или использует режим активного шумоподавления.

Конфиденциальность против прослушивания: как работают Live Rewind и Siri Recaps

Больше всего дискуссий вызвали именно функции, ориентированные на фиксацию устной речи. На фоне общественной критики умных очков Meta и других интеллектуальных устройств, которые ведут постоянную запись, Apple разработала концепцию, призванную найти баланс между повседневной пользой и строгой защитой конфиденциальности.

Хотя в США нет федерального запрета на подобную фиксацию, фоновое прослушивание с помощью смарт-часов может нарушать законодательство отдельных штатов (например, Калифорнии, Пенсильвании или округа Колумбия), где запись частных разговоров без согласия всех присутствующих является серьезным правонарушением.

Получить такое согласие в реальной жизни — задача практически невыполнимая, ведь сама Apple приводит пример использования Live Rewind после того, как официант уже ушел. Пока суды не давали оценки тому, считается ли правонарушением локальная обработка звука на устройстве с последующим зашифрованным облачным анализом. Нет и прецедентов, касающихся создания текстовых резюме вместо непосредственной аудиозаписи. Тем не менее юристы прогнозируют скорую волну коллективных исков против Apple. Пока юридические вопросы не урегулированы, специалисты советуют придерживаться простого правила: всегда предупреждать собеседников о фиксации разговора.

Управление и сохранение заметок

В конце дня (или во время утренней разблокировки) смарт-часы предлагают просмотреть созданные дайджесты. Пользователь самостоятельно решает, что из этого сохранить в приложениях "Заметки" или "Дневник". Все несохраненные обзоры автоматически удаляются через 7 дней. Также можно настроить гибкое расписание работы Siri Recaps (например, только в рабочее время) или быстро отключить функцию через Центр управления.

Техническая архитектура и защита данных

Сложная обработка аудио реализована благодаря сочетанию аппаратного обеспечения, локального ИИ и облачных технологий:

• Hardware & On-Device Processing: Система опирается на новый чип S11, микрофон часов и вычислительные мощности подключенного iPhone.
• Защищенный анклав (Secure Enclave): Аудиобуфер работает в полностью изолированной памяти. Даже операционная система или сама компания Apple не имеют доступа к исходному звуку.

Схема обработки:

• Чип S11 определяет наличие разговора и передает сигнал на iPhone через защищенное соединение.

• iPhone преобразует аудио в сжатый текст (без слов-паразитов).

• Текст шифруется и отправляется в частную облачную систему Private Cloud Compute (PCC) для создания краткого содержания.

• Готовое резюме возвращается на телефон, а все промежуточные данные в PCC немедленно удаляются.

Все сохраненные итоги и заметки остаются доступными исключительно пользователю и надежно шифруются при сквозной синхронизации между устройствами Apple.

По заявлению разработчиков, работа новых алгоритмов не повлияет на автономность смарт-часов и смартфона. После завершения закрытого тестирования Audio Intelligence перейдет в стадию публичной бета-версии перед полноценным выпуском для всех пользователей.

Компания Apple разрабатывает новый доступный смартфон — iPhone 18e, выход которого ожидается в начале 2027 года. Устройство получит обновленный производительный процессор и улучшенную фронтальную камеру, хотя дисплей и основной фотомодуль, по предварительной информации, останутся без существенных изменений.