Apple Watch тестирует в бета-версии ИИ-аудиоинтеллект для перемотки разговоров и их резюме

Image: Image Credits:Apple · Source

Apple представляет функции аудиоинтеллекта в бета-версии для Apple Watch Series 12, позволяющие пользователям перематывать недавние разговоры с помощью текстовых фрагментов и получать AI-сгенерированные резюме, сочетая функционал с защитой конфиденциальности.

Apple начала бета-тестирование новых возможностей «Audio Intelligence» на базе искусственного интеллекта для Apple Watch Series 12 в рамках обновления iOS 27.3, первоначально доступного разработчикам. Эти функции, впервые анонсированные на мероприятии Apple September Surprise and Shine, направлены на улучшение взаимодействия пользователей с устной информацией, предоставляя возможности перемотки и пересказа разговоров, а также распознавание звуков и песен.

Новая функциональность включает четыре инструмента с обязательным согласием пользователя. Распознавание звуков помогает глухим и слабослышащим, идентифицируя важные звуки, такие как сирены или дверные звонки. Распознавание музыки использует технологию Shazam от Apple для определения песен, играющих поблизости.

Особое внимание уделяется функциям Live Rewind и Siri Recaps, ориентированным на человеческие разговоры. Live Rewind позволяет пользователям дважды нажать цифровую коронку Apple Watch, чтобы просмотреть 15-секундный текстовый фрагмент недавней речи — полезно для воспоминания пропущенных деталей, таких как указания или пункты меню. Звуковой сигнал и анимация на экране информируют о записи, что учитывает вопросы конфиденциальности, делая окружающих осведомленными. Если пользователь не сохраняет фрагмент, он автоматически удаляется спустя 30 секунд. Под фрагментом доступна опция «Спросить Siri» для уточнения услышанных терминов или понятий.

Siri Recaps расширяет функцию фонового прослушивания, создавая краткие, высокоуровневые резюме разговоров. Вместо пословной транскрипции или идентификации участников создаются короткие предложения и пункты с ключевыми деталями, такими как даты, сроки или цены. Функция предназначена для поддержки сценариев вроде встреч или личных сессий, помогая пользователям запоминать важную информацию без необходимости ручного ведения заметок. Конфиденциальность соблюдается путем отключения записи при использовании наушников или активном шумоподавлении и исключения из резюме чувствительных данных, таких как государственные идентификаторы или финансовая информация.

Резюме проверяются пользователями, которые могут сохранить их в приложениях, например, Заметки или Дневник; в противном случае такие AI-сгенерированные сводки удаляются автоматически через семь дней. Пользователи могут вручную включать Siri Recaps или настраивать график работы, например, в рабочие часы, а также отключать ее в любой момент через Центр управления.

Технология опирается на встроенный чип S11 — безопасную среду в аппаратном обеспечении Apple Watch, которая обрабатывает исходный аудиосигнал локально, без доступа операционной системы. Аудио зашифровано и передается на сопряжённый iPhone, где встроенный ИИ конденсирует разговор в текст. Этот текст затем безопасно отправляется в систему Apple Private Cloud Compute для генерации резюме, которые немедленно удаляются, гарантируя конфиденциальность пользователя. Вся синхронизация данных между устройствами остаётся зашифрованной и недоступной Apple.

Apple утверждает, что эти функции не влияют негативно на время работы батареи и станут доступны широкой публике после дальнейшего бета-тестирования. Внедрение представляет собой важный шаг в применении ИИ для улучшения пользовательского опыта с носимой технологией при сохранении сильных мер защиты конфиденциальности.