Apple Watch testet KI-Audiointelligenz in der Beta für Gesprächs-Rückspul- und Zusammenfassungsfunktionen

Image: Image Credits:Apple · Source

Apple führt Audio-Intelligenz-Funktionen in der Beta-Phase für die Apple Watch Series 12 ein, die es Nutzern ermöglichen, kürzliche Gespräche mit Textauszügen zurückzuspulen und KI-generierte Zusammenfassungen zu erhalten, wobei Funktionalität und Datenschutz in Balance gehalten werden.

Apple hat mit der Beta-Erprobung neuer KI-gestützter "Audio Intelligence"-Funktionen für die Apple Watch Series 12 begonnen, im Rahmen des iOS 27.3 Updates, das zunächst Entwicklern zur Verfügung gestellt wurde. Diese Funktionen, erstmals angekündigt auf Apples "September Surprise and Shine" Event, zielen darauf ab, die Interaktion der Nutzer mit gesprochener Information zu verbessern, indem sie Rückspul- und Rückblickfunktionen für Gespräche sowie Sound- und Musikerkennung ermöglichen.

Die neue Funktionalität umfasst vier Opt-in-Tools. Die Sound-Erkennung unterstützt gehörlose und schwerhörige Nutzer, indem sie wichtige Geräusche wie Sirenen oder Türklingeln identifiziert. Die Musikerkennung nutzt Apples Shazam-Technologie zur Identifizierung von in der Nähe abgespielten Liedern.

Besonders hervorzuheben sind die Features Live Rewind und Siri Recaps, die sich auf menschliche Gespräche konzentrieren. Live Rewind lässt Nutzer die digitale Krone der Apple Watch doppelt drücken, um einen 15-Sekunden-Textausschnitt des letzten Gesprochenen anzusehen, hilfreich zum Nachholen verpasster Details wie Wegbeschreibungen oder Menüpunkte. Ein akustischer Ton und eine Bildschirmanimation zeigen an, dass eine Aufnahme erfolgt ist, um Datenschutzbedenken zu begegnen und Umstehende zu informieren. Wenn Nutzer den Ausschnitt nicht speichern, wird er automatisch nach 30 Sekunden gelöscht. Unter dem Ausschnitt gibt es eine "Frag Siri"-Option, um Begriffe oder gehörte Konzepte zu klären.

Siri Recaps erweitert dieses Umgebungs-Listening, indem es prägnante, übergeordnete Zusammenfassungen von Gesprächen generiert. Anstatt wortwörtlich zu transkribieren oder Sprecher zu identifizieren, erstellt es kurze Sätze und Aufzählungspunkte, die Schlüsseldetails wie Daten, Fristen oder Preisangaben hervorheben. Die Funktion ist für Szenarien wie Meetings oder persönliche Gespräche konzipiert und hilft Nutzern, wesentliche Informationen ohne manuelle Notizen zu behalten. Sie respektiert die Privatsphäre, indem sie nicht aufzeichnet, wenn Kopfhörer benutzt werden oder Geräuschunterdrückung aktiv ist, und schließt sensible Daten wie Regierungskennzahlen oder Finanzinformationen aus den Zusammenfassungen aus.

Die Zusammenfassungen werden von den Nutzern geprüft, die wählen können, sie in Apps wie Notizen oder Journal zu speichern; andernfalls löschen sich die KI-generierten Zusammenfassungen innerhalb von sieben Tagen selbst. Nutzer können Siri Recaps manuell aktivieren oder Zeitpläne festlegen, wann es läuft, beispielsweise während der Arbeitszeit, und können es jederzeit über das Kontrollzentrum deaktivieren.

Die Technologie basiert auf dem integrierten S11-Chip, einem sicheren Bereich in der Hardware der Apple Watch, der Roh-Audio sicher verarbeitet, ohne vom Betriebssystem zugänglich zu sein. Das Audio wird verschlüsselt und an das gekoppelte iPhone gesendet, wo eine On-Device-KI das Gespräch in verdichteten Text umwandelt. Dieser Text wird dann sicher an Apples Private Cloud Compute-System geschickt, um Zusammenfassungen zu erstellen, bevor er sofort gelöscht wird, was die Privatsphäre der Nutzer sicherstellt. Alle Daten-Synchronisationen zwischen Geräten bleiben verschlüsselt und sind für Apple nicht zugänglich.

Apple gibt an, dass diese Funktionen die Akkulaufzeit nicht negativ beeinflussen und nach weiteren Beta-Tests der breiten Öffentlichkeit zur Verfügung gestellt werden. Die Einführung stellt einen bedeutenden Schritt dar, KI zur Verbesserung der Nutzererfahrung mit Wearable-Technologie anzuwenden und dabei starke Datenschutzmaßnahmen aufrechtzuerhalten.