Apple Watch Beta-tester AI Audio Intelligence for samtalsspilling og oppsummeringer

Bilde: Image Credits:Apple · Kilde

Apple introduserer Audio Intelligence-funksjoner i beta for Apple Watch Series 12, som gjør det mulig for brukere å spole tilbake nylige samtaler med tekstutdrag og motta AI-genererte oppsummeringer, og balanserer funksjonalitet med personvern.

Apple har startet beta-testing av nye AI-drevne "Audio Intelligence"-funksjoner for Apple Watch Series 12, som en del av iOS 27.3-oppdateringen som først ble rullet ut til utviklere. Disse funksjonene, først annonsert på Apples Surprise and Shine-arrangement i september, har som mål å forbedre hvordan brukere samhandler med muntlig informasjon ved å muliggjøre spilling tilbake og oppsummering av samtaler, sammen med lyd- og sanggjenkjenning.

Den nye funksjonaliteten inkluderer fire verktøy som brukeren må aktivt velge å bruke. Lydgjenkjenning hjelper døve og hørselshemmede ved å identifisere viktige lyder som sirener eller dørklokker. Musikkgjenkjenning benytter Apples Shazam-teknologi for å identifisere sanger som spilles i nærheten.

Mer bemerkelsesverdig er Live Rewind- og Siri Recaps-funksjonene som fokuserer på menneskelige samtaler. Live Rewind lar brukere dobbeltklikke på Apple Watch sin digitale krone for å se en 15 sekunders tekstbit av nylig tale, nyttig for å fange opp tapte detaljer som veibeskrivelser eller menypunkter. En hørbar lyd og en animasjon på skjermen indikerer at opptak har skjedd, for å ivareta personvern ved å gjøre tilstedeværende oppmerksomme. Hvis brukeren ikke lagrer tekstbiten, slettes den automatisk etter 30 sekunder. Det finnes også et "Spør Siri"-alternativ rett under tekstbiten for å få avklaringer på termer eller konsepter man har hørt.

Siri Recaps går enda lenger i denne omgivende lyttingen ved å generere konsise, overordnede oppsummeringer av samtaler. I stedet for å transkribere ordrett eller identifisere talere produserer den korte setninger og punktlister som fremhever viktige detaljer som datoer, frister eller prisinformasjon. Designet for å støtte situasjoner som møter eller personlige økter, hjelper funksjonen brukerne med å beholde essensiell informasjon uten å måtte ta manuelle notater. Den respekterer personvernet ved ikke å ta opp når hodetelefoner er i bruk eller støyreduksjon er aktiv, og utelukker sensitiv informasjon som offentlige ID-er eller økonomiske opplysninger fra oppsummeringene.

Oppsummeringene gjennomgås av brukere, som kan velge å lagre dem i apper som Notater eller Journal; ellers slettes AI-genererte oppsummeringer automatisk innen syv dager. Brukere kan aktivere Siri Recaps manuelt eller sette opp tidsplaner for når funksjonen skal være aktiv, for eksempel i arbeidstiden, og kan når som helst deaktivere den via Kontrollsenteret.

Teknologien er avhengig av det integrerte S11-brikken, et sikkert miljø i Apple Watch-maskinvaren som behandler rå lyd sikkert uten tilgang fra operativsystemet. Lyd krypteres og sendes til sammenkoblet iPhone, hvor AI på enheten destillerer samtaler til kondensert tekst. Denne teksten sendes deretter sikkert til Apples Private Cloud Compute-system for å generere oppsummeringer før den slettes umiddelbart, noe som sikrer brukerens personvern. All data som synkroniseres mellom enhetene forblir kryptert og utilgjengelig for Apple.

Apple hevder at disse funksjonene ikke påvirker batterilevetiden negativt og vil bli tilgjengelig for allmennheten etter ytterligere beta-testing. Utrullingen representerer et betydelig skritt i å anvende AI for å forbedre brukeropplevelsen med bærbar teknologi samtidig som sterke personvernbeskyttelser opprettholdes.