Permanente Gesprächsauswertungen
Siri Recap: So fasst Apple zukünftig Gespräche zusammen
Mit Siri Recap bekommt die Apple Watch Series 12 eine Funktion, die Gespräche im Alltag automatisch zusammenfassen kann. Statt einer Aufnahme oder eines vollständigen Transkripts sollen kurze Notizen mit Titel, Zusammenfassung und Stichpunkten entstehen. Die technische Umsetzung ist dabei deutlich aufwendiger, als es die fertige Notiz vermuten lässt.
Neue Audio-Funktionen: Siri Recap und Live Rewind
Siri Recap muss ausdrücklich aktiviert werden. Anschließend lässt sich festlegen, wann und wo die Funktion arbeiten darf, beispielsweise nur während der Arbeitszeit oder ausschließlich am Arbeitsplatz. Alternativ kann Recap jederzeit über das Kontrollzentrum ein- und ausgeschaltet werden. Anders als Live Rewind, das nach einem Doppelklick auf die Digital Crown die vergangenen 15 Sekunden aufbereitet, arbeitet Recap im Hintergrund.
Vom Gespräch zur komprimierten Textfassung
Zunächst erkennt ein kleines KI-Modell auf dem S11-Chip lediglich, ob in der Umgebung gesprochen wird. Es zeichnet dabei noch nichts auf und erstellt auch kein Transkript. Erkennt die Uhr ein Gespräch, landet das Audiosignal in einem hardwareseitig abgeschotteten Bereich des Chips. Von dort wird es verschlüsselt an den entsprechenden geschützten Bereich des gekoppelten iPhones übertragen und anschließend von der Uhr gelöscht.
Geplant sind Gesprächszusammenfassungen in der Siri-App
Ist das iPhone vorübergehend nicht erreichbar, versucht die Uhr die Übertragung später erneut. Kommt die Verbindung nicht rechtzeitig zustande, laufen die zugehörigen Schlüssel ab und die verschlüsselten Audiodaten werden gelöscht.
Auf dem iPhone erfolgt die Spracherkennung dann lokal. Ein ebenfalls lokal ausgeführtes Sprachmodell reduziert das Transkript anschließend auf weniger als die Hälfte seiner ursprünglichen Länge. Füllwörter, Wiederholungen und Hinweise auf den Gesprächston sollen dabei verschwinden, während die besprochenen Themen erhalten bleiben. Danach wird auch das ursprüngliche Audiomaterial dauerhaft gelöscht. Übrig bleibt zunächst nur der komprimierte Text, der zusätzlich durch ein Sicherheitsmodell geprüft wird.
Zusammenfassung entsteht in der Apple-Cloud
Für die eigentliche Zusammenfassung überträgt das iPhone diesen Text verschlüsselt an Apples Private Cloud Compute. Dort können zusätzliche Kontextinformationen einfließen. Dazu zählen Kalenderdaten, aktuell wiedergegebene Medien sowie grobe Ortsangaben wie Zuhause, Arbeit, Schule, Stadt oder Land. Auch Kategorien wie Supermarkt oder Park sind möglich. Der genaue Standort und konkrete Orte werden nicht übertragen.
Always On: Der Dauermitschnitt ist eine von vier möglichen Optionen
Die Cloud-Modelle erstellen daraus Titel, Zusammenfassung und Stichpunkte. Bestimmte sensible Informationen wie Finanzdaten, amtliche Kennungen oder Zugangsdaten sollen dabei nicht in die fertige Notiz gelangen. Die Zusammenfassung erscheint anschließend im Recaps-Bereich der Siri-App auf iPhone und Apple Watch. Sie wird nach sieben Tagen automatisch gelöscht, sofern der Nutzer sie nicht ausdrücklich speichert. Bei entsprechend abgesichertem iCloud-Konto kann sie Ende-zu-Ende-verschlüsselt zwischen Geräten synchronisiert werden.
Siri Recap erzeugt weder eine dauerhaft abrufbare Audioaufnahme noch ein wortgetreues Transkript und ordnet Aussagen keinen einzelnen Sprechern zu. Und: Aus der fertigen Zusammenfassung lässt sich das ursprüngliche Audiomaterial nicht rekonstruieren.
Erst Ende 2026 und nicht in der EU
Die Funktion startet Ende 2026 als Beta zunächst auf Englisch. Benötigt werden eine Apple Watch Series 12 oder Ultra 4 sowie ein Apple-Intelligence-fähiges iPhone 16 oder neuer, wobei das iPhone 16e ausgenommen ist. In der EU steht Siri Recap zum Start nicht zur Verfügung. Für Siri Recap und weitere servergestützte Audio-Intelligence-Funktionen gelten zudem tägliche Nutzungslimits, die Apple momentan aber noch nicht im Detail aufdröselt.



„Es zeichnet dabei noch nichts auf und erstellt auch kein Transkript. Erkennt die Uhr ein Gespräch, landet das Audiosignal in einem hardwareseitig abgeschotteten Bereich des Chips.“
Wenn ein Audiosignal auf dem Chip zwischengespeichert wird, ist das für mich die Definition von Aufzeichnen.
Unabhängig davon ein sehr unangenehmes Feature.
Viel zu gefährlich die Funktion, hätte er Sorge das die Funktion ausgenutzt wird… genaus wie die Walkie Talki Funktion
WalkieTalkie wurde ausgenutzt? Wie?
Frag ich mich auch.
Ja, wie wurde Walkie-Talkie ausgenutzt?
@Bart: Genau so funktioniert bereits „Hey Siri!“
Hey Siri lauscht nur auf ein Keyword und nimmt nicht alle gesprochenen Worte auf.
Finde ich pauschal erstmal super, auch der Ansatz von Apple. Es wird aber in Sicherheitskritischen Bereichen dann öfter vorkommen, alle elektronischen Geräte vorher ablegen zu müssen.
Ist doch sowieso schon so
Was Rowi indirekt anspricht ist, dass es in Zukunft noch mehr Bereiche geben wird, wo Gadgets nicht mehr erlaubt sein werden, wo heute noch keine Restriktionen bestehen.
Nicht nur in Sicherheitsbereichen. Will gar nicht wissen was da in öffentlichen Bereichen wie U-Bahn, sbshn, Gaststätten und Co so alles dann aus Versehen mit transkribiert wird.
Mir ist das ehrlich gesagt, alles ein bisschen zu viel
Bin mir sicher, diese Funktion wird von vielen umfangreich genutzt! /s
Merkwürdige Janes Bond Features …
Dieses Feature stellt alle Besitzer einer neueren Applewatch unter den Generalverdacht der Indiskretion. Furchtbar! Was hat sich dieses doch mal so woke Unternehmen Apple dabei gedacht! Die haben mal einen ikonischen 1984-Werbespot gemacht, wo sie zum Ausdruck gebracht haben, solche Big Brother-Fantasien mit ihren Produkten nicht zu wollen.
Microsoft hat heute meine OneNote App auf dem Handy mit Copilot kombiniert und siehe da: die stelle ich auf Aufnahme und habe am Ende ein ganzes Transkript. Das bekommt keiner mit.
Warum geht das und die Apple Watch soll das nicht können dürfen??? Ich verstehe es nicht.
Warum sie es getan haben erklärt marques brownlee in seinem letzte Apple Watch Video sehr gut.
Davon abgesehen, ich finde die Funktion auch schrecklich, zumal sich zusätzlich für alle EU Bürger nun eine eine Taste und die Bedienung komplett verschwindet
Ist doch eigentlich egal. Wird in der EU mit Sicherheit nicht kommen / möglich sein
In dem Fall setze ich mal sehr auf die EU, auch wenn die es sonst mitunter übertreiben.
Wo übertreibt die EU denn?
Und Huawei-Smartphones wurden in den USA verboten. Komische Logik.
Irgendwie muss man anzeigen können, dass diese Funktion eben nicht aktiviert ist.
In der EU reicht auch ein iPhone Xs. Neuere Funktionen sind praktisch nicht nutzbar, dank ein paar Wichtigtuern, die uns mit allen Mitteln den Spaß an der Sache verderben wollen.
Da es in der EU eh noch lange nicht kommt gibt’s auch keinen Grund sich darüber schon Gedanken zu machen..
Find es gut und man spart sich den Kauf eines hier so gelobten Plaud.