Werbung



News

Gemini bringt neue Sprachsteuerung auf den Mac und verlässt das Chatfenster

Gemini Intelligence Android

Werbung



Google erweitert seine Gemini-App für macOS um einen Sprachmodus, der gesprochene Anfragen direkt in fertigen Text verwandelt, ohne dass Ihr die aktuelle App verlassen müsst. Die Funktion kombiniert Diktat, Textbearbeitung und Bildschirmkontext in einem einheitlichen Workflow.

Sprachbasiertes Arbeiten direkt im aktiven Fenster

Im Standardmodus als intelligentes Diktat transkribiert Gemini gesprochene Sprache an der aktuellen Cursor-Position und entfernt dabei automatisch Füllwörter wie „äh“ oder „hm“. Google zufolge entsteht so direkt an der Stelle, an der Ihr ohnehin arbeitet, ein geglätteter Text, ohne dass Ihr diesen im Nachhinein manuell bereinigen müsst.

Aktiviert wird die Sprachsteuerung systemweit über die Funktionstaste (Fn). Haltet Ihr diese gedrückt, könnt Ihr Gemini aus jedem beliebigen Desktop-Fenster heraus aufrufen. Ein separates Chatfenster oder das Kopieren von Texten zwischen verschiedenen Apps entfällt damit.

Die neue Funktion baut auf der nativen Gemini-App für Mac auf, die Google im April 2026 veröffentlicht hat. Schon damals brachte die App eine Tastenkombination zum Öffnen des Assistenten sowie Berechtigungsabfragen für die Analyse von Bildschirminhalten mit. Der Sprachmodus führt diesen Ansatz fort, indem Ihr jetzt sprechen könnt, während Ihr in der gerade genutzten App bleibt.

Bildschirmbewusstsein und Bearbeitungsfunktionen

Neben dem reinen Diktat bietet Gemini eine optionale „screen-aware“-Funktion. Ist diese aktiviert, kann der Assistent den sichtbaren Bildschirminhalt berücksichtigen, bevor komplexere Aufgaben ausgeführt werden. Google nennt als Beispiel, dass Gemini markierte Notizen in eine Executive Summary umwandeln und den überarbeiteten Text direkt in das Dokument einfügen kann.

Damit erweitert Google bekannte macOS-Funktionen. Apples eigene Diktierfunktion wandelt Sprache bereits systemweit in Text um, während Apple Intelligence Writing Tools ausgewählte Texte in unterstützten Apps korrigieren, umformulieren oder zusammenfassen können. Gemini unterscheidet sich vor allem dadurch, dass Diktat, Bearbeitung und Bildschirmkontext über eine einzige Sprachabkürzung zusammengeführt werden.

Die screen-aware-Funktion ähnelt dem von Siri AI bekannten Onscreen-Bewusstsein, bei dem Apples Assistent sichtbare Inhalte versteht und diesen Kontext für Antworten und Aktionen nutzt. Während Siri AI darauf ausgelegt ist, Bildschirminhalte mit persönlichen Daten und App-Aktionen zu verknüpfen, konzentriert sich Gemini auf das Umschreiben und Einfügen von Text im jeweils aktiven Fenster.

Datenschutzfragen und Rollout

Mit der Auswertung des Bildschirminhalts stellt sich die Frage nach Datenschutz und Kompatibilität. Google betont, dass die Bildschirmaufmerksamkeit optional ist und Ihr selbst entscheidet, ob Gemini auf die angezeigten Informationen zugreifen darf. Gleichzeitig bleibt offen, welche macOS-Berechtigungen dafür genau erforderlich sind, wie Google die Inhalte verarbeitet und ob die Funktion in allen Apps und Textfeldern funktioniert.

Die offenen Punkte sind relevant, weil ein screen-aware-Assistent auf deutlich mehr Informationen zugreift als eine herkömmliche Diktierfunktion. Die Nützlichkeit von Gemini hängt von zuverlässiger Spracherkennung, einer korrekten Erkennung des aktiven Fensters und transparenten Kontrollmöglichkeiten darüber ab, welche Inhalte analysiert werden dürfen.

Die Erweiterung erscheint zudem in einer Phase, in der Google enger mit Apples eigenen KI-Plänen verflochten ist. Das kommende, kontextbewusste Siri-Upgrade wird auf Technologie basieren, die auf Gemini zurückgeht. Gleichzeitig bleibt Googles Mac-App ein separates Produkt, das direkt um Aufgaben rund ums Schreiben und Desktop-Assistenz konkurriert.

Google begleitet den Start mit zwei Promotion-Videos, von denen eines offenbar eine KI-erzeugte Sprecherstimme inklusive Sprechblasen-Overlay nutzt. Die neue Sprachfunktion wird weltweit zunächst auf Englisch für Nutzer:innen der Gemini-App unter macOS ausgerollt. Weitere Sprachen sind für später im Jahr 2026 geplant, ohne dass Google einen genaueren Zeitplan nennt.

Hinweis: Dieser Beitrag ist eine automatisch erstellte Zusammenfassung mithilfe von Künstlicher Intelligenz. Eine redaktionelle Prüfung fand nicht statt.

Via: appleinsider.com

Den Beitrag in unserem Forum kommentieren

Werbung



Ähnliche Artikel

Werbung



Einkaufstipps
Beliebte Artikel

Werbung