Kategorien: News

Gemini bringt neue Sprachsteuerung auf den Mac und verlässt das Chatfenster

Google erweitert seine Gemini-App für macOS um einen Sprachmodus, der gesprochene Anfragen direkt in fertigen Text verwandelt, ohne dass Ihr die aktuelle App verlassen müsst. Die Funktion kombiniert Diktat, Textbearbeitung und Bildschirmkontext in einem einheitlichen Workflow.

Sprachbasiertes Arbeiten direkt im aktiven Fenster

Im Standardmodus als intelligentes Diktat transkribiert Gemini gesprochene Sprache an der aktuellen Cursor-Position und entfernt dabei automatisch Füllwörter wie „äh“ oder „hm“. Google zufolge entsteht so direkt an der Stelle, an der Ihr ohnehin arbeitet, ein geglätteter Text, ohne dass Ihr diesen im Nachhinein manuell bereinigen müsst.

Aktiviert wird die Sprachsteuerung systemweit über die Funktionstaste (Fn). Haltet Ihr diese gedrückt, könnt Ihr Gemini aus jedem beliebigen Desktop-Fenster heraus aufrufen. Ein separates Chatfenster oder das Kopieren von Texten zwischen verschiedenen Apps entfällt damit.

Die neue Funktion baut auf der nativen Gemini-App für Mac auf, die Google im April 2026 veröffentlicht hat. Schon damals brachte die App eine Tastenkombination zum Öffnen des Assistenten sowie Berechtigungsabfragen für die Analyse von Bildschirminhalten mit. Der Sprachmodus führt diesen Ansatz fort, indem Ihr jetzt sprechen könnt, während Ihr in der gerade genutzten App bleibt.

Bildschirmbewusstsein und Bearbeitungsfunktionen

Neben dem reinen Diktat bietet Gemini eine optionale „screen-aware“-Funktion. Ist diese aktiviert, kann der Assistent den sichtbaren Bildschirminhalt berücksichtigen, bevor komplexere Aufgaben ausgeführt werden. Google nennt als Beispiel, dass Gemini markierte Notizen in eine Executive Summary umwandeln und den überarbeiteten Text direkt in das Dokument einfügen kann.

Damit erweitert Google bekannte macOS-Funktionen. Apples eigene Diktierfunktion wandelt Sprache bereits systemweit in Text um, während Apple Intelligence Writing Tools ausgewählte Texte in unterstützten Apps korrigieren, umformulieren oder zusammenfassen können. Gemini unterscheidet sich vor allem dadurch, dass Diktat, Bearbeitung und Bildschirmkontext über eine einzige Sprachabkürzung zusammengeführt werden.

Die screen-aware-Funktion ähnelt dem von Siri AI bekannten Onscreen-Bewusstsein, bei dem Apples Assistent sichtbare Inhalte versteht und diesen Kontext für Antworten und Aktionen nutzt. Während Siri AI darauf ausgelegt ist, Bildschirminhalte mit persönlichen Daten und App-Aktionen zu verknüpfen, konzentriert sich Gemini auf das Umschreiben und Einfügen von Text im jeweils aktiven Fenster.

Datenschutzfragen und Rollout

Mit der Auswertung des Bildschirminhalts stellt sich die Frage nach Datenschutz und Kompatibilität. Google betont, dass die Bildschirmaufmerksamkeit optional ist und Ihr selbst entscheidet, ob Gemini auf die angezeigten Informationen zugreifen darf. Gleichzeitig bleibt offen, welche macOS-Berechtigungen dafür genau erforderlich sind, wie Google die Inhalte verarbeitet und ob die Funktion in allen Apps und Textfeldern funktioniert.

Die offenen Punkte sind relevant, weil ein screen-aware-Assistent auf deutlich mehr Informationen zugreift als eine herkömmliche Diktierfunktion. Die Nützlichkeit von Gemini hängt von zuverlässiger Spracherkennung, einer korrekten Erkennung des aktiven Fensters und transparenten Kontrollmöglichkeiten darüber ab, welche Inhalte analysiert werden dürfen.

Die Erweiterung erscheint zudem in einer Phase, in der Google enger mit Apples eigenen KI-Plänen verflochten ist. Das kommende, kontextbewusste Siri-Upgrade wird auf Technologie basieren, die auf Gemini zurückgeht. Gleichzeitig bleibt Googles Mac-App ein separates Produkt, das direkt um Aufgaben rund ums Schreiben und Desktop-Assistenz konkurriert.

Google begleitet den Start mit zwei Promotion-Videos, von denen eines offenbar eine KI-erzeugte Sprecherstimme inklusive Sprechblasen-Overlay nutzt. Die neue Sprachfunktion wird weltweit zunächst auf Englisch für Nutzer:innen der Gemini-App unter macOS ausgerollt. Weitere Sprachen sind für später im Jahr 2026 geplant, ohne dass Google einen genaueren Zeitplan nennt.

Hinweis: Dieser Beitrag ist eine automatisch erstellte Zusammenfassung mithilfe von Künstlicher Intelligenz. Eine redaktionelle Prüfung fand nicht statt.

Via: appleinsider.com

Den Beitrag in unserem Forum kommentieren

Apfeltalk Redaktion

Neueste Artikel

Google Maps nutzt jetzt das gesamte iPhone Duo

Google hat Google Maps für die Displays des faltbaren iPhone Duo angepasst. Die App füllt nun sowohl den inneren als…

4. November 2026

iPhone 18: Gerüchte nennen größeren Akku und höheren Preis

Das Basismodell des iPhone 18 könnte teurer werden als sein Vorgänger. Einem Bericht zufolge soll Apple dafür unter anderem einen…

4. November 2026

iPhone Duo: Einhandbedienung in iOS 27.3 aktivieren

Die Beta von iOS 27.3 bringt die Bedienungshilfe „Einhandmodus“ auf das iPhone Duo. Damit rückt der Bildschirmbereich auf der gegenüberliegenden…

4. November 2026

Russland verlangt von Apple und Microsoft Kommunikationsdaten

Apple und Microsoft müssen in Russland Kommunikationsdaten ihrer Nutzer:innen drei Jahre lang speichern. Russische Behörden können die Herausgabe von Nachrichten,…

4. November 2026

iPad mini im Test: OLED-Display überzeugt, doch 120 Hertz fehlen

Das neue iPad mini bringt ein OLED-Display, ein dünneres Gehäuse und den A20 Pro. Erste Testberichte loben die Verbesserungen, sehen…

4. November 2026

Wasser über dem Mac verschüttet? Das solltet Ihr jetzt tun

Ein Flüssigkeitsschaden kann auch dann noch entstehen, wenn die Oberfläche längst trocken ist. Schaltet Euren Mac deshalb sofort aus und…

4. November 2026

Diese Website benutzt Cookies um Ihr Nutzererlebnis zu verbessern. Wenn Sie diese Website weiter nutzen, gehen wir von Ihrem Einverständnis aus.

Mehr lesen