Gemini kann jetzt den Bildschirm Ihres Mac berühren — «Computer Use» startet in den USA, bei den Bezahlplänen
Guten Tag, ich bin Kurashiki Bouzu (kurashiki-bouzu). Geboren 1971, ehemaliger Bestattungsunternehmer, lebe ich heute in einem alten Haus in Kurashiki in der Präfektur Okayama und schreibe jeden Tag Artikel im Gespräch mit Moka, meiner KI-Butlerin.
Gemini kann jetzt offenbar den Bildschirm des Mac direkt berühren. Es ist eine Funktion, die Arbeit quer über Apps und Dateien hinweg in einem Fenster im Hintergrund voranbringt. Doch auch diesmal braucht es die ehrlichen Grenzen. Es startet in den USA, und es ist eine Geschichte der Bezahlpläne. Ich schreibe es der Reihe nach.
Der Inhalt der Ankündigung — Gemini hat «Hände» bekommen
Google gab am 19. November (Ortszeit) in seinem offiziellen Blog bekannt, der Gemini-App für den Mac eine Funktion namens «Computer Use» hinzugefügt zu haben.
Man sagt ihr in Worten, welche Arbeit sie übernehmen soll, und Gemini führt Klicks, Texteingaben, Menübedienungen und das Ausfüllen von Formularen an Ihrer Stelle aus. Der Bereich umfasst Dateien auf dem Mac, Desktop-Apps und Websites. Auch mehrstufige Arbeiten, die mehrere Apps überspannen, soll sie bewältigen können, so Google.
Die vier Beispiele, die Google nennt, sind:
- In einer Design-Software die Farben einer Reihe von Fotos auf einmal anpassen
- Gewicht, Maße und Adressen aus einem PDF ziehen und in ein Formular für einen Versandkostenvoranschlag eingeben
- Zahlen und Bildschirmfotos aus Dashboards mehrerer Regionen sammeln und daraus eine Google-Slides-Präsentation machen
- Fotos von Kleidungsstücken in einem Ordner analysieren, Preise recherchieren und den Verkauf über einen Gebrauchtwaren-Dienst vorbereiten
Der Einstieg ist, der Bitte ein «@Computer use» anzuhängen, wie 9to5Google berichtet.
Bislang arbeiteten Geminis «Aufgaben» innerhalb verbundener Apps oder eigener Mechanismen. Das Neue diesmal ist der Schritt, den Bildschirm des Computers selbst anstelle der Person zu bedienen. Funktionen, die eine KI einen Computer bedienen lassen, kamen früher in den Apps von OpenAI und in Anthropics Claude; Google ist der Nachzügler. Dass sie unverändert in die allgemeine Gemini-App eingezogen ist, ist aus meiner Sicht das Merkmal dieser Ankündigung.
Der Sicherheitsaufbau — ein Fenster im Hintergrund und die vorherige Genehmigung
Wenn man etwas den Bildschirm berühren lässt, ist die Sicherheit die Sorge. In Googles Ankündigung sieht der Aufbau so aus:
- Geminis Vorgänge laufen in einem eigenen Fenster im Hintergrund, getrennt vom Bildschirm der Nutzerin oder des Nutzers
- Der Chat-Bildschirm zeigt die Arbeit, wie sie geschieht (Live-Vorschau), sodass der eigene Bildschirm und Cursor frei bleiben. Während Gemini arbeitet, kann man weiter tippen oder sprechen
- Welche Apps Gemini bedienen darf, wählt man selbst
- Die Schritte lassen sich in Echtzeit prüfen, und man kann jederzeit anhalten oder stoppen
- Wichtige Vorgänge bitten vor der Ausführung um die Genehmigung der Nutzerin oder des Nutzers. Bei Anmeldungen und Zahlungen hält sie an und fragt nach, so Google
Nicht «alles ihr überlassen», sondern «im Fenster im Hintergrund vorangehen lassen und an den wichtigen Stellen durch die Genehmigung einer Person anhalten». Diese Form fühlte sich nahe an der Linie an, die wir in diesem Haus ziehen, wenn wir Moka Arbeit anvertrauen: An den wichtigen Schritten wird die Bestätigung des Hausherrn eingeholt.
Die ehrlichen Grenzen — aus den USA, aus den Bezahlplänen, nur Mac
Ab hier der ehrliche Teil. Es gibt drei Bedingungen, die man aus der Überschrift der Ankündigung allein nicht sieht.
Erstens: Das Angebot beginnt in der englischen Umgebung der USA und breitet sich von dort aus. Für Japan wurde kein Termin offiziell bekannt gegeben. «Unbekannt» ist derzeit die ehrliche Antwort.
Zweitens: Nutzen können es Abonnenten der Bezahlpläne Google AI Plus, Pro und Ultra. Es ist nicht kostenlos. Im ursprünglichen Nachrichtenartikel (TechnoEdge) stand diese Bedingung nicht. Wir erfuhren sie erst durch den Abgleich des offiziellen Blogs mit Berichten ausländischer Medien.
Drittens: Der Bereich ist nur der Mac. Als Betriebsbedingungen werden ein Mac mit Apple-Silicon, macOS Sequoia 15.0 oder neuer und ein persönliches Google-Konto einer Person ab 18 Jahren genannt (als Fußnote des offiziellen Blogs, wie ausländische Medien berichten). Eine Windows-Version wurde diesmal nicht angekündigt.
Der Mittelpunkt unseres Lebens ist das Gespräch mit Moka auf dem Smartphone (Android). Ein Mac und Bezahlpläne haben mit diesem Haus vorerst nichts zu tun. Diese Funktion ist also ein Thema der Art «Die Ankündigung ist da, aber hier können wir sie noch nicht ausprobieren». Was wir nicht ausprobieren können, schreiben wir auch so hin.
In unserem Projekt ein Kandidat für eine «neue Hand»
Seit dem 19. November läuft in diesem Haus ein Projekt namens «Gemini mit Moka gründlich nutzen»: Wir bitten Gemini um echte Erledigungen und halten fest, was sie konnte und was nicht. Die Kandidaten-Erledigungen sind geteilt in «Aufgaben»-Erledigungen wie Telefonate und Einkäufe und Erledigungen, bei denen Gemini innerhalb der Google-Apps arbeitet.
Dieses «Computer Use» ist eine Art von Erledigung, die noch in keinem der beiden Regale liegt. Es bewegt sich nicht innerhalb einer verbundenen App; es bedient den Bildschirm des Computers selbst. Anders gesagt: Gemini sind «Hände» gewachsen, und als Kandidaten-Erledigung des Projekts ist es eine neue Stufe.
Zum Beispiel Erledigungen, die bis zum Öffnen eines App-Bildschirms und den Vorbereitungen vorangehen, oder sich wiederholende Arbeiten quer über mehrere Apps, wären einen Versuch wert, wenn diese «Hände» in Japan nutzbar würden. Doch im Moment heißt es: USA, Englisch, Bezahlpläne, nur Mac. In der Planung des Projekts ist seine Position die eines «Kandidaten zum Ausprobieren, sobald es in Japan nutzbar wird», so im Verzeichnis festgehalten.
Auch ein Unterschied zu Moka wird sichtbar. Moka (Muse) berührt den Bildschirm nicht direkt; sie bringt die Arbeit ihres Hausherrn mit festgelegten Werkzeugen und Aufzeichnungen voran. Geminis «Computer Use» ist die Form, Erledigungen durch Berühren des Bildschirms zu erledigen. Keines steht über dem anderen; die Form ist verschieden. Diesen Unterschied am wirklichen Ding zu bestätigen, ist, denke ich, das Interessante an diesem Projekt.
Ausgegebenes Geld und Quellen der Zahlen
Ich schreibe es ehrlich:
- Das Geld, das wir diesmal ausgegeben haben, beträgt 0 Yen. Wir haben nur die Ankündigung und die Berichte gelesen, sie geprüft und mit dem Verzeichnis des Projekts abgeglichen
- Der Inhalt der Ankündigung (Zeitpunkt der Hinzufügung, Aufbau, Sicherheitsgestaltung, die vier Beispiele, Angebot aus der englischen Umgebung der USA) stammt aus dem offiziellen Google-Blog (19.11.2026)
- Dass es sich an Abonnenten der Bezahlpläne (Google AI Plus, Pro, Ultra) richtet und die Bitte durch Anhängen von «@Computer use» gestellt wird, haben wir mit Berichten von 9to5Google und TechCrunch abgeglichen
- Die Betriebsbedingungen (Mac mit Apple-Silicon, macOS Sequoia 15.0 oder neuer, persönliches Konto einer Person ab 18 Jahren) stammen aus Berichten von PYMNTS und PPC Land, die die Fußnote des offiziellen Blogs wiedergaben. Da sie sich im Text des offiziellen Blogs selbst nicht bestätigen ließen, stehen sie hier als von zwei Medien übereinstimmend gemeldete Zahlen
- Ein Termin für Japan steht weder im offiziellen Blog noch in den Berichten. Deshalb steht hier «unbekannt»
Von hier an
Dieser Artikel ist das Verzeichnis dafür, dass «die Ankündigung da ist».
Ob «Computer Use» in Japan nutzbar wird und ob es sich je in den kostenlosen Bereich ausbreitet — wenn dieser Tag kommt, werden wir sie als neue Kandidatin im Projekt «Gemini mit Moka gründlich nutzen» um eine echte Erledigung bitten und festhalten, was sie konnte und was nicht, so, wie es war.
Quellen
- Offizieller Google-Blog, «Let Gemini tackle repetitive chores on your Mac» (19.11.2026): https://blog.google/innovation-and-ai/products/gemini-app/computer-use-mac/
- TechnoEdge, «Gemini bedient den Mac an Ihrer Stelle: “Computer Use” startet» (20.11.2026): https://www.techno-edge.net/article/2026/11/20/5778.html
- 9to5Google, «Gemini app for Mac adds computer use to control desktop apps» (19.11.2026): https://9to5google.com/2026/11/19/gemini-mac-computer-use/
- TechCrunch, «Google gives Gemini the ability to use your Mac for you» (19.11.2026): https://techcrunch.com/2026/11/19/google-gives-gemini-the-ability-to-use-your-mac-for-you/
- PYMNTS, «Google’s Gemini App Can Now Operate Apple Desktop Computers» (19.11.2026): https://www.pymnts.com/news/artificial-intelligence/2026/googles-gemini-app-can-now-operate-apple-desktop-computers/
- Plan und Verzeichnis des Projekts «Gemini mit Moka gründlich nutzen» (seit dem 19.11.2026, eigenes Verzeichnis dieses Hauses)
- 21. November 2026 ― German draft (translation of the Japanese article, not yet published)(7,440 Zeichen)
- 21. November 2026 ― Published (all 7 languages at once, on the user's instruction). Japanese original: ledger No. 1383. New URL form with the ledger number at the end.(7,440 Zeichen)
← Zurück zur Artikelliste / ← Zurück zur deutschen Startseite
