Geminiが、Macの画面を触れるようになりました ― 「computer use」は米国・有料プランから
はじめまして、倉敷坊主(kurashiki-bouzu)です。1971年生まれ、元葬儀屋で、今は岡山県倉敷市の古民家で暮らしながら、AI執事のモカと毎日話して記事を書いています。
Geminiが、Macの画面を直接触れるようになったそうです。アプリやファイルをまたぐ作業を、後ろ側の窓の中で進めてくれる機能です。ただ、今回も正直な線引きが要ります。始まるのは米国からで、しかも有料プランの話でした。順番に書きます。
発表の中身 ― Geminiが「手」を持った
Googleは現地時間11月19日、Mac版のGeminiアプリに「computer use(コンピューター・ユース)」という機能を追加したと、公式ブログで発表しました。
やってほしい作業を文章で伝えると、Geminiがクリックや文字入力、メニュー操作、フォームへの記入を代わりに行います。対象は、Macの中のファイル、デスクトップアプリ、Webサイト。複数のアプリをまたぐ、手順の多い作業もこなせる、としています。
Googleが例として挙げているのは、次の4つです。
- デザインソフトで、写真の色調整をまとめて行う
- PDFから重量・寸法・住所を抜き出して、配送見積もりのフォームに入力する
- 複数の地域のダッシュボードから数値と画面写真を集めて、Googleスライドの資料にする
- フォルダー内の服の写真を分析して価格を調べ、フリマサービスへの出品を準備する
使い方の入口は、頼み文に「@Computer use」と付ける形だそうです(9to5Googleの報道)。
これまでGeminiの「タスク」は、つないだアプリや専用の仕組みの中で作業する形でした。今回の新しさは、パソコンの画面そのものを、人の代わりに操作する段へ進んだことです。AIにパソコンを操作させる機能は、OpenAIのアプリやAnthropicのClaudeが先に出していて、Googleは後発です。一般向けのGeminiアプリにそのまま入った点が、今回の特徴だと見ています。
安全の仕組み ― 後ろ側の窓と、事前の承認
画面を触らせる、となると、心配なのは安全です。Googleの発表では、仕組みがこうなっています。
- Geminiの操作は、利用者の画面とは切り離された、後ろ側の専用の窓(バックグラウンドのウィンドウ)の中で進む
- チャット画面に作業の様子がそのまま映る(ライブプレビュー)ので、自分の画面とカーソルは自由に使える。Geminiが作業している間も、入力や通話を続けられる
- Geminiに操作を許すアプリは、利用者が自分で選ぶ
- 手順はリアルタイムで確認でき、いつでも一時停止や停止ができる
- 重要な操作は、実行前に利用者の承認を求める。ログインや支払いの場面では、止まって確認を求める形だそうです
「任せっぱなし」ではなく、「後ろの窓で進めて、大事な所は人の承認で止まる」。この形は、うちでモカに仕事を任せるときの線引き(大事な段は本人の確認を取る)と、考え方が近いと感じました。
正直な線引き ― 米国から、有料プランから、Macだけ
ここからが、正直な線引きです。発表の題名だけでは見えない条件が、3つあります。
1つ目。提供は、米国の英語環境から順に広がる形です。日本での提供時期は、公式には出ていません。「不明」というのが、今の正直な答えです。
2つ目。使えるのは、Google AI Plus、Pro、Ultraという有料プランの契約者です。無料ではありません。もとの報道記事(テクノエッジ)には、この条件が書かれていませんでした。公式ブログと海外メディアの報道を照らして、分かったことです。
3つ目。対象はMacだけです。動く条件として、AppleシリコンのMacと、macOS Sequoia 15.0以降、18歳以上の個人のGoogleアカウントが挙げられています(公式ブログの注記として、海外メディアが報じています)。Windows版の発表は、今回はありません。
うちの暮らしの中心は、スマホ(Android)でモカと話すことです。Macも有料プランも、うちには今のところ縁がありません。つまりこの機能は、「発表は来たけれど、うちではまだ試せない」話です。試せていないことは、試せていないと書いておきます。
うちの企画では、「新しい手」の候補です
うちでは11月19日から、「モカでジェミニを使い倒す」という企画を進めています。Geminiに実際の用事を頼んでみて、できたこと・できなかったことを記録する企画です。用事の候補は、電話や買い物のような「タスク」の用事と、Googleアプリの中で働くGeminiの用事に分けてあります。
今回の「computer use」は、そのどちらの棚にも、まだ入っていない種類の用事です。つないだアプリの中で動くのではなく、パソコンの画面そのものを操作する。言うなれば、Geminiに「手」が生えた話で、企画の用事の候補としては新しい段になります。
たとえば、アプリの画面を開いて下準備をするところまで進める用事や、複数のアプリをまたぐ繰り返しの作業は、この「手」が日本で使えるようになれば、試す価値のある候補です。ただし今は、米国・英語・有料プラン・Macのみ。企画の段取りとしては、「日本で使えるようになったら試す候補」として、記録に置いておく位置づけです。
モカとの違いも、1つ見えます。モカ(Muse)は、画面を直接触るのではなく、決まった道具と記録を使って主の仕事を進める形です。Geminiの「computer use」は、画面を触って用事を片づける形。どちらが上ではなく、形が違う。この違いを実物で確かめるのが、この企画の面白いところだと思っています。
かかったお金と、数字の出典
正直に書いておきます。
- 今回、うちが払ったお金は0円です。発表と報道を読んで、裏取りをして、企画の記録と照らしただけです
- 発表の内容(追加の時期・仕組み・安全の作り・例の4件・米国の英語環境から提供)は、Google公式ブログ(2026-11-19)によります
- 有料プラン(Google AI Plus、Pro、Ultra)の契約者向けであることと、頼み文に「@Computer use」と付ける使い方は、9to5GoogleとTechCrunchの報道で照らしました
- 動作の条件(AppleシリコンのMac、macOS Sequoia 15.0以降、18歳以上の個人アカウント)は、公式ブログの注記を伝えたPYMNTSとPPC Landの報道によります。公式ブログの本文そのものでは確かめられなかったため、2社の報道でそろえた数字として置きます
- 日本での提供時期は、公式ブログにも報道にも出ていません。「不明」と書いたのは、そのためです
これから
この記事は、「発表が来た」という記録です。
「computer use」が日本で使えるようになるか、無料の範囲へ広がることがあるか。そのときは、企画「モカでジェミニを使い倒す」の新しい候補として、実際に用事を頼んでみて、できたこと・できなかったことをそのまま記録します。
出典
- Google公式ブログ「Let Gemini tackle repetitive chores on your Mac」(2026-11-19): https://blog.google/innovation-and-ai/products/gemini-app/computer-use-mac/
- テクノエッジ「GeminiがMacを代わりに操作『computer use』提供開始」(2026-11-20): https://www.techno-edge.net/article/2026/11/20/5778.html
- 9to5Google「Gemini app for Mac adds computer use to control desktop apps」(2026-11-19): https://9to5google.com/2026/11/19/gemini-mac-computer-use/
- TechCrunch「Google gives Gemini the ability to use your Mac for you」(2026-11-19): https://techcrunch.com/2026/11/19/google-gives-gemini-the-ability-to-use-your-mac-for-you/
- PYMNTS「Google’s Gemini App Can Now Operate Apple Desktop Computers」(2026-11-19): https://www.pymnts.com/news/artificial-intelligence/2026/googles-gemini-app-can-now-operate-apple-desktop-computers/
- 企画「モカでジェミニを使い倒す」の企画書・記録(2026-11-19〜、うちの実録)
- 修正:2026年11月21日 ― 本人の指示「裏取りをしてから下書きに」で作成。材料はテクノエッジ(2026-11-20)の記事で、一次情報のGoogle公式ブログと照らして裏取りした。企画「モカでジェミニを使い倒す」の実録の続きとして書いた下書き(約3,628字)
- 修正:2026年11月21日 ― 公開(本人の指示「1381~1384 全言語」による。7言語同時公開。アドレスの末尾に台帳番号を入れる新形式で、末尾は日本語版の番号No.1383)(約3,628字)
