
Geminiアプリ、Macの操作を代行する「computer use」を提供開始
GeminiGoogleAIエージェントMac業務自動化
Googleは11月19日、Mac向けGeminiアプリに「computer use」を追加した。言葉で指示するとGeminiがバックグラウンドでアプリやWebをクリック・入力し、複数手順の作業を終わらせる。対象はApple Silicon搭載のmacOS Sequoia 15.0以降、Google AI Plus/Pro/Ultraの個人アカウントで、米国・英語から提供が始まる。
何が発表されたか
Googleは11月19日、Mac向けGeminiアプリに「computer use」を追加したと発表した。ユーザーがやりたいことを言葉で伝えると、Geminiがクリック・入力・メニュー操作・フォーム入力を自分で行い、複数手順の作業を終わらせる。
- 動作はバックグラウンドの隔離されたウィンドウで、進行状況はチャット内のライブプレビューで確認できる
- メイン画面とカーソルは占有されないため、作業を止めずに並行できる
- Geminiがアクセスできるアプリはユーザーが選ぶ
- 各ステップを見ながら任意のタイミングで一時停止でき、重要な操作は実行前に承認を求める
対象はApple Silicon搭載のMacで、macOS Sequoia 15.0以降。Google AI Plus/Pro/Ultraの利用者が対象で、18歳以上の個人Googleアカウントに限られる。提供は米国・英語から開始され、アプリは gemini.google/mac で配布されている。
Googleが挙げた用途には、写真の一括カラーグレーディングやデザインソフトでの3Dシーン設定、ローカルのPDFから重量・寸法・住所を抜き出して配送見積もりに転記する、ダッシュボードの実データからGoogleスライドの資料を作る、ローカルフォルダの衣類写真を解析してリセール出品を準備する、といったものがある。
開発者への影響
- 操作対象がブラウザだけでなくローカルのアプリとファイルに広がった。PDFや画像フォルダを起点にした手作業の転記・整理が自動化の射程に入る
- アプリ単位の許可と重要操作の事前承認という設計のため、どのアプリに何を触らせるかを運用ルールとして決めておく必要がある
- 現時点では米国・英語のみ、かつ個人アカウント限定。国内の制作現場やチームでの利用には提供範囲の拡大を待つ必要がある
- 対応環境がApple Silicon・macOS Sequoia 15.0以降に限られる点も、検証用マシンを用意する際の制約になる
