Gemini app 推出 Mac 電腦操作功能,先開放美國英文使用者

Google 11 月 19 日宣布 Gemini app for Mac 新增 Computer Use,可在背景視窗操作應用程式、檔案與網站,目前限美國、英文與付費訂閱者。

重點

  • Google 在 11 月 19 日宣布 Gemini app for Mac 支援電腦操作(Computer Use),可點擊、輸入、操作選單與填表。
  • 任務在獨立背景視窗執行,聊天中有即時預覽,使用者的主畫面與游標不受影響。
  • 需要 Apple Silicon Mac、macOS Sequoia 15.0 以上,開放 Google AI Plus、Pro、Ultra 的個人帳號(18 歲以上)。
  • 目前僅在美國、英文推出,Google 尚未公布台灣或其他地區的時程。
目錄(5 節)
  1. 發生什麼事
  2. 能用的條件
  3. 安全控制與範例
  4. 背景
  5. 對你的影響

發生什麼事

Google 在 11 月 19 日(週四)於官方部落格宣布,Gemini app for Mac 新增電腦操作功能。使用者用自然語言描述想做的流程,Gemini 就能跨本機檔案、桌面應用程式與網站,替使用者點擊、輸入文字、切換選單並填寫表單,完成多步驟任務。

Google 的做法是讓 Gemini 在一個獨立的背景視窗裡執行,聊天介面會顯示即時預覽,所以使用者的主畫面與游標仍可自由使用,可以一邊讓它跑、一邊繼續工作。

Gemini app 為 Mac 推出電腦操作功能,目前僅限美國英文。

能用的條件

  • 硬體與系統:Apple Silicon Mac,macOS Sequoia 15.0 或更新版本。
  • 帳號:年滿 18 歲的個人 Google 帳號,且訂閱 Google AI Plus、Pro 或 Ultra。
  • 地區與語言:目前只在美國以英文推出。iThome 指出,台灣與其他地區的時程尚未公布。
  • 取得方式:從 gemini.google/mac 下載 app。

安全控制與範例

Google 列出的控制方式有三項:使用者自行指定 Gemini 可以存取哪些應用程式、可以逐步觀看並隨時暫停、重要操作需要使用者先核准。

Google 舉的例子包括批次調整照片色調、從本機 PDF 擷取重量與地址來填運費報價單、把儀表板的數據整理進 Google Slides 簡報,以及分析資料夾裡的服飾照片後備好二手拍賣的商品清單。這些是 Google 的示範情境,文章沒有提供成功率或限制的數據。

背景

iThome 的報導把這件事放在「跟進」的脈絡:據該報導,OpenAI 的 ChatGPT Work、Anthropic 的 Claude Cowork 與 Meta Muse 都已支援操作 Mac 應用程式與網站,微軟則透過 Copilot Studio 提供 Windows 的電腦操作。電腦操作類的 agent 因此成為各家都在做的方向。

對你的影響

  • 台灣使用者目前無法直接用,除非帳號與語言條件都符合美國版的限制;是否開放要等 Google 之後公布。
  • 這類功能會讓 AI 看到並操作你螢幕上的內容。若要試用,建議只授權必要的應用程式,並避開網路銀行、客戶資料、含金鑰的終端機等敏感視窗,同時留意「重要操作需核准」的提示要實際看過再按。
  • 團隊若有公司規範,需要先確認是否允許員工讓 AI 代理操作公司電腦。