2026 年 11 月 19 日,谷歌在官方博客发布了一项直接切入苹果腹地的更新:macOS 原生 Gemini 应用正式引入 Computer use(电脑操作) 能力。用户在对话框内输入 @Computer use,就能让 Gemini 跨越本地文件、桌面软件与浏览器,自动完成点击、输入、整理看板数据拼装 Google Slides 演示文稿、提取本地 PDF 填写多栏位物流表单以及批量调色修图等繁琐工序。
几乎就在同一天,MacRumors 与 9to5Mac 转引彭博社消息及苹果公开的工程招聘启事披露,苹果正在自研能够自主操控设备、跨应用协作并编写调试代码的通用 AI Agent。把日历再往前翻三天,2026 年 11 月 16 日推送的 macOS 27.3 与 iOS 27.3 Beta 2,一边将原生 Siri 的视野扩展到了 Safari 完整网页,一边把第三方应用索要完全磁盘访问(Full Disk Access)与跨应用控制权限的门槛大幅抬高。
三条动态在 2026 年 11 月中下旬交汇,勾勒出桌面端 AI 智能体竞争的真实格局:谷歌抢先交出了可运行的跨应用桌面产品,苹果则先用操作系统守门人的身份重画权限边界,再为自家原生智能体争取研发时间。

谷歌的切入方式:后台隔离窗口与人工确认锁
桌面级 Computer use 并非首次出现,早期方案之所以难以进入日常办公,核心痛点在于“抢占鼠标与屏幕”——AI 只要开始点按网页和表单,用户就只能干坐着盯屏,既无法处理邮件,也不敢切去开会。
根据谷歌产品负责人 Michael Friedman 在 2026 年 11 月 19 日官方博客及 TechCrunch、9to5Google 的同步报道,Mac 版 Gemini 给出的工程解法是后台隔离窗口(isolated background window)。用户下达指令后,Gemini 在独立后台窗口内执行点击、切页与数据搬运,聊天界面则嵌入一块实时预览画面。整个过程中,用户的前台屏幕、键盘与光标保持完全自由,可以照常打字或接入语音通话。
在安全与准入门槛上,谷歌此次也划出了清晰边界:
- 应用白名单与关键动作审批:用户自行勾选允许 Gemini 访问哪些本地软件;一旦涉及账号登录、付款或敏感表单提交,系统会强制停下等待人工确认,用户也可随时一键暂停或中止。
- 硬件与订阅限制:首批功能仅面向美国地区年满 18 周岁的英语个人 Google 账号开放,用户需订阅 Google AI Plus、Pro 或 Ultra 方案,且设备必须为运行 macOS Sequoia 15.0 及以上系统的 Apple Silicon Mac。
这意味着谷歌并不是在做一个脱离监管的“黑盒代打”,而是试图在苹果生态内率先跑通“低打扰、可回滚”的跨软件自动化习惯。

苹果的两手棋:先收紧第三方权限,再补原生 Agent
面对谷歌、OpenAI、Anthropic 等外部玩家纷纷通过屏幕识别和模拟点击接管 Mac 桌面,苹果在 2026 年 11 月 16 日推送的 macOS 27.3 Beta 2 中率先亮出了系统级防线。
据 MacRumors 拆解,苹果针对自主 AI 智能体和自动化工具重构了底层授权框架:
- 拆分控制权限:原有的“设备控制与数据访问”开关被一分为二,拆成 System & App Protection Override(系统与应用保护覆盖) 和 Accessibility(辅助功能) 两项独立分类,不再允许 AI 工具借辅助功能通道“搭便车”接管其他软件。
- 重塑完全磁盘访问(Full Disk Access):当第三方 AI 客户端申请全盘权限时,系统会弹出更直白的风险警告,明确提示对方可能读取、修改、删除或导出用户全部文件、隐藏照片与浏览历史,并默认引导用户改为按指定文件夹或特定应用授权,同时提供“每次询问(Ask Every Time)”选项。
- 菜单栏常驻透明提示:只要有第三方应用正在跨软件执行操控,Mac 顶部菜单栏就会亮起实时指示器,杜绝后台静默接管。
收紧外部通道的同时,苹果在同日推送的 iOS 27.3 / macOS 27.3 Beta 2 中扩大了自家 Siri AI 的原生特权。据 9to5Mac 实测,Siri 现已支持读取 Safari 完整网页内容——不再局限于当前屏幕可见区域,即便长攻略或长菜单尚未滚动到底部,Siri 也能直接通读全文、总结要点或筛选特定条目。苹果还向开发者开放了基于 Markdown 的指令工具与接口,鼓励第三方软件以结构化方式对接 Siri,而非索要高危磁盘权限。
而在更远期的产品线上,苹果 2026 年 11 月公开的“Agentic AI”工程负责人招聘启事显示,苹果正依托 Siri、UI 框架及 Apple Foundation Models 团队,自研一套能够跨浏览器、命令行(CLI)、API、代码库与多款软件自主规划任务,并调度多个子智能体协作的系统。需要指出的是,据彭博社与 MacRumors 报道,该项目仍处早期研发阶段,苹果内部虽曾探讨最早于 2027 年底推出的可能性,但官方尚未确认任何发布时间表。

谁掌握桌面入口:GUI 模拟与系统级通道的长期博弈
把 2026 年 11 月 16 日到 19 日的这组动作拼在一起看,桌面 AI Agent 的竞争已经从“模型会不会看图点按钮”转向“谁拥有更低摩擦的系统通道”。
谷歌的优势在于节奏快、跨平台生态齐备,且直接切中了“从看板抓图做 Slides”“读 PDF 填表”这类跨软件数据搬运痛点。但只要外部应用运行在 macOS 之上,就绕不开苹果对系统权限的重新定义——当 macOS 27.3 正式版落地后,更频繁的文件夹沙盒询问、更醒目的系统保护覆盖警告以及菜单栏提示,必然会增加第三方 GUI 智能体的使用摩擦。
反过来,苹果虽然握有操作系统守门人的天然优势,可以把 Safari 完整网页上下文和原生系统接口直接喂给 Siri,但在通用自主执行与写码调试能力上,苹果自研 Agent 的传闻时间点指向 2027 年底,与谷歌已开始向美区付费用户推送的 @Computer use 之间存在明显的时间差。对于桌面端用户和企业 IT 团队而言,2026 年底至 2027 年的真实选择不是非此即彼:在需要跨软件自动化搬运数据时,需严格核查每个智能体的文件夹授权范围与敏感动作二次确认开关;而在涉及本地敏感文档与核心代码仓时,系统级最小权限原则依然是不可退让的底线。
知识延伸
- Computer use(电脑操作模式):指多模态大模型通过截屏识别界面元素(或结合无障碍树),自主生成鼠标点击、键盘输入与窗口切换指令,从而在没有官方 API 的前提下操作传统图形界面软件的技术路线。
- Full Disk Access(完全磁盘访问):macOS 中保护邮件、信息、Safari 浏览记录及用户核心目录的隐私机制(TCC 框架的一部分)。此前许多自动化脚本与 AI 客户端会直接要求开启全局权限,一旦发生提示词注入或工具漏洞,风险波及整块硬盘。
- 最小权限沙盒趋势:随着 AI Agent 从问答走向执行,主流操作系统正逐步把“全局开关”改写为“单文件夹授权 + 单次确认 + 状态栏可见提示”,以在自动化效率与本地数据安全之间重建平衡。
声明:本文由「津滨AI」借助 AI 辅助检索与起草,并经人工逐条核对 Google 官方博客、MacRumors、9to5Mac、TechCrunch 与 9to5Google 公开报道审校;文中概念插画与信息图表均由 AI 辅助生成或基于公开披露数据自制(非实拍、未登录产品实测),仅供参考,不构成任何采购或投资建议。
参考资料
- Michael Friedman / Google Official Blog (2026-11-19):Let Gemini tackle repetitive chores on your Mac
- TechCrunch (2026-11-19):Google gives Gemini the ability to use your Mac for you
- 9to5Google (2026-11-19):Gemini on Mac adds ‘Computer use’ to handle multi-step tasks across apps
- MacRumors (2026-11-19):Apple Developing Autonomous AI Agent to Control Devices and Write Code
- 9to5Mac (2026-11-19):Report: Apple job listings detail plans for autonomous AI agents
- MacRumors (2026-11-16):macOS 27.3 Beta 2 Overhauls Full Disk Access and Device Control Permissions
- 9to5Mac (2026-11-16):Everything new in iOS 27.3 Beta 2 so far