在Mac上想要让Gemini应用真正操控鼠标和键盘,光安装软件远远不够——核心一步是完成系统授权。这本质上是macOS特有的安全机制,未获得许可之前,所有涉及窗口共享、自动化操作的请求都会被系统拒绝,界面只会显示一张空白截图,甚至直接报错“无权访问屏幕内容”。

开启辅助功能权限
首先打开系统设置:点击屏幕左上角的苹果图标,选择“系统设置”,在左侧边栏向下滚动到底部,进入“隐私与安全性”。继续向下翻,找到“辅助功能”,点击右侧的“详细信息…”按钮。
在弹出的权限列表中,找到并勾选 Gemini 应用。如果列表中没有Gemini的踪影,不必担心——先手动启动一次Gemini应用,哪怕启动后立刻退出,系统也会自动将它注册进这个白名单。
务必重启Gemini应用。 勾选权限后,不要急着进行下一步——直接关闭并重新打开Gemini,否则窗口共享功能依然无法正常工作。这一重启动作,是让权限真正生效的关键一步。
启用屏幕录制权限(重要补充)
这里容易踩坑:辅助功能权限仅能读取界面元素,而Gemini的窗口共享需要捕获完整的窗口像素流,这还依赖另一个独立权限——屏幕录制。
返回“系统设置 → 隐私与安全性”,这次点击“屏幕录制”,然后点击右侧的“详细信息…”,勾选 Gemini。
如果遗漏这一步,你大概率会遇到这种情况:选中窗口后,Gemini界面显示“正在加载”,但始终黑屏或卡在加载动画上,后台连错误提示都没有,白忙一场。
验证权限是否生效
权限设置完成后,如何确认它真的生效了?这里有三种验证方法,每种都能快速帮你做出判断。
方法一:打开Gemini,点击输入框旁边的“+”号,选择“共享窗口”。如果系统弹出授权窗口,标题为“Gemini 想录制你的屏幕”,说明屏幕录制权限尚未授予,需要返回上一步补充设置。
方法二:在Gemini对话框里输入一条指令试试,比如“帮我点击右上角通知中心图标”。如果Gemini回应“已执行点击”,并且你确实看到通知中心被展开,那就证明两项权限都已正确激活。
方法三:如果勾选权限后依然不弹窗,可以尝试命令行。在终端中执行以下命令,重置屏幕录制授权状态:tccutil reset ScreenCapture com.google.Gemini。这一招专门对付那些顽固的权限问题。
配置窗口共享并触发控制
权限就绪后,真正的操作才刚刚开始。第一步:在Gemini应用内点击输入框旁的“+”号,选择“共享窗口”。
第二步:从弹出的窗口列表中,选择你希望Gemini观察并操作的目标应用——可以是Safari、备忘录、Finder等常用软件。这里有个关键技巧:不要选择“桌面”或“全部窗口”。选择桌面或全屏会触发更严格的权限校验,而且响应速度也会变慢,体验大打折扣。
第三步:用自然语言下达指令,例如:“把当前网页里的标题复制到备忘录第一页”或者“点击邮箱左下角的写信按钮”。Gemini会根据所共享窗口的实时画面,理解UI元素并模拟鼠标点击与键盘输入。
还有一个提示需要留意:首次执行控制类指令时,系统可能会再次弹出确认框,标题为“Gemini 想控制你的电脑”。此时必须点击“好”,否则所有鼠标和键盘操作都会被系统静默拦截,后续指令都将石沉大海。
