Meta AI Mac版装好了,窗口共享和跨应用听写是这么玩的
Meta 这次上架的 Mac 版 Meta AI 应用,测试版,目前对国内用户不算友好,但装完之后还是值得折腾一下的。我昨天下午在实验室 Mac mini 上跑了一下午,把踩的坑一并记下来。先说结论:它不是那种装完就扔的玩具,窗口共享和跨应用听写这两个功能,用顺了其实挺顶事。
准备工作
先解释两个词,不然下面没法聊。
窗口共享,就是把你的某个 Mac 应用窗口,比如微信、浏览器、Excel,直接“递”给 AI 看。它能看到你屏幕上那个窗口里的内容,然后你开口问它,它就能结合窗口里的信息回答你。
跨应用听写,就是你对着它说完话,它不光把文字记下来,还能根据你的指令直接写到别的应用里。比如你打开备忘录,让它“把刚才这段话记下来”,它就自动填进去了,不用切换窗口。
装之前先检查几件事:
- 系统要求。我这边的机器是 macOS 15 的系统,跑起来没问题。如果你还在 14 或更老的版本,建议先升级一下,省得到时候闪退查半天原因。
- 网络环境。这个应用走的是 Meta 自己的服务,国内直连大概率不通。你懂的,先准备个稳定的代理工具,不然登录那一步就卡死了。
- 账号。不是随便一个 Facebook 账号就能登录的。我实测下来,需要绑定了企业或创作者身份的个人号,或者有 Business 权限的账号。我这里用实验室的合作账号登的,普通个人号我试了一下,提示暂不支持。
准备就绪后,去 Meta 官网申请测试版。注意,不是 App Store 搜“Meta AI”就能搜到的,大概率搜出来的都是隔壁 Meta Business Suite。正确路径是:官网找 Meta AI for macOS 的申请页,填个邮箱,等它给你发测试链接。快的话几小时,慢的话等一两天。我周五晚上申请的,周六早上醒来看到了 TestFlight 的邀请邮件。
上手操作
装好后第一次打开,你看到的是一个很克制的对话窗口,没有花里胡哨的引导。左上角有 开头设置,它会要求你授权麦克风权限、屏幕录制权限、辅助功能权限。这三项缺一不可。
- 麦克风。这个是给跨应用听写用的。
- 屏幕录制。这个是给窗口共享用的。
- 辅助功能。这个是让它可以帮你操作其他应用的,比如自动点击、自动输入。
如果你像我当时一样嫌弹窗烦,直接点了“暂不”,结果就是后面说话它听不见,窗口共享按钮点了没反应。授权完了记得重启一下应用,不然权限不会生效,这是我第一个踩的坑。
窗口共享的开启方式:
- 在对话窗口左下角,点那个像框线的图标,就是
共享按钮。 - 弹出列表后,选你要共享的窗口。我第一次选的是整个屏幕,其实它会识别成“屏幕共享”,也可以,但不是精细。
- 选完窗口,它会弹一个小红边框,表示正在被 AI 观察。这时候你就可以问:“我现在这个页面里最大的问题是什么”,或者“帮我把这个表格里的数据总结成三个要点”。
我这边测下来,它对文字的识别相当准,但对图表类内容的判断会打折扣。如果你让它分析一张饼图,它会说个大概,比如“看起来 A 类占比最高”,但具体百分之多少,它经常会说错。这可能和 Vision 模型的精度有关,也可能是测试版还没完全调好。数据敏感的图表,建议还是自己看,别信它。
跨应用听写怎么用:
- 按住
Option键不放,然后点一下菜单栏里的 Meta AI 图标。 - 对着它说“把下面这段话记到备忘录里:……”。
- 它会把你的话转成文字,自动打开备忘录,粘贴进去,然后结束。
我这里第一次用的时候,它打开了备忘录,字也打进去了,但光标停在最前面,顺序全反了。它把我说的“记到备忘录里”也当作正文的一部分写进去了,后面我得手动把这句话删掉。解决办法是,下指令的时候停顿一下,说“记到备忘录里……(停顿一秒)……这里是正文”,它就能分清指令和内容了。
踩坑与结论
最大的坑其实不在应用本身,在权限。这也是很多新手最容易在第一步就被劝退的地方。你授权了屏幕录制,但系统没重启应用,它会一直处于“等待授权”状态。遇到这种情况,别反复开关权限,直接 Command + Q 退出应用重开一次,基本都能解决。
还有一个小坑:它是测试版,偶尔会自己断连。现象是对话窗口底下出现一个转圈的圆圈,等多久都没反应。我后来查了一下,可能是网络代理节点不稳定。把代理节点切到美西,然后退出应用重新进,就好了。用美东节点就容易断,不知道为什么。
另外一个就是隐私问题。这个应用有访问你屏幕内容的能力,用的时候注意别把账号密码、身份证号这些敏感信息露在共享窗口里。它后台怎么处理这些数据,官方文档写得比较含糊。学校之前开过会,明确说这类工具的机密数据使用要打报告,所以我也没敢拿它碰涉密的项目文件。
最后说下我的看法。Meta 这次把 AI 直接嵌进系统级应用,方向上是对的。它不像 ChatGPT 那样是个孤立网页,而是真正跑到你屏幕里来帮你看东西、写东西。这种形态对企业客户的吸引力会比个人用户更大,因为它贴合的就是办公场景里“看报表、记纪要”这种高频动作。
顺带一提,Meta 亚太区的工程负责人前段时间在一次活动里说,企业应用 AI 要经过“AI 参与、AI 优先、AI 原生”三个阶段。这个 Mac 应用至少是往“AI 原生”方向迈了一步,不是给你加个按钮,而是让 AI 成为操作系统的一部分。
学完这个,下一步你可以试试把它接到你的 Google Workspace 上,让它先读一遍你最近的文档,然后针对里面的内容提问。注意,连接 Google 账号的时候,它会要求授权访问你的 Docs 和 Drive,权限范围给的是完整的读写。安全问题想清楚了再点确定,纠结的话就别连了,窗口共享这个功能本身已经够玩一阵子了。
物界前沿