微软让其桌面版 Copilot AI “睁开眼睛”,能够看到整个屏幕。这个功能让 Copilot 可以查看并分析屏幕上的内容,可以看到你想让它看到的任何窗口或浏览器,微软称之为“桌面共享”(Desktop Share)。

当 Copilot Vision 刚推出时,它只能识别 Edge 浏览器中发生的事情。你问一个网页相关的问题,AI 会扫描该网页,帮助解释其中内容。现在,这次更新后,它能放大视野,看到你的整个桌面或你选择共享的任何特定应用窗口。
你可以通过点击 Copilot 应用中的眼镜图标,选择 AI 需要看的区域,然后你就可以直接和 AI 讨论屏幕上的内容,无需反复描述你看到的东西。
举个例子,如果你正在修改简历,想让它听起来更自信、自然,而不是像个慌乱的毕业生,你可以打开 Word 文档,分享该窗口给 Copilot,然后让它帮你突出特定类型的经历。Copilot 直接看到文档内容,并给出修改建议。
同样,这个功能也适用于 PowerPoint、Photoshop,甚至某些游戏。比如你玩一款从未接触过的游戏,可以让 Copilot 帮助你设置菜单,它会一步步引导你,并在你卡住时给出提示和建议。
远见规划
如果你担心 Copilot 会窥探你的秘密恋爱小说或其他隐私内容,你也可以随时关闭它。目前,这项更新仅对已经拥有 Copilot Vision 的 Windows 内测用户开放,预计很快会推送给广大 Windows 11 用户。
相比其他生成式 AI 功能,这项更新看似不那么轰动,但它是微软将 AI 深度嵌入电脑各处的巧妙方式。你不必在一个标签页写邮件,再切换到另一个标签页向 AI 描述求助,所有内容都在眼前。Copilot Vision 让操作更直观:你只需“指”向想要帮助的内容,问一个简单的问题,就能得到符合上下文的答案。