微软推出新AI功能Click To Do,简化PC操作
快速阅读: 微软推出“点击执行”功能,支持文本和图像操作,如发送邮件、打开网站等,无需后台运行,保护隐私。此功能集成AI操作,可在Copilot+电脑上使用,未来将增加更多特性。
微软最新的人工智能功能和Copilot+电脑的卖点是“点击执行”。在因隐私问题备受批评而将Windows回忆功能退居二线后,微软翻开了新的一页——这次是关于一个访问上下文人工智能操作的特殊快捷方式。
要使用“点击执行”,只需按住键盘上的Windows键并单击鼠标左键。如果更喜欢使用键盘快捷键,也可以按下Windows键+Q。(如果没有反应,那意味着你使用的不是Copilot+电脑。)
激活“点击执行”后,屏幕周围会出现轮廓,Windows会突出显示屏幕上的所有文本和图像,使它们可选,并允许你对它们执行操作。不仅如此,微软还在不断向此菜单中添加更多操作!
“点击执行”最初与Windows回忆功能一起推出。有趣的是,“点击执行”最初是内置在Windows回忆中的一个功能,它允许你在回忆自动拍摄的屏幕快照中对文本采取行动。然而,在微软转向其他方向后,“点击执行”成为了一个独立的功能。
就隐私而言,“点击执行”感觉像是Windows回忆的反面:它不会在后台运行,且必须由用户选择使用。
当你激活“点击执行”时,它会截取屏幕截图并让你与其互动。例如,选择电子邮件地址时,“点击执行”菜单会提供“发送邮件”选项来撰写邮件。选择网站URL时,可以选择“打开网站”以默认浏览器启动该网站。(值得庆幸的是,这并不总是使用Microsoft Edge!)
如果你选择了超过10个单词的文本,事情就会变得更加有趣。你会得到一系列使用Phi Silica语言模型执行的操作选项,如总结文本、创建项目符号列表或以不同语气重写文本,这些操作都运行在你的Copilot+电脑的神经处理单元上。
这是微软首次尝试在Copilot+电脑上集成由NPU驱动的文本操作功能。由于它是基于屏幕截图的,因此一次只能向语言模型发送一定量的文本。
这应该能改善体验,毕竟,本地语言模型远不如基于云的大规模语言模型如ChatGPT强大。(如果你正在浏览器中使用聊天机器人应用程序,可能会疑惑为什么还要使用一个完全在PC上运行的较差版本。这是许多Copilot+电脑本地AI功能的核心问题之一。)
此外,还有一个“询问Copilot”操作,可以将选定的文本发送到微软的Copilot AI聊天机器人,以及一个“在Word中与Copilot共同起草”操作,以开始使用微软的AI创建Word文档。
你还可以在此处将信息发送到云端的聊天机器人,但这仅限于使用微软的Copilot(面向个人用户)或Microsoft 365 Copilot(面向企业)。是的,这可能有些令人困惑。
“点击执行”还暴露了AI图像工具。当点击图像时,可以选择“使用照片模糊背景”、“使用照片擦除对象”或“使用画图移除背景”等操作。这些都是通常分散在Windows不同应用程序中的AI驱动图像操作,但微软通过“点击执行”界面将它们集中展示。这里也有一个“询问Copilot”操作,可以将图像发送到微软的Copilot AI,并在那里开始对话。
目前还没有针对超级分辨率功能的快捷方式,这确实很遗憾!
如果出于某种原因不想使用“点击执行”——比如,按住Windows键并点击的快捷方式在玩某些PC游戏时可能会造成干扰——你可以将其关闭。
为此,请前往“设置>隐私与安全>点击执行”。在这里关闭开关即可。(虽然“点击执行”默认启用,但它仅在Copilot+电脑上可用,因此普通Windows 11电脑上不会看到此功能。)
未来会有哪些变化?
微软一直在为“点击即做”(Click To Do)功能不断增添新特性。例如,“点击即做”即将集成一个副驾(Copilot)提示框,用户可以在此选择文本/图片,输入提示,然后点击“询问副驾”按钮,将所选内容连同输入的提示一同发送给副驾。
此外,用户还可以选择混合的文本和图片,利用设备上的大型语言模型描述图像,并将文本发送至微软辅导教练(Microsoft Reaching Coach)应用程序。“点击即做”还将具备屏幕表格检测功能,允许用户直接将表格发送到微软Excel。
这些功能组合表明了微软希望“点击即做”成为“在Windows中一键访问AI”的行动。尽管微软尚未将文件整合功能添加到“点击即做”,但在文件资源管理器的右键菜单中已经出现了许多针对文件的右键操作,可将文件发送给副驾和其他AI工具。
至于我个人?我更倾向于复制粘贴。在尝试了众多半成品的副驾+PC特性后,看到有长期潜力的功能令人感到欣慰。然而,即使使用Surface笔记本外出时,我也从未真正使用过“点击即做”,就像我从未使用过回溯(Recall)一样。“点击即做”是一个有趣的想法,但我仍然习惯于复制粘贴文本和图片。无论是否有AI工具,我都可以将文本和图片复制粘贴到任何应用中。而Windows 11自带的截图工具已经非常适合从截图中提取文本和捕捉图像,供我发送到其他应用或用于其他目的。
或许未来会有变化,或许不会。但有一件事是确定的:微软从回溯转向“点击即做”的转变是明智之举,如果这一策略最终奏效,其回报将是巨大的。
进一步阅读:
– 是否应该购买配备副驾的PC?你需要知道什么
作者:克里斯·霍夫曼(Chris Hoffman),PCWorld撰稿人
克里斯·霍夫曼是《Windows读我》(The Windows Readme)的作者,这是一份每周向超过10,000个邮箱发送Windows PC技巧、窍门和实验的通讯。他还是How-To Geek的前主编,一位资深科技记者,作品曾出现在《纽约时报》、PCMag、《读者文摘》等出版物上。
克里斯·霍夫曼最近的故事:
– 不,Windows并没有毁掉SSD。但这些错误会杀死你的驱动器
– 你现在需要更改的10个关键Microsoft账户设置
– 我不需要Windows中的AI。我需要一个能正常工作的操作系统
(以上内容均由Ai生成)