微软推新AI功能,Windows11集成Copilot提升交互体验
快速阅读: 微软全面推动AI战略,将Copilot集成至Windows 11,推出语音控制、屏幕分析及本地自动化代理等新功能,旨在革新PC互动方式,提升用户生产力和体验。
微软正在全面推动其人工智能战略,将 Copilot 集成至 Windows 11 的核心部分,推出了一系列生成式 AI 功能,旨在彻底改变用户与 PC 的互动方式。新功能包括语音控制、屏幕内容分析及有限的本地自动化代理,目标是使 Copilot 成为用户与 PC 互动的主要途径。
“嘿,Copilot”:语音控制成为主流。用户现在可以通过说“嘿,Copilot”来激活 Windows PC 上的 Copilot。这一功能是可选的,激活后会显示麦克风图标和音频信号。据微软称,语音用户与 Copilot 的互动频率是文本用户的两倍,显示出语音交互具有更高的用户粘性。会话可以自动结束,也可以通过“再见”命令来终止。
为了方便访问,Copilot 将被添加到 Windows 任务栏,包含一个新的按钮用于语音和视觉工具,用户可以通过语音命令访问 Windows 设置。微软还计划提供纯文本选项,满足那些希望无需讲话即可进行互动的用户需求。
Copilot Vision:实时屏幕分析与上下文帮助。“Copilot Vision”功能现已在全球所有支持 Copilot 的设备上推出。此功能可以分析屏幕上的内容,在用户进行照片编辑、游戏或 Office 工作时提供上下文相关的帮助。微软表示,Copilot Vision 可以处理和分析 Word、Excel 和 PowerPoint 中的整个文档,提供强大的生产力支持。
“Copilot Actions”:有限的自主本地代理。微软还推出了一项名为“Copilot Actions”的测试功能,允许 Copilot 在本地计算机上处理一些简单任务,比如搜索 PDF 或整理照片。该功能将首先在 Copilot Labs 中以预览版形式向 Insider Program 用户开放。用户可以随时观察 Copilot 的工作过程,并在需要时介入干预。
微软承认,这些基于代理的功能目前仍有限制且可能存在错误,尚不能可靠地控制复杂软件。鉴于研究显示基于代理的 AI 系统可能带来安全风险,微软表示,用户测试对于提高可靠性至关重要。
与中国初创公司 Manus 合作:系统级本地文件访问。此外,微软与中国的初创公司 Manus 进行了集成。据报道,Manus 代理使用了 Anthropic 模型,内置在 Windows 资源管理器中,允许用户通过右键点击即可从本地文件创建网站。Manus 使用由 Anthropic 设计的“模型上下文协议”,实现了系统范围内对本地内容的访问。
联网服务与游戏应用扩展。Copilot Connectors 允许用户从 OneDrive、Outlook、Gmail 或 Google Drive 等关联服务中提取数据。用户可以使用类似“查找我的牙医预约详情”的提示来搜索预约、联系人或文档,并将结果直接导入 Word、Excel 或 PowerPoint。
在游戏领域,“Gaming Copilot”现已在华硕的 Windows 掌机 ROG Ally 上推出。用户只需按下一个按钮即可激活,无需暂停游戏即可在《我的世界》等游戏中帮助导航或解释游戏机制。
大多数新功能均可在任何支持 Copilot 的 Windows 11 设备上运行,但微软建议使用 Copilot+ 电脑以提高处理速度和执行本地 AI 任务的能力。只有特定的“Click to Do” Zoom 集成功能明确要求使用 Copilot+ 电脑并参与 Windows Insider 计划。
(以上内容均由Ai生成)