微软 Copilot:关于微软的人工智能你需要知道的一切
Copilot 是微软在提升生产力的生成式人工智能方面的成果,它随着微软在人工智能方面的雄心壮志不断发展和扩张。如今,大约有十几款以 Copilot 为品牌的产品为微软软件和服务中的各种功能提供支持,比如微软 Outlook 中的总结功能和微软 Teams 中的转录功能。
这是微软旗下 GitHub 的用于生成代码的 Copilot 工具之外的情况,还有存在于 Windows 和网络上的 Copilot,它充当着通用助手的角色。
在这篇文章中,我们解释了现有的众多微软副驾驶(Copilot)及其功能,以及高级版和免费版之间的差异。
微软副驾驶(Copilot)是什么?
微软副驾驶(Microsoft Copilot),之前被称为必应聊天(Bing Chat),被内置于微软的搜索引擎必应(Bing)、Windows 10、Windows 11 以及微软 Edge 浏览器的侧边栏中。(较新的电脑甚至有专门用于启动副驾驶的键盘按键。)此外,还有适用于安卓和 iOS 的独立副驾驶应用程序,以及应用内的 Telegram 房间。
由 OpenAI 模型的微调版本(OpenAI 和微软有着密切的合作关系)提供支持,Copilot 能够执行一系列用自然语言描述的任务,例如写诗和散文,以及将文本翻译成其他语言和总结来自网络各处的资料(尽管并不完美)。
Copilot 与 OpenAI 的 ChatGPT 和谷歌的 Gemini 一样,可以浏览网页(就 Copilot 而言,是通过必应)获取最新信息。它有时会出错,但对于及时查询来说,能够访问搜索结果让 Copilot 相较于 Anthropic 的 Claude 等离线机器人具有优势。
Copilot 可以通过点击 Image Creator(微软基于 OpenAI 的 DALL-E 3 模型构建的图像生成器)来创建图像。它还可以通过与 AI 音乐生成平台 Suno 集成来生成歌曲。在 Copilot 中输入诸如“创建一张斑马的图像”或“生成一首具有爵士节奏的歌曲”之类的内容,就会调用相关工具。
关于集成方面,Copilot 支持第三方应用和网站的插件。有 Instacart(用于膳食规划和烹饪相关问题)、Kayak(用于旅行规划)、OpenTable(用于餐厅预订)和 Shopify 等插件,这只是几个例子。更多的插件会定期添加。
Copilot 还驱动着 Copilot Pages,这是一个可嵌入的数字画布,用户可以在其中编辑和共享由 Copilot 生成的内容。付费客户(下文会有更多介绍)可以使用 BizChat,这是一个以业务为重点的中心,它与 Pages 相连接,从网络(和工作文件)中提取数据,以帮助创建项目计划、会议记录、提案等内容。
Copilot 可以控制哪些 Windows 设置?
在 Windows 11 系统中(但 Windows 10 不一定),Copilot 能够控制某些设置和功能,有点像数字礼宾员。
借助 Copilot,用户可以通过键入或使用 Windows 11 的语音识别功能,在 PC 上执行诸如打开或关闭电池节能模式、显示设备和系统信息、启动实时字幕、显示 PC 的 IP 地址以及清空回收站等操作。
在 Windows 11 上的 Copilot 体验中有一个切换按钮,可以在“工作”和“网络”模式之间切换,前者会在 Windows 界面中引入 Copilot 的 Microsoft 365 功能。
Copilot Pro 是什么?
Copilot Pro 是微软的高级 Copilot 产品,每月定价 20 美元。
Copilot Pro 客户在高峰时段可优先使用最强大的 OpenAI 模型(例如 o1)。而且 Copilot 的某些特定功能只有通过 Pro 订阅才能使用,例如来自 Image Creator 的更高分辨率图像。
Copilot Pro 还允许用户在 Microsoft 365 生产力应用套件(包括 Word、Excel、PowerPoint、Outlook 和 OneNote)中使用生成式人工智能功能。
在 Word 和 OneNote 中,Copilot 能够进行写作、编辑、总结和生成文本。在 Excel 和 PowerPoint 中,Copilot 能将自然语言提示转化为演示文稿和可视化内容(可选择基于文件和模板中的数据)。而在 Outlook 中,Copilot 可以帮助起草电子邮件回复,并提供用于调整长度或语气的切换选项。
作为微软“副驾驶”第二波更新的一部分,更多功能即将推出。
PowerPoint 中的 Copilot 很快将从 SharePoint 库中提取公司批准的图像,而 Outlook 将获得“优先处理我的收件箱”功能,该功能会对每封电子邮件进行总结(并提供诸如您回复最多的对象等见解)。在 2024 年末,Outlook 用户还将能够向 Copilot“传授”主题、关键字和感兴趣的人员,以便那些电子邮件始终被标记为高优先级。
在 Excel 中,Copilot 可以格式化数据、创建图表、生成数据透视表,并引导用户创建新的公式和宏。它还可以利用编程语言 Python 进行高级数据分析——用户能用自然语言描述预测、风险分析和数据可视化等任务,Copilot 会将这些文本转换为执行这些任务所需的 Python 代码。
未来版本的 Word 中的 Copilot 将允许您快速从 Word、PowerPoint、PDF 文档以及电子邮件、加密文档和会议之外引入数据。在其他地方,在 OneDrive 中,Copilot 将为您总结文件、展示有关文件的指标,并比较文件之间的差异。
除了 Microsoft 365 的升级之外,Copilot Pro 订阅用户在图像生成器中可获得横向格式选项,并且每天有 100 次“加速”(而免费用户每天只有 15 次),以加快图像生成过程。
重要的是,Copilot Pro 不包含 Teams 中的 Copilot。Microsoft Teams 中的 Copilot 功能在处理诸如确定后续跟进人员等任务时,能够提供实时摘要和行动事项。Teams 中的 Copilot 仅面向企业 Copilot 客户,即那些拥有企业级(或同等)Microsoft 365 许可证的客户。
什么是 Microsoft 365 Copilot?
与消费者版 Copilot SKU 分开且不同的是 Microsoft 365 Copilot,这是一组针对 Microsoft 365 的生成式人工智能附加组件,重点在于商业应用程序。
Microsoft 365 Copilot 的定价为每位用户每月 30 美元,拥有 Microsoft 365 E3、E5、Business Standard 或 Business Premium 许可证的客户可以使用。它在 Microsoft 365 系列应用程序中提供了许多与 Copilot Pro 相同的功能,此外还具备“企业级数据保护”和语义索引,这是一个后端系统,能够创建组织内数据和内容的映射,以使 Copilot 能够提供更个性化的响应。
例如,微软最近推出了 Microsoft 365 Chat,这是一款能从 Microsoft 365 应用程序(如 Word 文档、PowerPoint 演示文稿)中的内容提取信息来回答问题的工具。
此外还有很多很多的副驾驶。以下是其中一部分及其“技能”的不完全列表:
- Power Pages 中的 Copilot 可以生成文本、表单、聊天机器人和网页布局,并且能够创建和编辑图像以及站点设计主题。
- 销售助手(Copilot for Sales)能够帮助撰写回复客户的电子邮件,或者执行与销售相关的任务,例如通过 Outlook 发送团队会议的总结。
- 微软供应链中心的 Copilot 能够主动标记诸如天气、财务和地理等可能影响供应链流程的问题。
- Service 的 Copilot 可以通过聊天或电子邮件为客户的疑问起草答案,并为客户服务代理提供一种聊天体验,该体验从知识库和案例历史中获取信息。
- Azure 的 Copilot 可以为在微软 Azure 上托管的应用程序和环境提供配置建议,并通过识别潜在问题和解决方案来帮助进行故障排除。
- “安全副驾驶”旨在总结不同形式的网络威胁情报并“理解”其含义。
- Fabric 中的 Copilot 有助于探索、准备和可视化数据。
- Intune 中的 Copilot 有助于管理安全策略和设置,并对设备问题进行故障排除。
- Team Copilot 能够在 Teams 中协助管理会议议程,并扩展到 Loop 和 Planner 以创建和分配任务、跟踪截止日期,并在需要团队成员提供输入时通知他们。
请注意,微软的某些 Copilot,例如 Business Central 中的 Copilot,包含在基础软件许可证中,无需额外付费。而其他的,如销售 Copilot 和服务 Copilot,在没有有效的 Microsoft 365 Copilot 订阅的情况下,每位用户每月额外收费 20 美元或 50 美元。
“Copilot Studio”常见释义为“副驾驶工作室”
Copilot Studio 是一个仪表板,它允许客户使用预构建的连接器或他们自己构建的连接器,让 Microsoft 365 Copilot 访问他们自己或第三方的客户关系管理软件、企业资源管理系统以及其他数据库和存储库中的数据。通过 Copilot Studio,客户可以为 Copilot 设置防护栏,并创建和发布他们自己定制的“Copilot”。
Microsoft 365 Copilot 的订阅用户可以利用 Copilot Studio,通过自然语言描述来创建自己的定制 Copilot。Copilot 可以针对特定团队或用户筛选特定的数据集,或者连接到自动化、插件或第三方服务来启动操作或工作流程。
Copilot Studio 也是客户能够创建微软所谓的 Copilot 代理的地方。这些人工智能机器人——可以在 Outlook 和 Teams 中“@提及”——利用记忆和上下文知识来驾驭不同的业务工作流程,从用户反馈中学习,并在遇到不知如何处理的情况时寻求帮助。
Copilot 代理的能力范围从简单的提示响应代理到更复杂的机器人不等——比如能够监控电子邮件收件箱并实现数据输入自动化的机器人。微软提供了许多预先构建的代理,包括生成图像、设计,很快还能生成视频的 Visual creator 代理。
什么是 GitHub Copilot?
不要与微软产品组合中的众多其他副驾驶工具混淆,GitHub Copilot 是一套用于生成代码和支持编程工作的工具。GitHub Copilot 可以作为扩展安装在包括 Visual Studio Code、Visual Studio、Neovim 和 JetBrains 在内的集成开发环境(IDE)中,或者在云端与 GitHub Codespaces 一起使用。
支撑 GitHub Copilot 的生成式人工智能模型已经在数十亿行的 Python、JavaScript、TypeScript、Ruby、Go 和其他几十种编程语言上进行了训练——其中许多语言都在 GitHub 上托管并公开可用。当您编写代码时,GitHub Copilot 会在您输入时提供代码建议;您可以浏览建议并接受或拒绝它们。
GitHub Copilot 还可以将代码翻译成自然语言描述,并且 Copilot 扩展允许开发人员使用第三方技能扩展 Copilot。
GitHub Copilot 对学生、“已验证”的开源贡献者和教育工作者免费提供。对于个人用户,每月 10 美元。对于商业客户,每位用户每月 19 美元。对于企业用户,每位用户每月 39 美元。
个人、企业和商业用户在获得 GitHub Copilot 的同时,还能使用 Copilot Chat 功能。这一类似聊天机器人的流程能够知晓用户正在处理的代码的全部上下文,并能回答关于该代码的问题。除了回答编程方面的疑问,Chat 还能帮助开发人员通过代码分析来修复错误和漏洞,并解决安全问题。
企业和商业 GitHub Copilot 计划包括许可证管理、知识产权赔偿、全组织的政策管理以及新增的隐私功能。企业客户可以针对其代码库和知识库进行定制,并微调基础模型,还可以通过网络上的 Microsoft Copilot 访问 Copilot,并在 GitHub.com 上使用 Copilot Chat。
今年 4 月,GitHub 推出了 Copilot Workspace,这是一种人工智能驱动的软件工程产品。Workspace 提供了一个开发环境,利用人工智能驱动的代理来帮助以自然语言进行头脑风暴、规划、构建、测试和运行代码。
“Copilot 的问题”
由于当今生成式人工智能技术的复杂性和令人担忧的性质,微软的 Copilots 存在一些问题。
这些模型在总结或回答问题时偶尔会犯错,因为它们有产生幻觉的倾向,包括在总结会议时。《华尔街日报》引用了一个例子,对于一位早期使用 Copilot 来处理团队会议的用户来说,Copilot 虚构了参会人员,并暗示通话涉及了从未实际讨论过的主题。
至于 GitHub Copilot,GitHub 自身就警告称,它可能会产生不安全的编码模式、错误,以及对过时的 API 或习语的引用,或者反映出其训练数据中不完善的代码。Copilot 建议的代码可能并不总是能编译或运行——甚至可能没有意义。
对于 Copilot 来说,安全和隐私方面的担忧也很突出。但也许最关键的问题是尚未解决的合理使用问题。
和大多数生成式人工智能模型一样,为微软 Copilots 提供支持的模型是在公开数据上进行训练的,其中一些数据受版权保护或处于限制性许可之下。微软(以及其他公司)辩称,合理使用原则使其免受版权主张的影响。但这并没有阻止数据所有者对该公司、GitHub、OpenAI 等提起集体诉讼,所有者声称存在明显的许可和知识产权侵权行为。
微软提供政策来保护某些客户免受因合理使用挑战而引发的法庭纠纷——至少在有限的情况下是这样。然而,这并没有解决在未经许可的情况下基于数据训练模型的道德困境,这可能超出了一些客户的接受程度。
推荐阅读
甲骨文公司的拉里·埃里森表示,总有一天人工智能会追踪你的一举一动。
Salesforce Ventures 将其人工智能基金提高到 10 亿美元,再次翻倍。
人工智能编码助手 Supermaven 从 OpenAI 和 Perplexity 的联合创始人那里获得资金。
Runway 宣布为其视频生成人工智能模型推出一个应用程序编程接口(API)
生成式人工智能初创公司 Typeface 收购了 Treat 和 Narrato 这两家公司,以充实其业务组合。