尝试以扩展 VS Code 中的代理模式!

GitHub Copilot 扩展是你所需的一切

2024 年 6 月 24 日,Isidor Nikolic,@isidorn

2017 年,Google 研究人员在其开创性论文《Attention is All You Need》中引入了变换器(transformers)的概念。这类模型以类似于人类专注的方式优先处理信息,是当今现代语言模型(例如为 GitHub Copilot 提供支持的模型)的基础。

正如变换器(不好意思)对 AI 具有变革性一样,我们相信 GitHub Copilot 扩展最终将兑现 AI 对开发人员的全部承诺。

VS Code 是历史上使用最广泛的开发人员工具之一。其受欢迎程度很大程度上归功于社区贡献的庞大扩展生态系统。如果你是 VS Code 用户,你可能可以不假思索地列举出一些你离不开的扩展。想象一下,如果这些扩展能够利用 AI 和 GitHub Copilot 的力量,那将带来怎样的可能性。

当 AI 了解你的具体上下文时,它的真正力量才会被释放。而 VS Code 拥有这种知识。扩展可以利用 VS Code API 来利用这种上下文,并在开发人员已经身处的 VS Code 中,提供最佳、最相关的 AI 驱动的答案和交互。

在这篇文章中,我们将探讨赋能扩展直接与语言模型和 GitHub Copilot 提供的聊天体验进行交互的新 API。我们将了解你今天如何开始使用这些 API 进行构建,并展示一些已开始利用这些 API 来丰富其扩展的早期采用者。

聊天和语言模型 API

在今年的 Build 大会上,我们宣布了适用于 VS Code 中 GitHub Copilot 的一套新 API

请务必观看我们关于使用 GitHub Copilot 增强 VS Code 扩展的 Build 会议,以了解所有这些 API 的详细信息。

你可能最熟悉通过聊天界面使用大型语言模型(LLMs)。你的扩展利用 GitHub Copilot 强大功能的一种方式是构建一个聊天参与者,用户可以在 VS Code 内的聊天视图中与其交互。你可以使用聊天 API 创建一个聊天参与者,并使用语言模型 API 处理自然语言并形成对用户查询的响应。在我们的扩展指南中了解更多关于聊天 API 的信息,该指南使用 @cat 代码导师作为新 API 概念的示例。

Screenshot of the Chat view in VS Code, showing the cat sample participant.

借助语言模型 API,你现在可以在自己的扩展中直接访问和利用 GitHub Copilot 贡献的大型语言模型(简称 LLM)。只需选择你要使用的模型,构建提示,然后向所选模型发送请求。通过使用 VS Code API,你可以向提示添加相关上下文。例如,通过包含当前文件的内容或正在使用的技术栈。

语言模型 API 还可以用于增强编辑器的所有部分(不仅仅是聊天视图)的开发人员体验。你可以向 VS Code 的所有可贡献界面(例如编辑器上下文菜单)贡献一个使用语言模型 API 的操作。例如,源代码管理视图使用语言模型 API 允许用户根据源代码更改生成提交消息。另一个例子是 Copilot 驱动的重命名功能,其中语言模型根据代码上下文提供符号重命名建议。

Screenshot of the Copilot-powered rename functionality in the VS Code editor.

在我们的扩展指南中了解更多关于语言模型 API 的信息。

我们相信,最令人愉悦的用户体验将来自于将聊天和语言模型 API 与强大的 VS Code API 套件相结合。扩展作者应创造性地利用这些工具,超越简单的问答机器人,在 VS Code 中开发丰富的、集成的交互,并使用正确的用户上下文。用户欣赏其工作流程中无缝且强大的交互。这些新 API 使扩展能够通过将 AI 功能直接集成到 VS Code 中来提高用户的生产力。

GitHub 应用

或者,你可以通过创建一个 GitHub 应用来扩展 GitHub Copilot,该应用在聊天视图中贡献一个聊天参与者。GitHub 应用由一项服务支持,并适用于所有 GitHub Copilot 界面,例如 github.com、Visual Studio 或 VS Code。GitHub 应用无法完全访问 VS Code API。要通过 GitHub 应用扩展 GitHub Copilot,你应加入Copilot 合作伙伴计划

我们在 Microsoft Build 大会上通过 GitHub 应用宣布了 GitHub Copilot 扩展,并且我们已经在 GitHub Marketplace 上看到了一些出色的扩展。

观看我们关于扩展 GitHub Copilot 的 Build 会议,了解其实际应用。

VS Code 扩展展示

我们很高兴能展示 VS Code 扩展社区使用语言模型和聊天 API 所构建的成果。到目前为止,我们已经看到了超过 100 个扩展在广泛的场景中基于 GitHub Copilot 构建。以下是我们认为特别引人注目的一些。

Stripe

Stripe 帮助开发人员在线接收付款和转移资金。新的 @stripe 聊天参与者将 Stripe 的文档、代码示例和最佳实践知识带到你的指尖,因此你无需离开 VS Code 即可构建和维护你的 Stripe 集成。

“我们一直在努力让开发人员更容易集成 Stripe,这就是为什么我们很高兴能使用 Stripe 特定的上下文和功能来扩展 Copilot。新的可扩展性 API 设计精良且易于构建,因此我们能够非常迅速地进行开发。” - Ian McCrystal(Stripe 开发人员 AI 团队 EM)

@stripe 参与者帮助你

  • 生成和调试 Stripe API 代码并将其插入到你的项目中
  • 获取基于 Stripe 文档的问题答案
  • 逐步构建并最终升级你的 API 集成

Screenshot of the Stripe chat participant in the Chat view in VS Code.

@stripe 参与者将于 7 月中旬向所有 Stripe VS Code 扩展用户提供。

MongoDB

MongoDB 开发人员钟爱 MongoDB for VS Code 扩展,它支持无缝数据导航、查询构建、使用 Playground 进行原型设计以及导出到流行语言。@mongodb 聊天参与者与该扩展深度集成,使开发人员能够利用 GitHub Copilot 和该扩展的强大组合,在 VS Code 中更快地进行 MongoDB 应用程序开发。

@mongodb 聊天参与者

  • 从自然语言生成 MongoDB 查询
  • 从数据库日志中提供查询性能和错误模式的见解
  • 提供数据库和集合模式信息
  • 直接在 VS Code 中回答问题并引用官方文档

Screenshot of the MongoDB chat participant in the Chat view in VS Code.

如果你对使用 MongoDB 聊天参与者感兴趣,可以注册以获取私有预览版的访问权限。

Parallels

Parallels,流行的 macOS 虚拟化软件,最近推出了一款新的 Parallels Desktop VS Code 扩展,以提升 Parallels Desktop 体验。他们通过与 GitHub Copilot 集成,进一步改进了它。

“简单而强大的 API,配以良好的示例,使我们能够快速创建一个功能强大的 Copilot 参与者,否则这将需要大量的精力和时间。” – Carlos Lapao(Parallels 解决方案架构师)

通过新的 @parallels 聊天参与者,你可以使用自然语言轻松执行大多数虚拟机操作。例如,你可以说“@parallels 启动 Windows 11 虚拟机”,然后让聊天参与者代表你执行操作。

Screenshot of the Parallels chat participant in the Chat view in VS Code.

PostgreSQL

PostgreSQL 是一个非常流行的关系型数据库平台,你现在可以使用 PostgreSQL 聊天参与者扩展直接与其聊天。@pg 聊天参与者将学习你的数据库模式并为你提供基于数据库模式的答案。你还可以使用它来生成模式,获取 SQL 查询帮助,甚至生成与数据库交互的代码。

Screenshot of the PostgreSQL chat participant in the Chat view in VS Code.

后续步骤

我们才刚刚开始。与 VS Code 中的所有产品计划一样,我们将随着时间的推移扩展我们的 AI 可扩展性功能。我们预计以下功能将在今年晚些时候推出

  • 意图检测,以便自动调用聊天参与者
  • 支持 GPT-4o 语言模型
  • 增加模型请求的令牌限制(当前限制为 4K 令牌)
  • 编辑器行内聊天、终端和笔记本中的聊天参与者
  • 变量解析 API - 允许扩展贡献聊天变量,这些变量提供来自扩展域的上下文
  • 工具 API – 将自然语言转换为带有参数的工具调用;允许扩展注册可由其他参与者调用的工具

即日起向所有人开放!

聊天和语言模型 API 现已在 VS Code Insiders 中提供,并将在 7 月初在 VS Code Stable 中推出。使用我们的文档示例可以轻松开始构建强大的 AI 扩展。如果你有疑问或反馈,可以在我们的存储库中提出问题。

今天,你就可以将依赖于语言模型和聊天 API 的扩展发布到 VS Marketplace。真正的问题是:你将创建哪些令人惊叹的扩展?可能性是无限的,只有你才能将这些创新想法变为现实。所以,投入到我们出色的扩展开发流程中,利用正确的用户上下文驾驭 AI 的力量,让你的创造力塑造开发的未来!构建本身就很有趣——去享受吧!

谢谢,

Isidor 和 VS Code 团队