GitHub Copilot 扩展就是您所需的一切
2024 年 6 月 24 日,作者:Isidor Nikolic,@isidorn
2017 年,Google 研究人员在其开创性论文《Attention is All You Need》中引入了“Transformer”概念。这类模型以类似于人类关注点的方式优先处理信息,是当今现代语言模型(例如为 GitHub Copilot 提供支持的模型)的基础。
就像 Transformer 对 AI 具有变革性意义一样(抱歉),我们相信 GitHub Copilot 扩展最终将兑现 AI 对开发者的所有承诺。
VS Code 是历史上使用最广泛的开发者工具之一。这种流行很大程度上归功于社区贡献的庞大扩展生态系统。如果您是 VS Code 用户,您可能可以脱口而出一些您离不开的扩展。想象一下,如果这些扩展能够利用 AI 和 GitHub Copilot 的强大功能,那将带来怎样的可能性。
当 AI 了解您的特定上下文时,它才能真正发挥作用。而 VS Code 拥有这些知识。扩展可以使用 VS Code API 来利用此上下文,并在所有开发者所在的 VS Code 中提供最佳、最相关的 AI 驱动的答案和交互。
在这篇文章中,我们将探讨新的 API,这些 API 允许扩展直接与语言模型和 GitHub Copilot 贡献的聊天体验进行交互。我们将探讨如何立即开始使用这些 API 进行构建,并展示一些已开始利用这些 API 来丰富其扩展的早期采用者。
聊天和语言模型 API
今年在 Build 大会上,我们宣布了一套用于 VS Code 中 GitHub Copilot 的新 API。
请务必观看我们关于使用 GitHub Copilot 增强 VS Code 扩展的 Build 专题,以了解所有这些 API。
您可能最熟悉通过聊天界面使用大型语言模型 (LLM)。您的扩展利用 GitHub Copilot 功能的一种方式是构建一个聊天参与者,用户可以在 VS Code 内部的聊天视图中与它进行交互。您可以使用 聊天 API 创建一个聊天参与者,并使用语言模型 API 处理自然语言并对用户查询作出响应。在我们的扩展指南中了解有关 聊天 API 的更多信息,该指南以 @cat
代码导师为例来介绍新的 API 概念。
通过 语言模型 API,您现在可以直接在您自己的扩展中访问和利用 GitHub Copilot 贡献的大型语言模型(简称 LLM)。只需选择要使用的模型,构建提示,然后向所选模型发出请求即可。通过使用 VS Code API,您可以向提示添加相关上下文。例如,通过包含当前文件的内容或正在使用的技术栈。
语言模型 API 还可以用于增强编辑器所有部分的开发者体验,而不仅仅是聊天视图。您可以贡献一个使用语言模型 API 的操作到 VS Code 的所有可贡献界面,例如编辑器上下文菜单。例如,源代码管理视图使用语言模型 API 允许用户根据源代码更改生成提交消息。另一个例子是 Copilot 支持的重命名功能,其中语言模型根据代码上下文提供符号重命名建议。
在我们的扩展指南中了解有关 语言模型 API 的更多信息。
我们相信,最令人愉悦的用户体验将来自于将聊天和语言模型 API 与 VS Code 强大的 API 套件相结合。扩展作者应创造性地利用这些工具,超越简单的问答机器人,在 VS Code 中开发丰富的、集成的交互,并使用正确的用户上下文。用户喜欢工作流程中无缝且强大的交互。这些新的 API 使扩展能够通过将 AI 功能直接集成到 VS Code 中来提高用户的生产力。
GitHub 应用
或者,您可以通过创建一个 GitHub 应用来扩展 GitHub Copilot,该应用在聊天视图中贡献一个聊天参与者。GitHub 应用由服务提供支持,并在所有 GitHub Copilot 界面(例如 github.com、Visual Studio 或 VS Code)上运行。GitHub 应用无法完全访问 VS Code API。要通过 GitHub 应用扩展 GitHub Copilot,您应该加入 Copilot 合作伙伴计划。
我们在 Microsoft Build 大会上宣布了通过 GitHub 应用提供的 GitHub Copilot 扩展,并且我们已经在 GitHub Marketplace 上看到了一些出色的扩展。
观看我们关于扩展 GitHub Copilot 的 Build 专题,以了解其运作方式。
VS Code 扩展展示
我们很高兴能展示 VS Code 扩展社区使用语言模型和聊天 API 构建的内容。到目前为止,我们已经看到了 100 多个在各种场景下基于 GitHub Copilot 构建的扩展。以下是一些我们认为特别引人注目的。
Stripe
Stripe 使开发者能够接受付款并在线转账。新的 @stripe
聊天参与者将 Stripe 文档、代码示例和最佳实践的知识带到您的指尖,因此您无需离开 VS Code 即可构建和维护您的 Stripe 集成。
“我们一直在努力让开发者更容易集成 Stripe,这就是为什么我们很高兴能将 Stripe 特定上下文和功能扩展到 Copilot。新的可扩展性 API 设计精良且易于构建,因此我们能够非常快速地行动。”——Ian McCrystal(Stripe 开发者 AI 团队的 EM)
@stripe
参与者可帮助您
- 生成和调试 Stripe API 代码并将其插入到您的项目中
- 获取基于 Stripe 文档的问题答案
- 逐步构建并最终升级您的 API 集成
@stripe
参与者将于 7 月中旬向所有 Stripe VS Code 扩展用户提供。
MongoDB
MongoDB 开发者喜欢 MongoDB for VS Code 扩展,该扩展支持无缝数据导航、查询构建、使用 Playground 进行原型设计以及导出到流行语言。@mongodb
聊天参与者与该扩展深度集成,使开发者能够利用 GitHub Copilot 和该扩展的强大组合,在 VS Code 中更快地进行 MongoDB 应用程序开发。
@mongodb
聊天参与者
- 从自然语言生成 MongoDB 查询
- 从数据库日志中提供查询性能和错误模式的见解
- 提供数据库和集合模式信息
- 在 VS Code 中直接回答问题,并引用官方文档
如果您有兴趣使用 MongoDB 聊天参与者,可以注册以获取 私有预览版的访问权限。
Parallels
Parallels,流行的 macOS 虚拟化软件,最近推出了一款新的 Parallels Desktop VS Code 扩展,以提升 Parallels Desktop 的体验。他们通过与 GitHub Copilot 集成,进一步改进了它。
"易用且功能强大的 API 以及良好的示例使我们能够快速创建一个强大的 Copilot 参与者,否则这将需要相当大的精力和时间。" – Carlos Lapao(Parallels 解决方案架构师)
通过新的 @parallels
聊天参与者,您可以使用自然语言轻松执行大多数虚拟机操作。例如,您可以说“@parallels 启动 Windows 11 VM”,然后聊天参与者将代表您执行操作。
PostgreSQL
PostgreSQL 是一个非常流行的关系型数据库平台,您现在可以使用 PostgreSQL Chat Participant 扩展直接与它聊天。@pg
聊天参与者将学习您的数据库模式,并根据数据库模式为您提供答案。您还可以使用它来生成模式,获取 SQL 查询帮助,甚至生成用于与数据库交互的代码。
后续步骤
我们才刚刚开始。与 VS Code 中的所有产品计划一样,我们将随着时间的推移扩展我们的 AI 可扩展性功能。我们预计以下功能将在今年晚些时候推出:
- 意图检测,以便自动调用聊天参与者
- 支持 GPT-4o 语言模型
- 模型请求的令牌限制增加(当前限制为 4K 令牌)
- 编辑器行内聊天、终端和笔记本中的聊天参与者
- 变量解析 API - 允许扩展贡献聊天变量,这些变量提供来自扩展领域上下文
- 工具 API – 将自然语言转换为带有参数的工具调用;允许扩展注册可以被其他参与者调用的工具
今天对所有人开放!
聊天和语言模型 API 现已在 VS Code Insiders 中提供,并将在 7 月初在 VS Code Stable 中发布。使用我们的文档和示例,可以轻松开始构建强大的 AI 扩展。如果您有疑问或反馈,可以在我们的存储库中提出问题。
今天,您就可以将依赖于语言模型和聊天 API 的扩展发布到 VS Marketplace。真正的问题是:您将创建哪些不可思议的扩展?可能性是无限的,只有您才能将这些创新想法变为现实。所以,深入我们的优秀扩展开发流程,利用 AI 的力量并结合正确的用户上下文,让您的创造力塑造开发的未来!构建过程很有趣——去享受吧!
谢谢,
Isidor 和 VS Code 团队