GitHub Copilot 扩展:满足你的一切所需
2024年6月24日,作者:Isidor Nikolic, @isidorn
2017年,谷歌研究员在其开创性论文《Attention is All You Need》中引入了 Transformer 的概念。这类模型能够像人类集中注意力一样对信息进行优先级排序,它们是当今现代语言模型(例如驱动 GitHub Copilot 的模型)的基础。
正如 Transformer 对人工智能具有变革性意义一样(一语双关,抱歉),我们相信 GitHub Copilot 扩展将最终为开发者兑现人工智能的全部承诺。
VS Code 是历史上使用最广泛的开发者工具之一。其受欢迎程度很大程度上归功于社区贡献的庞大扩展生态系统。如果你是 VS Code 用户,你可能随口就能列出几个你离不开的扩展。想象一下,如果这些扩展能够利用人工智能和 GitHub Copilot 的力量,将会带来怎样的可能性。
当人工智能了解你的特定上下文时,其真正的力量才能被释放。而 VS Code 就拥有这些知识。扩展可以利用 VS Code API 来驾驭这些上下文,并在开发者们已经聚集的 VS Code 中,直接提供最佳、最相关的 AI 驱动的答案和交互。
在这篇文章中,我们将探讨赋能扩展直接与语言模型以及 GitHub Copilot 提供的聊天体验进行交互的新 API。我们将了解你如何从今天开始使用这些 API 进行构建,并展示一些已经开始利用这些 API 来丰富其扩展的早期采用者。
聊天和语言模型 API
在今年的 Build 大会上,我们宣布了 VS Code 中 GitHub Copilot 的一组新 API:
请务必观看我们关于使用 GitHub Copilot 增强 VS Code 扩展的 Build 大会演讲,以全面了解这些 API。
你可能最熟悉通过聊天界面使用大语言模型(LLM)。你的扩展利用 GitHub Copilot 强大功能的一种方式是构建一个聊天参与者,用户可以在 VS Code 内部的聊天视图中与之互动。你可以使用聊天 API创建一个聊天参与者,并使用语言模型 API 来处理自然语言并形成对用户查询的响应。通过我们以 @cat
代码导师为例的扩展指南,可以了解更多关于聊天 API 新 API 概念的信息。
借助语言模型 API,你现在可以在自己的扩展中直接访问和利用由 GitHub Copilot 贡献的大语言模型(简称 LLM)。只需选择你想要使用的模型,构建一个提示,然后向选定的模型发送请求。通过使用 VS Code API,你可以将相关的上下文添加到提示中。例如,可以包含当前文件的内容或正在使用的技术栈。
语言模型 API 也可以用来增强编辑器所有部分的开发体验,而不仅仅是聊天视图。你可以将使用语言模型 API 的操作贡献到 VS Code 所有可贡献的界面上,例如编辑器上下文菜单。举个例子,源代码管理视图就使用语言模型 API 来允许用户根据源代码的变更生成提交信息。另一个例子是由 Copilot 驱动的重命名功能,其中语言模型会根据代码的上下文提供符号重命名建议。
在我们的扩展指南中了解更多关于语言模型 API的信息。
我们相信,将聊天和语言模型 API 与 VS Code 强大的 API 套件相结合,将会创造出最令人愉悦的用户体验。扩展作者应该创造性地利用这些工具,超越简单的问答机器人,在 VS Code 中开发出利用正确用户上下文的、丰富且集成的交互体验。用户欣赏工作流中无缝且强大的交互。这些新的 API 使扩展能够通过将 AI 功能直接集成到 VS Code 中来提高用户的生产力。
GitHub Apps
另外,你也可以通过创建一个 GitHub App 来扩展 GitHub Copilot,该 App 可以在聊天视图中贡献一个聊天参与者。GitHub App 由一个服务支持,并且可以跨所有 GitHub Copilot 界面工作,例如 github.com、Visual Studio 或 VS Code。GitHub App 无法完全访问 VS Code API。要通过 GitHub App 扩展 GitHub Copilot,你应该加入Copilot 合作伙伴计划。
我们在 Microsoft Build 大会上通过 GitHub Apps 宣布了 GitHub Copilot 扩展,并且我们已经在 GitHub Marketplace 上看到了一些出色的扩展。
观看我们关于扩展 GitHub Copilot的 Build 大会演讲,以观看实际操作。
VS Code 扩展展示
我们很高兴能展示 VS Code 扩展社区使用语言模型和聊天 API 所构建的成果。到目前为止,我们已经看到超过 100 个扩展在各种场景下基于 GitHub Copilot 进行构建。以下是我们认为特别引人注目的一些例子。
Stripe
Stripe 使开发者能够接受付款并在网上转移资金。新的 @stripe
聊天参与者将 Stripe 的文档、代码示例和最佳实践知识带到你的指尖,因此你无需离开 VS Code 即可构建和维护你的 Stripe 集成。
“我们一直在努力让开发者更容易地集成 Stripe,这就是为什么我们很高兴能用 Stripe 特定的上下文和功能来扩展 Copilot。新的可扩展性 API 设计精良且易于构建,因此我们能够非常迅速地取得进展。” - Ian McCrystal (Stripe 开发者 AI 团队,工程经理)
@stripe
参与者可以帮助你:
- 生成和调试 Stripe API 代码,并将其插入到你的项目中
- 基于 Stripe 文档获得问题的答案
- 逐步完成构建并最终升级你的 API 集成
所有 Stripe VS Code 扩展用户将在七月中旬前可以使用 @stripe
参与者。
MongoDB
MongoDB 开发者非常喜爱 MongoDB for VS Code 扩展,它能够实现无缝的数据导航、查询构建、使用 Playground 进行原型设计以及导出到流行语言。@mongodb
聊天参与者与该扩展深度集成,使开发者能够利用 GitHub Copilot 和该扩展的强大组合,在 VS Code 中更快地进行 MongoDB 应用程序开发。
@mongodb
聊天参与者可以:
- 从自然语言生成 MongoDB 查询
- 从数据库日志中提供关于查询性能和错误模式的见解
- 提供数据库和集合的模式信息
- 直接在 VS Code 中回答问题,并引用官方文档
如果你有兴趣使用 MongoDB 聊天参与者,可以注册以获取私有预览的访问权限。
Parallels
Parallels,这款流行的 macOS 虚拟化软件,最近发布了一款新的 Parallels Desktop VS Code 扩展,以提升 Parallels Desktop 的体验。他们通过与 GitHub Copilot 集成,进一步改进了它。
“简单而强大的 API 加上优秀的示例,使我们能够快速创建一个强大的 Copilot 参与者,否则这将需要相当大的精力和时间。” – Carlos Lapao (Parallels 解决方案架构师)
通过新的 @parallels
聊天参与者,你可以毫不费力地使用自然语言执行大多数虚拟机操作。例如,你可以说“@parallels 启动 Windows 11 虚拟机”,聊天参与者就会代你执行操作。
PostgreSQL
PostgreSQL 是一个非常流行的关系型数据库平台,现在你可以通过使用 PostgreSQL 聊天参与者扩展直接与它聊天。@pg
聊天参与者将学习你的数据库模式并为你提供基于数据库模式的答案。你还可以用它来生成模式、获取 SQL 查询的帮助,甚至生成与数据库交互的代码。
后续步骤
我们才刚刚开始。与 VS Code 中所有的产品计划一样,我们将随着时间的推移扩展我们的 AI 可扩展性能力。我们预计以下功能将在今年晚些时候推出:
- 意图检测,以便聊天参与者能被自动调用
- GPT-4o 语言模型支持
- 增加模型请求的 token 限制(当前限制为 4K token)
- 在编辑器内联聊天、终端和笔记本中使用聊天参与者
- 变量解析 API - 允许扩展贡献聊天变量,这些变量从扩展的领域提供上下文
- 工具 API - 将自然语言转换为带参数的工具调用;允许扩展注册可被其他参与者调用的工具
今天起对所有人开放!
聊天和语言模型 API 现已在 VS Code Insiders 中可用,并将于七月初在 VS Code Stable 中推出。借助我们的文档和示例,开始构建强大的 AI 扩展非常容易。如果你有任何问题或反馈,可以在我们的代码仓库中提交 issue。
从今天起,你就可以将依赖于语言模型和聊天 API 的扩展发布到 VS Marketplace。真正的问题是:你将创造出怎样令人难以置信的扩展?可能性是无穷的,只有你才能将这些创新想法变为现实。所以,投入到我们出色的扩展开发流程中,利用正确的用户上下文驾驭 AI 的力量,让你的创造力塑造开发的未来!构建的过程本身就充满乐趣——去尽情享受吧!
谢谢,
Isidor 和 VS Code 团队