现已发布!了解 11 月的新功能和修复。

测试扩展

Visual Studio Code 支持为你的扩展运行和调试测试。这些测试将在名为“扩展开发主机”的 VS Code 特殊实例中运行,并具有对 VS Code API 的完全访问权限。我们将这些测试称为集成测试,因为它们超越了可以在没有 VS Code 实例的情况下运行的单元测试。本文档重点介绍 VS Code 集成测试。

概述

如果你使用 Yeoman 生成器来搭建扩展,则已为你创建了集成测试。

在生成的扩展中,你可以使用 npm run testyarn test 来运行集成测试,这些测试

  • 下载并解压缩最新版本的 VS Code。
  • 运行扩展测试运行器脚本指定的 Mocha 测试。

快速设置:测试 CLI

VS Code 团队发布了一个命令行工具来运行扩展测试。你可以在扩展示例存储库中找到一个示例。

测试 CLI 提供快速设置,还允许你使用 扩展测试运行器轻松运行和调试 VS Code UI 的测试。CLI 在底层专门使用 Mocha

要开始,你需要首先安装 @vscode/test-cli 模块,以及使测试能够在 VS Code Desktop 中运行的 @vscode/test-electron 模块

npm install --save-dev @vscode/test-cli @vscode/test-electron

安装模块后,你将拥有 vscode-test 命令行,你可以将其添加到 package.json 中的 scripts 部分

{
  "name": "my-cool-extension",
  "scripts": {
+   "test": "vscode-test"

vscode-test 查找相对于当前工作目录的 .vscode-test.js/mjs/cjs 文件。此文件提供测试运行器的配置,你可以在此处找到完整的定义。

常用选项包括

  • (必需) files - 一个模式、模式列表或包含要运行的测试的绝对路径。
  • version - 用于运行测试的 VS Code 版本(默认为 stable)。
  • workspaceFolder - 在测试期间要打开的工作区的路径。
  • extensionDevelopmentPath - 你的扩展文件夹的路径(默认为配置文件目录)。
  • mocha - 一个包含要传递给 Mocha 的其他 选项的对象。

配置可能很简单,例如

// .vscode-test.js
const { defineConfig } = require('@vscode/test-cli');

module.exports = defineConfig({ files: 'out/test/**/*.test.js' });

...或者更高级

// .vscode-test.js
const { defineConfig } = require('@vscode/test-cli');

module.exports = defineConfig([
  {
    label: 'unitTests',
    files: 'out/test/**/*.test.js',
    version: 'insiders',
    workspaceFolder: './sampleWorkspace',
    mocha: {
      ui: 'tdd',
      timeout: 20000
    }
  }
  // you can specify additional test configurations, too
]);

如果你通过传递一个数组来定义多个配置,则它们将在你运行 vscode-test 时按顺序运行。你可以按 label 筛选,并使用 --label 标志单独运行它们,例如 vscode-test --label unitTests。运行 vscode-test --help 以获取完整的命令行选项集。

测试脚本

设置 CLI 后,你可以编写和运行测试。测试脚本可以访问 VS Code API,并在 Mocha 下运行。这是一个示例 (src/test/suite/extension.test.ts)

import * as assert from 'assert';

// You can import and use all API from the 'vscode' module
// as well as import your extension to test it
import * as vscode from 'vscode';
// import * as myExtension from '../extension';

suite('Extension Test Suite', () => {
  suiteTeardown(() => {
    vscode.window.showInformationMessage('All tests done!');
  });

  test('Sample test', () => {
    assert.strictEqual(-1, [1, 2, 3].indexOf(5));
    assert.strictEqual(-1, [1, 2, 3].indexOf(0));
  });
});

你可以使用 npm test 命令运行此测试,或者在安装 扩展测试运行器 后,在 VS Code 中使用 测试:运行所有测试 命令。你还可以使用 测试:调试所有测试 命令调试测试。

高级设置:你自己的运行器

你可以在 helloworld-test-sample 中找到本指南的配置。本文档的其余部分将在示例的上下文中解释这些文件

VS Code 提供了两个用于运行扩展测试的 CLI 参数:--extensionDevelopmentPath--extensionTestsPath

例如

# - Launches VS Code Extension Host
# - Loads the extension at <EXTENSION-ROOT-PATH>
# - Executes the test runner script at <TEST-RUNNER-SCRIPT-PATH>
code \
--extensionDevelopmentPath=<EXTENSION-ROOT-PATH> \
--extensionTestsPath=<TEST-RUNNER-SCRIPT-PATH>

测试脚本 (src/test/runTest.ts) 使用 @vscode/test-electron API 来简化下载、解压缩和使用扩展测试参数启动 VS Code 的过程

import * as path from 'path';

import { runTests } from '@vscode/test-electron';

async function main() {
  try {
    // The folder containing the Extension Manifest package.json
    // Passed to `--extensionDevelopmentPath`
    const extensionDevelopmentPath = path.resolve(__dirname, '../../');

    // The path to the extension test runner script
    // Passed to --extensionTestsPath
    const extensionTestsPath = path.resolve(__dirname, './suite/index');

    // Download VS Code, unzip it and run the integration test
    await runTests({ extensionDevelopmentPath, extensionTestsPath });
  } catch (err) {
    console.error(err);
    console.error('Failed to run tests');
    process.exit(1);
  }
}

main();

@vscode/test-electron API 还允许

  • 使用特定工作区启动 VS Code。
  • 下载不同版本的 VS Code 而不是最新的稳定版本。
  • 使用其他 CLI 参数启动 VS Code。

你可以在 microsoft/vscode-test 中找到更多 API 用法示例。

测试运行器脚本

运行扩展集成测试时,--extensionTestsPath 指向测试运行器脚本 (src/test/suite/index.ts),该脚本以编程方式运行测试套件。下面是 helloworld-test-sample测试运行器脚本,它使用 Mocha 来运行测试套件。你可以将其作为起点,并使用 Mocha 的 API 自定义你的设置。你还可以使用任何其他可以以编程方式运行的测试框架替换 Mocha。

import * as path from 'path';
import * as Mocha from 'mocha';
import { glob } from 'glob';

export function run(): Promise<void> {
  // Create the mocha test
  const mocha = new Mocha({
    ui: 'tdd',
    color: true
  });

  const testsRoot = path.resolve(__dirname, '..');

  return new Promise((c, e) => {
    glob('**/**.test.js', { cwd: testsRoot })
      .then(files => {
        // Add files to the test suite
        files.forEach(f => mocha.addFile(path.resolve(testsRoot, f)));

        try {
          // Run the mocha test
          mocha.run(failures => {
            if (failures > 0) {
              e(new Error(`${failures} tests failed.`));
            } else {
              c();
            }
          });
        } catch (err) {
          e(err);
        }
      })
      .catch(err => {
        return e(err);
      });
  });
}

测试运行器脚本和 *.test.js 文件都可以访问 VS Code API。

这是一个示例测试 (src/test/suite/extension.test.ts)

import * as assert from 'assert';
import { after } from 'mocha';

// You can import and use all API from the 'vscode' module
// as well as import your extension to test it
import * as vscode from 'vscode';
// import * as myExtension from '../extension';

suite('Extension Test Suite', () => {
  after(() => {
    vscode.window.showInformationMessage('All tests done!');
  });

  test('Sample test', () => {
    assert.strictEqual(-1, [1, 2, 3].indexOf(5));
    assert.strictEqual(-1, [1, 2, 3].indexOf(0));
  });
});

调试测试

调试测试类似于调试扩展。

这是一个示例 launch.json 调试器配置

{
  "version": "0.2.0",
  "configurations": [
    {
      "name": "Extension Tests",
      "type": "extensionHost",
      "request": "launch",
      "runtimeExecutable": "${execPath}",
      "args": [
        "--extensionDevelopmentPath=${workspaceFolder}",
        "--extensionTestsPath=${workspaceFolder}/out/test/suite/index"
      ],
      "outFiles": ["${workspaceFolder}/out/test/**/*.js"]
    }
  ]
}

提示

使用 Insiders 版本进行扩展开发

由于 VS Code 的限制,如果你使用 VS Code 稳定版本并尝试在 CLI 上运行集成测试,则会引发错误

Running extension tests from the command line is currently only supported if no other instance of Code is running.

通常,如果你从 CLI 运行扩展测试,则测试运行的版本不能已在运行。作为一种解决方法,你可以在 VS Code 稳定版中运行测试,并使用 VS Code Insiders 进行开发。只要你不是在 VS Code Insiders 中从 CLI 运行测试,而是在 VS Code 稳定版中运行,此设置就可以正常工作。

另一种方法是从 VS Code 本身的调试启动配置中运行扩展测试。这还有一个额外的好处,你可以甚至可以调试测试。

调试时禁用其他扩展

当你在 VS Code 中调试扩展测试时,VS Code 会使用全局安装的 VS Code 实例,并加载所有已安装的扩展。你可以将 --disable-extensions 配置添加到 launch.json@vscode/test-electronrunTests API 的 launchArgs 选项。

{
  "version": "0.2.0",
  "configurations": [
    {
      "name": "Extension Tests",
      "type": "extensionHost",
      "request": "launch",
      "runtimeExecutable": "${execPath}",
      "args": [
        "--disable-extensions",
        "--extensionDevelopmentPath=${workspaceFolder}",
        "--extensionTestsPath=${workspaceFolder}/out/test/suite/index"
      ],
      "outFiles": ["${workspaceFolder}/out/test/**/*.js"]
    }
  ]
}
await runTests({
  extensionDevelopmentPath,
  extensionTestsPath,
  /**
   * A list of launch arguments passed to VS Code executable, in addition to `--extensionDevelopmentPath`
   * and `--extensionTestsPath` which are provided by `extensionDevelopmentPath` and `extensionTestsPath`
   * options.
   *
   * If the first argument is a path to a file/folder/workspace, the launched VS Code instance
   * will open it.
   *
   * See `code --help` for possible arguments.
   */
  launchArgs: ['--disable-extensions']
});

使用 @vscode/test-electron 进行自定义设置

有时你可能想要运行自定义设置,例如运行 code --install-extension 以在开始测试之前安装另一个扩展。@vscode/test-electron 具有更细粒度的 API 来适应这种情况

import * as cp from 'child_process';
import * as path from 'path';
import {
  downloadAndUnzipVSCode,
  resolveCliArgsFromVSCodeExecutablePath,
  runTests
} from '@vscode/test-electron';

async function main() {
  try {
    const extensionDevelopmentPath = path.resolve(__dirname, '../../../');
    const extensionTestsPath = path.resolve(__dirname, './suite/index');
    const vscodeExecutablePath = await downloadAndUnzipVSCode('1.40.1');
    const [cliPath, ...args] = resolveCliArgsFromVSCodeExecutablePath(vscodeExecutablePath);

    // Use cp.spawn / cp.exec for custom setup
    cp.spawnSync(
      cliPath,
      [...args, '--install-extension', '<EXTENSION-ID-OR-PATH-TO-VSIX>'],
      {
        encoding: 'utf-8',
        stdio: 'inherit'
      }
    );

    // Run the extension test
    await runTests({
      // Use the specified `code` executable
      vscodeExecutablePath,
      extensionDevelopmentPath,
      extensionTestsPath
    });
  } catch (err) {
    console.error('Failed to run tests');
    process.exit(1);
  }
}

main();

后续步骤

  • 持续集成 - 在持续集成服务(如 Azure DevOps)中运行你的扩展测试。