Magnitude项目快速入门指南：基于自然语言的自动化测试框架-优快云博客

本文链接：https://blog.youkuaiyun.com/gitblog_00688/article/details/148942403

Magnitude项目快速入门指南：基于自然语言的自动化测试框架

magnitude Robust AI web testing framework 项目地址: https://gitcode.com/gh_mirrors/magnit/magnitude

什么是Magnitude

Magnitude是一个创新的自动化测试框架，它采用自然语言描述测试用例，让开发者能够像与同事交流一样编写测试脚本。与传统需要精确代码的测试框架不同，Magnitude通过大型语言模型(LLM)理解测试意图，大幅降低了编写和维护测试用例的门槛。

环境准备

1. 安装测试库

首先需要在项目中安装Magnitude的测试库作为开发依赖：

npm install --save-dev magnitude-test

这个库包含了Magnitude运行所需的核心功能，建议作为开发依赖安装，因为它不会影响生产环境的构建。

2. 初始化项目

安装完成后，运行初始化命令来设置Magnitude的基本结构：

npx magnitude init

这个命令会在项目中创建以下文件和目录结构：

tests/magnitude/：测试目录
- magnitude.config.ts：配置文件
- example.mag.ts：示例测试文件

配置LLM模型

Magnitude依赖于大型语言模型来理解和执行自然语言描述的测试用例。最简单的配置方式是设置环境变量：

export ANTHROPIC_API_KEY=your_api_key_here

Magnitude默认使用Sonnet 4模型，这是一个性能优异的大型语言模型。如果你需要更高级的配置选项，可以参考框架提供的详细配置文档。

运行测试

完成基础配置后，就可以运行测试了：

npx magnitude

这个命令会自动发现项目中所有以.mag.ts结尾的测试文件并执行。当测试代理发现应用中的问题时，它会清晰地描述问题现象和可能的错误原因。

对于大型项目，可以使用并行执行提高测试效率：

npx magnitude -w 4  # 使用4个工作线程并行执行

编写测试用例

Magnitude测试用例采用自然语言编写，下面是一个典型示例：

import { test } from 'magnitude-test';

test('用户登录并创建公司', async (agent) => {
    await agent.act('登录应用', {
        data: { username: 'test-user@example.com', password: 'test123' }
    });
    await agent.check('能够看到仪表盘');
    await agent.act('创建新公司', { 
        data: '前两个字段填写随机值，其余使用默认值' 
    });
    await agent.check('公司添加成功提示');
});

测试用例包含三个核心元素：