@devflow-tools/benchmark

用于比较 baseline 与 DevFlow Agent 结果的评测和检索质量基准库。（v0.17.8）

安装

npm install @devflow-tools/benchmark

快速开始

import { runBenchmarkSuite, DEFAULT_BENCHMARK_SUITE } from '@devflow-tools/benchmark';

const report = await runBenchmarkSuite(process.cwd(), DEFAULT_BENCHMARK_SUITE);
console.log(report.summary);

公共 API / 命令

BenchmarkEngine、runBenchmarkSuite、runRetrievalQualityBenchmark、evaluateSemanticFixtures、renderBenchmarkReport 以及内置 fixture/类型。

配置与运行时

该包用于离线评测，不是 DevFlow 运行时必需依赖；自定义 runner 负责实际执行任务。

版本与兼容性

• 当前包版本：0.17.8
• Node.js：未在 package manifest 声明更高版本时，使用 Node.js 18+；原生 SQLite/Playwright 能力请按对应依赖安装
• workspace 内部包应使用同一 DevFlow minor/patch 版本，避免类型和数据库 schema 不一致

相关链接

• DevFlow 仓库
• 问题反馈

License

MIT