promptfoo
提示词与模型输出测试工具
访问官网 ↗已自部署 1GitHub Pages 镜像
一句话总结
面向提示词与模型的测试工具，用批量用例对比不同模型和提示词。
核心功能 / 特点
- 用声明式配置定义测试用例
- 支持多模型横向对比与打分
- 可接入 CI 做回归检测
适用场景
- 上线前验证提示词改动的效果
- 比较不同模型在同一任务上的表现
同类推荐
- LangChain —— 构建 LLM 应用的主流框架
- LlamaIndex —— 面向 RAG 的数据框架
- Langfuse —— LLM 可观测性与追踪平台
- LiteLLM —— 统一 100+ 模型 API 的代理层