@YellowSea 在 【开源】PromptWorks-一个简单的Prompt管理与测试平台 中发帖
GitHub 欢迎大家点点小星星 🌟/提Issue 🧐
支持docker一键部署/Prompt多版本管理与对比/Prompt测试/LLMs管理/用量查看
[logo]
写在前面
由于在工作中有Prompt编写与调优的需求,看了一下目前的一些开源工具,发现有佬写了Prompt管理工具和测试工具,但没有将Prompt管理与测试结合起来的工具,于是打算自己Vibe Coding一个,于是就有了这个项目。
核心能力
Prompt 管理:支持提示词的创建、版本迭代与标签归类,保留完整审计信息。
版本对比:提供差异视图,快速识别提示词更新带来的内容变化。
模型运营:集中管理可用大模型服务与调用配额,为 A/B 实验提供能力。
评估测试:后端暴露实验执行、指标记录能力,前端可快速发起测试任务并查看或导出测试结果。
测试支持:支持选择不同的模型、prompt、参数、轮次、变量进行测试,评估不同...