让编程智能体反复试用,逐轮改进项目文档
一个命令行工具让编程智能体执行依赖项目文档的任务,分析运行记录中的失败,再生成修订版文档,反复测试和修改,直到问题解决。
- 具体怎么做
- 先保存任务和完成标准,Gauge 会为 Claude Code、Codex、Pi 或 OpenCode 启动全新的 Docker 会话,并向会话提供工作目录中的技能、文件等输入。你的编程智能体读取运行记录、整理发现、修订操作说明,再重复同一组评测;Gauge 对比修改前后的结果。
- 做到了什么
- 项目 README 给出了发布说明技能的评测示例,没有提供量化效果。文档输入同时列在本地和托管模式中,但托管模式还会重写回复,因此单独在本地评测文档改动的具体做法较不清晰。
- 上手要点
- 需要 Node 22.13 及以上、Docker 和智能体认证。智能体使用量按模型服务商或订阅计费,托管模式另使用工作区额度。
你可以这样试
使用 Claude Code请针对【仓库或文档目录】运行文档改进循环。设计5个必须依靠项目文档才能完成的真实任务,让全新智能体仅根据文档分别尝试。检查运行记录,找出卡住或猜测的地方,修改文档后重跑。所有任务成功或完成3轮后停止,每次保存前说明具体修改。