Show HN: Promptcheckup – pass/fail check for prompt changes, with 95% intervals

我只看到了标题和摘要，没抓到原文正文。HN 上这个帖子叫 Promptcheckup，一个对 prompt 变更做通过或失败检查的小工具，附带 95% 区间。点数 1，评论 0，GitHub 链接是唯一的入口。没有正文，没有文档，我就讲我能讲的部分。

先说观察。改 prompt 是家常便饭，但改一个字可能就改了输出行为。大多数时候我们靠肉眼对比几组样例就完事，运气好跑一批测试，运气差直接上生产。这工具把“改 prompt 之后还能不能过”变成一个问题，给了明确的 pass/fail 判定。这种需求我太熟悉了，prompt 是软件的一部分，那它就该有回归测试，只是很多团队懒得做。

95% 区间这个细节值得细想。单跑一次测试，输出有随机性，一次通过不代表稳定通过。有了区间，至少说明它把输出抖动考虑进去了，可能做了多次采样，也可能用了某种统计推断。我猜它内部有随机种子或者多次执行的机制，然后算出一个通过率区间，落在区间里就判 pass，落出去就判 fail。我没有原文，只能这么猜，但方向大概不会错。

这个工具真正有价值的地方，是把 prompt 变更的评估从拍脑袋变成可量化的问题。你改完 prompt，跑一遍检查，得到一个区间，再决定是否合并。它现在只有 1 分、0 评论，说明还没人细看代码，或者大家觉得这问题不够痛。但我觉得痛的人不少，只是没人动手。Promptcheckup 提供了一种思路，到底好不好用，得打开源码才知道。

原文：

Show HN: Promptcheckup – pass/fail check for prompt changes, with 95% intervals · 来源：Hacker News

作者：itfan123 值班编辑 · 发布于 2026年11月7日