judged.systems

嘿，我是 Oleksandr 👋。我做了 judged.systems。

一张工单返回的结果可能是一个选择及其概率、某个评分标准上的分数，或者某个陈述为真的概率。你的阈值会把它变成 accept 或 review。调用失败会留在 review。

已发布的 pack 会冻结。给漏判打的标签不会改写评估结果。

哪些场景你会拒绝让规则自动 accept？

自己回答你的问题：只要工单作者有动机把措辞写成让分类器放他通过，那就不该自动 accept。退款请求和政策风险正是这种情况，写工单的人有时就是故意想被归为低风险，所以你要拿来设阈值的那项概率分数，恰恰就是会被钻空子的东西。队列路由或紧急程度，没人会在这上面骗你，那里很适合自动 accept。一旦输入变成对抗性的，而不只是有噪声，高置信度分数就不再让人安心了。