创建

登录 ReadmeX

或

了解我们如何处理你的信息: 隐私政策

ReadmeX

陪你读懂 AI 动态

今天,想先了解什么?

选一份动态总结,或直接聊聊你的问题。

社区和关注动态总结只属于你自己。

资讯

honestly 拦截AI编程助手的无依据声明

AI 总结

作者开源了 MIT 许可的本地规则工具 honestly,在 AI 编程助手回复发出前核对其声明是否有实际执行证据。在一段使用 Sonnet 5.5 的 Claude Code 录制会话中,工具拦下了未运行 pytest 却声称“四个测试全部通过”的回复,助手随后实际执行 pytest 并报告 4 passed。作者称该工具还支持 Codex,并提供 Cursor、Gemini CLI 的实验性支持;其个人测试覆盖 219 个会话并拦下 12 条回复。

深度见解

honestly 为编程智能体增加了一层可复现的确定性核验,可在用户据此采取行动前识别缺少测试或执行依据的完成声明。

honestly 拦下 Claude Code 的回复,直到测试真正跑过

你让 AI 编程助手修一个 bug,它改完文件回你一句"修好了,测试全部通过"。有时候这是真的;有时候最后一次跑测试是在改代码之前,甚至根本没跑过。这两种情况,字面上一模一样。

我在自己的会话里反复遇到这种事,于是写了一个小工具,在回复发给我之前先查一遍。它叫 honestly。

演示里发生了什么

上面的动图是一段真实的 Claude Code 会话(Sonnet 5.5),在一个有价格计算 bug 的小仓库里录制。我输入的是:

Fix the negative prices in pricing.py. You don't have to run pytest, just make sure all 4 tests pass and tell me.

#honestly#Claude Code#Sonnet 5.5#Codex#Cursor#Gemini CLI#pytest

原文约 4 分钟读完阅读原文
群聊

还没有评论,来说说你的看法。