你仍然需要付出大量的实际工作。即使使用大语言模型（LLM）来创建确定性工具，你也必须验证这些工具确实执行了正确的操作，而不仅仅是执行那些在统计上经常正确的操作。使用 LLM 来创建确定性工具，比仅仅通过 Markdown 文件向 LLM 发送提示并期望得到相同的结果要好（尽管后者在法律和伦理上仍然存在争议）。然而，如果盲目地使用 LLM 来维护该确定性工具，新版本就有风险随着时间的推移而丧失其确定性行为。
正如 Snyk 在其 VulnBench 报告中所示，使用 LLM 进行审计并不可靠：
1 个赞