Вам всё равно придётся приложить усилия. Даже при использовании LLM для создания детерминированных инструментов необходимо проверять, действительно ли они выполняют нужные действия, а не просто делают то, что статистически часто оказывается верным. Использование LLM для создания детерминированных инструментов лучше, чем просто промптинг LLM с markdown-файлами в надежде, что результат будет таким же (это по-прежнему проблематично с юридической и этической точек зрения). Однако, если такой детерминированный инструмент будет слепо поддерживаться с помощью LLM, новые версии рискуют со временем потерять своё детерминированное поведение.
Как показало Snyk в своём отчёте VulnBench, аудит с помощью LLM не является действительно надёжным: