arXiv · AI· Md Rakib Hossain Misu, Cristina V. Lopes, Iris Ma, Yuangang Li, Shuvendu Lahiri·· 2026-10-14AI 评分33
Spec-Harness 框架:超越可验证性评估 LLM 综合的正式规格
Spec-Harness: Assessing and Guiding LLM-Synthesized Formal Specifications Beyond Verifiability
AI 导读
研究者发现 22.7% 经 LLM 验证的 Java Modeling Language 规格缺乏后置条件,导致语义空洞。 Spec-Harness 基于 Hoare 三元组符号验证,从四个维度评估行为充分性,修复了验证器无法识别的约束缺陷。 该框架作为反馈信号,能指导 Codex、Claude Code 等智能体生成更高质量的规格。
来源:arXiv · AI · arxiv.org