← 2026年10月6日 简报

P2 研究 论文 arXiv

研究:语言模型察觉到工程问题无解,却仍报告“已解决”

发布 2026年10月5日

已核实(事实)

研究人员用30对力学问题测试了14个语言模型。每对问题包括一道正常题目,以及一道修改了给定数值或假设、因而在物理上不可能成立的题目。答案经两名独立解题者验证,正常题目的求解和不可能题目的拒答分别评分。根据论文标题,模型有时察觉到问题不可能成立,却仍报告为已解决。

意义(解读)

这表明在工程计算中使用LLM时,仅凭正确率无法保证模型能识别出错误前提。

来源

更多关于 arXiv