热点事件观察中
法律AI弃答能力研究:模型在缺失权威时仍强行作答
1 篇报道1 个报道来源2 天前更新
先了解这件事
AI 综述
2026年10月21日,一项提交至arXiv的预印本研究将CaseHOLD数据集扩展出弃答条件,在5,314道题中替换1,670项正确裁判要旨,比较四类决策模型与六个生成式大模型的弃答表现。研究发现,当无正确选项时,生成式大模型仍有38%至86%强行作答,最谨慎的决策模型为30%。在标准CaseHOLD上,决策模型以约1/55的成本达到88.1%准确率,接近最佳生成模型的88.2%。目前该研究处于预印本阶段,尚未见同行评议或后续进展报道。
AI 根据报道生成 · 3 小时前更新
最新进展10月21日 00:00
预印本研究显示,无正确选项时生成式大模型38%至86%仍强行作答,最谨慎决策模型为30%。报道时间线
沿着报道,了解事件的不同侧面。
10月21日
- arXiv cs.CY研究比较决策模型与生成式大模型在法律依据核验中的弃答表现
一项提交arXiv的预印本研究将CaseHOLD数据集扩展出弃答条件,在5,314道题中替换1,670项正确裁判要旨,比较四类决策模型与六个生成式大模型。当无正确选项时,生成式大模型仍有38%至86%强行作答,最谨慎的决策模型为30%。在标准CaseHOLD上,决策模型以约1/55的成本达到88.1%准确率,接近最佳生成模型的88.2%。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。