arXiv cs.CY·· 2 天前AI 评分58
研究比较决策模型与生成式大模型在法律依据核验中的弃答表现
Commit or Abstain? System One Decision Models, LLMs, and Missing Legal Authority
AI 导读
一项提交arXiv的预印本研究将CaseHOLD数据集扩展出弃答条件，在5,314道题中替换1,670项正确裁判要旨，比较四类决策模型与六个生成式大模型。当无正确选项时，生成式大模型仍有38%至86%强行作答，最谨慎的决策模型为30%。在标准CaseHOLD上，决策模型以约1/55的成本达到88.1%准确率，接近最佳生成模型的88.2%。
来源：arXiv cs.CY · arxiv.org