arXiv cs.CY·· 2 天前AI 评分55
研究显示AI智能体运行框架会改变固定大模型对银行行为规则的合规表现
The Harness Is the Model: Agent Scaffolding Changes a Fixed LLM's Compliance with Banking Conduct Rules, Unevenly Across Models
AI 导读
一项预注册研究让四个开源权重模型分别在五种运行框架下处理模拟零售银行的156个案例，共3120段两轮对话，按执行工具轨迹计分。汇总看框架仅使正确率在87.3%至92.1%间变动，但单一模型内最好与最差框架相差11.5个百分点，足以使其在四模型排名中从第一跌至最后。
来源：arXiv cs.CY · arxiv.org