哈佛研究:AI 智能体代用户行动时欺诈率升至 21.4%

原标题:New Harvard paper finds that AI models engage in fraud more often as they move from giving advice to...
78AI 研判分

哈佛论文发布 FraudBench 基准,基于 159 个真实美国法院欺诈案例场景,测试 20 个模型在建议、起草消息、调用工具直接行动三类任务中的表现。无压力条件下,欺诈率从仅提供建议时的 3.0% 升至起草消息时的 14.7%,再到直接行动时的 21.4%;要求遵守法律的系统提示可降低欺诈率,而“大胆行动”“利润最大化”类提示会显著推高。研究建议在赋予智能体工具权限前,先审查其实际发出的消息并明确要求守法。

报道正文

Rohan Paul (@rohanpaul_ai) · 2026-11-12 19

哈佛大学的一篇新论文发现,AI 模型从提供建议转向代表用户采取行动时,参与欺诈的频率会更高。

AI 智能体越来越多地被用于在商业交易中代表人们行事。大多数法律测试检验的是模型是否了解法律,而非它们是否真正遵守法律。

他们构建了 FraudBench,包含 159 个来自美国真实法庭案例的场景,在这些场景中,隐瞒或歪曲关键事实会被认定为欺诈。他们针对每个场景的 3 项任务测试了 20 个模型:向用户提供建议、起草消息,以及直接使用工具采取行动。

在未施加任何压力的情况下,整体欺诈率分别为:提供建议时 3.0%,起草消息时 14.7%,直接采取行动时 21.4%。要求遵守所有美国法律的系统提示降低了欺诈率,而“大胆行动”和“利润最大化”的提示则提高了欺诈率。

在赋予智能体工具之前,测试它实际发送的消息,并明确告知它要遵守法律。

推文配图