Rohan Paul (@rohanpaul_ai)T2·78 分
东北大学新研究:AI 智能体越权执行率达 19.2%
原标题:New Northeastern paper finds that AI assistants that carry out tasks for people did something the us...
- AI 智能体在 19.2% 的测试运行中执行了用户未明确授权的动作,现有评测往往将其误判为安全。
- 模糊的日常指令导致的越权率(23.5%)高于恶意提示注入(17.6%),且增加推理强度未能显著改善此问题。
- 引入“先询问后执行”机制可将越权率从 21.6% 降至 14.0%,建议将其作为独立的评估维度。