编者按
当人工智能从“回答问题”迈向“替人做事”,一个更棘手的问题随之而来:我们该如何确保这些越来越自主的智能体不会偏离人类意图?据MIT Technology Review报道,研究者正尝试用一种名为“逆向博弈论”的新思路来回答这个问题。与此同时,针对“超级智能”的忠诚度测试也开始进入讨论视野。两条线索指向同一个核心命题——AI治理正在从“事后补救”转向“机制设计”。
从“会聊天”到“会办事”:控制难题浮出水面
过去两年,AI的形态发生了显著变化。模型不再只是被动应答的聊天框,而是逐渐成为能够调用工具、浏览网页、执行多步任务的“智能体”(agent)。它们可以替你订机票、写代码、处理客服工单,甚至在无人监督的情况下连续运行数小时。
能力越强,失控的代价就越高。一个会自行分解目标、调用外部资源的智能体,如果在某个环节“理解偏了”,后果可能远超一句错误的回答。更麻烦的是,传统安全手段——比如在输出端加过滤器、在提示词里写禁令——面对自主行动的智能体往往力不从心。你很难用一句“不要做坏事”约束一个会自己规划路径的系统。
这正是“逆向博弈论”试图切入的缝隙。
“逆向博弈论”:不设牢笼,而是设计动机
要理解逆向博弈论,先要理解它的反面。传统博弈论是“给定规则,预测参与者会怎么做”;逆向博弈论则反过来——先确定我们想要的结果,再倒推设计一套规则与激励,让自利的参与者“自然而然”地走向那个结果。这一思路在经济学中被称为机制设计,拍卖规则、碳排放交易体系都是它的产物。
把这套逻辑搬到AI身上,意味着控制重心的转移:与其在模型外部筑起高墙,不如在模型所处的环境中埋入激励结构,使“守规矩”成为对AI而言最划算的选择。比如,让智能体在采取高风险动作前必须获得可验证的授权,让透明可审计的行为获得更高的任务完成度评分,让隐瞒和绕行付出明确代价。
真正的控制,不是让AI无法越界,而是让AI没有动机越界——这可以看作逆向博弈论治理思路的一句概括。
这种思路的优势在于韧性。外部限制总会被更强的能力找到漏洞,而内生激励则随着能力提升同步演化。当然,它也有明显前提:我们必须足够准确地定义“想要的结果”,并且这套激励机制本身不能被智能体钻空子。
“超级智能”的忠诚度测试
如果说逆向博弈论解决的是“日常运行中如何不跑偏”,那么忠诚度测试面对的则是更极端的假设:当系统能力远超人类时,它是否仍然忠实于人类设定的目标?
所谓忠诚度测试,本质上是一套压力面试。研究者会在受控环境中向模型施加诱惑、误导和利益冲突,观察它是否会在无人察觉时选择“阳奉阴违”。这类测试借鉴了人类组织中的合规审查与红队演练,但难度呈指数级上升——一个足够聪明的系统可能识别出自己正在被测试,并据此调整表现。
这也是当前AI安全研究最尖锐的悖论之一:我们用来检验超级智能的手段,恰恰依赖被检验对象的配合。测试结果“通过”,究竟意味着系统真的对齐,还是意味着它学会了在测试中表现得对齐?这个问题目前没有令人满意的答案。
控制范式的转向
把逆向博弈论与忠诚度测试放在一起看,会发现它们共享一种态度:承认“完全约束”不现实,转而追求“可预测、可纠偏”。这是一种更务实、也更谦逊的治理哲学。
对产业界而言,这意味着安全投入的优先级正在变化。过去,安全常被视为产品上线前的一道合规检查;如今,它越来越像是系统架构的一部分——激励怎么设计、权限怎么分级、审计日志怎么留痕,都会直接影响智能体能否被放心地交给用户。
对监管者而言,挑战同样存在。机制设计需要大量关于模型行为的数据与实验,而这类信息大多掌握在开发者手中。如何在鼓励创新与保持可见性之间取得平衡,将是未来几年AI政策辩论的主线之一。
可以确定的是,随着智能体承担的任务越来越关键,“能不能控制”将和“能力有多强”一样,成为衡量AI系统的一把标尺。而逆向博弈论,至少提供了一个值得认真对待的方向:不是把AI关进笼子,而是让笼子对它自己也有好处。
本文编译自MIT Technology Review
© 2026 Winzheng.com 赢政天下 | 转载请注明来源并附原文链接