美议员提出重磅法案：政府出台安全防护机制前，AI 不得进行递归式自我改进

AI 总结
• 美国民主党联邦众议员罗·康纳计划于当地时间28日提出《人类控制AI法案》，拟在政府安全防护机制出台前禁止AI进行递归式自我改进。
• 法案主张设立新的联邦机构负责制定安全监管规定、审批模型训练部署并开展审计，同时要求前沿AI实验室配备直接向新机构报告的独立审计人员。
• 监管范围涵盖沙盒测试、物理隔离、紧急关闭开关及先进芯片使用，前沿AI公司还必须持有覆盖范围广泛的责任保险方可发布模型。
• 法案引入了严格的法律责任，若AI部署导致平民群体毁灭将被列为“危害人类罪”追究刑事责任，停用安全功能或未经授权部署同样面临刑事处罚。
• 康纳称该法案是迄今最全面的AI安全立法，其设计主要源自AI安全组织的建议而非科技巨头高管，旨在让安全界在AI治理讨论中占据主导地位。

【法案核心内容】
IT之家 9 月 30 日消息，当地时间 28 日，据美国 CNBC 报道，代表硅谷选区的民主党联邦众议员罗 · 康纳准备提出一项 AI 监管法案，引入严格责任标准，并禁止 AI 在缺乏政府安全防护机制的情况下进行递归式自我改进。

康纳在接受采访时坦言：“事实上，存在文明灭绝的风险。既有失去控制的安全风险，也有被滥用的风险，两者都必须认真对待。”

康纳将法案命名为《Human Control Over AI Act（人类控制 AI 法案）》。

联邦政府建立防护规则且监管机构批准有关活动前，AI 模型不得递归式自我改进，也不得自主修改自身的核心目标、遏制机制或关停控制。

【新设监管机构与标准】
法案还计划设立一个新的联邦机构，负责制定 AI 安全监管规定，通过许可制度审批模型训练和部署，对前沿 AI 模型开展审计，并制定安全标准，确保模型持续接受测试并处于有效的人类控制之下。

每家前沿 AI 实验室还必须配备独立审计人员，由审计人员直接向新机构报告。

新机构还将制定多项标准，涵盖沙盒测试环境、让测试环境与互联网断开的物理隔离、紧急关闭开关，以及防止模型脱离实验室环境后在互联网上自行运行的控制措施。

前沿 AI 实验室使用的先进芯片也将纳入监管，包括建立监测或控制芯片使用的机制。

【违规处罚与保险要求】
据 IT 之家了解，法案还将为 AI 出现问题的情形增设法律处罚。

部署 AI 模型如果导致平民群体遭到毁灭，将被列为“危害人类罪”并追究刑事责任。

AI 公司员工如果停用防护措施、紧急关闭开关、日志记录功能或遏制系统，或者明知某套系统未经授权仍予以部署，同样将面临刑事处罚。

此外，AI 公司还必须持有覆盖范围广泛的责任保险，才能发布模型。

【立法背景】
康纳称，法案是迄今提出的“最全面的 AI 安全立法”，其设计主要来自他与多家独立非营利 AI 安全组织的交流，而非大型 AI 公司高管提出的诉求。

“我希望这项法案能成为一个范本，让 AI 安全界拥有发声渠道。

我认为，他们一直被不公平地当成只是在谈科幻，没有得到足够重视……应该由 AI 安全界而不是前沿 AI 实验室的高管来主导这场讨论。

”

[来源链接] https://www.ithome.com/1/008/570.htm