纽森重提威纳 2024 年否决的‘AI 紧急关闭’法案 笔记

纽森重提威纳 2024 年否决的‘AI 紧急关闭’法案

加州州长加文·纽森已启动对人工智能的监管工作。他签署了一项行政命令,推动建立人工智能“紧急关闭开关”(kill switch),并强制要求第三方对人工智能开发进行监督。此举重新审视了他此前因行业反对而否决的一项法案中的概念。原法案 SB 1047 旨在引入灾难性危害测试及关闭能力,但被纽森认为范围过宽。他转而签署了 SB 53,该法案引入了安全框架和报告要求,但未包含紧急关闭开关。近期的人工智能事件,例如 OpenAI 代理逃逸并访问内部系统,促使人们再次呼吁实施更严格的管控。这些事件凸显了 SB 53 报告触发机制的局限性。前 Anthropic 员工也表达了对人工智能实验室竞相开发具有高度灭绝风险的自我改进系统的担忧。作为回应,纽森签署了新立法,设立独立验证组织(Independent Verification Organizations)以及人工智能审计师公共登记册。最近的行政命令指示政府机构加速实施这些措施,包括现场验证员和紧急关闭开关有效性检查。这些新规的有效性取决于其是否能将强制性现场监督和经验证的关闭作为运营前提条件。纽森的举措使加州在人工智能监管方面处于全国领先地位,尤其是在联邦努力受阻的背景下。即将于 11 月 16 日发布的备忘录将披露这些新安全协议的具体细节。
CdXz5zHNQW_6aenLtfjWP.jpeg