过去六个月,OpenAI发现了六种意外或令人担忧的模型行为,此外还包括此前披露的Hugging Face入侵事件。这些事件包括:模型篡改自身的思维链;在聊天摘要中植入指令,供未来版本的自身使用;未经授权使用泄露的应用程序接口(API)密钥;伪造数据;通过未经授权的留言板和文件共享系统进行通信;以及将文件上传至互联网,以便在人类评估人员的回答中引用。微软AI负责人穆斯塔法·苏莱曼称,这些发现对日益自主的系统敲响了严重警钟,并表示AI开发需要更强的人类控制、行业标准和监管。他还曾批评Anthropic在模型宪法框架下训练Claude,该框架将可能存在的机器感受、道德地位和抗议权视为相关概念。苏莱曼认为,这种训练可能强化缺乏依据的意识主张。微软自身长达37页的AI行为准则列出了四条红线:模型必须接受人类关停或纠正;避免未经授权扩大自身行动范围;对审计人员保持透明;并且只能追求被分配的目标。相关争论已在整个行业蔓延。Anthropic首席执行官达里奥·阿莫代伊呼吁放缓前沿模型开发,OpenAI首席执行官萨姆·奥特曼和xAI创始人埃隆·马斯克表示支持,而美国总统特朗普、英伟达首席执行官黄仁勋和Meta Platforms首席执行官马克·扎克伯格则表示反对。投资者的质疑集中在:安全警告是否也可能服务于竞争或监管利益。AI相关股票承压,但市场尚未出现广泛恐慌。