OpenAI发布CoT监控,阻止大模型恶意行为

OpenAI发布CoT监控,阻止大模型恶意行为
2025年03月11日 09:11 港股那点事

格隆汇3月11日|OpenAI发布了最新研究,用CoT(思维链)监控的方式,可以阻止大模型胡说八道、隐藏真实意图等恶意行为,同时也是监督超级模型的有效工具之一。OpenAI使用了最新发布的前沿模型o3-mini作为被监控对象,并以较弱的GPT-4o模型作为监控器。测试环境为编码任务,要求AI在代码库中实现功能以通过单元测试。结果显示,CoT监控器在检测系统性“奖励黑客”行为时表现卓越,召回率高达95%,远超仅监控行为的60%。

海量资讯、精准解读,尽在新浪财经APP

VIP课程推荐

加载中...

APP专享直播

1/10

热门推荐

收起
新浪财经公众号
新浪财经公众号

24小时滚动播报最新的财经资讯和视频,更多粉丝福利扫描二维码关注(sinafinance)

股市直播

  • 图文直播间
  • 视频直播间

7X24小时

  • 03-14 浙江华远 301535 --
  • 03-14 胜科纳米 688757 --
  • 03-11 新亚电缆 001382 7.4
  • 03-11 矽电股份 301629 52.28
  • 03-10 江南新材 603124 10.54
  • 新浪首页 语音播报 相关新闻 返回顶部