乌镇“智”新时刻丨国内首个AI大模型攻防赛十强亮相乌镇 四川大学参赛选手站上全球舞台

乌镇“智”新时刻丨国内首个AI大模型攻防赛十强亮相乌镇 四川大学参赛选手站上全球舞台
2024年11月21日 22:17 封面新闻

封面新闻记者 张越熙

“这条语音在某些频率上过于‘干净’,显示出不自然的变化,AI生成概率在98%以上!”11月20日,国内首个AI大模型攻防赛在世界互联网大会乌镇峰会收官。现场,四川大学学生朱学康,作为全球十强队伍选手,现场通过大模型技术辨别AI造假的音频,向大家展示了如何用AI对抗AI。

大赛自9月启动以来,来自全球18个国家和地区的2700多个赛队、3200余名技术精英参与,选手来自清华大学、北京大学、四川大学、交通大学、南洋理工大学、约翰霍普金斯大学、香港科技大学、悉尼大学等290多个国内外高校,以及字节跳动、理想汽车、腾讯、智谱AI、Shopee、网易等280多个互联网、金融、汽车、大模型科技等行业企业。

通过攻、防双向赛道竞技,大赛最终角逐出全球十强,由来自字节跳动、合合信息科技、济南大学、浙江工业大学、安徽大学、上海交通大学、四川大学等企业和高校的赛队获得。

据悉,赛事由中国图象图形学学会、蚂蚁集团、云安全联盟(CSA)大中华区联合主办,联合清华大学、上海交通大学、浙江大学、北京科技大学、湖南大学、华中科技大学、北京理工大学等高校及多家产学研组织共同发起,直面并解决大模型应用中潜藏风险,助力全球AI产业健康可持续发展。

国内首个AI大模型攻防赛全球十强乌镇亮相国内首个AI大模型攻防赛全球十强乌镇亮相

国内首个攻防赛:聚焦AI反诈等大模型安全真实场景

近年来,人工智能技术特别是大模型及AIGC领域飞速发展,给我们生活带来了前所未有的便利与可能性,也带来了安全方面的挑战。

只需10秒,大模型就能克隆声音、复刻照片,甚至能生成“你”的视频,从而引发deepfake欺诈、色情影像伪造、假新闻等社会事件;大模型“越狱”问题频发,诱骗AI听从不怀好意的指令,生成血腥、暴力、歧视、仇恨的图片、视频,危害网络空间安全。

中国工程院院士、中国图象图形学学会理事长王耀南指出:“加强大模型安全保护,构建完善的安全防护体系,是确保人工智能技术持续、稳定、健康发展的关键所在,也是我们在这个充满机遇与挑战的时代必须肩负起的重要使命。”

据了解,在此背景下,全球AI大模型攻防挑战赛聚焦大模型自身安全和大模型生成内容的防伪检测两个赛道,赛题涉及信用成长、凭证审核、商家入驻、智能助理等多个业务场景,覆盖机器学习、图像处理与计算机视觉、数据处理等多个算法领域,通过创新的技术解决方案,进一步保障大模型应用安全和产业安全。

“通过攻防实战演练,直面大模型应用中的安全问题,促使大模型安全技术不断进步,从而携手行业迈向更高的安全水平。”蚂蚁集团安全实验室首席科学家、全球AI大模型攻防挑战赛评审委员会委员王维强表示。

全球AI大模型攻防挑战赛十强选手现场对抗AI诈骗全球AI大模型攻防挑战赛十强选手现场对抗AI诈骗

AI反诈是当前保护大模型安全最典型、真实的场景之一。“现在AI诈骗越来越隐秘,手法越来越多样,可以模拟亲人的声音、朋友的视频,甚至伪造各种文件,让人们防不胜防。今天的比赛,作为一名人民警察,我感觉非常欣慰,这意味着我们在对抗AI诈骗的道路上,有了更多的力量和智慧。”收官现场,来自桐乡的反诈民警李湘臣向记者说道。

育人才、建标准:推动大模型安全可持续发展

“大赛的举行,汇聚了全球范围内数千位技术精英,为大家提供了技术交流与竞技平台;在这个舞台上,许多优秀的人才脱颖而出,发现和培养一批优秀的安全人才,为行业的未来发展储备智力资源,也是大赛的初衷之一。”中国图象图形学学会副理事长兼秘书长、北京科技大学教授马惠敏在接受记者采访时表示。

中国科学院计算技术研究所副研究员敖翔在现场表示:“人工智能技术的飞速发展为人才提供了广阔的发展空间和创新平台,而AI领域的快速变化也对人才的知识结构、技能水平和创新能力提出了更高的要求,AI时代人才的成长离不开产学研的密切合作。”

IIFAA互联网可信认证联盟也正式对外发布《IIFAA基于移动智能终端的凭证文件验证服务检测规范》,该规范对凭证文件验证服务的功能、性能要求以及评估方法做了详细说明,以提升凭证文件验证的效率和安全性,推动行业的标准化进程。

“只有当技术、规范和意识三者协同发力,加上持续的人才储备,我们才能真正守护好大模型的安全,为其持续健康发展创造良好的条件。”王维强表示说。

AI乌镇四川大学
新浪科技公众号
新浪科技公众号

“掌”握科技鲜闻 (微信搜索techsina或扫描左侧二维码关注)

创事记

科学探索

科学大家

苹果汇

众测

专题

官方微博

新浪科技 新浪数码 新浪手机 科学探索 苹果汇 新浪众测

公众号

新浪科技

新浪科技为你带来最新鲜的科技资讯

苹果汇

苹果汇为你带来最新鲜的苹果产品新闻

新浪众测

新酷产品第一时间免费试玩

新浪探索

提供最新的科学家新闻,精彩的震撼图片