应对AI新安全挑战,首份智能体安全白皮书发布(应对ai新安全挑战的策略)

随着人工智能(AI)技术的不断进步,AI领域正从大模型时代迈向智能体时代,智能体的越权、过度代理等问题也带来了安全挑战。在29日闭幕的世界人工智能大会WAIC期间,上海人工智能实验室、信通院、蚂蚁、IIFAA联盟联合发布《终端智能体安全2025》白皮书。首次系统梳理了智能体(AI Agent)风险分类、如何发现风险、如何防御风险,并覆盖了单智能体设备、多智能体协同,以及AI终端生态的全面挑战,为终端智能体安全提供风险评估指南。

在AI大模型加速下沉的2025年,智能体正快速渗透进手机、眼镜👓、耳机、车机等各种终端设备,悄悄成为连接人、设备与环境的关键枢纽。生活、工业、医疗、教育等多个行业,正在被一批更“主动”、更“拟人化”的终端智能体重新定义交互方式。它们不再是传统意义上的智能终端,也不是完全云端运行的智能体,而是一种运行在“端侧”的智能体。

白皮书指出,随着模型越来越懂用户、操作越来越自动,终端智能体的风险边界也在拓展:不再只是“数据泄露”这么简单,而是向模型行为、身份伪造、环境感知误导,甚至算法伦理等深层问题蔓延。

中国信通院华东分院人工智能事业部主任常永波介绍,在AI智能体成为“下一代操作系统”的当下,对安全设施的梳理尤为必要。为了应对这些高度复杂、层层递进的安全风险,白皮书提出了三大防护路径:单智能体安全、多智能体可信互连、AI终端安全,希望作为一份全面且具针对性的、可参考的智能体安全指引。

白皮书首次提出终端智能体安全体系,在技术生态体系的支撑下,单智能体安全技术包括安全护栏、数据去毒、基座对齐和柔性管理,多智能体可信互连技术则包括可信数据流转、可信服务流转、可信身份认证和可信记忆共享,AI终端安全技术可信隐私沙箱、跨设备可信连接等,共同支撑AI/AR眼镜👓、『智能手机』助手、智能座驾等行业应用。

数据显示,超过70%的智能体从业者担忧AI幻觉与错误决策、数据泄露等问题,因为AI生成的内容往往包含事实错误,或者对指令产生误解,其中超半数受访者表示,所在企业尚未设立明确的智能体安全负责人。与白皮书发布同时,白皮书编制方之一蚂蚁集团大模型安全解决方案“蚁天鉴”宣布升级,新增智能体安全评测工具,具备智能体对齐、mcp安全扫描、智能体安全扫描及零信任防御等核心功能。据悉,“蚁天鉴”的智能体风险研判准确率达到96%以上,并可支持11个行业的智能体测试。

记者:孙奇茹

特别声明:[应对AI新安全挑战,首份智能体安全白皮书发布(应对ai新安全挑战的策略)] 该文观点仅代表作者本人,今日霍州系信息发布平台,霍州网仅提供信息存储空间服务。

猜你喜欢

『江疏影』?不可能的,大家看看就知道我说得对不对了(『江疏影』tf)

在『抖音』的舞台上,有十位当红女星以她们独特的魅力吸引着无数粉丝的目光。作为『娱乐圈』️的常青树,时尚与演技是她的代名词。2805.7万粉丝陪伴着她的蜕变与成长,每一次分享都充满真诚与温暖。4216.1万粉丝见证她的…

『江疏影』?不可能的,大家看看就知道我说得对不对了(『江疏影』tf)

障眼明片主要含哪些成分及功效是什么(障眼明片多少钱一盒)

障眼明片由多种药材组成,包括肉苁蓉、枸杞子、熟地黄、山茱萸、蕤仁(去内果皮)、密蒙花、菊花、决明子、青葙子、川芎、黄芪、黄精等。该药具有补益肝肾,退翳明目的效果,适用于治疗初期及中期的老年性白内障。障眼明片的服用方法是:每次口服4片,每日三

障眼明片主要含哪些成分及功效是什么(障眼明片多少钱一盒)

中国首次启用待命救援飞船,为了空间站安全:神二十一乘组将加防(哪一年我国首次)

而在神舟二十二号飞船任务之下,对于我国当下神舟二十一号乘组来说,跟这一次任务具有极大关系的任务,那就是太空碎片的问题,也要执行。 所以,太空防护装置在没有全面将其安装完成前,我国都还会继续执行这一项任务,而…

中国首次启用待命救援飞船,为了空间站安全:神二十一乘组将加防(哪一年我国首次)

杨颖带小海绵🧽餐厅吃饭被偶遇,一身搭配显华贵,小海绵🧽身高傲人(杨颖带小海绵🧽餐厅吃饭被偶遇)

最近,有网友在一家餐厅偶遇了杨颖和她儿子小海绵🧽一起吃饭。 杨颖和『黄晓明』离婚已经有三年,两人在带孩子方面一直有商有量。平时小海绵🧽跟着妈妈在香港生活、上学,杨颖也特意把工作安排得宽松一些,多抽时间陪他参加课外活动…

杨颖带小海绵🧽餐厅吃饭被偶遇,一身搭配显华贵,小海绵🧽身高傲人(杨颖带小海绵🧽餐厅吃饭被偶遇)

才播4集,就荣登飙升榜冠军,连看2集,说真的:武侠剧就该这么拍

说完画面,我们再来聊聊剧情,基本上,现在的观众都比较挑剔了,什么俗套剧情早已不再能打动我们了,可在雪中悍刀行中,恕我直言,这剧情不仅紧凑而且构思巧妙,连我这个“老观众”都忍不住感叹编剧真是个有才华的人 咱来…

才播4集,就荣登飙升榜冠军,连看2集,说真的:武侠剧就该这么拍