为大模型与智能体套上“紧箍咒”蚂蚁集团连发两款开源安全模型

封面新闻记者 张越熙
随着人工智能从单纯的紧箍咒内容生成向自主执行演进,安全挑战的模型边界已从模型输出内容扩展至行为控制、权限管理及系统治理层面。体套团连智能体(Agent)开始具备自主调用工具、上蚂运行代码及规划复杂任务的蚁集源安能力,大模型也逐步融合图像、发两文本等多模态信息。款开这种能力的全模跃升在拓展AI应用边界的同时,也引发了更为复杂的紧箍咒安全隐患。
7月13日,模型蚂蚁AI安全实验室正式开源智能体安全护栏 SingGuard-NSFA,体套团连并同步披露多模态安全护栏 SingGuard的上蚂核心技术细节。这两款模型分别针对“自主执行的蚁集源安智能体”与“多模态交互的大模型”两大核心场景,旨在构建更完善的发两底层安全体系。
智能体自主性越强,款开安全风险呈指数级放大
过去一年,提示词注入、权限滥用、恶意代码执行及数据泄露等安全事件频发。从 Amazon Q 的提示词投毒、Microsoft Copilot 的数据泄露,到开源智能体 OpenClaw 暴露出的注入风险,一系列案例表明:智能体的自主性越高,其潜在的安全风险放大效应越显著。
政策层面也在加速响应。2025年12月,OWASP 发布《智能体应用安全十大风险》,系统梳理了智能体特有的安全威胁;2026年5月,国家网信办、国家发展改革委、工业和信息化部联合印发《智能体规范应用与创新发展实施意见》,首次在国家层面对智能体安全治理提出明确要求。
在此背景下,AI 的角色正从“回答问题”转向“自主办事”。当 AI 开始调用工具、执行代码并编排多步任务时,安全风险不再局限于内容合规,更体现在行为层面。传统的内容审核体系难以有效覆盖提示词注入、敏感信息窃取、恶意代码执行、资源耗尽及权限滥用等新型威胁。
SingGuard-NSFA:构建智能体行为防护闭环
针对上述痛点,SingGuard-NSFA聚焦于智能体执行动作前的实时安全检测,从“请求拦截”和“响应兜底”两端构建行为安全防护体系。
- 标准化风险分类:基于 CIA(保密性、完整性、可用性)原则,并结合 OWASP 等国际安全指南,SingGuard-NSFA 将智能体风险细分为 7大类、28个中类及185个具体场景。
- 大规模评测体系:建立了覆盖 133种语言、近10万条样本的智能体安全评测体系,确保检测的全面性与准确性。
- 灵活的技术架构:
- 双模式运行:提供“详细风险分析报告”模式(适用于事后审查与合规记录)和“50毫秒实时判定”模式(适用于高并发场景下的实时拦截)。
- 多规格部署:提供 0.8B、2B、4B、9B 四种模型规模,满足不同算力与业务场景的部署需求。
SingGuard:应对多模态交互的复杂攻击
与智能体行为安全并行的另一条防线,是多模态交互场景下的内容安全。
今年6月,Anthropic 发布的旗舰模型 Claude Fable 5 在数日内即被研究者利用 Unicode 字符和西里尔字母替换敏感词,成功绕过安全护栏。这一事件揭示了一个严峻现实:当模型具备强大的跨模态理解能力时,传统基于关键词识别的安全护栏往往力不从心。模型能还原变形文字的原意,而分类器却将其视为陌生拼写,导致系统提示词被恶意套取。
为此,蚂蚁推出了 SingGuard多模态安全护栏:
- 统一安全判断框架:面向文本、图片及跨模态内容建立统一检测机制,有效识别攻击者将恶意意图隐藏在文字、图片等不同模态中的复杂攻击。
- 动态规则更新:支持运行时动态加载自然语言安全规则,无需重新训练模型即可实现规则迭代,极大提升了在规则持续演进、业务流量巨大的生产环境中的适应性。
行业观点:安全是智能体规模化应用的基础
中国信通院人工智能研究所安全治理部副主任呼娜英指出,随着大模型从内容生成迈向自主执行,AI 安全正从单一的内容审核延伸至行为管控和系统治理。构建完善的安全能力,已成为智能体规模化应用的重要基础。
(责任编辑:热点)
-
矩阵超智创始人张海星:未来人形机器人价格会陡峭下降,大多数家庭会像买车一样尝试
人形机器人企业矩阵超智计划于2026年5月正式推出量产级产品 MATRIX-3,其首发定价区间锁定在 58万至68万元。在《潮起・上海篇》节目中,矩阵超智创始人张海星深入剖析了行业趋势,他指出,随着量 ...[详细]
-
英阿大战火药味十足:2次大规模冲突+19次犯规,世界杯主裁惹争议
北京时间7月16日凌晨,世界杯半决赛第二场,阿根廷男足对阵英格兰男足。从历史战绩来看,阿根廷此前5次征战世界杯半决赛保持全胜,最近一次胜利是在上一届以3-0横扫克罗地亚。英格兰方面,此前3次闯入半决赛
...[详细]
-
在电视剧《小芳》的最新剧情中,杨小芳与祁小伟正式分手。对于这一决定,绝大多数观众与我一样——举双手赞成。祁小伟不仅心智不成熟、缺乏担当,更是耳根子软、遇事摇摆。除去那张还算在线的脸,他几乎找不到任何值
...[详细]
-
7月14日,昆凌在社交平台分享了一段精心制作的大女儿海瑟薇Hathaway)生日Vlog。视频生动记录了一场从伦敦温网赛场无缝切换至家庭温馨派对的旅程——周杰伦与昆凌在观赏完温网决赛后,即刻启程返台,
...[详细]
-
HWMonitor 1.65首发支持RTX 50系列热点温度实时读取
英伟达在 GeForce RTX 50 系列显卡的参考设计中内置了热点温度传感器,但此前用户一直无法直接获取该传感器采集的温度数据。这一限制现已突破。最新发布的 HWMonitor 1.65 版本已正 ...[详细]
-
44年神迹续写!劳塔罗绝杀含泪救赎,守护国米世界杯决赛神奇定律
世界杯赛场最无解的44年玄学定律,今夜被一个男人亲手守住。自1982年西班牙世界杯起,世界足坛诞生了一段不朽传奇:每一届世界杯决赛赛场,必有国际米兰球员的身影。整整44年,历经11届大赛,无论冠军归属
...[详细]
-
数字消费蓬勃兴起,文旅体育备受青睐,银发经济蓄势待发……当前,居民消费正加速从“买商品”向“享服务”转型,“服务”所蕴含的生产力正在全面释放。7月15日,中国经济半年报正式出炉。数据显示,上半年社会消 ...[详细]
-
韩国证券交易所(资料图)韩国综合股价指数(KOSPI)在15日大幅高开,迅速收复7000点整数关口,盘中涨幅一度超过7%。受美联储加息预期降温及隔夜纽约股市半导体板块集体上涨的双重利好提振,韩国股市呈 ...[详细]
-
7月13日,都市情感短剧《野有蔓草》别名《姐姐的秘密花园》)在浙江横店影视城正式举行开机仪式。该剧由薇蜜幸福出品、亮光文化联合出品并承制,深度聚焦当代都市男女的情感羁绊与自我成长。这是两性情感专家、V ...[详细]
-
2026年盛夏,一档原本定位“大女主”的综艺节目意外“跑偏”,硬生生演变成了离婚实录。当下的舆论生态颇为魔幻:似乎不经历一次离婚,婚姻便不算完整;且这离还得离得漂漂亮亮、轰轰烈烈,方能成为流量密码。严 ...[详细]
- 美股芯片股大涨,SK海力士飙涨27%,IBM市值蒸发近700亿美元,美联储加息预期有变
- 新能源车平均车龄1.8年?奕境曾清林分析化解“过时焦虑”最优解
- 新华社文化随笔|长安一阕诗 丝路万里风
- Chrome、Edge、Firefox同步提速至双周更新,Firefox试点先行
- “消失”的人工客服,一个电话就能解决的事,为何把人逼到“走投无路”?
- 安雅新剧从头跑到尾,刺激到让人喘不过气
- ESPN:与M费相反,蒂莱曼斯渴望为曼联效力
- 苹果“Apple智能”大模型完成国内备案 接入阿里千问和百度AI能力
- 4K视频存储卡推荐:三星T9 microSD适配全场景创作
- AI时代的人防宣传如何破题?这场沙龙给出答案

靠谱大容量TF卡推荐:三星T7,多场景存储优选
《雀骨》因女主未成年而遭举报,可剧中无吻戏,说好让少女演少女