Claude Code砸的坑,蚂蚁安全在尝试填上

2026-07-12 11:25:35 · chineseheadlinenews.com · 来源: 量子位

2026年,AI安全终于被推到了台前。

就在前两天,工信部NVDB平台发布风险预警,明确指出Claude Code存在安全后门隐患,可在用户不知情的情况下收集敏感信息。

时间线拨回更早,年初红遍全网的OpenClaw也屡屡被曝出高危险漏洞。

从横空出世到快速普及,再到漏洞频发、信任受损,这几乎是当前Agent产品共同的发展轨迹。

现在的AI能力是越来越大了,但闯出的祸也跟滚雪球似的。

滥用工具、恶意代码生成、提示注入等诸如此类的行为风险,早已不是一两个补丁就能彻底解决的。

△图片由AI生成

面对新的风险形态,一个越来越明显的趋势是,行业开始把注意力从“漏洞修补”转向“安全框架”本身。

最近蚂蚁开源的SingGuard-NSFA和SingGuard,就是其中比较值得关注的一次尝试。

前者看住智能体的行为,后者看住多模态大模型的感知。

其目的也很明确,就是在AI动手之前,将安全风险扼杀在摇篮之中。

之所以聊到这个项目,也是因为它的背景比较有意思。做这个框架的团队来自蚂蚁,一家在安全领域拥有长期积累的公司。

先是支付安全、风控体系,再到如今的AI安全,安全能力在这家公司内部本身就是一条持续演进的技术路径。

AI安全,正在换一套打法

其实OpenClaw也好,Claude Code也罢,它们的背后都指向同一个事实:风险的源头,已经从内容变成了行为本身。

过去做AI安全,本质还是互联网时代的那套打法,只需要紧盯模型输出完成内容审核即可。

但大模型早就不满足于聊天了,调工具、跑代码,它的手越伸越长,能触及的风险自然也越来越多。

光盯着模型说什么,显然不够,现在真正的问题是还要看模型做了什么。

偏偏这一块,是传统内容安全分类体系无法企及的盲区。

在此基础之上,多模态也来横插一脚。现在风险不止于文本,还可能藏在图像细节、图文组合,甚至模型自己的响应中。

更棘手的是,不同业务的安全红线也在持续动态变化,昨天合规,今天换个场景就可能踩线。

已知风险平时靠打打补丁还能勉强应付,所谓兵来将挡水来土掩,那么未知风险和不断变化的规则又如何解决呢?

所以答案很清晰了,单靠打补丁抑制风险是治标不治本,行业缺的不是一个又一个补丁,归根结底是一套能定义安全边界、应对未知风险和规则变动的底层框架。

两套框架,一个方向

蚂蚁安全最近开源的两大安全框架,就是冲着这个底层问题来的。

先看面向智能体安全的双模推理护栏框架SingGuard-NSFA,包括0.8B、2B、4B、9B四个尺寸。

它的核心思想是把安全检查前置到智能体执行之前,然后在请求拦截和响应兜底两端同时设卡,共同发力把防线从文本合规推进到行为安全。

支撑起这个判断的,是一套系统性的NSFA风险分类体系和多语种评测基准。

蚂蚁以经典的CIA三元组,也就是机密性、完整性、可用性为理论底座,再结合三份OWASP大模型与智能体安全指南的实践经验,把智能体可能出现的风险依次拆解排列。

然后借助SFT生成式推理与判别式分类头,两种模式同步进行风险拦截:

生成式模式:逐条输出基于NSFA定义的链式推理分析,让每一步判断都有据可查,适用于离线合规审计;

判别式模式:每次前向传播就直接给出各风险域的置信度,延迟可以压到45~57ms,可用于高吞吐的实时在线拦截。

这里还有个讨巧的设计,由于骨干网络是冻结的,真正下判断的是外挂在上面的轻量分类头,所以以后一旦冒出新风险,只需要补训一个小头就行,轻松实现原生可扩展。

换言之,这套架构还能当插件用,比如给Llama Guard 3额外增加一个分类头,用户请求安全基准的F1值直接提升17.6个百分点。

从整体效果来看,SingGuard-NSFA在3大评测基准(用户请求安全、模型响应安全、跨数据集泛化)上均取得SOTA,最小的0.8B模型就能比肩8B竞品,9B大小包是在泛化上达到91.29% F1,精度与召回更加均衡。

另一个开源框架则是面向多模态大模型的SingGuard,同样包括0.8B、2B、4B、8B四个尺寸。

它最大的特点,是把安全规则做成了运行时输入。不同业务域可以现场下发各自的红线,模型据此逐条判定。

也就是说,它回答的不只是有没有风险,也包括是否违反当前防控规则。

推理侧同样讲究快慢分工,快思考负责低延迟秒判,慢思考负责逐规则深度推理,两者之间还能通过early exit自动切换,在效率和准确性之间寻找平衡。

针对线上多条规则并行审核的效率瓶颈,蚂蚁还提出了RI-Mask,让共享的图文上下文只编码一次,多条规则并行判断,这样多模态推理最高可提速5倍以上。

显然,SingGuard-NSFA和SingGuard这两个框架各自面向的对象有所不同,一个更关注AI行为,另一个更关注AI感知,但它们的底色是一致的,都强调过程可解释、新增风险可扩展。

具体触犯了哪条规则、依据是什么,审核和追溯都拿得出理由,不是黑箱操作或简单下结论;新增风险都仅需轻量扩展,不影响已有的检测能力。

如果说很多安全产品解决的是具体问题,那么这一类框架更像是在定义未来智能体运行所依赖的安全基础设施。

再把时间线拉长来看,这次开源其实不是孤立事件。

今年早些时候,在全网关注OpenClaw漏洞的同时,蚂蚁AI安全实验室就曾发现多个高危漏洞并协助官方完成修复。

随后,蚂蚁与清华大学联合开源了ClawAegis,为智能体提供了一套覆盖产品全生命周期的安全方案。

再到最新的安全框架开源,这条脉络其实相当清晰:从漏洞挖掘到场景化解法,再到可复用的底层框架。

显然蚂蚁在AI安全上的布局,是在逐步收束成体系。

前不久,蚂蚁智能体安全产品还通过了信通院泰尔实验室的最高等级评级。这类第三方认证,至少也说明在工程落地上,蚂蚁确实走在了前面。

可以说,靠补丁续命的时代已经过去了,行业需要有人往前一步,去定义风险的边界,去搭建一套大家都能稳稳站上去的底座。

Claude Code、OpenClaw带来的讨论,某种程度上只是开始。随着Agent越来越深入办公、开发和生活场景,AI安全也将进入新的阶段。

相比不断追赶漏洞,如何建立一套能够持续适应风险变化的安全基础设施,或许才是整个行业下一步真正需要解决的问题。

从这个角度再回头看最近的这些开源动作,它们真正值得关注的,不只是性能指标,而是开始尝试回答一个更底层的问题:

AI时代的安全边界,究竟应该如何定义。


    24小时新闻排行榜更多>>
  1. 北京脱口秀演员、独立导演张内咸遭刑事拘留
  2. 超10万张床位,空了一半?
  3. 做记者,进“大厂”,当总理,她一路开挂
  4. 邹市明吐槽冉莹颖:不能既要又要还要
  5. 美军再炸伊朗!发动本周第3波攻击,防长撂狠话
  6. 被指大量向印度人发签证 中国驻印大使被国内网暴
  7. 川普杠上《纽时》
  8. 别盲目跟风!这3种理财产品千万别碰
  9. 挪威不只有哈兰德
  10. "不封不知道 一封天下知” 中共网信办给习起新外号
  11. 上海东海大桥已封闭管控
  12. 徐波炸裂言论连续输出8年,多益网络一点事都没有
  13. 南海坠机?解放军两官同日殉职 传还有第三罹难者
  14. 开国十大元帅单论战绩,谁是第一?
  15. 格雷厄姆猝死
  16. 中国驻欧盟使团发声
  17. 川普政府扶植英特尔,与台积电竞争
  18. 杭州机场傍飞机绑“安全带”,取消航班103架次
  19. 俄网网友如何看待我国火箭回收技术?
  20. 镇干部全程挡脸:太像作秀了,别拍我了
  21. 多年记者理想,说叛变就叛变了?
  22. 男女半裸陈尸车内,惊见保险套
  23. 又一百万粉丝网红因偷税塌房
  24. 伊朗关闭荷莫兹,警告将严厉回应
  25. 3.8亿水库改造刚完工 堤坝便被冲垮了
  26. 曾经的“土味单品”,凭什么逆袭成时髦顶流?
  27. 他敛财百亿成河北首富,最终锒铛入狱
  28. “上帝之手”40年后,阿根廷英格兰宿命对决
  29. 南海仲裁十周年,14国联合发声
  30. 老祖宗提醒:这3种面相的人 要少来往
  31. 80岁川普炫耀"体检结果完美",认知测试3度满分过关
  32. 乌克兰这一招,打中俄罗斯的七寸
  33. 一水泥罐车侧翻致6人死亡
  34. 美国水彩:Thomas W Schaller
  35. 刚踢完世界杯:南非国脚,享年25
  36. 台积电赢了现在的CPO,三星押注下一场
  37. TVB《开心速递》正式收厂
  38. 华人老板诈骗美邮政1.5亿美元,下场惨了
  39. 夫妇自费找猫30小时,结果它根本没出门
  40. 宠物泊车,罚款200
  41. 美伊第三轮互袭,停火何以为继?
  42. 709律师张仁揭警叫嚣:你们讲法 公安有拳头
  43. 新研究:美国车价持续攀高 比6年前涨30%
  44. 陈丹青的牛逼,真的是装出来的吗?
  45. 得了难治重病,该怎么选医生?
  46. 秋雨与马兰,相伴30年,咋没整个孩子?
  47. 哈马德逝世,享年74岁
  48. 折叠版iPhone,全数中国造
  49. 哈米尼葬礼"神秘蒙面男是谁?",外媒:不是新领袖
  50. 甘蔗是升火还是降火?
  51. 苹果与OpenAI反目:人才挖角如何演变为法律大战
  52. 中国在太平洋的核威慑能力有多大?
  53. SK海力士CEO:明年或是存储史上供应最紧张一年
  54. 苹果正式起诉OpenAI
  55. 俄罗斯买油救急,惨遭日本一口回绝
  56. 逆转晋级,英格兰队主帅发声
  57. 惊艳刷屏!台风巴威登陆前 杭州天空变成紫色、粉色
  58. 看一眼就能画出整座城市?人形相机的惊人世界
  59. 小伙被索要88万彩礼,分手后喜提奔驰
  60. 纽约市长:泰勒斯威夫特自掏腰包付警员加班费16万美元