虎科技
业界资讯 手机产品 数码产品 移动互联 软件产品 智能汽车 生活家电 关于我们 热点资讯

蚂蚁开源SingProbe:以轻量探针实现大模型生成风险实时拦截

2026-09-14来源:天脉网编辑:瑞雪

蚂蚁集团AI安全实验室近日宣布,正式开源一款名为SingProbe的大模型内生式安全护栏技术。与传统的外挂式安全审核模式不同,该技术通过复用基座模型推理过程中的隐藏状态,以极低的计算成本实现风险信号的实时输出,为人工智能安全领域提供了全新解决方案。

当前主流的大模型安全防护普遍采用外挂架构,即在模型输入输出两端分别部署独立审核模块。这种设计虽然能实现完整内容检查,但存在双重计算成本高、响应延迟大等缺陷。更关键的是,外挂模型容量通常仅为基座模型的十分之一,面对复杂语义时容易出现理解偏差,导致误判或漏判风险内容。

SingProbe创新性地采用内生式设计,直接读取模型推理过程中产生的隐藏状态信息。通过部署仅数百万参数的轻量级探针,该技术能够在文本生成过程中同步完成意图分类、安全检测和幻觉识别三项核心任务。实验数据显示,其额外计算开销不足0.5%,却能实现token级别的实时风险评估,在内容完整输出前即可完成拦截。

在医疗健康等高风险场景中,这种技术优势尤为突出。当模型处理用药建议、疾病诊断等敏感信息时,SingProbe可持续监测每个生成单元的安全性,对潜在风险内容实施毫秒级阻断。这种特性有效解决了传统方案中"先生成后审核"导致的暴露风险,为医疗AI应用提供了关键安全保障。

从行业格局来看,外挂式方案仍是当前主流选择。包括绿盟科技、百度、阿里巴巴等国内企业,以及国际知名的Llama Guard 3、ShieldGemma等项目,均采用这种成熟架构。而内生式安全技术作为新兴方向,虽然学术界已有相关研究,但SingProbe是首个由大型科技企业开源的完整解决方案,目前已实现与29个主流大模型的适配。

该技术的开源代码和预训练模型已同步发布,包含完整的实现框架与使用文档。这种开放姿态将推动行业建立更高效的安全防护标准,特别是在需要实时风险监控的垂直领域,为人工智能技术的可信应用提供重要支撑。

TikTok美区直播:占比波动下的探索,能否成为未来电商新引擎?
杭州的东南亚直播卖家,2022年就开始做TikTok,他们通过与商家合作带货的模式,赚取佣金,只是当时的客单价还偏低,且当时有不少商家是以“清库存”的心态把货品放到TTS平台,于是在主推链接库存不稳定、整体…

2026-09-14

华为官宣:HarmonyOS 1.0等多款软件平台将停止技术支持服务
IT之家 9 月 14 日消息,华为官网今日更新了软件平台停止技术支持公告,宣布为 HarmonyOS 1.0 停止服务,EOS 正式生效时间为2026 年 9 月 14 日。 序号软件平台EOS 正式生效…

2026-09-14

百元耳夹式耳机怎么选?虹觅、漫步者、声阔三款实测,哪款更适合你?
安静室内环境下,三款耳机的语音通话清晰度表现相近,差距不大;进入嘈杂室内场景时,虹觅小云夹的降噪效果表现不错,有效减少环境噪音,通话质量也清晰。虹觅 小云夹:防漏音做得到位,音质在百元档很出彩,价格也是最…

2026-09-14

惠普海外发布OmniDesk Mini迷你主机:纯白外观小巧便携,至高酷睿5 320处理器
IT之家 9 月 13 日消息,惠普现已在海外市场推出全新 OmniDesk Mini 迷你主机。新产品采用英特尔 Wildcat Lake平台,拥有纯白色外壳。 据介绍,这款迷你主机尺寸为 130*130…

2026-09-13

2026秋季搜狐关注流大会启幕 明星播主齐聚共筑真人社交新体验
作为播主社交顶流盛会,本次大会以真人社交、活人感社交为核心底色,集结大量明星与各赛道优质顶流播主共同参与,构筑关注流大会超高人气,一起“转发是大王,评论是小王,转发时评论是王中王”。搜狐创始人、董事局主席兼首…

2026-09-13

阿里WaClaw重塑电商内容生产:AI助力商家轻松打造个性化种草方案
它当然可以生成图片和视频,但其更主要的目标,是把分散的工具、常见的种草玩法和商家的品牌素材接入同一套工作流程。 当AI能够帮助商家看懂一条热门视频,再把其中的方法转化为适合自家商品的内容时,“创意合伙人”这…

2026-09-13