国内首个大模型安全一体化解决方案亮相:蚂蚁集团发布“蚁天鉴”

9月11日消息,今日,蚂蚁集团发布大模型安全一体化解决方案“蚁天鉴”。该方案包含了大模型安全检测平台“蚁鉴2.0”、大模型风险防御平台“天鉴”两大产品,拥有AIGC安全性和真实性评测、大模型智能化风控、AI鲁棒和可解释性检测等多项功能。这也是大模型浪潮以来首个可实现产业级应用的大模型安全检测与防御一体化解决方案。目前这两项产品已对外开放。

蚂蚁工作人员表示,大模型安全问题产生的本源主要为“用于训练的数据源头有毒、推理过程不可控、外部恶意诱导”三个因素。此次发布的“蚁天鉴”,主要从大模型安全性检测度量、智能风险防控、数据去毒对齐等方面,来保障大模型在生产和使用过程中更加安全、可控、可靠。

据蚂蚁方面介绍,“蚁鉴2.0”是业内首个产业级支持文本、图像等全数据类型的AI安全检测平台。它相当于站在“黑产”角度,通过智能攻击对抗技术,自动生成数百万的诱导性问题,对生成式大模型进行诱导式问答,并对大模型的回答实时、自动化的检测计算,24小时不眠不休“找茬”大模型存在的弱点和安全问题。

“蚁鉴2.0”最新实现对AIGC生成图片、视频等多模内容的“真伪”辨别和安全性检测,基于生成模型构建的近千万 伪造样本,可快速分辨内容是机器生成还是人工生成,及是否存在伦理道德等风险。

“天鉴”则相当于在大模型外围又加上了一个“防护盾”,通过智能化风控技术,帮助大模型挡住外界的恶意提问,同时对生成的回答内容进行风险过滤,保障大模型上线后从用户输入到生成输出的整体安全防御。

据了解,“天鉴”平台基于问(人类知识)、答(AI知识)环节不同的特点,构建了一套护栏防御的智能风控方案,支持风险内容识别、阻断、反制等全链路服务。通过该方案,不仅可以在用户输入阶段即对其意图做快速理解和风险判断,并输出拒绝回答、知识代答等不同的风控交互方式,还可以快速迭代大模型的风险认知和防御能力,在兼顾用户体验的同时,确保其输出的内容合规、健康。

据介绍,“天鉴”平台集大数据底座、AI计算平台、智能运营、应用场景为一体,可实现低成本、规模化快速应用,服务零售、金融、直播、游戏等提供生成式人工智能服务的业务场景。

此外,针对数据源头有毒、 黑盒不可控等问题,蚂蚁集团结合“天鉴”平台在大模型的训练和应用过程中,也在通过数据去毒、对齐训练、可解释研究等手段保障模型安全。


企业会员

免责声明:本网站内容主要来自原创、合作伙伴供稿和第三方自媒体作者投稿,凡在本网站出现的信息,均仅供参考。本网站将尽力确保所提供信息的准确性及可靠性,但不保证有关资料的准确性及可靠性,读者在使用前请进一步核实,并对任何自主决定的行为负责。本网站对有关资料所引致的错误、不确或遗漏,概不负任何法律责任。任何单位或个人认为本网站中的网页或链接内容可能涉嫌侵犯其知识产权或存在不实内容时,应及时向本网站提出书面权利通知或不实情况说明,并提供身份证明、权属证明及详细侵权或不实情况证明。本网站在收到上述法律文件后,将会依法尽快联系相关文章源头核实,沟通删除相关内容或断开相关链接。

2023-09-11
国内首个大模型安全一体化解决方案亮相:蚂蚁集团发布“蚁天鉴”
9月11日消息,今日,蚂蚁集团发布大模型安全一体化解决方案“蚁天鉴”。

长按扫码 阅读全文

Baidu
map