互联网资讯 · 2023年12月1日

蚂蚁集团发布国内首个大模型安全一体化解决方案“蚁天鉴”

9月11日消息,今日,蚂蚁集团发布大模型安全一体化解决方案“蚁天鉴”。该方案包含了大模型安全检测平台“蚁鉴2.0”、大模型风险防御平台“天鉴”两大产品,拥有多项功能。这也是大模型浪潮以来首个可实现产业级应用的大模型安全检测与防御一体化解决方案。目前这两项产品已对外开放。

蚂蚁工作人员表示,大模型安全问题产生的本源主要为三个因素。此次发布的“蚁天鉴”,主要从大模型安全性检测度量、智能风险防控等方面,来保障大模型在生产和使用过程中更加安全、可控、可靠。

据蚂蚁方面介绍,“蚁鉴2.0”是业内首个产业级支持文本、图像等全数据类型的AI安全检测平台。它相当于站在“黑产”角度,通过智能攻击对抗技术,自动生成数百万的诱导性问题,对生成式大模型进行诱导式问答,并对大模型的回答实时、自动化的检测计算,24小时不眠不休“找茬”大模型存在的弱点和安全问题。

“蚁鉴2.0”最新实现对AIGC生成图片、视频等多模内容的“真伪”辨别和安全性检测,基于生成模型构建的近千万深度伪造样本,可快速分辨内容是机器生成还是人工生成,及是否存在伦理道德等风险。

“天鉴”则相当于在大模型外围又加上了一个“防护盾”,通过智能化风控技术,帮助大模型挡住外界的恶意提问,同时对生成的回答内容进行风险过滤,保障大模型上线后从用户输入到生成输出的整体安全防御。

据了解,“天鉴”平台基于问(人类知识)、答(AI知识)环节不同的特点,构建了一套护栏防御的智能风控方案,支持风险内容识别、阻断、反制等全链路服务。

据介绍,“天鉴”平台集大数据底座、AI计算平台、智能运营、应用场景为一体,可实现低成本、规模化快速应用,服务零售、金融、直播、游戏等提供生成式人工智能服务的业务场景。

此外,针对数据源头有毒、深度黑盒不可控等问题,蚂蚁集团结合“天鉴”平台在大模型的训练和应用过程中,也在通过数据去毒、对齐训练、可解释研究等手段保障模型安全。

OpenMagic API

Need more than content? Move into the product flow.

If you are here for model access, pricing, developer docs, or the future API console, the dedicated product path now lives on api.openmagic.ai.