近日,绿盟科技自主研发的大模型安全评估系统登录《人民日报》,展示了公司在AI安全治理与风险评估领域的技术积累与实践成果。在人工智能加速渗透千行百业的今天,安全已成为AI规模化落地不可逾越的生命线。绿盟大模型安全评估系统正是为解决企业在AI应用过程中面临的内容安全、模型安全、数据安全、供应链安全、智能体安全等核心挑战而生,为企业构建安全、合规、可信的AI业务环境,提供专业评估与治理支撑。
全链路、多维度,构建AI安全评估新范式
绿盟大模型安全评估系统深度融合语义理解、意图识别、行为分析等前沿技术,形成覆盖“训练-部署-应用”的全生命周期安全评估体系,具备以下五大核心能力:
1. 内容安全与合规评估体系
● 国标精准对标:严格依据《GB/T 45654-2025 生成式人工智能服务安全基本要求》国标规范,构建覆盖5大类31子类的内容安全检测框架,确保模型输出符合社会主义核心价值观与法律法规。
● 场景化拒答验证:针对应拒答及非拒答场景进行专项测试,验证模型安全对齐机制的有效性,防止违规内容外泄。
● 多维度合规审计:支持生成内容安全、应拒答合规、非拒答合规的全方位评估,为企业提供可追溯、可审计的合规证据链。
2. 对抗攻击与防御能力评估体系
● 24类对抗风险库:集成模型越狱、角色逃逸、提示词攻击、反演攻击、过度代理攻击、模型幻觉等8大类24子类的前沿攻击手法,模拟高仿真对抗场景。
● 动态载荷智能生成:支持变种越狱攻击、多轮交互式对抗测试,突破表层防护,挖掘深层次对抗安全风险。
● 红队式攻防演练:提供自动化、批量化攻击模拟能力,助力企业建立持续进化的AI安全防御体系。
3. 智能体安全评估体系
● 智能体全链路风险评估:针对基于Dify、n8n等主流平台构建的AI智能体,支持内容合规、提示词攻击、MCP工具滥用安全、RAG安全、行为偏离等核心风险检测。
● 场景化用例智能生成:自动解析智能体功能画像,智能生成贴合业务逻辑的安全测试用例,实现从“应用理解”到“风险发现”的闭环。
● 强大的场景及框架覆盖能力:具备强大的场景覆盖及框架自适应能力,聚焦不同场景,实现快速对接于场景化深度评估,确保智能体在复杂环境中行为可控、合规。
4. 训练数据安全评估体系
● 训练数据合规评估:支持对训练数据集中存在的内容合规、版权争议、偏见歧视、数据投毒等风险进行识别与评估。
5. 供应链安全评估体系
● 模型后门与恶意代码检测:支持GGUF、PyTorch、TensorFlow等多种主流模型格式的深度扫描,有效识别后门植入、恶意序列化攻击等供应链威胁。
● 全栈组件漏洞库:覆盖Ollama、LangChain、Ray等主流AI组件漏洞,防范第三方组件引入的安全风险。
截至目前,绿盟大模型安全评估系统已支持150+大模型的安全评估,并具备快速适配与灵活扩展能力,现已在政府、金融、能源、企业、运营商等多个行业形成落地。
未来,绿盟科技将持续深化在语料安全评估、智能体安全评测、红队对抗评估等方向的技术积累与场景实践,携手产业各方共建安全、可信、可持续发展的AI生态,推动人工智能在千行百业中安全落地。
股票
板块
用户
资讯
评论 (0)