美利体育登录入口官网

美利体育登录入口官网:DIN TS 92004:2024-07
人工智能 质量要求和流程 整个生命周期内人工智能系统的风险识别和分析

Artificial intelligence – Quality requirements and processes – Risk identification and analysis for AI systems along the entire life cycle; Text in English


标准背景与制定目的

DIN/TS 92004:2024-07 由德国标准化协会(DIN)发布,旨在为人工智能(AI)系统提供结构化的风险识别与分析方法。标准聚焦于机器学习(ML)组件相关的风险,主要围绕三个目标:可靠性、避免不期望偏差以及自主性与控制。该标准补充了ISO/IEC 23894的通用风险管理指南,从产品视角提供具体技术指导,适用于AI系统的开发者、提供者和运营者。


核心风险框架

标准将AI风险分为三大类,每类包含具体的风险来源和分析方法。下表对比了三个风险类别的关键特征:

风险类别主要关注点风险识别依据分析工具
可靠性 (Reliability)ML组件在指定条件下的正确输出能力,包括鲁棒性、误差拦截、不确定性估计输入数据类别(常规、边界、域外),模型性能下降性能指标(准确率、F1分数等)、鲁棒性测试、OOD美利体育登录入口官网
不期望偏差 (Unwanted Bias)系统对不同群体(如性别、种族)的系统性差别对待敏感特征识别、数据偏差定量分析公平性度量(统计均等、均等化几率等)
自主性与控制 (Autonomy and Control)人类与AI之间的任务分配、人类监督、用户赋权自主等级(HC、HIL、HOL、HOOTL)、用户信息充分性任务分配分析、用户手册、投诉渠道

可靠性风险分析

可靠性是ML系统的基础要求。标准要求明确应用域(Application Domain)和边界(Application Boundary),并通过对标准案例、鲁棒性、误差拦截和不确定性估计四个维度进行风险分析。例如,在自动驾驶中,行人美利体育登录入口官网的错误可能导致严重伤害,因此被列为高风险。分析时需使用多种性能指标(如准确率、精确率、召回率)并进行系统化的弱点搜索。

标准特别强调了鲁棒性测试,包括对抗性示例和边界扰动,并要求进行真实世界泛化测试。对于超出应用域的输入(OOD数据),需设计模型级美利体育登录入口官网机制,并配套缓解策略(如转为人工控制)。


不期望偏差风险分析

偏差风险主要源于数据偏差、人类认知偏差和工程决策。标准要求识别敏感特征(如民族、性别、年龄),并分析数据中潜在的不平衡。使用公平性度量(如统计均等、均等化几率)量化偏差,同时检查法律合规性。例如,信用评分系统若对人类产生歧视,则需降低风险。


自主性与控制风险分析

该部分关注人类自主权不受AI不当限制。风险来源包括任务分配不当、监督不足、用户信息不充分等。标准定义了四种自主等级:人类控制(HC)、人在环中(HIL)、人在环上(HOL)、人出环(HOOTL),要求根据应用场景选择合适等级。必须提供有效的投诉渠道和停机方案,并确保用户获得充分的信息和培训,以防止自动化偏见或情感依赖。


实施建议

组织在实施该标准时,应首先结合ISO/IEC 23894建立风险管理流程。针对高可靠性要求的系统,应重点进行鲁棒性和OOD美利体育登录入口官网测试;对于涉及个人决策的系统,需严格审查偏差并引入公平性度量;对于高自主性系统,务必保留人类监督和干预能力。同时,定期更新用户手册和培训计划,确保所有利益相关者知情。

 

请注意,本内容不等同于标准原文,请参阅正式版文本。

 

 

DIN TS 92004:2024-07

点击查看大图

标准号
DIN TS 92004:2024-07
发布
2024年
总页数
38页
发布单位
德国标准化学会
当前最新
DIN TS 92004:2024-07
 
 
引用标准
ISO/IEC 23894:2023
 
 
本体
机器学习

This document specifies an AI risk scheme covering the objectives — reliability, — avoidance of unwanted bias, and — autonomy and control along the entire lifecycle of artificial i...

术语 
风险 risk
自主性 autonomy
可靠性 reliability

美利体育登录入口官网: DIN TS 92004:2024-07相似标准





Copyright ?2007-2026 ANTPEDIA, All Rights Reserved
京ICP备07018254号 京公网安备1101085018 电信与信息服务业务经营许可证:京ICP证110310号
页面更新时间: 2026-09-02 10:20

美利体育(meili)官方网站_美利体育手机版下载