NIST人工智能风险管理框架

NIST AI Risk Management Framework (AI RMF)

🇺🇸 美国 框架 人工智能 已发布
发布:2023-01-26
摘要

NIST AI风险管理框架为组织提供了一套自愿使用的AI系统风险管理方法。

正文

第一部分 引言

1.1 框架概述

NIST人工智能风险管理框架(AI RMF)旨在帮助组织设计、开发、部署和使用AI系统时更好地管理风险。该框架为AI风险管理提供了灵活、可扩展、非监管性的指导。

1.2 适用范围

本框架适用于:
(一)设计和开发AI系统的组织;
(二)部署或使用AI系统的组织;
(三)评估AI系统的第三方机构;
(四)受AI系统影响的利益相关者。

1.3 核心概念

  • AI风险:AI系统可能对个人、组织、社会或环境产生的负面影响。
  • 可信AI:在设计、开发、部署和使用过程中表现出特定特征的AI系统。
  • 风险管理:识别、评估、优先排序和减轻风险的过程。

第二部分 可信AI的特征

2.1 有效性

AI系统应产生准确、可靠的结果,满足其预定用途。有效性评估应考虑:
(一)系统是否实现了预期目标;
(二)系统输出是否足够准确;
(三)系统是否在预期环境中正常工作。

2.2 安全性

AI系统不应对人、财产或环境造成不合理的安全风险。安全考量包括:
(一)系统故障的潜在危害;
(二)系统被恶意使用的风险;
(三)系统与人类交互的安全性。

2.3 安全保障

AI系统应具有适当的安全措施,包括:
(一)网络安全措施;
(二)数据安全保护;
(三)防止未经授权的访问和使用。

2.4 可靠性

AI系统应表现出一致的行为和性能,包括:
(一)在相似输入下产生相似输出;
(二)在预期条件下稳定运行;
(三)容错和恢复能力。

2.5 韧性

AI系统应能够承受和从错误、故障、攻击中恢复,包括:
(一)检测异常和故障的能力;
(二)优雅降级的能力;
(三)快速恢复的能力。

2.6 可问责性

AI系统的相关方应对其行为和决策负责,包括:
(一)明确责任归属;
(二)建立问责机制;
(三)提供补偿和补救途径。

2.7 可解释性

AI系统的决策和行为应能被理解,包括:
(一)系统如何做出决策;
(二)输入如何影响输出;
(三)决策过程的透明度。

2.8 可解释度

应提供AI系统运作的清晰说明,包括:
(一)系统的能力和限制;
(二)训练数据和算法的信息;
(三)决策逻辑的解释。

2.9 隐私增强

AI系统应保护个人隐私,包括:
(一)最小化数据收集;
(二)实施隐私保护技术;
(三)遵守隐私法规。

2.10 公平性

AI系统不应产生不公平的歧视性影响,包括:
(一)避免偏见和歧视;
(二)确保公平的结果;
(三)保护弱势群体。

第三部分 AI风险管理过程

3.1 治理

建立AI风险管理的组织结构和文化:
(一)政策和流程:制定AI风险管理政策和程序;
(二)角色和责任:明确各相关方的职责;
(三)培训和意识:提高员工的风险意识;
(四)资源和预算:分配足够的资源。

3.2 映射

识别和描绘AI风险:
(一)上下文分析:了解AI系统的使用环境和利益相关者;
(二)风险识别:识别AI系统可能带来的风险;
(三)风险分析:分析风险的可能性和影响;
(四)风险优先排序:根据严重程度确定处理顺序。

3.3 测量

量化和评估AI风险:
(一)定量指标:使用数值指标衡量风险;
(二)定性评估:使用专家判断评估风险;
(三)风险阈值:设定可接受的风险水平;
(四)持续监控:持续监测风险变化。

3.4 管理

采取行动处理AI风险:
(一)风险规避:避免导致风险的活动;
(二)风险转移:将风险转移给第三方;
(三)风险缓解:采取措施降低风险;
(四)风险接受:接受无法消除的风险。

第四部分 配置文件

4.1 配置文件概述

配置文件是组织根据自身需求定制的风险管理方案,用于:
(一)评估当前风险管理状态;
(二)确定目标风险管理状态;
(三)识别改进机会。

4.2 层级配置

根据组织的AI成熟度和风险承受能力,配置可分为:
(一)第一层:部分实施风险管理;
(二)第二层:风险管理已意识并开始实施;
(三)第三层:风险管理已标准化实施;
(四)第四层:风险管理已适应并持续改进。

第五部分 实施指南

5.1 起步阶段

组织在初期应:
(一)评估AI使用情况;
(二)识别主要风险领域;
(三)建立初步治理结构;
(四)制定AI风险管理计划。

5.2 发展阶段

组织在发展中应:
(一)完善风险管理流程;
(二)建立风险评估能力;
(三)实施持续监控机制;
(四)培养风险管理文化。

5.3 成熟阶段

组织在成熟期应:
(一)优化风险管理效率;
(二)实现风险管理的自动化;
(三)与利益相关者协作;
(四)持续改进和适应。

第六部分 附录

6.1 术语表

本框架中的关键术语定义。

6.2 参考资料

相关标准和指南的参考列表。

6.3 使用案例

不同行业的AI风险管理示例。