标准号:T/CSES 179-2024
标准名称:生态环境领域人工智能算法评估方法
团体名称:中国环境科学学会
发布日期:2024年12月25日
实施日期:2024年12月25日
本标准正文由7部分组成,主要内容如下:
(1)前言
概述标准的编制背景、编制依据、编制内容等。
提出标准的编制规定、提出单位、归口单位、参编单位、参编人员等内容。
(2)引言
概述了标准提出的政策背景和目的。
(3)范围
概述本标准规定的内容和适用范围。
本文件规范了生态环境领域人工智能算法的评估体系、评估流程及方法。
本文件适用于指导生态环境领域人工智能算法开发方、用户方以及相关组织对生态环境领域人工智能算法开展的评估工作。
(4)规范性引用文件
列出了在本标准中被引用的文件,包括以下文件:
GB/T20986信息安全技术网络安全事件分类分级指南
GB/T41867信息技术人工智能术语
GB/T42888信息安全技术机器学习算法安全评估规范
T/CESA1036信息技术人工智能机器学习模型及系统的质量要素和测试方法
(5)术语和定义
列出了在本标准中出现的相关术语及其定义。规定或引用了生态环境领域人工智能算法评估涉及的相关术语和概念,区别于其他相关概念,主要术语包括:人工智能、对抗攻击、物理对抗攻击、模型后门攻击、可解释性、可靠性、可控性、鲁棒性、测试元。
(6)缩略语
列出了在本标准出现的相关缩略语,包括API(应用程序接口)、ASR(攻击成功率)、GPU(图形处理器)、MAE(平均绝对误差)、MAPE(平均绝对百分比误差)、MSE(均方误差)、R2(决定系数)。
(7)评估体系
本部分参照GB/T42888和T/CESA1036,结合生态环境领域应用场景,制定了一套生态环境领域人工智能算法评估体系,包含5个一级指标、11个二级指标。
一级指标包含算法性能、可解释性、可控性、安全性、维护性。
二级指标:包含精准性、效能、可解释性、可控性、可靠性、计算环境的鲁棒性、保密性、兼容性、可维护性、可移植性、可扩展性。
(7)评估流程
本部分明确了生态环境领域人工智能算法评估流程,包括确定评估目标、制定评估方案、执行评估、汇总评估结论四个活动。
(8)评估方法
本部分针对指标体系中的一级和二级指标,提出了指标的评估方法。
(9)(资料性)算法评估实施案例
本部分依据本文件给出了算法评估实施案例作为参考。
起草单位:生态环境部信息中心、浙大启真未来城市科技(杭州)有限公司、天津市生态环境科学研究院、联通(浙江)产业互联网有限公司、广东省环境科学研究院、生态环境部环境规划院、浙江工业大学、浙江大学滨江研究院
起草人:陈晋音、 张波,苏蒙蒙,范亚云、吴犇、毛永坚、李燕捷、王小涵,王立群,严金英、钟海林、蒋洪强,章俊屾,潘晓华、叶佩思、朱景熹