ICS35.040 CCS L 71 GB 中华人民共和国国家标准 GB/T 42382.1—2023 信息技术 神经网络表示与模型压缩 第1部分：卷积神经网络 Information technologyNeural network representation and model compression- Part 1 :Convolutional neural network 2023-03-17发布 2023-10-01实施 国家市场监督管理总局 发布 国家标准化管理委员会 GB/T 42382.1—2023 目 次 前言 II 引言 1 范围 2 规范性引用文件 3 术语和定义 4. 缩略语 约定 5.1 规则 5.2 算术运算符 5.3 逻辑运算符 5.4 关系运算符 5.5 位运算符 5.6 赋值 5.7 数学函数 5.8 结构关系符 5.9 解析过程和解码过程的描述方法 6 神经网络模型的语法和语义 6.1 数据结构 6.2 语法描述 6.3 语义描述 15 7 压缩过程 75 7.1 多模型 75 7.2 量化… 80 7.3 剪枝 102 7.4 结构化矩阵 105 解压过程(解码表示) 112 8.1 多模型 112 8.2 反量化 118 8.3 反稀疏化/反剪枝操作 128 8.4 结构化矩阵 131 9 数据生成方法 138 9.1 定义 138 9.2 训练数据生成方法 139 9.3 多模型 145 9.4 量化 150 9.5 剪枝 169 GB/T 42382.1—2023 9.6 结构化矩阵 176 10 编解码表示 184 10.1 神经网络模型权重压缩位流的语法和语义· 184 10.2 权重压缩位流的语法描述 189 10.3 权重压缩位流的语义描述 212 10.4 权重压缩位流解析过程 222 10.5 权重压缩位流解码 233 11 模型保护 241 11.1 模型保护定义 241 11.2 模型加密过程 242 11.3 模型解密过程 243 11.4 密文模型数据结构定义 245 附录A（资料性） 专利列表 246 参考文献 247 II GB/T 42382.1—2023 前言 本文件按照GB/T1.1一2020《标准化工作导则 厂第1部分：标准化文件的结构和起草规则》的规定 起草。 本文件是GB/T42382《信息技术 神经网络表示与模型压缩》的第1部分。GB/T42382已经发 布了以下部分： 第1部分：卷积神经网络。 本文件由全国信息技术标准化技术委员会（SAC/TC28)提出并归口。 本文件起草单位：北京大学、鹏城实验室、深圳市海思半导体有限公司、赛灵思电子科技（北京)有限 公司、杭州海康威视数字技术股份有限公司、北京百度网讯科技有限公司、深圳市腾讯计算机系统有限 公司、华为技术有限公司、厦门大学、中国电子技术标准化研究院、中国科学院自动化研究所、浙江大学、 中国科学技术大学、上海交通大学、清华大学、中关村视听产业技术创新联盟。 本文件主要起草人：田永鸿、杨帆、纪荣嵘、单奔、陈光耀、燕肇一、郑侠武、浦世亮、谭文明、李哲陽、 彭博、钟刚、赵恒锐、段文鸿、胡浩基、李翔、骆阳、王炜、许奕星、李慧霞、林绍辉、王培松、赵依、胡晓光、 郑辉煌、蒋佳军、马金成、程健、江帆、朱文武、汪小娟、高文、黄铁军、赵海英、马珊珊。 Ⅲ GB/T 42382.1—2023 前言 本文件按照GB/T1.1一2020《标准化工作导则 厂第1部分：标准化文件的结构和起草规则》的规定 起草。 本文件是GB/T42382《信息技术 神经网络表示与模型压缩》的第1部分。GB/T42382已经发 布了以下部分： 第1部分：卷积神经网络。 本文件由全国信息技术标准化技术委员会（SAC/TC28)提出并归口。 本文件起草单位：北京大学、鹏城实验室、深圳市海思半导体有限公司、赛灵思电子科技（北京)有限 公司、杭州海康威视数字技术股份有限公司、北京百度网讯科技有限公司、深圳市腾讯计算机系统有限 公司、华为技术有限公司、厦门大学、中国电子技术标准化研究院、中国科学院自动化研究所、浙江大学、 中国科学技术大学、上海交通大学、清华大学、中关村视听产业技术创新联盟。 本文件主要起草人：田永鸿、杨帆、纪荣嵘、单奔、陈光耀、燕肇一、郑侠武、浦世亮、谭文明、李哲陽、 彭博、钟刚、赵恒锐、段文鸿、胡浩基、李翔、骆阳、王炜、许奕星、李慧霞、林绍辉、王培松、赵依、胡晓光、 郑辉煌、蒋佳军、马金成、程健、江帆、朱文武、汪小娟、高文、黄铁军、赵海英、马珊珊。 Ⅲ GB/T 42382.1—2023 前言 本文件按照GB/T1.1一2020《标准化工作导则 厂第1部分：标准化文件的结构和起草规则》的规定 起草。 本文件是GB/T42382《信息技术 神经网络表示与模型压缩》的第1部分。GB/T42382已经发 布了以下部分： 第1部分：卷积神经网络。 本文件由全国信息技术标准化技术委员会（SAC/TC28)提出并归口。 本文件起草单位：北京大学、鹏城实验室、深圳市海思半导体有限公司、赛灵思电子科技（北京)有限 公司、杭州海康威视数字技术股份有限公司、北京百度网讯科技有限公司、深圳市腾讯计算机系统有限 公司、华为技术有限公司、厦门大学、中国电子技术标准化研究院、中国科学院自动化研究所、浙江大学、 中国科学技术大学、上海交通大学、清华大学、中关村视听产业技术创新联盟。 本文件主要起草人：田永鸿、杨帆、纪荣嵘、单奔、陈光耀、燕肇一、郑侠武、浦世亮、谭文明、李哲陽、 彭博、钟刚、赵恒锐、段文鸿、胡浩基、李翔、骆阳、王炜、许奕星、李慧霞、林绍辉、王培松、赵依、胡晓光、 郑辉煌、蒋佳军、马金成、程健、江帆、朱文武、汪小娟、高文、黄铁军、赵海英、马珊珊。 Ⅲ