(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211026132.2 (22)申请日 2022.08.25 (71)申请人 上海人工智能创新中心 地址 200232 上海市徐汇区云锦路701号 37、 38层 (72)发明人 黄海安　刘奎坤　张文蔚　杨逸飞　 陈恺　 (74)专利代理 机构 上海智晟知识产权代理事务 所(特殊普通 合伙) 31313 专利代理师 李镝的 (51)Int.Cl. G06N 20/00(2019.01) G06F 9/445(2018.01) G06F 9/448(2018.01) G06F 9/451(2018.01) (54)发明名称 一种深度学习算法可视化方法以及 图片可 视化方法 (57)摘要 本发明涉及一种深度算法可视化方法， 包 括： 提供包含 单个或多个可视化器和可视化后端 的可视化模块， 其中所述可视化器用于可视化， 所述可视化后端用于存储可视化内容， 且每个可 视化器均与单个或多个可视化后端通信； 确定调 用的可视化器和可视化后端， 并配置可视化器的 参数和可视化后端的参数； 根据配置参数初始化 可视化器和可视化后端； 存储并可视化深度学习 算法的配置文件； 可视化训练数据； 可视化深度 学习模型结构图； 以及确定当前是深度学习模型 的训练阶段或训练后， 进行相应的可视化。 该可 视化方法能够以一种统一的调用方式对深度学 习算法运行时的各个环节进行可视化分析， 帮助 快速分析深度学习模型。 本发明还 涉及一种图片 可视化方法。 权利要求书2页 说明书6页 附图3页 CN 115392483 A 2022.11.25 CN 115392483 A 1.一种深度算法可视化方法， 其特 征在于， 包括： 提供包含单个或多个可视化器和可视化后端的可视化模块， 其中所述可视化器用于可 视化， 所述可视化后端用于存储可视化内容， 且每个可视化器均与单个或多个可视化后端 通信； 确定调用的可视化器和可视化后端， 并配置可视化器的参数和可视化后端的参数； 根据配置参数初始化可视化器和可视化后端； 存储并可视化深度学习算法的配置文件； 由相应的可视化器可视化训练数据， 确定训练数据中的图片和标签是否正确， 并存储 在可视化后端； 由相应的可视化器可视化深度学习模型 结构图， 并存 储在由相应的可视化后端； 以及 确定当前状态是深度学习模型的训练阶段还是训练后， 若是训练阶段， 则进行模型参 数训练和损失计算， 然后由相应的可视化器可视化损失、 学习率、 训练中的特征图， 并存储 在相应的可视化后端， 若是训练后， 则由相应的可视化器可视化深度学习模型 的预测推理 结果以及深度学习模型的性能指标， 并存 储在相应的可视化后端。 2.根据权利要求1所述的深度算法可视化方法， 其特征在于， 根据任务确定单个或多个 所述可视化器， 其中所述可视化器包含绘制接口、 后端接口和OpenMMLab数据格式可视化接 口。 3.根据权利要求2所述的深度 学习算法化视化方法， 其特征在于， 所述可视化器通过所 述后端接口与单个或多个所述可视化后端通信， 从而调用单个或多个所述可视化后端， 将 可视化的内容存 储到所述可视化后端。 4.根据权利要求2所述的深度学习算法视化方法， 其特征在于， 所述OpenMMLab数据格 式可视化接口用于对OpenM MLab格式的数据样本进行绘制和存 储。 5.根据权利要求2所述的深度 学习算法视化方法， 其特征在于， 所述绘制接口被配置为 绘制检测框、 掩码、 文本、 点、 线以及特 征图。 6.根据权利要求2所述的深度 学习算法视化方法， 其特征在于， 所述可视化深度 学习模 型的预测推理结果包括利用可视化器的绘制接口来绘制检测框、 掩码、 文本、 点和线中的一 项或多项。 7.根据权利要求2所述的深度 学习算法视化方法， 其特征在于， 当所述深度学习 模型的 预测推理结果的数据格式为OpenMMLab数据格式时， 由所述OpenMMLab数据格式可视化接口 来绘制检测框、 绘制掩码、 绘制文本、 绘制点和绘制线中的一项或多项， 绘制结果由相应的 可视化器显示或者存 储在所述OpenM MLab数据格式可视化接口。 8.一种图片可视化方法， 其特 征在于， 包括： 提供包含单个或多个可视化器和可视化后端的可视化模块， 其中所述可视化器用于可 视化， 所述可视化后端用于存储可视化内容， 且每个可视化器均与单个或多个可视化后端 通信； 确定调用的多个可视化器和可视化后端， 并配置可视化器的参数和可视化后端的参 数； 根据配置参数初始化可视化器和可视化后端； 准备待可视化的原 始图片和相关的图片数据；权　利　要　求　书 1/2 页 2 CN 115392483 A 2调用可视化器提供的绘制接口对待绘制的原 始图片进行绘制； 以及 通过可视化器将绘制后的结果存 储到相应可视化后端。 9.根据权利要求8所述的图片可视化方法， 其特征在于， 所述可视化器包含绘制接口、 后端接口和OpenM MLab数据格式可视化接口； 所述可视化器通过所述后端接口与 单个或多个所述可视化后端通信， 从而调用单个或 多个所述可视化后端， 将需要可视化的内容发送到所述可视化后端中存 储； 所述OpenMMLab数据格式可视化接口用于对OpenMMLab格式的数据样本进行绘制和存 储。 10.根据权利要求9所述的图片可视化方法， 其特征在于， 利用所述可视化器的绘制接 口来绘制检测框、 掩码、 文本、 点、 线和特 征图中的一项或多 项。权　利　要　求　书 2/2 页 3 CN 115392483 A 3