(19)中华 人民共和国 国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202111389645.5 (22)申请日 2021.11.22 (71)申请人 厦门深度赋智科技有限公司 地址 361000 福建省厦门市软件园三期诚 毅北大街50号404室A005 (72)发明人 王金淋　吴承霖　 (74)专利代理 机构 北京知果之信知识产权代理 有限公司 1 1541 代理人 高科 (51)Int.Cl. G06F 30/27(2020.01) G06K 9/62(2022.01) G06N 5/04(2006.01) (54)发明名称 基于黑盒优化器的AI模型自动建模系统 (57)摘要 本发明涉及元学习和自动机器学习技术领 域， 公开了基于黑盒优化器的AI模型自动建模系 统， 包括自动建模系统， 数据管理模块主要用于 数据集的多源接入和可视化， 推理服务管理主要 基于训练好的模型部署的API服务启停等管理， 而训练项目管理作为其中的核心模块， 包含了AI 模型的自动建模功能， 当用户提交建模实验时， 优化方法会利用历史实验结果进行实验搜索空 间的初始化以及在每次试验时， 自动选择可能会 带来更好效果的算子， 减少了用户在不同场景数 据下手动去尝试寻找最好模型的时间成本， 提升 了整体了建模效率， 此外， 该系统可以应用到包 括表格、 图像、 文本、 视频、 音频全模态的所有任 务中， 具有很强的落 地应用性。 权利要求书2页 说明书6页 附图2页 CN 114154406 A 2022.03.08 CN 114154406 A 1.基于黑盒优化器的AI模型自动建模系统， 包括自动建模系统， 其特征在于： 自动建模 系统包括数据管理、 训练项目管理和推理服务管理， 数据管理模块主要用于数据集的多源 接入和可视化， 推理服务管理主要基于训练好的模 型部署的API服务启停 等管理， 而训练项 目管理作为 其中的核心模块， 包 含了AI模型的自动建模功能。 2.如权利要求1所述的基于黑盒优化器的AI模型自动建模系统， 其特征在于： 自动建模 系统与算子库无线 连接， 算子库， 包括但不局限于骨干网络、 优化器、 损失函数、 数据增强算 法等在内的各种算子集 合。 3.如权利要求2所述的基于黑盒优化器的AI模型自动建模系统， 其特征在于： 训练项目 管理包括训练请求客户端和黑盒优化器服务， 黑盒优化器服务对接算子库和元特征访问服 务。 4.如权利要求3所述的基于黑盒优化器的AI模型自动建模系统， 其特征在于： 算子库与 黑盒优化器服 务无线连接 。 5.如权利要求3所述的基于黑盒优化器的AI模型自动建模系统， 其特征在于： 元特征访 问服务包括数据集元特征和模型训练结果元特征， 数据集元特征， 用来区分表示不同数据 集间的差异性； 模型训练结果元 特征， 用于表示模型训练结果指标及所使用的超参。 6.如权利要求4所述的基于黑盒优化器的AI模型自动建模系统， 其特征在于： 黑盒优化 器服务包括算子配置模板、 优化器配置模板、 模型效果评估模块和试验控制模块， 算子配置 模板， 用于配置可用于训练的算子子集， 默认使用全部算子； 优化器配置模板， 用于优化器 方法的配置； 模型效果评估模块， 用于数据集在不同超参下的指标结果及性能； 试验控制模 块， 用于控制一个数据集完整实验中所有试验的执行， 用户选择待建模的数据集和目标建 模的任务， 点击一键训练后， 创建一个实验， 由训练请求客户端将实验提交到黑盒优化器服 务， 开始实验自动建模， 容 错率高。 7.如权利要求6所述的基于黑盒优化器的AI模型自动建模系统， 其特征在于： 元特征访 问服务与黑盒优化器服务无线连接， 元特征访问服务本身存储大量数据集的元特征及历史 实验训练结果元特征， 优化器在第一次推荐搜索空间值时， 会 先计算实验数据集的元特征， 并请求元特征访问服务， 元特征访问服务执行数据集元特征近似计算， 得到与实验数据集 相似的已有数据集， 并得到与其对应的历史实验训练结果元特征(包含搜索空间值和指标 结果)， 历史搜索空间值会加入到优化器推荐出的初始搜索空间值中， 形成最 终推荐搜索空 间值， 后续的推荐中， 将不会加入历史搜索空间值。 8.如权利要求7所述的基于黑盒优化器的AI模型自动建模系统， 其特征在于： 黑盒优化 器内包含的优化器有： GP(遗传编程)、 TPE、 SMAC、 MCTS(基于蒙特卡洛树搜索)， 通过优化器 配置面板进行选择及设置对应的参数。 9.如权利要求1所述的基于黑盒优化器的AI模型自动建模系统， 其特征在于： 数据 管理 模块包括数据拼接模块、 数据融合模块和方案创建模块， 数据拼接模块用于将收集到的数 据碎片拼接成完整的数据链， 数据融合模块用于将拼接的数据进行融合处理， 方案创建模 块用于将数据的整合链进 行整理， 得出完整方案， 数据拼接模块、 数据融合模块和方案创建 模块同时进行 数据的管理工作， 用于提高整体的连贯 性， 提升容 错率。 10.如权利要求9所述的基于黑盒优化器的AI模型自动建模系统， 其特征在于： 数据管 理模块进 行待训练数据集的接入和可视化操作， 包括查看数据集统计信息和单个样本详情权　利　要　求　书 1/2 页 2 CN 114154406 A 2等， 接入方式目前包括本地上传、 数据库接入、 HDFS接入多种方式。权　利　要　求　书 2/2 页 3 CN 114154406 A 3