(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211272434.8 (22)申请日 2022.10.18 (71)申请人 兰州未来 新影文化科技 集团有限责 任公司 地址 730300 甘肃省兰州市兰州新区综合 保税区综合 服务楼B区121号 (72)发明人 杜华　王语堂　岳宗　赵朋飞　 (74)专利代理 机构 北京东方芊悦知识产权代理 事务所(普通 合伙) 11591 专利代理师 陈益奇 (51)Int.Cl. G06V 40/16(2022.01) G06V 10/46(2022.01) (54)发明名称 一种三维人脸模型自动贴图生成系统及方 法 (57)摘要 本发明属于三 维人脸模 型技术领域， 具体为 一种三维人脸模 型自动贴图生 成系统及方法， 该 三维人脸模 型自动贴图生 成方法的具体步骤为： 获得第一人脸图像、 第二人脸图像和第二人脸法 向量图像； 获取第一人脸图像和第二人脸图像中 的关键点； 将符合条件的几个关键点分为一组作 为一个子区域， 依次划分所有关键点； 获取第一 人脸图像目标区域， 作为第二人脸图像中需要替 换的区域； 将第一人脸图像目标区域中关键点划 分子区域变换到对应的第二人脸图像关键点划 分子区域， 得到第三人脸图像； 将所述第二人脸 图像与所述第三人脸图像的目标部位融合， 得到 第四人脸图像。 本发明可以对任意三维模型进行 人脸贴图生成； 效率高， 执行速度快； 硬件性能要 求低。 权利要求书2页 说明书4页 附图1页 CN 115512421 A 2022.12.23 CN 115512421 A 1.一种三维人脸模型自动贴图生成方法， 其特 征在于， 包括以下步骤： 获得第一人脸图像、 第二人脸图像和第二人脸法向量图像； 获取第一人脸图像和第二人脸图像中的关键点； 将符合条件的几个关键点分为 一组作为 一个子区域， 依次划分所有关键点； 获取第一人脸图像目标区域， 作为第二人脸图像中 需要替换的区域； 将第一人脸图像目标区域中关键点划分子区域变换到对应的第二人脸图像关键点划 分子区域， 得到第三人脸图像； 将所述第二人脸图像与所述第三人脸图像的目标部位融合， 得到第四人脸图像； 获取第一人脸图像细节特 征法向量图像； 将所述第一人脸图像细节特征法向量图像中在所述目标区域范围内的关键点子区域 变换到第二人脸法向量图像中， 得到第四人脸图像对应的细节法向量图像。 2.根据权利要求1所述的一种三维人脸模型自动贴图生成方法， 其特征在于， 所述的获 取第一人脸图像和第二人脸图像中的关键点， 包括 通过人脸识别检测的关键点。 3.根据权利要求1所述的一种三维人脸模型自动贴图生成方法， 其特征在于， 所述的获 取第一人脸图像和第二人脸图像中的关键点， 包括通过三维模型顶点和第一人脸图像、 第 二人脸图像坐标对应获得关键点， 第一人脸图像关键点和 第二人脸图像关键点之 间的映射 关系。 4.根据权利要求1所述的一种三维人脸模型自动贴图生成方法， 其特征在于， 所述关键 点划分， 利用人脸识别检测到的关键点进行三角剖分得到 。 5.根据权利要求1所述的一种三维人脸模型自动贴图生成方法， 其特征在于， 所述关键 点划分， 利用三维模型面片信息得到， 组成一个面片的三维顶点对应第二人脸图像上 的一 组图像坐标。 6.根据权利要求1所述的一种三维人脸模型自动贴图生成方法， 其特征在于， 所述目标 区域提取过程， 包括： 去除第一人脸图像中头发遮挡； 去除第一人脸图像中非正向可以见遮挡。 7.根据权利要求1所述的一种三维人脸模型自动贴图生成方法， 其特征在于， 所述关键 点划分子区域变换 过程包括： 获取目标区域内第一人脸图像和第二人脸图像的关键点子区域； 计算第一人脸图像关键点子区域到第二人脸图像关键点子区域的变换； 将第一人脸图像关键点子区域按照所述变换到对应的第 二人脸图像关键点子区域， 得 到第三人脸图像。 8.根据权利要求1所述的一种三维人脸模型自动贴图生成方法， 其特征在于， 所述目标 区域融合， 包括对第二人脸图像目标区域和第四人脸图像目标区域进行图像处 理。 9.根据权利要求1所述的一种三维人脸模型自动贴图生成方法， 其特征在于， 所述细节 特征法向量图像关键点子区域变换 过程， 包括： 获取目标区域内第一人脸细节法向量图像和第二人脸法向量图像的关键点子区域； 计算第一人脸细节法向量图像关键点子区域到第二人脸法向量图像关键点子区域的 变换；权　利　要　求　书 1/2 页 2 CN 115512421 A 2将第一人脸细节法向量图像关键点子区域按照所述变换变换到对应的第二人脸法向 量图像关键点子区域， 得到第四人脸细节法向量 脸图像。 10.一种三维人脸模型自动贴图生成系统， 其特 征在于， 所述系统包括： 图像获取模块， 用于获取第一人脸图像、 第二人脸图像以及第二人脸法向量图像； 关键点获取模块， 用于获取第一人脸图像和第二人脸图像中的关键点； 关键点划分模块， 用于将符合条件的几个关键点分为 一组作为 一个子区域； 目标区域获取模块， 用计算第一人脸图像中的目标区域； 关键点子区域变换模块， 用于将第 一人脸图像目标区域中关键点子区域变换到第 二人 脸图像中的关键点子区域； 图像处理模块， 用于将第二人脸图像与所述第三人脸图像的目标部位融合， 得到第 四 人脸图像； 细节特征提取模块， 用于获得第一人脸图像中的细节特 征法向量图像； 法向量图像变换模块， 用于将第 一人脸细节特征法 向量图像中目标区域的关键点子区 域变换到第二人脸法向量图像中， 得到第四人脸法向量图像； 处理器以及存 储有计算机程序指令的存 储器； 所述处理器执行所述计算机程序指令时实现如权利要求1 ‑14任意一项所述的三维人 脸模型自动贴图生成方法； 一种计算机存储介质， 存储有计算机及程序指令， 所述计算机程序指令被处理权利要 求1‑9任意一项所述的三维人脸模型自动贴图生成方法。权　利　要　求　书 2/2 页 3 CN 115512421 A 3