(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211314971.4 (22)申请日 2022.10.26 (71)申请人 北京数慧时空信息技 术有限公司 地址 100070 北京市丰台区海鹰路1号院1 号楼二层201 (72)发明人 龚启航　许晓航　李洁　彭哲　 邹圣兵　 (51)Int.Cl. G06F 16/535(2019.01) G06F 16/58(2019.01) G06F 16/583(2019.01) G06V 10/74(2022.01) G06V 10/80(2022.01) G06V 20/13(2022.01) (54)发明名称 基于用户需求理解的卫星影 像推荐方法 (57)摘要 本发明公开了一种基于用户需求理解的卫 星影像推荐方法， 涉及遥感影像处理领域， 该方 法包括： S1获取影像库， 包括多张影像； S2获取用 户历史检索信息和用户检索标签； S3构建用户检 索知识图谱、 用户历史检索知识图谱、 影像属性 知识图谱； S4对三个知识图谱进行知识表示学 习， 得到第一推荐影像； S5对用户检索知识图谱 进行补全， 之后将该补全后的用户检索知识图 谱、 用户历史检索知识图谱、 影像属性知识图谱 进行知识表示学习， 得到第二推荐影像； S6根据 第一推荐影像、 第二推荐影像对用户进行推荐。 该方法通过语义理解和知识 图谱的方式对用户 的检索信息进行全面的理解， 基于覆盖目标区域 的影像推荐规则， 实现全自动化的精 准满足用户 需求的卫星影 像推荐。 权利要求书3页 说明书9页 附图3页 CN 115374303 A 2022.11.22 CN 115374303 A 1.一种基于用户需求理解的卫星影 像推荐方法， 其特 征在于， 包括： S1获取影像库， 包括多张影 像， 影像包含影像标签； S2获取用户检索信息和用户历史检索信息， 用户检索信息包括语义信息和查询条件， 语义信息包括目标区域， 将查询条件与语义信息进行合并， 得到用户检索标签； S3基于用户检索标签构建用户检索知识图谱、 基于用户历史检索信 息构建用户历史检 索知识图谱、 基于影 像及其影 像标签构建影 像属性知识图谱； S4对用户检索知识图谱、 用户历史检索知识图谱、 影像属性知识图谱进行知识表示学 习， 得到用户检索向量、 用户历史检索向量、 影像属性向量， 将用户检索向量、 用户历史检索 向量、 影像属性向量进 行融合预测， 得到影像与用户之 间的第一配对概率， 将第一配对概率 大于第一预设阈值的影像作为第一影像， 在第一影像中基于影像推荐规则进行筛选， 得到 第一推荐影 像； S5对用户检索标签进行更新， 并将更新后的用户检索标签输入用户检索知识图谱进行 补全， 之后将该补全后的用户检索知识图谱、 用户历史检索知识图谱、 影像属性知识图谱进 行知识表示学习， 得到更新用户检索向量、 用户历史检索向量、 影像属性向量， 将更新用户 检索向量、 用户历史检索向量、 影像属性向量进 行融合预测， 得到影像与用户之 间的第二配 对概率， 将第二配对概率大于第一预设阈值的影像作为第二影像， 在第二影像中基于影像 推荐规则进行筛 选， 得到第二推荐影 像； S6根据第一推荐影 像、 第二推荐影 像对用户进行推荐。 2.根据权利要求1所述的方法， 其特 征在于， 步骤S3包括： 根据用户 ‑用户检索标签 ‑影像三元组格式构建用户检索知识图谱， 其中， 用户检索标 签包括影 像时间、 影 像分辨率、 行政区域、 星源； 根据用户 ‑用户历史检索信息 ‑影像三元组格式构建用户历史行为知识图谱， 其中， 用 户历史检索信息包括影 像时间、 影 像分辨率、 行政区域、 星源、 历史检索时间； 根据影像 ‑影像标签 ‑影像属性三元组格式构建影像属性知识图谱， 其中， 影像标签包 括影像时间、 影 像分辨率、 影像覆盖范围、 星源、 影 像质量。 3.根据权利要求2所述的方法， 其特征在于， 步骤S5中， 对用户检索标签进行更新的方 法包括： 对用户检索标签进行同义 转换、 对用户检索标签进行 更换中的至少一种。 4.根据权利要求3所述的方法， 其特 征在于， 所述对用户检索标签进行同义 转换， 包括： 建立标签同义转换表， 包括标签同义转换规则和可同义转换的标签类型， 其中， 可同义 转换的标签 类型包括影 像分辨率、 影像星源； 根据标签同义 转换表将用户检索标签划分为可同义 转换标签和不可同义 转换标签； 根据标签同义 转换规则对可同义 转换标签进行 标签替换。 5.根据权利要求3所述的方法， 其特 征在于， 所述对用户检索标签进行 更换的方法为： 对用户历史检索信 息的影像时间和用户检索标签的影像时间进行差异对比， 将与用户 检索标签的影像时间差异最小的用户历史检索信息的影像时间替换该用户检索标签的影 像时间， 其中， 用户历史检索信息的影像时间的范围大于用户检索标签的影像时间的范围 且完全包括用户检索标签的影 像时间的范围； 或将用户检索标签的影像时间相邻年份相同时期的影像时间并入用户检索标签的影 像时间中。权　利　要　求　书 1/3 页 2 CN 115374303 A 26.根据权利要求1所述的方法， 其特征在于， 步骤S2中， 所述 “将查询条件与语义信息进 行合并， 得到用户检索标签 ”包括： 根据用户输入的查询条件提取 得到相应的查询标签； 提取语义信 息的关键词， 将语义信 息的关键词和影像标签输入预训练 的语义相似度模 型中， 进行语义信息的关键词与影像标签之间语义相似度的匹配， 将与语义信息的关键词 的语义相似度最大的影 像标签作为该语义信息对应的标签； 将查询标签和语义信 息对应的标签按照标签类别进行混合分组， 相同标签类别的查询 标签和语义信息对应的标签分到第一标签组， 不同标签类别的查询标签和语义信息对应的 标签分到第二标签组； 新建标签序列， 将第一标签组中的查询标签、 第 二标签组输入标签序列中， 得到用户检 索标签。 7.根据权利要求1所述的方法， 其特 征在于， 步骤S4包括： S41构建三元组损失函数： 其中， (h,r,t)为三元组， h为头实体， t为尾实体， r表示h和t之间的关系， 为头实体的 向量表示， 为尾实体的向量表示， 为关系向量表示， L1/L2表示L1或L2正则损失， 和 分别为将头实体和尾实体投影到关系空间的投影矩阵： 其中， ， 为头实体和尾实体处于的公共语义空间， 为关系 处于的语义空间， d和k均表示向量维度， 表示单位矩阵， 实体下标p代表该向量为投影 向量， 为关系向量的投影向量， 为头实体向量的投影向量， 为尾实体向量的投影向 量； S42通过投影矩阵 和 将用户检索知识图谱、 用户历史检索知识图谱、 影像属性 知识图谱的实体向量投影到 关系向量空间， 得到用户检索向量、 用户历史检索向量、 影像属 性向量； S43将用户检索向量、 用户历史检索向量、 影像属性向量进行融合预测， 得到影像与用 户之间的第一配对概 率； S44将第一配对概率大于第一预设阈值的影像作为第一影像， 在第一影像中基于影像 推荐规则进行筛 选， 得到第一推荐影 像。 8.根据权利要求7 所述的方法， 其特 征在于， 步骤S43包括： S431使用特征提取网络对用户检索向量、 用户历史检索向量、 影像属性向量进行特征 提取， 得到用户检索特 征向量 、 用户历史检索特 征向量 、 影像属性特 征向量 ； S432使用门机制融合用户检索特征向量 、 用户历史检索特征向量 ， 获得用户融合特 征向量 ：权　利　要　求　书 2/3 页 3 CN 115374303 A 3