说明:收录全网最新的团体标准 提供单次或批量下载
(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211214311.9 (22)申请日 2022.09.30 (71)申请人 深圳依时货拉 拉科技有限公司 地址 518000 广东省深圳市福田区梅林街 道梅丰社区梅华路105号多丽工业区 科技楼3层3 07 (72)发明人 张浩 苏海红 黄政 王海艳  (74)专利代理 机构 深圳瑞天谨诚知识产权代理 有限公司 4 4340 专利代理师 温青玲 (51)Int.Cl. G06F 9/50(2006.01) G06F 15/16(2006.01) (54)发明名称 多集群计算任务 提交方法及相关装置、 设备 (57)摘要 本申请涉及一种多集群计算任务提交方法、 装置、 计算机设备和存储介质。 所述方法包括: 获 取多集群配置信息、 集群列表信息和计算框架列 表信息; 根据上述多集群配置信息、 集群列表信 息和计算框架列表信息展示计算任务配置页面; 获取用户通过计算任务配置页面配置的大数据 计算任务及其关联的计算集群标识和计算类型 标识; 根据计算集群标识和计算类型标识向当前 启用的多套大数据计算集群中的目标计算集群 提交大数据计算任务, 目标计算集群是上述多套 大数据计算集群中与计算集群标识对应的大数 据计算集群。 本申请实施例能够在大数据计算集 群拆分后保证上层计算平台用户使用的一 致性。 权利要求书2页 说明书9页 附图4页 CN 115509756 A 2022.12.23 CN 115509756 A 1.一种多集群计算任务提交方法, 其特征在于, 应用于多集群计算任务管理系统, 所述 方法包括: 获取多集群 配置信息、 集群列表信息和计算框架列表信息; 根据所述多集群配置信息、 集群列表信息和计算框架列表信息展示计算任务配置页 面; 获取用户通过所述计算任务配置页面配置的大数据计算任务及其关联的计算集群标 识和计算类型 标识; 根据所述计算集群标识和所述计算类型标识向当前启用的多套大数据计算集群中的 目标计算集群提交所述大数据计算任务, 所述目标计算集群是所述多套 大数据计算集群中 与所述计算 集群标识对应的大 数据计算 集群。 2.如权利要求1所述的方法, 其特征在于, 根据所述计算集群标识和所述计算类型标识 向当前启用的多 套大数据计算 集群中的目标计算 集群提交所述大 数据计算任务, 包括: 根据所述计算集群标识获取目标集群配置信 息, 所述目标集群配置信 息指所述目标计 算集群的集群 配置信息; 根据所述 集群配置信息和所述计算类型 标识封装计算任务 提交指令; 通过预部署的所述目标计算机集群的客户端向所述目标计算集群发送上述计算任务 提交指令, 以将所述大 数据计算任务 提交至所述目标计算 集群。 3.如权利要求2所述的方法, 其特 征在于, 所述方法还 包括: 将所述大数据计算任务提交至所述目标计算集群之后, 接收所述目标计算集群返回的 负责运行 所述大数据计算任务的目标应用的应用标识; 持久化所述目标应用的应用标识。 4.如权利要求3所述的方法, 其特征在于, 获取多集群配置信息、 集群列表信息和计算 框架列表信息之前, 所述方法还 包括: 预先在所述多集群计算任务管理系统部署当前启用的每套所述大数据计算集群的客 户端; 所述多集群配置信 息包括每套所述大数据计算集群的集群配置信 息; 任一大数据计算 集群的集群配置信息包括该任一大数据计算集群的访问地址以及该任一大数据计算集群 的客户端的部署信息; 所述集群列表信息包括每套所述大 数据计算 集群的计算 集群标识; 所述计算框架列表信 息包括多种计算框架的框架标识; 每一所述计算框架的框架标识 唯一对应一种计算类型 标识。 5.如权利要求 4所述的方法, 其特 征在于, 所述方法还 包括: 根据所述目标计算集群的访问地址和所述目标应用的应用标识, 定时通过所述目标计 算机集群的客户端查询所述大数据计算任务在所述目标计算集群上的运行状态, 以及根据 查询到的所述 运行状态更新所述大 数据计算任务在本地的任务状态。 6.如权利要求 4所述的方法, 其特 征在于, 所述方法还 包括: 响应于针对所述大数据计算任务的任务停止指令, 通过所述目标计算机集群的客户端 指示所述目标计算 集群停止运行 所述大数据计算任务。 7.如权利要求 4所述的方法, 其特 征在于, 所述方法还 包括:权 利 要 求 书 1/2 页 2 CN 115509756 A 2根据所述目标计算集群的访问地址和所述目标应用的应用标识生成用于查询所述大 数据计算任务的运行监控信息的任务链接; 展示所述任务链接; 响应于用户对所述任务链接的打开操作, 获取所述目标计算集群当前运行所述大数据 计算任务所产生的运行监控信息, 并展示获取到的运行监控信息 。 8.一种多集群计算任务提交装置, 其特征在于, 应用于多集群计算任务管理系统, 所述 装置包括: 第一获取模块, 用于获取多集群 配置信息、 集群列表信息和计算框架列表信息; 页面展示模块, 用于根据所述多集群配置信息、 集群列表信息和计算框架列表信息展 示计算任务配置页面; 第二获取模块, 用于获取用户通过所述计算任务配置页面配置的大数据计算任务及其 关联的计算 集群标识和计算类型 标识; 任务提交模块, 用于根据所述计算集群标识和所述计算类型标识向当前启用的多套大 数据计算集群中的目标计算集群提交所述大数据计算任务, 所述目标计算集群是所述多套 大数据计算 集群中与所述计算 集群标识对应的大 数据计算 集群。 9.一种多集群计算任务管理系统, 其特征在于, 所述系统包括后台管理模块、 用户交互 模块, 以及预先部署有当前启用的每套大数据计算集群的客户端的多集群客户端部署模 块; 所述后台管理模块, 用于将获取的多集群配置信息、 集群列表信息和计算框架列表信 息发送至所述用户交 互模块; 所述用户交互模块, 用于根据所述多集群配置信息、 集群列表信息和计算框架列表信 息展示计算任务配置页面, 还用于获取用户通过所述计算任务配置页面配置的大数据计算 任务及其关联的计算集群标识和计算类型标识, 以及将所述大数据计算任务及其关联的计 算集群标识和计算类型 标识发送至所述后台管理模块; 所述后台管理模块, 还用于根据所述计算集群标识和所述计算类型标识, 通过所述多 集群客户端部署模块向当前启用的多套大数据计算集群中的目标计算集群提交所述大数 据计算任务, 所述目标计算集群是所述多套 大数据计算集群中与所述计算集群标识对应的 大数据计算 集群。 10.一种计算机设备, 包括存储器、 处理器及存储在存储器上并可在处理器上运行的计 算机程序, 其特征在于, 所述处理器执行所述计算机程序时实现权利要求1至7中任一项所 述方法的步骤。权 利 要 求 书 2/2 页 3 CN 115509756 A 3

.PDF文档 专利 多集群计算任务提交方法及相关装置、设备

文档预览
中文文档 16 页 50 下载 1000 浏览 0 评论 309 收藏 3.0分
温馨提示:本文档共16页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
专利 多集群计算任务提交方法及相关装置、设备 第 1 页 专利 多集群计算任务提交方法及相关装置、设备 第 2 页 专利 多集群计算任务提交方法及相关装置、设备 第 3 页
下载文档到电脑,方便使用
本文档由 人生无常 于 2024-03-18 13:13:31上传分享
友情链接
站内资源均来自网友分享或网络收集整理,若无意中侵犯到您的权利,敬请联系我们微信(点击查看客服),我们将及时删除相关资源。