(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211077349.6 (22)申请日 2022.09.05 (71)申请人 中国银行股份有限公司 地址 100818 北京市西城区复兴门内大街1 号 (72)发明人 耿子健　安嘉一　胡盼盼　赵瑞丰　 (74)专利代理 机构 北京集佳知识产权代理有限 公司 11227 专利代理师 高勇 (51)Int.Cl. G06F 11/36(2006.01) G06F 16/25(2019.01) G06F 16/22(2019.01) G06F 16/28(2019.01) (54)发明名称 一种大数据测试方法、 装置、 设备和存储介 质 (57)摘要 本发明提供的大数据测试方法、 装置、 设备 和存储介质， 可应用于大数据技术领域， 可以基 于数据流链路构建数据表间关系链， 并基于表间 转换规则对 数据表间的转换规则进行转换合并， 形成数据表间关系链的链路 处理规则集合。 然后 基于数据处理逻辑将数据表间的转换规则封装 成作业单元， 并将存在数据传递 关系的作业单元 依次串接 形成作业流。 基于链路 处理规则集合对 作业流中的作业区域的数据流处理结果进行验 证， 其中作业区域至少包括两个相邻的所述作业 单元。 最后为每个作业单元构建相应的存储空 间， 将每个作业单元的监控数据存储至对应的存 储空间中。 该大数据测试方法实现了对数据流处 理各个过程的监控， 自动跟踪并自动验证数据， 提升测试效率。 权利要求书2页 说明书7页 附图4页 CN 115422061 A 2022.12.02 CN 115422061 A 1.一种大 数据测试 方法， 其特 征在于， 包括： 基于数据流链路构建数据表间关系链， 并基于表间转换规则对数据表间的转换规则进 行转换合并， 形成所述数据表间关系链的链路处 理规则集 合； 基于数据处理逻辑将所述数据表间的转换规则 封装成作业单元， 并将存在数据传递关 系的作业单 元依次串接形成作业 流； 基于所述链路处理规则集合对所述作业流中的作业 区域的数据流处理结果进行验证， 所述作业区域至少包括两个相邻的所述作业单 元； 为每个所述作业单元构建相应的存储空间， 将每个所述作业单元的监控数据存储至对 应的存储空间中。 2.根据权利要求1所述的方法， 其特征在于， 所述基于数据流链路构建数据表间关系 链， 包括： 获取用户选择的数据处 理组件； 基于链路库中的连接链路将各 所述数据处 理组件进行 连接， 以构成所述数据流链路； 基于血缘分析对各 所述数据处 理组件的数据表进行关联， 形成所述数据表间关系链。 3.根据权利要求2所述的方法， 其特征在于， 所述基于表间转换规则对数据表间的转换 规则进行转换合并， 形成所述数据表间关系链的链路处 理规则集 合， 包括： 基于业务需求确定所述表间转换规则； 将各所述表间转换规则进行组合， 构成所述链路处理规则集合， 所述链路处理规则集 合中包括数量依次递增的处理规则链路， 其中第一个处理规则链路只包括前两个数据 表间 的转换规则， 最后一个处 理规则链路包括所有相邻的数据表间的转换规则。 4.根据权利要求1所述的方法， 其特征在于， 所述基于数据处理逻辑将所述数据表间的 转换规则封装成作业单 元， 并将存在数据传递关系的作业单 元依次串接形成作业 流， 包括： 使用组件的开发逻辑、 作业调度和触发机制对所述数据表间的转换规则进行封装， 生 成所述作业单 元； 基于所述作业单 元间的数据传递将各 所述作业单 元依次串接， 形成所述作业 流。 5.根据权利要求1所述的方法， 其特征在于， 所述基于所述链路处理规则集合对所述作 业流中的作业区域的数据流处 理结果进行验证， 包括： 获取所述链路处理规则集合中和所述作业区域内的所述作业单元相匹配的目标链路 处理规则； 基于测试工具对所述目标链路处 理规则处 理后得到的目标 结果数据进行验证。 6.根据权利要求1所述的方法， 其特征在于， 所述监控数据至少包括： 作业状态数据和 测试状态数据， 所述方法还 包括： 将所述测试状态数据的生成时间以及所述作业状态数据反馈 至显示终端。 7.根据权利要求1所述的方法， 其特 征在于， 还 包括： 基于设定规则对所述数据表中的数据类型和字段类型进行设置 。 8.一种大 数据测试装置， 其特 征在于， 包括： 数据流接入模块， 用于基于数据流链路构建数据表间关系链， 并基于表间转换规则对 数据表间的转换规则进行转换合并， 形成所述数据表间关系链的链路处 理规则集 合； 作业流构建模块， 用于基于数据处理逻辑将所述数据表间的转换规则封装成作业单权　利　要　求　书 1/2 页 2 CN 115422061 A 2元， 并将存在数据传递关系的作业单 元依次串接形成作业 流； 数据验证模块， 用于基于所述链路处理规则集合对所述作业流中的作业 区域的数据流 处理结果进行验证， 所述作业区域至少包括两个相邻的所述作业单 元； 以及 数据存储模块， 用于为每个所述作业单元构建相应的存储空间， 将每个所述作业单元 的监控数据存 储至对应的存 储空间中。 9.一种设备， 其特 征在于， 包括： 存 储器和处 理器； 所述存储器， 用于存 储程序； 所述处理器， 用于执行所述程序， 实现如权利要求1至7中任一项所述的大数据测试方 法的各个步骤。 10.一种存储介质， 其上存储有计算机程序， 其特征在于， 所述计算机程序被处理器执 行时， 实现如权利要求1至7中任一项所述的大 数据测试 方法的各个步骤。权　利　要　求　书 2/2 页 3 CN 115422061 A 3