说明:收录全网最新的团体标准 提供单次或批量下载
(19)中华 人民共和国 国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202111631336.4 (22)申请日 2021.12.28 (71)申请人 杭州趣链科技有限公司 地址 310051 浙江省杭州市滨江区丹 枫路 399号2号楼 A楼2001室 (72)发明人 李伟 邱炜伟 刘敬 汪小益  蔡亮  (74)专利代理 机构 杭州华进联浙知识产权代理 有限公司 3 3250 代理人 李丽华 (51)Int.Cl. G06F 9/50(2006.01) G06F 21/60(2013.01) H04L 9/32(2006.01) (54)发明名称 多方数据处理方法、 系统、 电子装置和存储 介质 (57)摘要 多方数据处理方法、 系统、 电子装置和存储 介质。 本申请涉及一种多方数据处理方法, 其中, 该多方数据处理方法包括: 通过 发起方和参与方 分别获取各自的数据集以及计算算子; 根据计算 算子中的数据切割函数对数据集进行数据分割 得到子数据集, 并将子数据集分配至本方的各个 计算从节点, 各个计算从节点根据计算算子执行 对应的计算逻辑; 发起方计算 从节点根据各参与 方计算从节点提供的相应计算数据得到计算结 果, 并将计算结果发送至发起方计算主节点; 发 起方计算主节点根据计算算子对计算结果进行 数据聚合, 得到聚合数据, 解决了多方计算效率 低的问题。 权利要求书2页 说明书8页 附图5页 CN 114296922 A 2022.04.08 CN 114296922 A 1.一种多方 数据处理方法, 其特 征在于, 包括: 发起方和参与方分别获取 各自的数据集以及计算 算子; 根据所述计算算子 中的数据切割函数对所述数据集进行数据分割得到子数据集, 并将 所述子数据集分配至本方的各个计算从节点, 各个所述计算从节点根据所述计算算子执行 对应的计算逻辑; 发起方计算从节点根据 各参与方计算从节点提供的相应计算数据得到计算结果, 并将 所述计算结果发送至所述发起方计算主节点; 所述发起方计算主节点根据 所述计算算子对所述计算结果进行数据聚合, 得到聚合数 据。 2.根据权利要求1所述的多方 数据处理方法, 其特 征在于, 所述方法还 包括: 根据所述数据切割函数, 对所述数据集进行数据分割得到所述子数据集并标注子数据 集标号, 将所述子数据集分配至本方的各个计算从节点, 拥有相同子数据集标号的所述发 起方计算从节点和所述 参与方计算从节点之间执 行对应的所述计算逻辑; 发起方计算从节点根据 各参与方计算从节点提供的相应计算数据得到计算结果, 并将 所述计算结果发送至所述发起方计算主节点。 3.根据权利要求2所述的多方数据处理方法, 其特征在于, 所述发起方计算从节点根据 各参与方计算从节点 提供的相应 计算数据得到计算结果包括: 所述参与方计算从节点将所述计算数据以及对应的子数据集标号发送至参与方计算 主节点, 所述参与方计算主节点将所述计算数据以及对应的子数据集标号发送至所述发起方 计算主节点, 所述发起方计算主节点根据所述子数据集标号将所述计算数据发送至对应的 发起方计算从节点, 所述 发起方计算从节点根据各参与方计算从节点提供的相应计算数据 得到计算结果。 4.根据权利要求2所述的多方数据处理方法, 其特征在于, 所述根据所述计算算子 中的 数据切割函数, 对所述数据集进行 数据分割得到所述子数据集并标注子数据集标号包括: 在所述数据集为向量类数据集的情况下, 按照分段的方式进行切割, 子数据集标号就 是其对应的分段序号; 在所述数据集为集合类数据集的情况下, 读取所述数据集中的每一个元素, 哈希运算 后取模计算出桶号, 并写入 对应的子数据集文件中, 所述子数据集标号 为所述桶号。 5.根据权利要求2所述的多方数据处理方法, 其特征在于, 所述发起方和所述参与 方分 别获取各自的计算 算子包括: 所述发起方获取计算算子, 解析所述计算算子中的配置文件, 读取其中的算法种类和 版本号, 如果已存在相同算法种类的所述计算 算子则执 行覆盖; 所述发起方将所述计算 算子分发至各个所述 参与方。 6.根据权利要求1所述的多方数据处理方法, 其特征在于, 所述计算算子包括独立设置 的数据切割函数、 数据聚合 函数和所述计算数据的消息类型。 7.一种多方数据处理系统, 包括发起方和参与方, 所述发起方包括发起方计算主节点 和发起方计算从节点, 所述 参与方包括 参与方计算主节点和参与方计算从节点: 所述发起方和所述参与 方分别获取各自的数据集以及计算算子, 根据 所述计算算子对权 利 要 求 书 1/2 页 2 CN 114296922 A 2所述数据集进行数据分割得到子数据集, 并将所述子数据集分配至本方的各个计算从节 点, 各个所述计算从节点 根据所述计算 算子执行对应的计算逻辑; 并将所述计算结果发送至所述发起方计算主节点, 所述发起方计算主节点根据 所述计 算算子对所述计算结果进行 数据聚合, 得到聚合数据。 8.根据权利要求7所述的多方数据处理系统, 其特征在于, 所述计算节点包括调度器, 所述调度器包括虚拟机和网络组件, 其中, 所述计算节点包括计算主节点和计算从节点, 所述虚拟机 于执行如权利要求1至 6中任一项所述的多方 数据处理方法; 所述网络组件用于在所述计算节点间进行 数据通信。 9.一种电子装置, 包括存储器和处理器, 其特征在于, 所述存储器中存储有计算机程 序, 所述处理器被设置为运行所述计算机程序以执行权利要求1至6中任一项 所述的多方数 据处理方法。 10.一种存储介质, 其特征在于, 所述存储介质中存储有计算机程序, 其中, 所述计算机 程序被设置为 运行时执 行权利要求1至 6中任一项所述的多方 数据处理方法。权 利 要 求 书 2/2 页 3 CN 114296922 A 3

.PDF文档 专利 多方数据处理方法、系统、电子装置和存储介质

文档预览
中文文档 16 页 50 下载 1000 浏览 0 评论 309 收藏 3.0分
温馨提示:本文档共16页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
专利 多方数据处理方法、系统、电子装置和存储介质 第 1 页 专利 多方数据处理方法、系统、电子装置和存储介质 第 2 页 专利 多方数据处理方法、系统、电子装置和存储介质 第 3 页
下载文档到电脑,方便使用
本文档由 人生无常 于 2024-03-19 04:15:30上传分享
友情链接
站内资源均来自网友分享或网络收集整理,若无意中侵犯到您的权利,敬请联系我们微信(点击查看客服),我们将及时删除相关资源。