说明:收录全网最新的团体标准 提供单次或批量下载
(19)中华 人民共和国 国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202111658103.3 (22)申请日 2021.12.3 0 (71)申请人 河北建筑工程学院 地址 075000 河北省张家口市朝阳西大街 13号 (72)发明人 邓全才  (74)专利代理 机构 北京卓特专利代理事务所 (普通合伙) 11572 代理人 段旺 (51)Int.Cl. G06F 3/06(2006.01) G06F 21/60(2013.01) (54)发明名称 一种数据处 理的方法及系统 (57)摘要 本申请公开了一种数据的处理方法及系统, 其中数据的处理方法具体包括以下步骤: 获取源 数据; 对源数据进行数据分配; 响应于进行数据 分配后, 判断是否能进行数据恢复; 若能进行数 据恢复, 设置 预读机制, 进行源数据的预读; 判断 源数据预读是否异常, 若异常则进行预读优化; 响应于完成预读优化, 结束预读, 根据用户请求 进行源数据的读出。 本申请能够对海量数据进行 处理, 即在对数据进行存储后, 利用数据接收节 点对数据进行恢复, 对恢复数据有了良好的判断 的同时, 也 为后续数据的读出做了充足的准备。 权利要求书2页 说明书7页 附图1页 CN 114327284 A 2022.04.12 CN 114327284 A 1.一种数据的处 理方法, 其特 征在于, 具体包括以下步骤: 获取源数据; 对源数据进行 数据分配; 响应于进行 数据分配后, 判断是否能进行 数据恢复; 若能进行 数据恢复, 设置预读机制, 进行源数据的预读; 判断源数据预读是否异常, 若异常则进行 预读优化; 响应于完成预读优化, 结束预读, 根据用户请求进行源数据的读出。 2.如权利要求1所述的数据的处理方法, 其特征在于, 判断源数据预读正常, 则结束预 读, 根据用户请求进行源数据的读出。 3.如权利要求1所述的数据的处理方法, 其特征在于, 设置三道获取防线, 具备编码条 件的第一道防线负责从外部获取源数据并进 行编码操作, 并将编 码操作后的源数据传输至 具备编码条件的第二道防线, 具备译码条件的第三道防线负责接 收编码后的源数据, 并根 据编码操作后的数据获取源数据。 4.如权利要求1所述的数据的处理方法, 其特征在于, 对源数据进行数据分配具体包括 以下子步骤: 将数据分配至数据存 储节点, 确定数据存 储节点是否满足存 储空间限制; 若数据存 储节点满足存 储空间限制, 确定数据存 储节点的失效概 率; 若失效概 率满足指定条件, 根据失效概 率, 设置网络中数据信息交换量。 5.如权利要求4所述的数据的处理方法, 其特征在于, 将源数据分配至各个数据存储节 点, 分配到个数据存储节点的数据量表示为xi, T为数据存储节点的存储空间限制, m表示数 据存储节点的个数, 若 则确定数据存 储节点的失效概 率。 6.如权利要求 4所述的数据的处 理方法, 其特 征在于, 失效概 率需满足: 其中Si表示现存储系统中, 现有数据存储节点加上所有复制i节点的数据存储节点组成 的集合, qi表示现存储系统中的数据存储节点在指定时间内 的失效概率, Pred表示前存储系 统的整体失效概 率。 7.如权利要求1所述的数据的处理方法, 其特征在于, 判断是否能够进行数据恢复包 括, 预先设置的多个数据接 收节点从数据存储节点中恢复源数据, 判断数据接 收节点能否 进行源数据的恢复。 8.如权利要求7所述的数据的处理方法, 其特征在于, 数据接收节点与 数据存储节点为 一对一、 一对多或多对一的关系。 9.如权利要求8所述的数据的处理方法, 其特征在于, 数据接收节点从对应的数据存储 节点进行数据恢复, 二者的对应关系为一对一; 一个数据接 收节点能够从多个分块存储同 一源数据的数据存储节点中恢复数据, 二者的对应关系为一对多; 存储在一个数据存储节 点的数据量过 大, 多个数据接收节点分块对 源数据进行恢复, 二 者的对应关系为多对一。 10.一种数据处理系统, 其特征在于, 具体包括: 获取单元、 分配单元、 判断单元、 预读单 元、 优化单 元以及读出 单元;权 利 要 求 书 1/2 页 2 CN 114327284 A 2获取单元, 用于获取源数据; 分配单元, 用于对 源数据进行 数据分配; 判断单元, 用于判断在数据分配后, 能否进行 数据恢复; 预读单元, 用于若能进行 数据恢复, 设置预读机制, 进行源数据的预读; 优化单元, 用于进行 数据预读过程中的优化; 读出单元, 用于根据用户的访问请求读出源数据。权 利 要 求 书 2/2 页 3 CN 114327284 A 3

.PDF文档 专利 一种数据处理的方法及系统

文档预览
中文文档 11 页 50 下载 1000 浏览 0 评论 309 收藏 3.0分
温馨提示:本文档共11页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
专利 一种数据处理的方法及系统 第 1 页 专利 一种数据处理的方法及系统 第 2 页 专利 一种数据处理的方法及系统 第 3 页
下载文档到电脑,方便使用
本文档由 人生无常 于 2024-03-19 04:13:42上传分享
友情链接
站内资源均来自网友分享或网络收集整理,若无意中侵犯到您的权利,敬请联系我们微信(点击查看客服),我们将及时删除相关资源。