(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211395237.5 (22)申请日 2022.11.09 (71)申请人 浪潮电子信息产业股份有限公司 地址 250000 山东省济南市高新区浪潮路 1036号 (72)发明人 刘科　 (74)专利代理 机构 北京集佳知识产权代理有限 公司 11227 专利代理师 王华 (51)Int.Cl. G06F 16/25(2019.01) G06F 16/22(2019.01) G06F 16/245(2019.01) G06F 16/28(2019.01) (54)发明名称 存储格式转换方法、 系统、 装置、 电子设备及 存储介质 (57)摘要 本申请公开了一种存储格式转换方法、 系 统、 装置、 电子设备及存储介质， 应用于存储技术 领域， 方法应用于协处理器， 包括获取主处理器 发送的行存储页面数据与配置信息， 配置信息包 括行存储页面内各列字段的格式信息； 根据配置 信息对行存储页面数据进行解析获得列描述符， 列描述符包括各列字段在行存储页面中的首偏 移地址和字段长度； 根据列描述符计算获得关于 列存储页面的填充信息， 填充信息包括各数据列 在列存储页面中的首偏移地址和列长度， 具有相 同字段属性的各列字段组成一个数据列； 根据填 充信息对列存储页面进行填充， 生成列存储页面 数据； 将列存储页面数据反馈至主处理器。 可支 持变长字段数据的行列存储格式转换， 提高行列 转换方法的适用性。 权利要求书3页 说明书19页 附图20页 CN 115438114 A 2022.12.06 CN 115438114 A 1.一种存 储格式转换 方法， 其特 征在于， 应用于协处 理器， 包括： 获取主处理器发送的行存储页面数据与配置信 息， 所述配置信 息包括所述行存储页面 内各列字段的格式信息； 根据所述配置信息对所述行存储页面数据进行解析， 获得列描述符， 所述列描述符包 括各所述列字段在行存 储页面中的首偏移地址和字段长度； 根据所述列描述符计算获得关于列存储页面的填充信 息， 所述填充信 息包括各数据列 在所述列存储页面中的首偏移地址和列长度， 其中， 具有相同字段属 性的各所述列字段组 成一个数据列； 根据所述 填充信息对所述列存 储页面进行填充， 生成列存 储页面数据； 将所述列存 储页面数据反馈 至所述主处 理器。 2.根据权利要求1所述的存储格式转换方法， 其特征在于， 所述根据所述配置信 息对所 述行存储页面数据进行解析， 获得列描述符， 包括： 确定所述行存 储页面数据的数据存 储格式； 根据所述数据存储格式和所述配置信 息对所述行存储页面数据进行解析， 获得所述列 描述符； 其中， 所述配置信息由所述主处理器基于所述行存储页面数据对应的元组描述符生 成。 3.根据权利要求1所述的存储格式转换方法， 其特征在于， 所述填充信 息还包括各变长 列字段的首偏移地址和字段长度， 定长数据列的最大值和 最小值， 所述根据所述填充信息 对所述列存 储页面进行填充， 生成列存 储页面数据， 包括： 根据各所述数据列在所述列存储页面中的首偏移地址和列长度， 将各所述列字段填充 至所述列存 储页面的字段区域； 将各所述变长列字段的首偏移地址和字段长度填充至所述列存储页面的变长字段索 引区域； 将各所述数据列的首偏移地址和列长度、 所述定长数据列的最大值和最小值填充至所 述列存储页面的列数据索引区域。 4.根据权利要求1所述的存储格式转换方法， 其特征在于， 所述对所述行存储页面数据 进行解析， 获得列描述符 之后， 还包括： 获取排序使能信息； 根据所述 排序使能信息确定排序数据列； 根据所述 排序数据列的排序方式对所述列描述符进行排序， 获得排序后的列描述符。 5.根据权利要求1所述的存储格式转换方法， 其特征在于， 所述协处理器包括第 一预设 数量个计算单元和所述第一预设数量个存储器， 每一所述计算单元对应于一个所述存储 器， 所述获取主处 理器发送的行存 储页面数据， 包括： 从当前计算单元对应的存储器中读取获得所述行存储页面数据， 所述行存储页面数据 由所述主处 理器发送至所述存 储器。 6.根据权利要求5所述的存储格式转换方法， 其特征在于， 每一所述计算单元包括第 二 预设数量个执行通道， 所述从当前计算单元对应的存储器中读取获得所述行存储页面数 据， 包括：权　利　要　求　书 1/3 页 2 CN 115438114 A 2从所述当前计算单 元对应的存 储器中读取获得 所述第二预设数量个行存 储页面数据； 所述从当前计算单 元对应的存 储器中读取获得 所述行存 储页面数据之后， 还 包括： 将所述第二预设数量个行存储页面数据分发至所述第 二预设数量个执行通道， 以利用 各所述执行通道执 行所述对所述行存 储页面数据进行解析， 获得列描述符的步骤。 7.根据权利要求6所述的存储格式转换方法， 其特征在于， 所述将所述列存储页面数据 反馈至所述主处 理器， 包括： 将各所述列存储页面 回写至所述当前计算单元对应的存储器， 以使所述主处理器从各 所述存储器中读取获得 各所述列存 储页面数据。 8.根据权利要求1至7任一项所述的存储格式转换方法， 其特征在于， 所述将所述列存 储页面数据反馈 至所述主处 理器之前， 还 包括： 根据各数据列对应的预设压缩算法对所述列存储页面数据中的各列字段进行压缩处 理， 获得压缩处 理后的列存 储页面数据。 9.一种存 储格式转换 方法， 其特 征在于， 应用于主处 理器， 包括： 获取行存储页面数据以及所述行存 储页面数据对应的元组描述符； 根据所述元组描述符生成关于所述行存储页面数据的配置信 息， 所述配置信 息包括所 述行存储页面数据中各列字段的格式信息； 将所述行存储页面数据和所述配置信 息发送至协 处理器， 以使所述协 处理器根据 所述 配置信息将所述行存 储页面数据转换为列存 储页面数据； 获取所述协处 理器反馈的所述列存 储页面数据。 10.一种存 储格式转换系统， 其特 征在于， 包括主处 理器和协处 理器； 所述主处理器， 用于发送行存储页面数据和配置信息至所述协处理器， 并获取所述协 处理器反馈的列存 储页面数据； 所述协处理器， 用于根据所述配置信息对所述行存储页面数据进行解析， 获得列描述 符， 所述列描述符包括各列字段在行存储页面中的首偏移地址和字段长度； 根据所述列描 述符计算 获得关于列存储页面的填充信息， 所述填充信息包括各数据列在所述列存储页面 中的首偏移 地址和列长度， 其中， 具有相同字段属性的各所述列字段 组成一个数据列； 根据 所述填充信息对所述列存 储页面进行填充， 生成所述列存 储页面数据。 11.根据权利要求10所述的存储格 式转换系统， 其特征在于， 所述主处理器为CPU， 所述 协处理器为FPGA。 12.一种存 储格式转换装置， 其特 征在于， 应用于协处 理器， 包括： 获取模块， 用于获取主处理器发送的行存储页面数据与配置信息， 所述配置信息包括 所述行存 储页面内各列字段的格式信息； 解析模块， 用于根据 所述配置信息对所述行存储页面数据进行解析， 获得列描述符， 所 述列描述符包括各 所述列字段在行存 储页面中的首偏移地址和字段长度； 计算模块， 用于根据所述列描述符计算获得关于列存储页面的填充信息， 所述填充信 息包括各数据列在所述列存储页面中的首偏移地址和列长度， 其中， 具有相同字段属 性的 各所述列字段组成一个数据列； 填充模块， 用于根据所述 填充信息对所述列存 储页面进行填充， 生成列存 储页面数据； 反馈模块， 用于将所述列存 储页面数据反馈 至所述主处 理器。权　利　要　求　书 2/3 页 3 CN 115438114 A 3