说明:收录25万 73个行业的国家标准 支持批量下载
文库搜索
切换导航
文件分类
频道
联系我们
问题反馈
文件分类
联系我们
问题反馈
批量下载
(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210807709.7 (22)申请日 2022.07.11 (71)申请人 杭州浮云网络科技有限公司 地址 310006 浙江省杭州市下城区华电弄 78号306室 (72)发明人 顾伟涛 曹彩鹏 朱国庆 周游 刘培锴 陈斐 (74)专利代理 机构 杭州华进联浙知识产权代理 有限公司 3 3250 专利代理师 贺才杰 (51)Int.Cl. G06F 16/22(2019.01) G06F 16/2455(2019.01) G06F 16/27(2019.01) G06F 16/28(2019.01) (54)发明名称 数据归档方法、 系统、 电子装置和存 储介质 (57)摘要 本申请涉及一种数据归档方法、 系统、 电子 装置和存储介质, 其中, 该数据归档方法包括: 获 取分库分表后的待归档数据, 以及该待归档数据 的分片元信息; 将流式服务插入至该待归档数 据, 至少根据该分片元信息, 以及该流式服务对 应的唯一标识符信息对该待归档数据进行流式 处理, 得到第一同步数据; 根据该分片元信息创 建分布式数据库, 并将该第一同步数据同步至该 分布式数据库中进行分布式存储, 得到第二同步 数据; 将该第二同步数据作为数据归档结果。 通 过本申请, 解决了归档数据无法快速查询、 维护 成本高的问题, 实现了数据归档结果的快速存 储、 查询。 权利要求书2页 说明书10页 附图2页 CN 115309740 A 2022.11.08 CN 115309740 A 1.一种数据归档方法, 其特 征在于, 包括: 获取分库分表后的待归档数据, 以及所述待归档数据的分片元信息; 将流式服务插入至所述待归档数据, 至少根据所述分片元信息, 以及所述流式服务对 应的唯一标识符信息对所述待归档数据进行流式处 理, 得到第一同步数据; 根据所述分片元信 息创建分布式数据库, 并将所述第 一同步数据同步至所述分布式数 据库中进行分布式存 储, 得到第二同步数据; 将所述第二同步数据作为数据归档结果。 2.根据权利要求1所述的数据归档方法, 其特征在于, 所述至少根据所述分片元信息, 以及所述流式服务对应的唯一标识符信息对所述待归档数据进行流式处理, 得到第一同步 数据, 包括: 根据所述分片元信息获取 所述待归档数据的时间字段; 获取所述流式服务的配置参数, 根据所述配置参数获取 所述唯一标识符信息; 至少根据 所述分片元信 息、 所述待归档数据的时间字段和所述唯一标识符信 息得到所 述第一同步数据。 3.根据权利要求1所述的数据归档方法, 其特征在于, 所述将所述第 一同步数据同步至 所述分布式数据库中进行分布式存 储, 得到第二同步数据, 包括: 至少根据所述分片元信息, 以及所述分布式数据库的字段信息, 将所述第一同步数据 同步至所述分布式数据库中, 得到第二同步数据。 4.根据权利要求1所述的数据归档方法, 其特征在于, 在所述得到第二同步数据之后, 在所述将所述第二同步数据作为数据归档结果之前, 还 包括: 比较所述待归档数据和所述第二同步数据, 得到比较结果; 在所述比较结果指示所述 待归档数据和所述第二同步数据相区别的情况下, 至少根据所述分布式数据库的字段信息 获取并执行所述分布式数据库的传输状态语句, 得到传输状态结果; 在所述传输状态结果 指示所述分布式数据库为同步状态时, 获取预设等待时长, 在等待 所述预设等待时长 之后, 得到再次比较结果; 或者, 删除已同步的所述第二同步数据, 对所述待归档数据进行流式处理得到第三同 步数据, 将所述第三同步数据同步至分布式数据库中, 得到第四同步数据; 比较所述待归档 数据和所述第四同步数据, 得到再次比较结果; 在所述比较结果或所述再次比较结果指示所述待归档数据和所述第二同步数据相同 的情况下, 至少根据所述分片元信息删除所述待归档数据。 5.根据权利要求1所述的数据归档方法, 其特征在于, 在所述将所述第 二同步数据作为 数据归档结果之后, 还 包括: 根据所述分片元信 息获取针对所述数据归档结果的回收碎片语句, 并执行所述回收碎 片语句, 回收所述待归档数据的磁 盘碎片。 6.根据权利要求1至5任一项所述的数据归档方法, 其特征在于, 在所述将所述第二同 步数据作为数据归档结果之后, 还 包括: 获取所述分布式数据库的分布式元信 息, 至少根据 所述分布式元信 息查询所述待归档 数据对应的所述数据归档结果。 7.根据权利要求1所述的数据归档方法, 其特征在于, 所述分布式数据库为StarRocks权 利 要 求 书 1/2 页 2 CN 115309740 A 2数据库, 和/或, 所述 流式服务为maxwel l服务。 8.一种数据归档系统, 其特征在于, 包括: 终端设备、 传输设备以及服务器设备; 其中, 所述终端设备通过传输设备 连接服务器设备; 所述服务器设备用于执 行权利要求1至7中任一项所述的数据归档方法; 所述传输设备用于传输数据归档结果; 所述终端设备用于 显示所述数据归档结果。 9.一种电子装置, 包括存储器和处理器, 其特征在于, 所述存储器中存储有计算机程 序, 所述处理器被设置为运行所述计算机程序以执行权利要求1至7中任一项 所述的数据归 档方法。 10.一种计算机可读存储介质, 其上存储有计算机程序, 其特征在于, 所述计算机程序 被处理器执行时实现权利要求1至7中任一项所述的数据归档方法的步骤。权 利 要 求 书 2/2 页 3 CN 115309740 A 3
专利 数据归档方法、系统、电子装置和存储介质
文档预览
中文文档
15 页
50 下载
1000 浏览
0 评论
309 收藏
3.0分
赞助2元下载(无需注册)
温馨提示:本文档共15页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
下载文档到电脑,方便使用
赞助2元下载
本文档由 人生无常 于
2024-03-18 17:17:48
上传分享
举报
下载
原文档
(631.2 KB)
分享
友情链接
清华大学 - SuperBench大模型综合能力评测报告 0412 v2.2.pdf
DL-T 1989-2019 电化学储能电站监控系统与电池管理系统通信协议.pdf
T-CAMA 01—2017 农机深松作业远程监测系统技术要求.pdf
【国际视野】美国网络安全和基础设施安全局发布《远程监控和管理网络防御计划》.pdf
GB-T 24421.2-2023 服务业组织标准化工作指南 第2部分:标准体系构建.pdf
GB-T 13061-2017 商用车空气悬架用空气弹簧技术规范.pdf
GB-T 29234-2012 基于公用电信网的宽带客户网络安全技术要求.pdf
GB-T 8487-2010 港口装卸术语.pdf
信通院 国内网络安全信息与事件管理类产品研究与测试报告-2021年.pdf
GB-T 32124-2015 磷石膏的处理处置规范.pdf
GBT 50064-2014 交流电气装置的过电压保护和绝缘配合设计规范.pdf
DL-T 5209-2020 混凝土坝安全监测资料整编规程.pdf
GB-T 12409-2009 地理格网.pdf
GB 17354-1998 汽车前、后端保护装置.pdf
T-CSZFC 1—2022 慈善组织食品捐赠规范.pdf
NY-T 3223-2018 日光温室设计规范.pdf
阿里云 云原生数据湖解决方案蓝皮书.pdf
BSIMM 软件安全构建成熟度模型 .pdf
中国联通 量子安全通信技术应用白皮书(2022).pdf
GB-T 42680-2023 基于相位多普勒技术的液体燃料雾化特性测试方法.pdf
交流群
-->
1
/
3
15
评价文档
赞助2元 点击下载(631.2 KB)
回到顶部
×
微信扫码支付
2
元 自动下载
官方客服微信:siduwenku
支付 完成后 如未跳转 点击这里 下载
站内资源均来自网友分享或网络收集整理,若无意中侵犯到您的权利,敬请联系我们
微信(点击查看客服)
,我们将及时删除相关资源。