说明:收录25万 73个行业的国家标准 支持批量下载
文库搜索
切换导航
文件分类
频道
联系我们
问题反馈
文件分类
联系我们
问题反馈
批量下载
(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210834648.3 (22)申请日 2022.07.14 (71)申请人 天翼云科技有限公司 地址 100007 北京市东城区青龙胡同甲1 号、 3号2幢2层20 5-32室 (72)发明人 黎海育 郑云 朱志鹏 陈炜 (74)专利代理 机构 北京同达信恒知识产权代理 有限公司 1 1291 专利代理师 黄邃 (51)Int.Cl. G06F 16/2458(2019.01) G06F 16/2455(2019.01) G06F 16/22(2019.01) G06F 16/21(2019.01) (54)发明名称 一种数据处 理方法、 装置及存 储介质 (57)摘要 本申请涉及一种数据处理方法、 装置及存储 介质。 具体包括: 获取待存储的时序数据, 根据分 片规则对时序数据进行分片处理。 然后, 对分片 后的时序数据进行一致性哈希 运算, 根据运算结 果确定存储时序数据的目标存储设备, 将时序数 据存储至目标存储设备的数据库。 其中, 分片规 则包括数据采集指标及数据库, 该数据库用于存 储根据数据采集指标采集的时序数据, 不同的分 片规则包括的采集指标和/或数据库不同。 通过 该方法可满足对 海量时序数据的存 储需求。 权利要求书2页 说明书7页 附图3页 CN 115269680 A 2022.11.01 CN 115269680 A 1.一种数据处 理方法, 其特 征在于, 包括: 获取待存 储的时序数据; 根据分片规则对所述 时序数据进行分片处理, 所述分片规则包括数据采集指标及数据 库, 所述数据库用于存储根据所述数据采集指标采集的时序数据, 不同的分片规则包括的 数据采集指标和/或数据库不同; 对所述分片后的时序 数据进行一致性哈希运算, 根据运算结果确定存储所述 时序数据 的目标存 储设备, 将所述时序数据存 储至所述目标存 储设备的所述数据库。 2.如权利要求1所述的方法, 其特 征在于, 所述方法还 包括: 记录所述时序数据的存 储失败次数N; 当N大于预设阈值时, 将所述时序数据存 储至缓存 模块。 3.如权利要求2所述的方法, 其特 征在于, 所述还 包括: 在确定所述目标存储设备能够存储数据时, 获取所述缓存模块中的所述时序数据, 将 所述时序数据存 储至所述目标存 储设备的所述数据库。 4.如权利要求1 ‑3任一项所述的方法, 其特征在于, 多个存储设备为一致性哈希环上的 节点, 所述方法还 包括: 将所述一致性哈希环设置为只写模式; 在所述一致性哈希环上部署新的存 储设备; 将所述时序数据迁移到所述 新的存储设备, 并将所述 一致性哈希环设置为读写模式。 5.如权利要求 4所述的方法, 其特 征在于, 所述方法还 包括: 根据可用的存 储资源确定能够新部署的存 储设备的个数。 6.一种数据处 理装置, 其特 征在于, 包括: 获取单元, 用于获取待存 储的时序数据; 分片单元, 用于根据分片规则对所述时序数据进行分片处理, 所述分片规则包括数据 采集指标及数据库, 所述数据库用于存储根据所述数据采集指标采集的时序数据, 不同的 分片规则包括的数据采集指标和/或数据库不同; 存储单元, 用于对所述分片后的时序数据进行一致性哈希运算, 根据运算结果确定存 储所述时序数据的目标存储设备, 将所述时序数据存储至所述目标存储设备的所述数据 库。 7.如权利要求6所述的装置, 其特 征在于, 所述存 储单元还用于: 记录所述时序数据的存 储失败次数N; 当N大于预设阈值时, 将所述时序数据存 储至缓存 模块。 8.如权利要求7 所述的装置, 其特 征在于, 所述存 储单元还用于: 在确定所述目标存储设备能够存储数据时, 获取所述缓存模块中的所述时序数据, 将 所述时序数据存 储至所述目标存 储设备的所述数据库。 9.一种电子设备, 其特征在于, 包括至少一个处理器; 以及与 所述至少一个处理器通信 连接的存储器; 其中, 所述存储器存储有被所述至少一个处理器执行的指 令; 所述指 令被所 述至少一个处理器执行, 以使所述至少一个处理器能够执行根据权利要求1 ‑5中任一项所 述的方法。 10.一种计算机存储介质, 其特征在于, 所述计算机存储介质存储有计算机程序, 所述权 利 要 求 书 1/2 页 2 CN 115269680 A 2计算机程序用于执 行根据权利要求1 ‑5中任一项所述的方法。权 利 要 求 书 2/2 页 3 CN 115269680 A 3
专利 一种数据处理方法、装置及存储介质
文档预览
中文文档
13 页
50 下载
1000 浏览
0 评论
309 收藏
3.0分
赞助2元下载(无需注册)
温馨提示:本文档共13页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
下载文档到电脑,方便使用
赞助2元下载
本文档由 人生无常 于
2024-03-18 17:15:21
上传分享
举报
下载
原文档
(517.7 KB)
分享
友情链接
GB-T 35499-2017 呋喃树脂耐蚀作业质量技术规范.pdf
GM-T 0001.2-2012 祖冲之序列密码算法:第2部分:基于祖冲之算法的机密性算法.pdf
GB-T 33840-2017 水套加热炉通用技术要求.pdf
T-WLJC 116—2023 工业互联网数据采集装置.pdf
GB-T 39404-2020 工业机器人控制单元的信息安全通用要求.pdf
YD-T 4047.3-2022 分布式中间件服务技术能力要求 第3部分:API网关.pdf
GB-T 42467.4-2023 中医临床名词术语 第4部分:肛肠科学.pdf
DB52-T 1741-2023 快递绿色包装使用评价规范 贵州省.pdf
GB-T 20984-2022 信息安全技术 信息安全风险评估方法.pdf
GB-T 31499-2015 信息安全技术 统一威胁管理产品技术要求和测试评价方法.pdf
T-LSCY 001—2022 工业企业节能管理指南.pdf
《零售企业数据安全合规指南》2.10.pdf
GB-T 42508-2023 投资项目风险评估指南.pdf
T-CADERM 6007—2023 心肺转流系统用空氧混合器.pdf
SY-T 7652-2021 气藏型储气库库容参数设计方法.pdf
T-CEC 5074—2022 抽水蓄能电站工程施工总进度编制导则.pdf
XF 1203-2014 气体灭火系统灭火剂充装规定.pdf
GA-T 1996-2022 警用天通卫星移动终端及应用设备技术要求和测试方法.pdf
GB-T 37568-2019 铜及铜合金镀锡带材.pdf
alienvault 业内人士指南之应急响应 insiders guide incident response 英文版.pdf
交流群
-->
1
/
3
13
评价文档
赞助2元 点击下载(517.7 KB)
回到顶部
×
微信扫码支付
2
元 自动下载
官方客服微信:siduwenku
支付 完成后 如未跳转 点击这里 下载
站内资源均来自网友分享或网络收集整理,若无意中侵犯到您的权利,敬请联系我们
微信(点击查看客服)
,我们将及时删除相关资源。