说明:收录25万 73个行业的国家标准 支持批量下载
文库搜索
切换导航
文件分类
频道
联系我们
问题反馈
文件分类
联系我们
问题反馈
批量下载
(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210943088.5 (22)申请日 2022.08.08 (71)申请人 北京永信至诚科技股份有限公司 地址 100094 北京市海淀区丰豪东路9号院 6号楼103 (72)发明人 蔡晶晶 陈俊 韩顺闯 韩伟召 (74)专利代理 机构 北京轻创知识产权代理有限 公司 11212 专利代理师 姚晓丽 (51)Int.Cl. G06F 16/2458(2019.01) G06F 16/27(2019.01) G06F 16/2455(2019.01) G06F 16/906(2019.01) G06F 9/54(2006.01) (54)发明名称 一种数据存储方法、 装置、 电子设备及计算 机存储介质 (57)摘要 本发明涉及一种数据存储方法、 装置、 电子 设备及计算机存储介质, 该方法包括: 获取待存 储数据; 将待存储数据缓存至消息对列中, 并确 定待存储数据的数据类型; 按照数据类型, 将待 存储数据存储至数据类型对应的数据库中。 通过 本发明的方法, 按照数据类型, 将待存储数据存 储至数据类型对应的数据库中, 可以便于对待存 储数据的后续处理, 提高后续对待存储数据的处 理效率。 权利要求书1页 说明书13页 附图3页 CN 115481166 A 2022.12.16 CN 115481166 A 1.一种数据存 储方法, 其特 征在于, 包括: 获取待存 储数据; 将所述待存 储数据缓存至消息对列中, 并确定所述待存 储数据的数据类型; 按照所述数据类型, 将所述待存 储数据存 储至所述数据类型对应的数据库中。 2.根据权利要求1所述的方法, 其特 征在于, 所述消息对列为Kafka消息队列。 3.根据权利要求1所述的方法, 其特 征在于, 确定所述待存 储数据的数据类型, 包括: 提取所述待存 储数据中的数据类型 特征; 根据所述数据类型 特征, 确定所述待存 储数据的数据类型。 4.根据权利要求1至3 中任一项所述的方法, 其特征在于, 所述方法还包括: 将所述待存 储数据进行分布式文件 存储。 5.根据权利要求1至3 中任一项所述的方法, 其特征在于, 所述方法还包括: 将所述待存 储数据进行分布式检索存 储。 6.根据权利要求5所述的方法, 其特 征在于, 所述分布式检索存 储为ES存 储方式。 7.根据权利要求1至3中任一项所述的方法, 其特征在于, 所述待存储数据为针对待检 测对象的待处 理网络安全数据, 所述方法还 包括: 对所述待处 理网络安全数据进行网络安全感知处 理, 得到处 理结果。 8.一种数据存 储装置, 其特 征在于, 包括: 数据获取模块, 用于获取待存 储数据; 数据类型确定模块, 用于将所述待存储数据缓存至消息对列中, 并确定所述待存储数 据的数据类型; 第一数据存储模块, 用于按照所述数据类型, 将所述待存储数据存储至所述数据类型 对应的数据库中。 9.一种电子设备, 其特征在于, 包括存储器、 处理器及存储在存储器上并可在处理器上 运行的计算机程序, 所述处理器执行所述计算机程序时实现权利要求1 ‑7中任一项所述的 方法。 10.一种计算机可读存储介质, 其特征在于, 所述计算机可读存储介质上存储有计算机 程序, 所述计算机程序被处 理器执行时实现权利要求1 ‑7中任一项所述的方法。权 利 要 求 书 1/1 页 2 CN 115481166 A 2一种数据存 储方法、 装置、 电子设备及计算机存 储介质 技术领域 [0001]本发明涉及数据存储以及网络安全技术领域, 具体而言, 本发明涉及一种数据存 储方法、 装置、 电子设备及计算机存 储介质。 背景技术 [0002]对于数据量大的数据, 通常采用传统的http、 syslog、 SNMP等协议方式接入数据处 理平台进行处理, 由于不同的数据的数据类型可能不同, 不同类型 的数据对应的数据 处理 平台也可能不同, 因此, 直接将数据接入数据处理平台, 不便于数据的后续处理, 且降低数 据处理效率。 发明内容 [0003]本发明所要解决的技术问题是提供了一种数据存储方法、 装置、 电子设备及计算 机存储介质, 旨在解决上述至少一个技 术问题。 [0004]第一方面, 本 发明解决上述技术问题的技术方案如下: 一种数据存储方法, 该方法 包括: [0005]获取待存 储数据; [0006]将待存储数据缓存至消息对列中, 并确定待存 储数据的数据类型; [0007]按照数据类型, 将待存 储数据存 储至数据类型对应的数据库中。 [0008]本发明的有益效果是: 将待存储数据缓存至消息队列 中, 然后确定待存储数据的 数据类型, 这样按照数据类型, 将待存储数据存储至数据类型对应的数据库中, 可以便于对 待存储数据的后续处 理, 提高后续对待存 储数据的处 理效率。 [0009]在上述技术方案的基础上, 本发明还可以做如下改进。 [0010]进一步, 上述消息对列为Kafka消息队列。 [0011]采用上述进一步方案的有益效果是, 可将Kafka作为消息对列, Kafka是一种高吞 吐量的分布式发布订阅消息系统, 它可以处 理消费者在网站中的所有动作流数据。 [0012]进一步, 上述确定待存 储数据的数据类型, 包括: [0013]提取待存 储数据中的数据类型 特征; [0014]根据数据类型 特征, 确定待存 储数据的数据类型。 [0015]采用上述进一步方案的有益效果是, 根据数据类型特征可准确的确定待存储数据 的数据类型。 [0016]进一步, 该方法还包括: 将待存 储数据进行分布式文件 存储。 [0017]采用上述进一步方案 的有益效果是, 将待存储数据进行分布式文件存储, 可便于 后续对待存 储数据的溯源。 [0018]进一步, 该方法还包括: 将待存 储数据进行分布式检索存 储。 [0019]采用上述进一步方案 的有益效果是, 将待存储数据进行分布式检索存储, 可实现 对待存储数据的备份。说 明 书 1/13 页 3 CN 115481166 A 3
专利 一种数据存储方法、装置、电子设备及计算机存储介质
文档预览
中文文档
18 页
50 下载
1000 浏览
0 评论
309 收藏
3.0分
赞助2元下载(无需注册)
温馨提示:本文档共18页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
下载文档到电脑,方便使用
赞助2元下载
本文档由 人生无常 于
2024-03-18 17:15:23
上传分享
举报
下载
原文档
(563.2 KB)
分享
友情链接
T-CCTAS 18—2021 固化剂混合料设计与施工技术指南.pdf
GB-T 17359-2023 微束分析 原子序数不小于11的元素能谱法定量分析.pdf
GB-T 38775.2-2020 电动汽车无线充电系统 第2部分:车载充电机和无线充电设备之间的通信协议.pdf
网络安全审查办法2021.pdf
GB-T 16606.3-2018 快递封装用品 第3部分:包装袋.pdf
GB-T 26093-2010 齿轮双面啮合综合测量仪.pdf
GB-T 35986-2018 煤矸石烧失量的测定.pdf
T-CSPSTC 78—2021 顶管法管道工程技术规程.pdf
GB-T 30902-2014 无机化工产品 杂质元素的测定 电感耦合等离子体发射光谱法(ICP-OES).pdf
CH-T 3005-2021 低空数字航空摄影规范.pdf
DB37-T 4319—2021 水利物联网终端技术规范 山东省.pdf
东吴证券 AI搜索行业深度 大模型催生搜索行业变革机遇,产品百花齐放效果几何 .pdf
T-GHDQ 114—2022 车载CAN网络入侵检测和态势感知技术要求.pdf
DB 6505-T 170—2023 计量校准机构服务规范 哈密市.pdf
GB-Z 43030-2023 低压开关设备和控制设备 网络安全.pdf
GB-T 34178-2017 光掩模石英玻璃基板.pdf
T-QGCML 1684—2023 LED大型广告牌制作工艺.pdf
GB-T 41619-2022 科学技术研究项目评价实施指南 基础研究项目.pdf
山东省民用建筑节能条例.pdf
《信息安全技术 基于信息流的关键信息基础设施边界确定方法》【2019.4.21】.pdf
交流群
-->
1
/
3
18
评价文档
赞助2元 点击下载(563.2 KB)
回到顶部
×
微信扫码支付
2
元 自动下载
官方客服微信:siduwenku
支付 完成后 如未跳转 点击这里 下载
站内资源均来自网友分享或网络收集整理,若无意中侵犯到您的权利,敬请联系我们
微信(点击查看客服)
,我们将及时删除相关资源。