说明:收录25万 73个行业的国家标准 支持批量下载
文库搜索
切换导航
文件分类
频道
联系我们
问题反馈
文件分类
联系我们
问题反馈
批量下载
(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210963870.3 (22)申请日 2022.08.11 (71)申请人 上海驻云信息科技有限公司 地址 201203 上海市浦东 新区中国(上海) 自由贸易试验区科 苑路399号7幢 (72)发明人 杨智 蒋烁淼 (74)专利代理 机构 北京中索 知识产权代理有限 公司 11640 专利代理师 隋晓勇 (51)Int.Cl. G06F 16/22(2019.01) G06F 16/2455(2019.01) G06F 16/2458(2019.01) (54)发明名称 一种加速 Elasticsearc h搜索的方法及装置 (57)摘要 本发明提供了一种加速Elasticsearch搜索 的方法及装置, 所述加速Elasticsearch搜索的 方法包括: S1、 对Elasticsear ch所有索引数据添 加一个时间元数据信息, 并将所述时间元数据信 息保存到Redis数据库, 生成索引列表; S2、 根据 客户端请求, 获取用户要搜索的日志时间范围, 判断其为同步查询还是异步查询; S3、 若为所述 同步查询, 搜索所述索引列表, 通过语法计算得 到同步准确索引列表; S4、 若 为所述异步查询, 通 过组合得到异步准确索引列表; S5、 将查询结果 返回给所述客户端。 本发明的方法通过构建详细 的时间元数据信息, 提高海量日志搜索效率, 降 低慢查询、 查询超时出现频率。 权利要求书2页 说明书5页 附图4页 CN 115357578 A 2022.11.18 CN 115357578 A 1.一种加速 Elasticsearc h搜索的方法, 其特 征在于, 包括以下步骤: S1、 对Elasticsearch所有索引数据添加一个时间元数据信息, 并将所述时间元数据信 息保存到Redis数据库, 生成索引列表; S2、 根据客户端请求, 获取用户要搜索的日志时间范围, 并判断其为同步查询还是异步 查询; S3、 若为所述同步查询, 利用Elasticsearch_msearch接口搜索所述索引列表, 并计算 不符合时间范围条件的同步mis s_list, 通过语法计算得到同步 准确索引列表; S4、 若为所述异步查询, 利用Elasticse arch_async_search接口搜索所述索引列表, 并 分别计算符合时间范围条件的异步hit_list和不符合时间范 围条件的异步miss_list, 添 加未来索引feture_l ist, 通过组合得到异步 准确索引列表; S5、 将查询结果返回给 所述客户端。 2.根据权利要求1所述的加速El asticsearch搜索的方法, 其特征在于, 所述S1步骤中, 所述时间元 数据信息添加的方法包括: 新建周期性任务并运行, 查询分析El asticsearch集群当前所有所述索引数据; 通过桶 聚合获取每 个所述索引数据date字段的最 值, 并添加到所述时间元 数据信息中。 3.根据权利要求1所述的加速El asticsearch搜索的方法, 其特征在于, 所述S1步骤中, 所述保存方法包括: 利用Redis hash结构, 将索引别名设置为Redis key、 将实际索引名称设置为hash key、 将具体所述元 数据信息设置为hash value。 4.根据权利要求1所述的加速El asticsearch搜索的方法, 其特征在于, 所述S3步骤中, 所述语法计算的方法包括: 利用Elasticsaerch multi‑target语法, 将全部所述索引列表 减去不符合时间范围条件的同步mis s_list得到同步 准确索引列表。 5.根据权利要求1所述的加速El asticsearch搜索的方法, 其特征在于, 所述S4步骤中, 所述组合计算的方法包括: 根据不符合时间范围条件的所述异步miss_list: 将全部所述索引列表减去不符合时 间范围条件的所述异步mis s_list得到所述异步 准确索引列表1; 或根据符合时间范围条件的所述异步hit_list: 将符合时间范围条件的所述异步hit_ list与所述未来索引feture_l ist组合得到所述异步 准确索引列表 2。 6.根据权利要求1所述的加速El asticsearch搜索的方法, 其特征在于, 所述S4步骤中, 所述未来索引feture_l ist为统计任务间隔时间内滚动出来 新的符合条件的索引。 7.一种加速Elasticsearch搜索的装置, 使用如权利要求1 ‑6任一项所述的方法, 其特 征在于, 包括: 时间元数据模块: 对所有索引数据添加一个时间元数据信息, 并将所述时间元数据信 息保存到Redis数据库, 生成索引列表; 判断模块: 根据客户端请求, 获取用户要搜索的日志时间范围, 并判断其为同步查询还 是异步查询; 同步查询模块: 若为所述同步查询, 利用Elasticsearch_msearch接口搜索所述索引列 表, 并计算 不符合时间范围条件的同步mis s_list, 通过语法计算得到同步 准确索引列表; 异步查询模块: 若为所述异步查询, 利用Elasticsearch_async_search接口搜索所述权 利 要 求 书 1/2 页 2 CN 115357578 A 2索引列表, 并分别计算符合时间范围条件的异步hit_list和不符合时间范围条件的异步 miss_list, 添加未来索引feture_l ist, 通过组合得到异步 准确索引列表; 结果返回模块: 将查询结果返回给 所述客户端。 8.一种计算机可读存储介质, 其上存储有计算机程序, 其特征在于, 所述程序 执行时实 现权利要求1 ‑6任一项所述加速 Elasticsearc h搜索的方法的步骤。 9.一种计算机设备, 包括存储器、 处理器及存储在存储器上并可在处理器上运行的计 算机程序, 其特征在于, 所述处理器执行所述程序时实现如权利要求1 ‑6任一项所述加速 Elasticsearc h搜索的方法的步骤。权 利 要 求 书 2/2 页 3 CN 115357578 A 3
专利 一种加速Elasticsearch搜索的方法及装置
文档预览
中文文档
12 页
50 下载
1000 浏览
0 评论
309 收藏
3.0分
赞助2元下载(无需注册)
温馨提示:本文档共12页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
下载文档到电脑,方便使用
赞助2元下载
本文档由 人生无常 于
2024-03-18 17:14:24
上传分享
举报
下载
原文档
(585.0 KB)
分享
友情链接
GB-T 29832.1-2013 系统与软件可靠性 第1部分:指标体系.pdf
方正证券 安全服务 网络安全行业的制高点.pdf
GB-T 10085-2018 圆柱蜗杆传动基本参数.pdf
清华大学 AIGC发展研究1.0版0.92.pdf
GB 4396-2005 二氧化碳灭火剂.pdf
GB-T 13389-2014 掺硼掺磷掺砷硅单晶电阻率与掺杂剂浓度换算规程.pdf
信创安全典型行业应用专题报告.pdf
GB-T 38408-2019 皮革 材质鉴别 显微镜法.pdf
专利 数据资产风险发现方法和装置.PDF
GB-T 40113.1-2021 生物质热解炭气油多联产工程技术规范 第1部分:工艺设计.pdf
GB-T 36275-2018 专用数字对讲设备电磁兼容限值和测量方法.pdf
T-ZZB 0659—2018 马丁代尔耐磨及起毛起球性能试验仪.pdf
GW0201-2011 国家电子政务外网 IPSec VPN安全接入技术要求与实施指南.pdf
DB52-T1239.3-2019 政府数据 核心元数据 第3部分:空间地理数据 贵州省.pdf
JR-T 0035—2007 保险行业机构代码编码规范.pdf
GB-T 32614-2016 户外运动服装 冲锋衣.pdf
GB-T 28995-2022 人造板饰面专用纸.pdf
GB-T 36630.5-2018 信息安全技术 信息技术产品安全可控评价指标 第5部分:通用计算机.pdf
SY-T 6246-2022 可控震源使用技术规范.pdf
DB14-T 2658—2023 农村公路工程技术标准 山西省.pdf
交流群
-->
1
/
3
12
评价文档
赞助2元 点击下载(585.0 KB)
回到顶部
×
微信扫码支付
2
元 自动下载
官方客服微信:siduwenku
支付 完成后 如未跳转 点击这里 下载
站内资源均来自网友分享或网络收集整理,若无意中侵犯到您的权利,敬请联系我们
微信(点击查看客服)
,我们将及时删除相关资源。