基于网格时序的聚合查询方法、装置、设备及介质与流程
本发明涉及数据查询,尤其涉及一种基于网格时序的聚合查询方法、装置、设备及介质。
背景技术:
1、现有技术在面向特定区域查询长时序网格数据时,通常需要在每次查询过程中重复进行区域边界与网格单元匹配,并对跨时段、跨网格系统的时序数据分别读取和聚合。当查询时间范围较长或涉及多个网格系统时,数据定位和聚合处理量明显增加,导致细粒度区域的长时序数据查询效率较低。
2、在金融科技业务领域,保险机构在开展农业保险核保、风险评估和理赔核验时,需要按照行政村、承保区域或受灾区域查询跨年度气象网格数据。由于不同历史时段可能采用不同网格系统,现有技术在每次查询时需要重复确定区域覆盖的网格位置并处理各时段数据,难以快速完成细粒度区域的长时序数据查询。
3、在医疗健康业务领域,医疗机构和公共卫生机构在开展区域疾病监测、环境暴露评估和健康风险分析时,需要按照社区、村镇或医疗服务区域查询长期环境网格数据。现有技术在处理跨时段、跨网格系统的数据时,同样需要重复进行空间定位和时序聚合,导致区域长期健康数据查询的处理效率较低。
技术实现思路
1、本发明的主要目的在于提供一种基于网格时序的聚合查询方法、装置、设备及存储介质,旨在解决现有技术在查询跨时段、跨网格系统的细粒度区域长时序数据时,需要重复进行区域网格匹配和数据聚合,导致查询效率较低的技术问题。
2、为实现上述目的,本发明提供一种基于网格时序的聚合查询方法,包括:
3、获取区域数据和网格系统数据,基于所述区域数据和所述网格系统数据生成区域网格索引数据;
4、接收请求端发送的数据查询请求,基于所述数据查询请求和所述网格系统数据确定目标网格系统数据和查询子时段数据;
5、基于所述数据查询请求和所述目标网格系统数据生成缓存标识,根据所述缓存标识从缓存层检索缓存聚合结果,当检索到缓存聚合结果时,向所述请求端发送所述缓存聚合结果;
6、当未检索到缓存聚合结果时,基于所述数据查询请求、所述目标网格系统数据和所述区域网格索引数据,获取各查询子时段对应的网格时序数据;
7、基于所述数据查询请求对所述网格时序数据进行时间维度聚合,生成网格时间聚合数据,并基于所述查询子时段数据和所述目标网格系统数据对所述网格时间聚合数据进行空间维度聚合,生成各查询子时段对应的区域子时段聚合数据;
8、按照所述查询子时段数据对应的时间顺序组织所述区域子时段聚合数据,生成目标聚合结果,将所述目标聚合结果与所述缓存标识关联写入所述缓存层,并向所述请求端发送所述目标聚合结果。
9、进一步地,为实现上述目的,本发明提供一种基于网格时序的聚合查询装置,包括:
10、区域网格索引生成模块,用于获取区域数据和网格系统数据,基于所述区域数据和所述网格系统数据生成区域网格索引数据;
11、网格时段匹配模块,用于接收请求端发送的数据查询请求,基于所述数据查询请求和所述网格系统数据确定目标网格系统数据和查询子时段数据;
12、缓存查询模块,用于基于所述数据查询请求和所述目标网格系统数据生成缓存标识,根据所述缓存标识从缓存层检索缓存聚合结果,当检索到缓存聚合结果时,向所述请求端发送所述缓存聚合结果;
13、时序数据读取模块,用于当未检索到缓存聚合结果时,基于所述数据查询请求、所述目标网格系统数据和所述区域网格索引数据,获取各查询子时段对应的网格时序数据;
14、时空聚合模块,用于基于所述数据查询请求对所述网格时序数据进行时间维度聚合,生成网格时间聚合数据,并基于所述查询子时段数据和所述目标网格系统数据对所述网格时间聚合数据进行空间维度聚合,生成各查询子时段对应的区域子时段聚合数据;
15、聚合结果输出模块,用于按照所述查询子时段数据对应的时间顺序组织所述区域子时段聚合数据,生成目标聚合结果,将所述目标聚合结果与所述缓存标识关联写入所述缓存层,并向所述请求端发送所述目标聚合结果。
16、进一步地,为实现上述目的,本发明还提供一种计算机设备,所述计算机设备包括存储器、处理器以及存储至所述存储器上并可在所述处理器上运行的基于网格时序的聚合查询程序,所述基于网格时序的聚合查询程序被所述处理器执行时实现如上述所述的基于网格时序的聚合查询方法的步骤。
17、进一步地,为实现上述目的,本发明还提供一种计算机可读存储介质,所述存储介质上存储有基于网格时序的聚合查询程序,所述基于网格时序的聚合查询程序被处理器执行时实现如上所述的基于网格时序的聚合查询方法的步骤。
18、有益效果:本发明涉及数据查询技术领域,公开了一种基于网格时序的聚合查询方法、装置、设备及介质,包括:基于区域数据和网格系统数据生成区域网格索引数据;接收数据查询请求,确定目标网格系统数据和查询子时段数据,并生成缓存标识以检索缓存聚合结果;未检索到缓存聚合结果时,获取各查询子时段对应的网格时序数据,进行时间维度聚合和空间维度聚合,生成区域子时段聚合数据;按照时间顺序组织区域子时段聚合数据,生成目标聚合结果并写入缓存层后发送至请求端。本发明可应用于金融科技及医疗健康等业务场景中,通过区域网格索引减少重复网格匹配,通过分段聚合处理跨时段数据,并通过缓存复用已有结果,从而减少数据读取和重复聚合的处理量,提高长时序网格数据的查询效率。
1.一种基于网格时序的聚合查询方法,其特征在于,包括以下步骤:
2.如权利要求1所述的基于网格时序的聚合查询方法,其特征在于,获取区域数据和网格系统数据,基于所述区域数据和所述网格系统数据生成区域网格索引数据,包括:
3.如权利要求1所述的基于网格时序的聚合查询方法,其特征在于,接收请求端发送的数据查询请求,基于所述数据查询请求和所述网格系统数据确定目标网格系统数据和查询子时段数据,包括:
4.如权利要求1所述的基于网格时序的聚合查询方法,其特征在于,基于所述数据查询请求和所述目标网格系统数据生成缓存标识,根据所述缓存标识从缓存层检索缓存聚合结果,当检索到缓存聚合结果时,向所述请求端发送所述缓存聚合结果,包括:
5.如权利要求1所述的基于网格时序的聚合查询方法,其特征在于,当未检索到缓存聚合结果时,基于所述数据查询请求、所述目标网格系统数据和所述区域网格索引数据,获取各查询子时段对应的网格时序数据,包括:
6.如权利要求1所述的基于网格时序的聚合查询方法,其特征在于,基于所述数据查询请求对所述网格时序数据进行时间维度聚合,生成网格时间聚合数据,并基于所述查询子时段数据和所述目标网格系统数据对所述网格时间聚合数据进行空间维度聚合,生成各查询子时段对应的区域子时段聚合数据,包括:
7.如权利要求1所述的基于网格时序的聚合查询方法,其特征在于,按照所述查询子时段数据对应的时间顺序组织所述区域子时段聚合数据,生成目标聚合结果,将所述目标聚合结果与所述缓存标识关联写入所述缓存层,并向所述请求端发送所述目标聚合结果,包括:
8.一种基于网格时序的聚合查询装置,其特征在于,所述基于网格时序的聚合查询装置包括:
9.一种计算机设备,其特征在于,所述计算机设备包括存储器、处理器以及存储至所述存储器上并可以在所述处理器上运行的基于网格时序的聚合查询程序,所述基于网格时序的聚合查询程序被所述处理器执行时实现如权利要求1-7中任一项所述的基于网格时序的聚合查询方法的步骤。
10.一种计算机可读存储介质,其特征在于,所述存储介质上存储有基于网格时序的聚合查询程序,所述基于网格时序的聚合查询程序被处理器执行时实现如权利要求1-7中任一项所述的基于网格时序的聚合查询方法的步骤。
版权声明:本站专利文献数据主要来源于国家知识产权局等公开渠道,由 技术新讯 进行整理汇编。页面设计及数据汇编的著作权归本站所有。全部内容仅供个人学习、科研评估与技术交流参考,严禁用于任何商业用途(包括但不限于直接生产制造、技术转让、倒卖数据等)。
免责条款:专利技术具有时效性,本站不对资料的绝对准确性、完整性和可实施性提供任何明示或暗示的担保。因参考本站内容造成的直接或间接损失,本站不承担相关法律责任。若您认为本站内容有侵权问题,请及时提供权属证明与我们联系,本站将在核实后依法处理。反馈意见:yyfuon@163.com