一种数据查询方法、程序产品及计算设备与流程
本技术实施例涉及计算设备,尤其涉及一种数据查询方法、程序产品及计算设备。
背景技术:
1、在业务系统处理业务请求的过程中,业务请求通常需要从其他数据源(例如外围数据库、缓存服务器、远程服务、本地存储中间件等)获取业务数据,以完成业务逻辑。一个业务请求的处理过程中,可能包含多次对数据源的数据查询请求。
2、例如,在处理一个用户信息展示的业务请求时,业务系统可能需要分别查询用户的基本信息、用户的账户余额、用户的最近订单记录等多个业务数据。
3、当同一个业务请求内存在多次针对不同业务数据或相同业务数据的数据查询请求时,多次独立的数据查询请求会导致对数据源的重复访问,增加数据源的负载压力,进而影响业务请求的整体响应性能,降低了数据查询的效率。
技术实现思路
1、本技术实施例提供一种数据查询方法、程序产品及计算设备,解决了数据查询效率较低的问题。
2、第一方面,本技术实施例提供了一种数据查询方法,该方法包括:接收业务请求,并基于业务请求生成数据查询子请求;数据查询子请求用于在业务请求的处理过程中请求获取目标业务数据;在预先构建好的缓存中未查询到目标业务数据的情况下,将数据查询子请求添加到业务请求的待查询请求集中;批量获取待查询请求集中每个数据查询子请求所请求的业务数据,以得到业务数据集合,并以业务数据集合中每个业务数据的数据标识为缓存查询键,将业务数据集合中的业务数据分别写入缓存;根据每个业务数据的数据标识,从业务数据集合中确定目标业务数据。
3、由上可知,本技术实施例提供的数据查询方法,通过在业务请求处理过程中预先构建缓存,并在缓存未命中所要查询的目标业务数据的情况下,将数据查询子请求添加到待查询请求集后统一进行批量获取,减少了对数据源的访问次数,进而降低了数据源的访问压力。
4、在此基础上,通过将批量获取到的业务数据集合按数据标识拆分后分别写入缓存,使得后续单条的数据查询子请求能够通过缓存直接命中所要查询的单个业务数据,实现了在同一业务请求处理流程中对批量获取到的业务数据集合中每个业务数据的复用,在减少数据源访问压力的同时,提升了业务请求的响应性能。
5、也就是说,通过批量获取业务数据集合,以及对业务数据集合中的业务数据进行拆分存储这二者的结合,既可以避免多次访问数据源造成的数据访问压力,也可以直接在缓存中复用已经获取到的业务数据集合中的各个业务数据,进一步的降低了数据源的访问压力,提升了数据查询的效率。
6、由于批量查询能一次查询到多个业务数据,因此再进一步将查询的多个业务数据进行缓存,可极大降低对数据源的访问压力,提升了数据查询效率。
7、在一些实施例中,缓存为请求级缓存,请求级缓存用于缓存业务请求在处理过程中获取到的业务数据。
8、在该实施例中,通过设置请求级缓存,使得请求级缓存仅对单个的业务请求有效,即仅缓存该业务请求在处理过程中获取到的业务数据,不缓存其他业务请求对应的业务数据,避免了跨业务请求造成的数据污染、维护成本高的问题。
9、并且,由于数据源中的业务数据是动态变化的。而单个请求的请求生命周期通常是极短的。通过在业务请求的请求生命周期内引入请求级缓存,可以保证请求级缓存中缓存的业务数据的时效性,进而提高了数据查询的准确度。
10、在一些实施例中,该方法还包括:在未获取到待查询请求集中的第一数据查询子请求所请求的第一业务数据的情况下,生成第一业务数据的数据标识对应的空值占位,并以第一业务数据的数据标识为缓存查询键,将第一业务数据的数据标识对应的空值占位写入请求级缓存。
11、在该实施例中,通过将未获取到的业务数据以空值占位的方式写入请求级缓存,可以当同一业务请求的请求生命周期内再次出现针对同一业务数据的数据查询子请求时,计算设备在请求级缓存中进行查找时,会命中该空值占位。计算设备识别出该空值占位,直接返回空值或空结果,而不会再次向数据源发起查询子请求,从而避免了穿透查询的问题。
12、在一些实施例中,批量获取待查询请求集中每个数据查询子请求所请求的业务数据,包括:在待查询请求集满足批量查询条件的情况下,批量获取待查询请求集中每个数据查询子请求所请求的业务数据。
13、在一些实施例中,批量查询条件包括:待查询请求集中的数据查询子请求的数量达到预设数量;和/或,待查询请求集中的任一数据查询子请求的等待时长达到预设时长。
14、在该实施例中,通过上述两种批量查询条件的组合,计算设备可以在高并发场景下通过预设数量快速触发批量获取,在低并发场景下通过预设时长及时触发批量获取,从而在批量获取效率和业务请求响应速度之间取得平衡。
15、在一些实施例中,在待查询请求集中的数据查询子请求的数量为多个的情况下,批量获取待查询请求集中每个数据查询子请求所请求的业务数据,包括:按照预设分片策略,将待查询请求集划分为多个查询请求分片;每个查询请求分片包括至少一个数据查询子请求;并行批量获取每个查询请求分片中的数据查询子请求所请求的业务数据。
16、在该实施例中,在待查询请求集中的数据查询子请求的数量为多个的情况下,可以将原本需要一次性处理的大量数据查询子请求拆分为多个小批量的查询子请求,并同时执行。这样,可以避免单次批量查询请求数量过大而导致数据源处理压力过大或响应时间过长,从而降低数据源的负载压力。
17、在一些实施例中,请求级缓存包括多个缓存空间;不同的缓存空间用于缓存从不同的数据源获取的业务数据。
18、在该实施例中,可以使得请求级缓存能够在同一个业务请求的请求生命周期内,同时管理来自多个不同数据源的业务数据,并且保证了不同数据源之间的数据隔离,防止了不同数据源的数据标识冲突。
19、在一些实施例中,该方法还包括:在业务请求处理完成的情况下,删除请求级缓存。
20、在该实施例中,请求级缓存在业务请求处理完成后被及时删除,避免了因请求级缓存长期占用内存而导致的内存泄漏问题,提高了计算设备的资源利用率。
21、在一些实施例中,业务请求的类型包括:同步类型和/或响应类型;同步类型用于表示业务请求在等待获取业务数据时处于阻塞状态;响应类型用于表示业务请求在等待获取业务数据时处于非阻塞状态。
22、在该实施例中,本技术实施例提供的请求级缓存能够支持同步类型或响应类型下的业务请求,丰富了业务请求的应用场景。
23、第二方面,本技术实施例提供一种计算设备,该计算设备包括处理器和存储器;处理器与存储器耦合;存储器用于存储计算机指令,计算机指令由处理器加载并执行以使计算设备实现上述第一方面及其可能的实施例提供的方法。
24、第三方面,本技术实施例提供一种计算机可读存储介质,该计算机可读存储介质包括:计算机软件指令;当计算机软件指令在计算设备中运行时,使得计算设备实现上述第一方面及其可能的实施例提供的方法。
25、第四方面,本技术实施例提供一种计算机程序产品,当该计算机程序产品在计算设备上运行时,使得计算设备执行上述第一方面描述的相关方法的步骤,以实现上述第一方面的方法。
26、上述第二方面至第四方面的有益效果可以参考第一方面的对应描述,不再赘述。
版权声明:本站专利文献数据主要来源于国家知识产权局等公开渠道,由 技术新讯 进行整理汇编。页面设计及数据汇编的著作权归本站所有。全部内容仅供个人学习、科研评估与技术交流参考,严禁用于任何商业用途(包括但不限于直接生产制造、技术转让、倒卖数据等)。
免责条款:专利技术具有时效性,本站不对资料的绝对准确性、完整性和可实施性提供任何明示或暗示的担保。因参考本站内容造成的直接或间接损失,本站不承担相关法律责任。若您认为本站内容有侵权问题,请及时提供权属证明与我们联系,本站将在核实后依法处理。反馈意见:yyfuon@163.com