数据查询请求的处理方法、装置、存储介质及电子设备与流程

摘要: 本技术涉及大数据领域,具体而言,涉及一种数据查询请求的处理方法、装置、存储介质及电子设备。背景技术:1、随着计算机技术的发展,越来越多的业务场景中需要为用户提供...
数据查询请求的处理方法、装置、存储介质及电子设备与流程

本技术涉及大数据领域,具体而言,涉及一种数据查询请求的处理方法、装置、存储介质及电子设备。

背景技术:

1、随着计算机技术的发展,越来越多的业务场景中需要为用户提供数据查询服务。数据查询系统在接收到用户发起的查询请求后,可以根据用户的查询条件在数据库中执行查询操作,并将查询结果返回给用户。

2、然而,在用户持续发起查询请求的场景下,多个查询结果之间可能存在数据关联关系,关联分析可被用于从多个查询结果中逐步反推出统计层面的敏感信息,导致信息安全性差。相关技术中,不同查询请求对应的查询结果之间相互独立,难以兼顾查询结果的统计精度与对多次查询结果进行关联分析时的安全性。

3、针对上述的问题,目前尚未提出有效的解决方案。

技术实现思路

1、本技术实施例提供了一种数据查询请求的处理方法、装置、存储介质及电子设备,以至少解决现有数据查询系统在持续查询场景下,用户通过多次查询结果的关联分析即可反推敏感信息,从而导致的信息安全性差的技术问题。

2、根据本技术实施例的一个方面,提供了一种数据查询请求的处理方法,包括:获取多个数据源中的业务数据,并对获取到的业务数据进行整合处理,得到整合数据;接收目标用户发起的查询请求,根据查询请求在整合数据中执行查询操作,得到查询结果;在查询请求涉及敏感统计数据时,在查询结果中添加随机噪声,并为目标用户分配本次查询所消耗的隐私预算量,其中,本次查询所消耗的隐私预算量根据随机噪声的大小确定;获取目标用户的隐私预算量的累计消耗量,在累计消耗量超过预设阈值的情况下,拒绝目标用户的后续查询请求,或增大目标用户的后续查询结果的随机噪声的幅度。

3、示例性地,多个数据源包括第一数据源和第二数据源,第一数据源为业务系统的内部数据库,第二数据源为外部数据平台,该方法还包括:在检测到第一数据源和第二数据源分别与数据汇聚端进行数据交互时,采用加密算法对业务数据中的敏感数据字段进行加密传输,并将本次数据交互的关键信息上链存储至区块链,其中,关键信息包括本次交互数据的哈希值、数据来源标识、传输时间戳和数据量级;其中,数据汇聚端为用于接收第一数据源和第二数据源所输出的业务数据、并对接收到的业务数据进行汇聚处理的系统。

4、示例性地,对获取到的业务数据进行整合处理,得到整合数据,包括:将多个数据源中的业务数据汇总至数据仓库,并按照预设的数据模型对业务数据进行分类存储;对分类存储后的业务数据进行数据校验、去重和格式标准化处理,得到目标业务数据;对目标业务数据中的敏感字段进行脱敏处理或加密存储,得到安全处理后的业务数据;将安全处理后的业务数据传输至大数据平台,由大数据平台对安全处理后的业务数据进行特征提取和指标计算,生成整合数据,并将整合数据同步至决策分析系统;其中,决策分析系统为用于为业务决策提供数据查询和分析支持的前端系统。

5、示例性地,接收目标用户发起的查询请求,根据查询请求在整合数据中执行查询操作,得到查询结果,包括:基于整合数据提供可视化查询界面,将数据库查询语句的语法结构在可视化查询界面中拆解为多个可视化组件;接收目标用户对多个可视化组件的操作,并根据该操作生成对应的数据库查询语句;在整合数据中执行数据库查询语句,得到查询结果。

6、示例性地,多个可视化组件包括以下至少一种组件:选表组件,用于供目标用户从整合数据所包含的多个数据表中选择待查询的数据表;输出字段定义组件,用于供目标用户定义数据库查询语句待输出的字段;取数条件定义组件,用于供目标用户定义从待查询的数据表中提取数据的筛选条件;排序字段选择组件,用于供目标用户定义查询结果的排序方式;分组字段选择组件,用于供目标用户定义查询结果的分组方式。

7、示例性地,在接收目标用户对多个可视化组件的操作,并根据该操作生成对应的数据库查询语句之后,该方法还包括:响应于目标用户的保存操作,将数据库查询语句保存为查询模板;响应于目标用户对查询模板的复用操作,根据查询模板在整合数据中执行查询,并下载查询结果。

8、示例性地,根据查询请求在整合数据中执行查询操作,得到查询结果,包括:获取查询请求中携带的各查询条件的被查询频率,并将被查询频率超过预设阈值的查询条件固化为聚合查询功能,其中,聚合查询功能为将查询条件固化后供目标用户通过单次操作触发的查询功能;响应于目标用户通过聚合查询功能触发的查询请求,根据该查询请求中携带的固化查询条件,在整合数据中执行查询,生成聚合查询结果;将聚合查询结果在前端系统页面进行展示。

9、根据本技术实施例的另一方面,还提供了一种数据查询请求的处理装置,包括:获取单元,用于获取多个数据源中的业务数据,并对获取到的业务数据进行整合处理,得到整合数据;查询单元,用于接收目标用户发起的查询请求,根据查询请求在整合数据中执行查询操作,得到查询结果;数据保护单元,用于在查询请求涉及敏感统计数据时,在查询结果中添加随机噪声,并为目标用户分配本次查询所消耗的隐私预算量,其中,本次查询所消耗的隐私预算量根据随机噪声的大小确定;数据管理单元,用于获取目标用户的隐私预算量的累计消耗量,在累计消耗量超过预设阈值的情况下,拒绝目标用户的后续查询请求,或增大目标用户的后续查询结果的随机噪声的幅度。

10、根据本技术实施例的另一方面,还提供了一种计算机可读存储介质,计算机可读存储介质中存储有计算机程序,其中,在计算机程序运行时,使得计算机可读存储介质所在设备执行上述的数据查询请求的处理方法。

11、根据本技术实施例的另一方面,还提供了一种电子设备,包括一个或多个处理器和存储器,存储器用于存储一个或多个程序,其中,当一个或多个程序被一个或多个处理器执行时,使得一个或多个处理器执行上述的数据查询请求的处理方法。

12、根据本技术实施例的另一方面,还提供了一种计算机程序产品,包括计算机程序或指令,计算机程序或指令在被处理器执行时实现上述的数据查询请求的处理方法。

13、在本技术实施例中,首先,通过在查询请求涉及敏感统计数据时在查询结果中添加随机噪声,使得单次查询所返回的结果不是精确的统计值。由于随机噪声的干扰,单次查询结果本身已无法准确反映真实的统计信息,有利于降低用户依据单次查询结果获取敏感信息的可能性。其次,为每次查询分配本次查询所消耗的隐私预算量,且本次查询所消耗的隐私预算量根据随机噪声的大小确定。由于随机噪声的幅度与隐私预算量之间存在对应关系,每次查询的噪声幅度和隐私预算消耗量均独立确定,多次查询结果之间难以形成可用于反推敏感信息的稳定关联,有利于阻断用户通过累积多次查询结果进行关联分析的路径。再次,获取目标用户的隐私预算量的累计消耗量,并在累计消耗量超过预设阈值时拒绝目标用户的后续查询请求或增大后续查询结果的随机噪声的幅度。通过监控累计消耗量并在超阈值时触发保护响应,有利于在用户的查询次数或查询精度达到一定程度后限制其继续获取可用的查询结果,从而降低通过持续发起查询来累积关联分析素材的风险。综上,通过在单次查询中添加随机噪声、为每次查询分配隐私预算量,以及在累计消耗量超过阈值时触发保护响应,有利于降低用户通过多次查询结果的关联分析反推敏感信息的可能性,从而提升数据查询过程的安全性,进而解决了现有数据查询系统在持续查询场景下,用户通过多次查询结果的关联分析即可反推敏感信息,从而导致的信息安全性差的技术问题。