数据资金转移定价业务处理方法、装置、设备及存储介质与流程

摘要: 本技术涉及大数据分布式计算,尤其涉及数据资金转移定价业务处理方法、装置、设备及存储介质。背景技术:1、随着商业银行内部精细化管理要求不断提升,资金转移定价作为资...
数据资金转移定价业务处理方法、装置、设备及存储介质与流程

本技术涉及大数据分布式计算,尤其涉及数据资金转移定价业务处理方法、装置、设备及存储介质。

背景技术:

1、随着商业银行内部精细化管理要求不断提升,资金转移定价作为资产负债管理的核心计量工具,已覆盖对公、对私、同业及资管等全业务条线。在数字化转型背景下,每日待定价的头寸数据规模已达数亿条,且在重定价、跨时间段回溯计算等场景下数据加工量进一步激增,这对底层数据处理系统的并发计算能力、弹性扩展能力及业务规则响应效率提出了极高要求。

2、现有资金转移定价系统主要采用联机事务处理架构与数据库单库架构,核心数据加工逻辑依赖数据库存储过程实现,各批次业务数据仅能串行执行而无法并行处理。在面对海量数据定价计算时,存储过程执行效率低下,跨时间段回溯的重定价操作耗时严重;业务规则变更需依赖开发人员修改代码并重新编译部署,版本更新缺乏灰度测试机制,导致需求响应周期长且维护成本高;同时,数据库单库架构存在单点故障风险,难以支撑大规模数据的高并发加工场景,系统稳定性与可扩展性受限。

3、上述内容仅用于辅助理解本技术的技术方案,并不代表承认上述内容是现有技术。

技术实现思路

1、本技术的主要目的在于提供一种数据资金转移定价业务处理方法、装置、设备及存储介质,旨在解决现有资金转移定价系统采用联机事务处理架构与数据库单库架构,无法高效处理海量数据且难以动态响应业务规则变更的技术问题。

2、为实现上述目的,本技术提出一种数据资金转移定价业务处理方法,所述的数据资金转移定价业务处理方法包括:

3、在高斯数据库集群中对上游业务数据和资金转移定价参数分别进行加工,得到标准头寸数据和加工后的资金转移定价参数;

4、将所述标准头寸数据和所述加工后的资金转移定价参数同步到大数据分析集群;

5、基于规则管理平台生成包含输入节点和规则节点的大数据计算作业,并将所述大数据计算作业部署到所述大数据分析集群运行;

6、通过所述大数据计算作业对所述标准头寸数据进行规则匹配和资金转移价格计算,得到定价结果;

7、将所述定价结果同步到所述高斯数据库集群。

8、在一实施例中,所述在高斯数据库集群中对上游业务数据和资金转移定价参数分别进行加工,得到标准头寸数据和加工后的资金转移定价参数的步骤,包括:

9、通过结构化查询语言关联多个业务表对上游业务数据进行数据加工,得到标准头寸数据;

10、将联机系统维护的市场利率、收益率曲线和调整项以文件方式入湖到所述高斯数据库集群;

11、在所述高斯数据库集群中对入湖后的资金转移定价参数进行数据有效性校验和冗余数据过滤,得到加工后的资金转移定价参数。

12、在一实施例中,所述将所述标准头寸数据和所述加工后的资金转移定价参数同步到大数据分析集群的步骤,包括:

13、将所述标准头寸数据以文件方式从所述高斯数据库集群导出,得到第一数据文件;

14、将所述第一数据文件同步到所述大数据分析集群,并加载到标准头寸数据仓库表;

15、将所述加工后的资金转移定价参数以文件方式从所述高斯数据库集群导出,得到第二数据文件;

16、将所述第二数据文件同步到所述大数据分析集群,并加载到定价参数数据仓库表。

17、在一实施例中,所述基于规则管理平台生成包含输入节点和规则节点的大数据计算作业,并将所述大数据计算作业部署到所述大数据分析集群运行的步骤,包括:

18、在所述规则管理平台中配置输入节点,将所述标准头寸数据和所述加工后的资金转移定价参数作为所述输入节点的数据来源;

19、在所述规则管理平台中配置规则节点,所述规则节点包含多个按顺序执行的规则集,每个所述规则集包含判断维度和目标列;

20、在所述标准头寸数据满足判断维度条件时,赋值对应目标值或执行目标列函数,且在所述标准头寸数据按顺序匹配上任意一条规则时结束匹配;

21、将所述输入节点、所述规则节点以及对应的规则配置打包翻译为程序代码;

22、将所述程序代码编译为大数据计算作业并部署到所述大数据分析集群运行。

23、在一实施例中,所述将所述输入节点、所述规则节点以及对应的规则配置打包翻译为程序代码的步骤,包括:

24、读取所述输入节点的数据源配置和所述规则节点的规则配置;

25、将所述数据源配置转换为数据读取代码;

26、将所述规则配置中的判断维度转换为条件判断代码;

27、将所述规则配置中的目标列转换为赋值运算代码和函数调用代码;

28、将所述数据读取代码、所述条件判断代码、所述赋值运算代码及所述函数调用代码组合得到程序代码。

29、在一实施例中,所述通过所述大数据计算作业对所述标准头寸数据进行规则匹配和资金转移价格计算,得到定价结果的步骤,包括:

30、通过所述输入节点从所述标准头寸数据仓库表读取所述标准头寸数据;

31、通过所述输入节点从所述定价参数数据仓库表读取所述加工后的资金转移定价参数;

32、根据判断维度对所述标准头寸数据进行规则匹配,确定目标列;

33、根据所述目标列和所述加工后的资金转移定价参数进行资金转移价格计算,得到定价结果。

34、在一实施例中,所述将所述定价结果同步到所述高斯数据库集群的步骤,包括:

35、将所述定价结果以文件方式从所述大数据分析集群导出,得到定价结果文件;

36、将所述定价结果文件同步到所述高斯数据库集群进行数据存储;

37、在所述高斯数据库集群中对所述定价结果进行报表统计加工,得到报表数据;

38、将所述报表数据以文件方式从所述高斯数据库集群导出,得到报表文件,并将所述报表文件同步到联机系统数据库。

39、此外,为实现上述目的,本技术还提出一种数据资金转移定价业务处理装置,所述装置包括:

40、数据处理模块,用于在高斯数据库集群中对上游业务数据和资金转移定价参数分别进行加工,得到标准头寸数据和加工后的资金转移定价参数;

41、数据同步模块,用于将所述标准头寸数据和所述加工后的资金转移定价参数同步到大数据分析集群;

42、作业生成部署模块,用于基于规则管理平台生成包含输入节点和规则节点的大数据计算作业,并将所述大数据计算作业部署到所述大数据分析集群运行;

43、定价运算模块,用于通过所述大数据计算作业对所述标准头寸数据进行规则匹配和资金转移价格计算,得到定价结果;

44、结果同步模块,用于将所述定价结果同步到所述高斯数据库集群。

45、此外,为实现上述目的,本技术还提出一种数据资金转移定价业务处理设备,所述设备包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述计算机程序配置为实现如上文所述的数据资金转移定价业务处理方法的步骤。

46、此外,为实现上述目的,本技术还提出一种存储介质,所述存储介质为计算机可读存储介质,所述存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如上文所述的数据资金转移定价业务处理方法的步骤。

47、此外,为实现上述目的,本技术还提供一种计算机程序产品,所述计算机程序产品包括计算机程序,所述计算机程序被处理器执行时实现如上文所述的数据资金转移定价业务处理方法的步骤。

48、本技术提出的一个或多个技术方案,至少具有以下技术效果:

49、通过数仓与大数据集群的分层协同架构,以及规则管理平台对定价逻辑的自动作业生成与部署,实现了海量资金转移定价数据的高效分布式处理,避免了单点故障,并支持业务规则的动态配置与快速响应。