基于动态演化机制的金融数据处理方法、装置及设备与流程
本发明实施例涉及金融科技,特别涉及一种基于动态演化机制的金融数据处理方法、装置及设备。
背景技术:
1、金融业是有非常多的非结构化数据,且随着交易量和业务类型的扩张,非结构化数据的种类和数量也在增长,然而非结构化数据的处理难度也非常高,一是种类非常的多,常见的类型就有几百种,如研报、公告、政策、舆情新闻资讯等;二是每种类型中的内容复杂多变,每个类型针对不同主体、时间和类型,差异性较大,如授权合同、采购合同等等;三是数量非常大,每日增长tb级的非结构化数据;四是价值很高,非结构化信息中有很多的重要信息、交叉关联信息和工作流程信息;五是对于稳定性和可靠性要求高,由于类型多、内容多,人工难以复核。
技术实现思路
1、为了解决上述技术问题,本发明实施例提供一种基于动态演化机制的金融数据处理方法,包括:
2、接收监测的金融数据流;
3、确定所述金融数据流的复杂度指数;
4、在所述复杂度指数与第一预设阈值具有第一关系时,确定不同预设模型对所述金融数据流的处理结果的置信度;
5、结合所述置信度及预设的调整参数对各个所述预设模型的权重进行动态调整,调整后的权重与对应的预设模型的置信度正相关;
6、基于权重调整后的所述预设模型重新处理所述金融数据流。
7、在一实施例中,所述确定所述金融数据流的复杂度指数,包括:
8、确定金融数据的熵值、涉及的格式及语义密度;
9、基于所述熵值、涉及的格式及语义密度确定所述金融数据的复杂度指数。
10、在一实施例中,所述结合所述置信度及预设的调整参数对各个所述预设模型的权重进行动态调整,包括:
11、结合所述置信度及预设的温度参数对各个所述预设模型的权重进行动态调整。
12、在一实施例中,所述结合所述置信度及预设的温度参数对各个所述预设模型的权重进行动态调整,包括:
13、将所述金融数据流的置信度转换为指定维数的数据组;
14、确定所述数据组中每个元素与所述温度参数的商;
15、对所述数据组中的商进行指数运算;
16、对指数运算结果进行归一化处理,得到各个所述预设模型的新权重。
17、在一实施例中,所述方法还包括:
18、获得权重调整后的所述预设模型重新处理所述金融数据流时生成结果的置信度,并将该置信度定义为新置信度,同时将未调整权重时所述预设模型处理所述金融数据流时生成结果的置信度定义为原置信度;
19、基于所述新置信度与原置信度间的差异验证各个所述预设模型的可信度。
20、在一实施例中,所述方法还包括:
21、在所述可信度超出第二预设阈值时,基于所述可信度或所述新置信度与原置信度间的差异更新所述复杂度指数,或重新更新所述预设模型的权重。
22、在一实施例中,所述方法还包括:
23、对不同时刻获得的所述金融数据流进行数据分布散度的检测;
24、在检测结果超出第三预设阈值时,触发告警。
25、在一实施例中,所述方法还包括:
26、在所述复杂度指数与第一预设阈值具有第二关系时,触发预设的紧急处理策略;
27、在所述复杂度指数与第一预设阈值具有第三关系时,基于预设的常规处理策略控制所述预设模型处理所述金融数据流;
28、其中,所述第一关系包括复杂度指数超出所述第一预设阈值,所述第二关系包括复杂度指数位于小于所述第一预设阈值范围内,且与所述第一预设阈值间具有第一差异,所述第三关系包括复杂度指数位于小于所述第一预设阈值范围内,且与所述第一预设阈值间具有第二差异,所述第一差异小于所述第二差异。
29、本发明另一实施例同时提供一种基于动态演化机制的金融数据处理装置,包括:
30、接收模块,用于接收监测的金融数据流;
31、第一确定模块,用于确定所述金融数据流的复杂度指数;
32、第二确定模块,用于在所述复杂度指数与第一预设阈值具有第一关系时,确定不同预设模型对所述金融数据流的处理结果的置信度;
33、调整模块,用于结合所述置信度及预设的调整参数对各个所述预设模型的权重进行动态调整,调整后的权重与对应的预设模型的置信度正相关;
34、处理模块,用于基于权重调整后的所述预设模型重新处理所述金融数据流。
35、本发明另一实施例还提供一种电子设备,包括:
36、一个或多个处理器;
37、存储器,配置为存储一个或多个程序;
38、当所述一个或多个程序被所述一个或多个处理器执行时,使得该一个或多个所述处理器实现如上文中任一项所述的基于动态演化机制的金融数据处理方法。
39、基于上述内容可知,本发明实施例具备的有益效果包括通过监控金融数据流,确定金融数据流的复杂度指数,然后利用该复杂度指数与预设的阈值间的关系来推断是否需要对模型权重进行调整,并在确定需要进行调整是,及时进行模型的权重调整,确保金融数据流的处理精度及处理结果的准确性。如此,可以在数据复杂度突变场景下显著提升数据处理的准确率,提高多模型的协同效率。
40、本申请的优点和其它特征将在随后的说明书中阐述。本申请的目的和其他优点可通过在所写的说明书、附图中所特别指出的结构来实现和获得。
41、下面通过附图和实施例,对本申请的技术方案做进一步的详细描述。
1.一种基于动态演化机制的金融数据处理方法,其特征在于,包括:
2.根据权利要求1所述的基于动态演化机制的金融数据处理方法,其特征在于,所述确定所述金融数据流的复杂度指数,包括:
3.根据权利要求1所述的基于动态演化机制的金融数据处理方法,其特征在于,所述结合所述置信度及预设的调整参数对各个所述预设模型的权重进行动态调整,包括:
4.根据权利要求1所述的基于动态演化机制的金融数据处理方法,其特征在于,所述结合所述置信度及预设的温度参数对各个所述预设模型的权重进行动态调整,包括:
5.根据权利要求1所述的基于动态演化机制的金融数据处理方法,其特征在于,所述方法还包括:
6.根据权利要求5所述的基于动态演化机制的金融数据处理方法,其特征在于,所述方法还包括:
7.根据权利要求1所述的基于动态演化机制的金融数据处理方法,其特征在于,所述方法还包括:
8.根据权利要求1所述的基于动态演化机制的金融数据处理方法,其特征在于,所述方法还包括:
9.一种基于动态演化机制的金融数据处理装置,其特征在于,包括:
10.一种电子设备,包括:
版权声明:本站专利文献数据主要来源于国家知识产权局等公开渠道,由 技术新讯 进行整理汇编。页面设计及数据汇编的著作权归本站所有。全部内容仅供个人学习、科研评估与技术交流参考,严禁用于任何商业用途(包括但不限于直接生产制造、技术转让、倒卖数据等)。
免责条款:专利技术具有时效性,本站不对资料的绝对准确性、完整性和可实施性提供任何明示或暗示的担保。因参考本站内容造成的直接或间接损失,本站不承担相关法律责任。若您认为本站内容有侵权问题,请及时提供权属证明与我们联系,本站将在核实后依法处理。反馈意见:yyfuon@163.com