一种数据处理方法及装置与流程

1.本技术涉及金融领域，特别是涉及一种数据处理方法及装置。


背景技术：

2.目前，金融机构需要将其业务数据上报给监管机构。当前金融机构上报业务数据的方式，成本比较高。因此，急需一种方案，能够解决上述问题。


技术实现要素：

3.本技术所要解决的技术问题是当前金融机构上报业务数据的成本比较高，提供一种数据处理方法及装置。
4.第一方面，本技术实施例提供了一种数据处理方法，所述方法包括：
5.获取由至少一个信息系统待处理的数据；
6.对所述待处理的数据进行去重，得到目标数据；
7.对所述目标数据进行处理，并通过第一专线网络发送经过处理之后的数据。
8.可选的，所述待处理数据为银行业务数据，所述至少一个信息系统包括第一信息系统和第二信息系统，所述第一信息系统对应的待处理数据和所述第二信息系统对应的待处理数据中，包括以下至少一个维度的重复数据：
9.信用卡流水、存款流水、借记卡流水、支付信息、贷款流水以及还款流水。
10.可选的，所述至少一个信息系统还包括第三信息系统，所述第一信息系统对应的待处理数据、所述第二信息系统对应的待处理数据和所述第三信息系统对应的待处理数据中，包括以下至少一个维度的重复数据：
11.客户信息、账户信息以及卡信息。
12.可选的，所述对所述目标数据进行处理，包括：
13.对所述目标数据进行脱敏、加密以及数字签名。
14.可选的，对所述目标数据进行加密，包括：
15.采用专用加密机对所述目标数据进行加密。
16.第二方面，本技术实施例提供了一种数据处理装置，所述装置包括：
17.获取单元，用于获取由至少一个信息系统待处理的数据；
18.去重单元，用于对所述待处理的数据进行去重，得到目标数据；
19.处理单元，用于对所述目标数据进行处理；
20.发送单元，用于通过第一专线网络发送经过处理之后的数据。
21.可选的，所述待处理数据为银行业务数据，所述至少一个信息系统包括第一信息系统和第二信息系统，所述第一信息系统对应的待处理数据和所述第二信息系统对应的待处理数据中，包括以下至少一个维度的重复数据：
22.信用卡流水、存款流水、借记卡流水、支付信息、贷款流水以及还款流水。
23.可选的，所述至少一个信息系统还包括第三信息系统，所述第一信息系统对应的
待处理数据、所述第二信息系统对应的待处理数据和所述第三信息系统对应的待处理数据中，包括以下至少一个维度的重复数据：
24.客户信息、账户信息以及卡信息。
25.可选的，所述处理单元，用于：
26.对所述目标数据进行脱敏、加密以及数字签名。
27.可选的，对所述目标数据进行加密，包括：
28.采用专用加密机对所述目标数据进行加密。
29.与现有技术相比，本技术实施例具有以下优点：
30.在本技术实施例提供的方法，可以由服务器执行，具体地：在上报业务数据时，可以首先获取由至少一个信息系统待处理的数据，而后，对所述待处理的数据进行去重，得到目标数据，并对所述目标数据进行处理，并通过第一专线网络发送经过处理之后的数据。由于本方案中，对各个信息系统待处理的数据进行了去重，从而避免相同数据被重复加工处理，降低了数据处理的成本。另外，利用本方案，可以仅购买所述服务器和监管机构的服务器之间的专线网络，无需为每个信息系统分别购买对应的专线网络，从而降低了上报业务数据的网络成本。因此，利用本方案，能够有效降低金融机构上报业务数据的成本。
附图说明
31.为了更清楚地说明本技术实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本技术中记载的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
32.图1为本技术实施例提供的一种数据处理方法的流程示意图；
33.图2为本技术实施例提供的一种数据处理装置的结构示意图。
具体实施方式
34.为了使本技术领域的人员更好地理解本技术方案，下面将结合本技术实施例中的附图，对本技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅是本技术一部分实施例，而不是全部的实施例。基于本技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本技术保护的范围。
35.本技术的发明人经过研究发现，金融机构需要将其业务数据上报给监管机构。而金融机构上报的数据量非常大，以银行为例，银行每月上报给金融机构的业务数据高达10亿明细数据。
36.目前，金融机构将需要上报的数据分解到多个信息系统进行加工，具体地：由各个信息系统各自通过脱敏、加密、数据签名，专项网络加密报送等技术手段传输到监管机构服务器。而由于多个信息系统加工的数据中存在相同的数据，因此，相同数据可能会被重复加工，故而增加了数据加工的成本。另外，需要为每个信息系统单独购买专线网络，成本也比较高。此处提及的信息系统，用于对金融数据进行加工。
37.为了解决上述问题，本技术实施例提供了一种数据处理方法及装置。
38.下面结合附图，详细说明本技术的各种非限制性实施方式。
39.示例性方法
40.参见图1，该图为本技术实施例提供的一种数据处理方法的流程示意图。在本实施例中，所述方法可以由服务器执行，该例如可以包括以下步骤：s101
‑
s103。
41.s101：获取由至少一个信息系统待处理的数据。
42.对于金融机构而言，此处提及的待处理的数据，包括但不限于统计报表扩展、客户明细、账户明细以及交易明细中的其中一种或者多种。
43.s102：对所述待处理的数据进行去重，得到目标数据。
44.在本技术实施例中，考虑到多个信息系统待处理的数据中，存在一些重复的数据，例如，对于第一信息系统和第二信息系统而言，第一信息系统和第二信息系统中可能均存在信用卡流水、存款流水、借记卡流水、支付信息、贷款流水以及还款流水等数据中间其中一项或者多项。又如，对于第一信息系统、第二信息系统和第三信息系统而言，三者对应的待处理数据中，均存在客户信息、账户信息以及卡信息中的其中一项或者多项。因此，若由各个信息系统分别对其对应的待处理数据进行加工，则前述可能出现在多个信息系统中的数据，则会被加工多次，故而消耗了更多的加工资源，提升了数据加工的成本。因此，在本技术实施例中，可以对所述待处理数据进行去重，得到目标数据。该目标数据不再包括冗余的重复数据。进一步地，执行s103，即可降低数据加工的成本。
45.s103：对所述目标数据进行处理，并通过第一专线网络发送经过处理之后的数据。
46.在本技术实施例中，考虑到对于金融机构而言，一方面，存在一些敏感数据；另一方面，需要防止数据泄露，从而泄露客户隐私；再一方面，需要防止数据在传输过程中被篡改。因此，s103在具体实现时，可以对目标数据进行脱敏、加密、以及数字签名。
47.通过以上描述可知，利用本方案，一方面对各个信息系统待处理的数据进行了去重，从而避免相同数据被重复加工处理，降低了数据处理的成本。另一方面，可以仅购买所述服务器和监管机构的服务器之间的专线网络(即第一专线网络)，无需为每个信息系统分别购买对应的专线网络，从而降低了上报业务数据的网络成本。因此，利用本方案，能够有效降低金融机构上报业务数据的成本。
48.需要说明的是，对目标数据进行加密时，为了进一步提升数据安全，避免加密算法被破解，可以采用专用加密机对所述目标数据进行加密。可以理解的是，采用这种方式与传统技术相比，无需为各个信息系统分别购买专用加密机，仅为所述服务器购买专用加密机即可。因此，采用本方案，可以减少购买专用加密机的成本。
49.示例性设备
50.基于以上实施例提供的方法，本技术实施例还提供了一种装置，以下结合附图介绍该装置。
51.参见图2，该图为本技术实施例提供的一种数据处理装置的结构示意图。所述装置200例如可以具体包括：获取单元201、去重单元202、处理单元203以及发送单元204。
52.获取单元201，用于获取由至少一个信息系统待处理的数据；
53.去重单元202，用于对所述待处理的数据进行去重，得到目标数据；
54.处理单元203，用于对所述目标数据进行处理；
55.发送单元204，用于通过第一专线网络发送经过处理之后的数据。
56.可选的，所述待处理数据为银行业务数据，所述至少一个信息系统包括第一信息
系统和第二信息系统，所述第一信息系统对应的待处理数据和所述第二信息系统对应的待处理数据中，包括以下至少一个维度的重复数据：
57.信用卡流水、存款流水、借记卡流水、支付信息、贷款流水以及还款流水。
58.可选的，所述至少一个信息系统还包括第三信息系统，所述第一信息系统对应的待处理数据、所述第二信息系统对应的待处理数据和所述第三信息系统对应的待处理数据中，包括以下至少一个维度的重复数据：
59.客户信息、账户信息以及卡信息。
60.可选的，所述处理单元203，用于：
61.对所述目标数据进行脱敏、加密以及数字签名。
62.可选的，对所述目标数据进行加密，包括：
63.采用专用加密机对所述目标数据进行加密。
64.由于所述装置200是与以上方法实施例提供的方法对应的装置，所述装置200的各个单元的具体实现，均与以上方法实施例为同一构思，因此，关于所述装置200的各个单元的具体实现，可以参考以上方法实施例的描述部分，此处不再赘述。
65.需要说明的是，本发明提供的数据处理方法及装置可用于云计算领域、大数据领域或金融领域。上述仅为示例，并不对本发明提供的数据处理方法及装置的应用领域进行限定。
66.本领域技术人员在考虑说明书及实践这里公开的发明后，将容易想到本技术的其它实施方案。本技术旨在涵盖本技术的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本技术的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本技术的真正范围和精神由下面的权利要求指出。
67.应当理解的是，本技术并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本技术的范围仅由所附的权利要求来限制
68.以上所述仅为本技术的较佳实施例，并不用以限制本技术，凡在本技术的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本技术的保护范围之内。