数据处理方法、数网协同组件、数据流通系统和存储介质与流程

摘要: 本发明涉及数据处理,特别涉及一种数据处理方法、数网协同组件、数据流通系统和存储介质。背景技术:1、数据已成为数字经济时代的关键生产要素,其高效流通与价值释放是推...
数据处理方法、数网协同组件、数据流通系统和存储介质与流程

本发明涉及数据处理,特别涉及一种数据处理方法、数网协同组件、数据流通系统和存储介质。

背景技术:

1、数据已成为数字经济时代的关键生产要素,其高效流通与价值释放是推动新质生产力发展的核心引擎。实现数据从提供方向需求方的安全高效传输,需要数据侧系统与网络侧系统深度协同:数据侧负责数据资源管理、权限审批、订单管理;网络侧负责差异化传输通道建立、路径调度及带宽、安全能力保障。

2、然而,现有方案要求数据侧与网络侧通过深度定制接口进行紧耦合对接,由数据侧直接向网络侧下发具体的网络配置参数。此类方案在实际部署中面临显著障碍:数据侧与网络侧分别服务于不同的业务目标,各自内部逻辑复杂且相互独立,深度耦合改造不仅实施周期长、改造成本高,且任一侧的配置变更均可能波及另一侧,导致系统整体脆弱性增加,难以在现网环境中规模推广。

技术实现思路

1、本实施例的目的在于至少提供一种数据处理方法、数网协同组件、数据流通系统和存储介质,至少可以解决现有方法难以对数据侧系统与网络侧系统深度耦合集成的技术问题,至少可以达到无需改造数据侧系统与网络侧系统任何一侧系统内部逻辑也能使系统深度合作,易于在现网环境中规模推广。

2、为解决上述技术问题,本技术的至少一个实施例提供了一种数据处理方法,应用于数据流通系统中的数网协同组件,所述数据流通系统还包括数据交付管控子系统和网络管控子系统,方法包括:

3、接收所述数据交付管控子系统生成的数据交付订单,所述数据交付订单包括数据资源参数;

4、将所述数据交付订单同步至所述网络管控子系统,以使所述网络管控子系统依据预设的映射规则为所述数据交付订单生成目标网络标识参数并建立专用传输通道,从而实现将数据提供方依据所述目标网络标识参数进行封装得到的数据报文,通过所述专用传输通道发送至所述数据需求方。

5、本技术的至少一个实施例还提供了一种数网协同组件,应用于数据流通系统中,所述数据流通系统还包括数据交付管控子系统和网络管控子系统,所述数网协同组件包括:

6、接收模块,用于接收所述数据交付管控子系统生成的数据交付订单,所述数据交付订单包括数据资源参数;

7、同步模块,用于将所述数据交付订单同步至所述网络管控子系统,以使所述网络管控子系统依据预设的映射规则为所述数据交付订单生成目标网络标识参数并建立专用传输通道,从而实现将数据提供方依据所述目标网络标识参数进行封装得到的数据报文,通过所述专用传输通道发送至所述数据需求方。

8、本技术的至少一个实施例还提供了一种数据流通系统,包括数网协同组件、数据交付管控子系统和网络管控子系统,其中:

9、所述数据交付管控子系统,用于生成的数据交付订单,所述数据交付订单包括数据资源参数;

10、所述数网协同组件,用于接收所述数据交付订单并同步至所述网络管控子系统;

11、所述网络管控子系统,用于依据预设的映射规则为所述数据交付订单生成目标网络标识参数并建立专用传输通道,从而实现将数据提供方依据所述目标网络标识参数进行封装得到的数据报文,通过所述专用传输通道发送至所述数据需求方。

12、本技术的至少一个实施例还提供了一种计算机可读存储介质,存储有计算机程序,所述计算机程序被处理器执行时实现上述的数据处理方法。

13、本技术的实施例提供的数据处理方法、数网协同组件、数据流通系统和存储介质,通过将数据交付订单作为两侧系统之间的唯一标准化交互媒介——数据侧输出的是“业务需求”(数据资源参数+传输需求语义参数),网络侧接收到的是同一份订单并依据自身独立的映射规则进行解析与执行,订单作为“中间语言”完成了业务语义向网络配置的自动转译。由此,两侧系统无需了解对方的内部逻辑、无需暴露内部接口,从根本上消除了技术依赖,数据侧调整业务规则不影响网络侧,网络侧升级组网能力不波及数据侧。使得方案可在不中断任何现网业务的前提下完成实施,具备良好的工程可行性。

14、在一些可选的实施例中,还包括:

15、接收所述数据交付管控子系统根据所述数据交付订单的生命周期状态变更发出的变更通知,将所述变更通知同步至所述网络管控子系统,以使所述网络管控子系统根据所述变更通知执行对应的网络策略操作,

16、其中,所述网络策略操作包括网络通道建立、网络策略持续维持以及网络资源释放。

17、本实施例中,通过将数据交付订单生命周期状态变更实时同步至网络管控子系统,使网络侧能够随数据交付进程动态执行通道建立、策略维持及资源释放等操作,实现了网络资源与数据交付生命周期的精准联动,避免了数据交付终止后网络通道和策略的冗余占用,提升了网络资源的利用效率和释放及时性。

18、在一些可选的实施例中,还包括:

19、将所述网络管控子系统反馈的与所述数据交付订单相关的运行数据同步至所述数据交付管控子系统,以使所述数据交付管控子系统以所述数据交付订单为索引归档交付全链路事件。

20、本实施例中,通过将网络侧运行数据回传至数据交付管控子系统并以订单为索引归档全链路事件,实现了数据交付与网络传输过程的端到端可追溯,使交付全链路的每一环节均有据可查,便于后续进行交付质量分析、故障排查及合规审计,提升了数据流通系统的整体可观测性和管理透明度。

21、在一些可选的实施例中,所述数据交付订单还包括数据需求方设置的传输需求语义参数,所述网络管控子系统依据预设的映射规则为所述数据交付订单生成目标网络标识参数,包括:

22、所述网络管控子系统对所述数据资源参数执行映射,得到第一网络标识参数,对所述传输需求语义参数执行映射,得到第二网络标识参数;

23、所述网络管控子系统基于所述第一网络标识参数与所述第二网络标识参数生成所述目标网络标识参数。

24、本实施例中,既保证了数据资源属性对网络路径的基础约束,又兼顾了传输需求语义对网络策略的动态适配,使最终生成的网络标识同时满足数据属性与用户需求的双重要求,提升了专用传输通道与实际交付需求的匹配精度。

25、在一些可选的实施例中,所述传输需求语义参数包括隔离等级、带宽档位、安全等级、路径控制和传输边界中至少一种。

26、本实施例中,将不同类型语义化参数纳入传输需求,使得网络资源按需精准分配,同时为不同安全级别和传输质量要求的数据交付提供了灵活可控的差异化网络保障能力。

27、在一些可选的实施例中,所述网络管控子系统依据预设的映射规则为所述数据交付订单生成目标网络标识参数并建立专用传输通道,包括:

28、所述网络管控子系统基于所述传输需求语义参数的可能取值组合聚合预设数量个标准化网络服务模板,所述预设数量小于所述目标网络标识参数的所有可能取值组合总数;

29、所述网络管控子系统根据所述目标网络标识参数匹配对应的标准化网络服务模板,且多个数据交付订单匹配同一标准化网络服务模板时共享对应的网络策略及专用传输通道。

30、本实施例中,通过将大量可能的网络标识参数取值组合聚合为有限数量的标准化网络服务模板,大幅降低了网络策略的配置复杂度,同时支持多个数据交付订单共享同一模板对应的网络策略及专用传输通道,在保证差异化网络服务能力的前提下实现了网络资源的复用与规模化调度,显著提升了网络管控子系统的处理效率和资源利用率。

31、在一些可选的实施例中,在生成所述数据交付订单之前,还包括:

32、所述数据交付管控子系统获取所述数据提供方在数据资源登记时设定的安全等级作为强制基线;

33、所述数据交付管控子系统校验所述传输需求语义参数中的安全等级是否符合所述强制基线的要求,若校验通过,则生成所述数据交付订单,若校验不通过,则拒绝生成数据交付订单。

34、本实施例中,从源头确保数据交付的传输安全要求不低于数据资源本身的安全底线,有效防止因需求方设置过低的安全等级而导致高敏感数据通过低安全通道传输的风险,保障了数据流通全过程的安全合规性。