一种基于数字孪生的数据全生命周期可信追溯方法及系统与流程

摘要: 本发明涉及信息技术与数据管理,具体为一种基于数字孪生的数据全生命周期可信追溯方法及系统。背景技术:1、在数据治理方向中,数字孪生逐渐应用于数据全生命周期可信追溯...
一种基于数字孪生的数据全生命周期可信追溯方法及系统与流程

本发明涉及信息技术与数据管理,具体为一种基于数字孪生的数据全生命周期可信追溯方法及系统。

背景技术:

1、在数据治理方向中,数字孪生逐渐应用于数据全生命周期可信追溯,用于记录数据在采集、处理、传输、使用及归档等生命周期节点中的流转过程;其中,字段值经过不同生命周期节点时所采用的生成规则、判断条件和业务解释动作,是识别字段语义是否发生变化的具体分析对象。

2、现有数据追溯系统通常依据字段标识、字段数值、时间戳、节点编号或哈希记录追踪数据流转。当归一处理后的前节点字段值与后节点字段值相同时,现有系统通常将两者判定为语义一致。然而,相同字段值可能分别由不同生成规则产生,也可能在前后节点触发不同业务解释动作。只比较字段值,无法检验前节点生成规则能否承载后节点业务解释动作,也无法检验后节点生成规则能否反向解释前节点业务解释动作,因而难以识别数值未变但业务含义已经发生偏移的情形。

3、上述情形通常产生于规则版本变更、判断范围调整、枚举含义替换、状态组合变化或业务流程迁移。字段值在节点间保持不变时,数值一致性会遮蔽生成规则和业务解释动作之间的分叉;后续生命周期节点继续引用同一字段值,并按照变更后的规则执行判断,语义偏移便会沿字段使用路径传播。发生此类传播后,数据来源记录仍可保持连续,但审计结果可能误判语义一致,业务状态可能被错误触发,风险分析可能遗漏语义变化的起始节点,追溯过程也难以确定语义偏移经过的节点范围及持续长度。

技术实现思路

1、针对现有技术的不足,本发明提供了一种基于数字孪生的数据全生命周期可信追溯方法及系统,解决了背景技术中提到的问题。

2、为实现以上目的,本发明通过以下技术方案予以实现:一种基于数字孪生的数据全生命周期可信追溯系统,包括同值语义原片析取模块、反事实互译残差生成模块、双向语义承载偏移评估模块、孪生语义折痕值生成模块和孪生折痕传播追溯模块;

3、同值语义原片析取模块对前节点字段值vf与后节点字段值vb进行归一比对,获取共同字段值v,并沿字段赋值路径前节点生成规则片段rf、后节点生成规则片段rb、前节点业务解释动作ef和后节点业务解释动作eb,并形成同值语义原片aw;

4、反事实互译残差生成模块以同值语义原片aw为基础,对前后规则和业务解释动作进行双向交换推演,获取前向互译路径差dsf和后向互译路径差dsb,并生成语义互译残差cm;

5、双向语义承载偏移评估模块以语义互译残差cm为基础,对共同字段值v在前后规则中的反向允许域进行求解,取得前向承载距离qfo和后向承载距离qbo,并生成双向承载偏移量j;

6、孪生语义折痕值生成模块根据前向互译路径差dsf和后向互译路径差dsb生成互译不对称量ku,并结合双向承载偏移量j、前向承载距离qfo和后向承载距离qbo生成孪生语义折痕值f,并形成语义折痕结果cmn;

7、孪生折痕传播追溯模块依据语义折痕结果cmn对后续生命周期节点进行双规则解释,取得语义传播长度g,并根据共同字段值v、孪生语义折痕值f和语义传播长度g生成全生命周期语义可信追溯结果t。

8、优选的,同值语义原片析取模块包括同值归一锁定单元和规则动作定向析取单元;

9、同值归一锁定单元接收前生命周期节点中的前节点字段值vf和后生命周期节点中的后节点字段值vb;

10、先读取前节点字段值vf与后节点字段值vb的数据类型标识、字符表达形式及编码表达形式,并按照“数据类型转换—无业务含义字符剔除—编码值解析”的处理次序生成前节点归一值nvf和后节点归一值nvb;

11、其中,数值型字段直接保留数值结果,字符型数字转换为数值结果,编码型字段按照当前节点实际采用的编码表解析为可比较取值;

12、对前节点归一值nvf和后节点归一值nvb执行等值运算,归一结果一致后,将当前一致结果锁定为共同字段值v,并依据共同字段值v在两个生命周期节点中的执行记录分别确定前节点赋值位置和后节点赋值位置;

13、规则动作定向析取单元读取共同字段值v、前节点赋值位置和后节点赋值位置,并结合两个生命周期节点中已经存在的业务执行记录构建字段执行依赖链:

14、以当前前节点赋值位置为起点沿数据依赖方向反向遍历,连续读取直接参与共同字段值v生成的赋值语句、条件语句和中间运算语句;

15、当遍历至第一个能够改变共同字段值v取值结果的条件分支时停止反向遍历,将从当前条件分支至前节点赋值位置之间实际执行的语句压缩为前节点生成规则片段rf;

16、以后节点赋值位置执行相同处理,得到后节点生成规则片段rb;

17、在取得前节点生成规则片段rf和后节点生成规则片段rb后,再分别以前节点赋值位置和后节点赋值位置为起点沿数据使用方向正向遍历,跳过仅执行存储、转发、格式转换的中间语句,直至共同字段值v首次进入能够驱动业务状态变化的条件分支,将当前条件分支实际触发的执行动作析取为前节点业务解释动作ef和后节点业务解释动作eb;

18、按照共同字段值v、前节点生成规则片段rf、后节点生成规则片段rb、前节点业务解释动作ef和后节点业务解释动作eb的固定顺序封装形成同值语义原片aw。

19、优选的,反事实互译残差生成模块包括反事实动作交叉推演单元和互译分叉量化与残差凝聚单元;

20、反事实动作交叉推演单元以同值语义原片aw为基础,并在共同字段值v始终保持不变的条件下,对前节点生成规则片段rf、后节点生成规则片段rb、前节点业务解释动作ef和后节点业务解释动作eb执行双向交叉推演:

21、将共同字段值v代入前节点生成规则片段rf,按照前节点生成规则片段rf中已经形成的条件执行次序逐级展开判断节点,保留从规则入口到前节点业务解释动作ef之间实际被共同字段值v激活的判断节点和动作节点,形成前节点原生执行路径pff;

22、将共同字段值v代入后节点生成规则片段rb,按照相同处理取得从后节点规则入口到后节点业务解释动作eb的后节点原生执行路径pbb;

23、在获取前节点原生执行路径pff和后节点原生执行路径pbb后,对业务解释动作执行跨侧交换,而不改变共同字段值v:

24、将后节点业务解释动作eb作为前节点生成规则片段rf的反事实终止动作,从后节点业务解释动作eb所包含的业务状态反向解析能够触发当前动作的条件项,再将解析出的条件项逐级挂接到前节点生成规则片段rf的判断节点;

25、对于共同字段值v可以直接通过的判断节点沿原分支继续推演,对于共同字段值v不能直接通过的判断节点保持共同字段值v不变,并沿当前判断节点的另一分支继续搜索能够抵达后节点业务解释动作eb的最短控制路径,由此形成前规则承载后解释路径pfb;

26、将前节点业务解释动作ef作为后节点生成规则片段rb的反事实终止动作,采用相同的反向动作解析、条件挂接和固定值推演处理形成后规则承载前解释路径pbf。

27、优选的,互译分叉量化与残差凝聚单元以前节点原生执行路径pff、前规则承载后解释路径pfb、后节点原生执行路径pbb和后规则承载前解释路径pbf为基础,并以“共同路径结束位置—分叉后独立路径长度—终止业务动作”三个处理位置量化双向交换产生的语义偏离:

28、从前节点原生执行路径pff和前规则承载后解释路径pfb的规则入口开始逐级比对已经经过的判断节点,定位两条路径最后一次共同经过的判断节点,并将当前判断节点确定为前向互译铰接节点hf;

29、从前向互译铰接节点hf开始,分别沿前节点原生执行路径pff和前规则承载后解释路径pfb向各自终止业务动作推进,对分叉后经过的判断节点按照执行先后连续计数,并将两侧独立判断节点的总数量确定为前向互译路径差dsf;

30、同理,从后节点原生执行路径pbb和后规则承载前解释路径pbf中定位最后一个共同判断节点,得到后向互译铰接节点hb,并统计后向互译铰接节点hb之后两条路径各自独立经过的判断节点数量,取得后向互译路径差dsb;

31、将前向互译路径差dsf和后向互译路径差dsb进行结合,计算获取语义互译残差cm,公式为:。

32、其中,前向互译路径差dsf表示在共同字段值v不改变时,前节点生成规则片段rf从承载前节点业务解释动作ef转向承载后节点业务解释动作eb所产生的控制路径位移;

33、后向互译路径差dsb表示后节点生成规则片段rb从承载后节点业务解释动作eb转向承载前节点业务解释动作ef所产生的控制路径位移;

34、语义互译残差cm则将两个方向的路径位移凝聚为后续双向语义承载分析使用的单一基础量;

35、优选的,双向语义承载偏移评估模块包括规则反向允许域解析单元和双向承载距离计算单元;

36、规则反向允许域解析单元以后节点业务解释动作eb作为目标动作,沿前节点生成规则片段rf的执行结构反向遍历,读取产生后节点业务解释动作eb所需满足的判断条件,包括数值范围条件、枚举限制条件、状态组合条件以及逻辑关联条件,并将多个判断条件按照原规则执行顺序进行组合,形成前规则反向允许域lf;

37、其中,前规则反向允许域lf表示共同字段值v在前节点规则体系中能够支持后节点业务解释动作eb的取值空间;

38、以前节点业务解释动作ef作为目标动作,沿后节点生成规则片段rb的执行结构反向遍历,采用相同方式解析能够触发前节点业务解释动作ef的规则条件,并形成后规则反向允许域lb。

39、其中,后规则反向允许域lb表示共同字段值v在后节点规则体系中能够支持前节点业务解释动作ef的取值空间;

40、优选的,双向承载距离计算单元接受前规则反向允许域lf、后规则反向允许域lb、共同字段值v以及语义互译残差cm,计算共同字段值v在两个规则体系中承载对方业务解释动作时产生的规则偏移距离,并生成双向承载偏移量j,过程如下:

41、将共同字段值v分别映射至前规则反向允许域lf和后规则反向允许域lb,分析共同字段值v与两个允许域中的判断条件差异;

42、对于前规则反向允许域lf,沿规则判断树从共同字段值v当前所在节点向能够进入前规则反向允许域lf的目标分支方向进行路径搜索,统计需要跨越的判断节点数量,得到前向承载距离qfo;

43、对于后规则反向允许域lb,采用相同路径搜索方式,得到后向承载距离qbo;

44、其中,前向承载距离qfo表示共同字段值vv在前节点生成规则片段rf中支持后节点业务解释动作eb时产生的规则路径偏移程度;

45、后向承载距离qbo表示共同字段值v在后节点生成规则片段rb中支持前节点业务解释动作ef时产生的规则路径偏移程度;

46、将前向承载距离qfo和后向承载距离qbo与语义互译残差cm进行结合,计算获取双向承载偏移量j,公式如下:

47、。

48、优选的,孪生语义折痕值生成模块包括互译方向差异计算单元和折痕值融合生成单元;

49、互译方向差异计算单元以前向互译路径差dsf和后向互译路径差dsb为基础,并进行规则解释迁移程度进行分析,计算获取互译不对称量ku;

50、具体的、首先获取前向互译路径差dsf和后向互译路径差dsb中的路径分叉数量以及路径偏移长度,分别计算两个方向上的互译偏移差异;

51、由于前向互译路径差dsf表示前节点规则片段rf承载后节点业务解释动作eb时产生的路径变化程度,后向互译路径差dsb表示后节点规则片段rb承载前节点业务解释动作ef时产生的路径变化程度,因此两个方向的差异能够反映业务解释迁移过程中规则承载能力的不对称变化;

52、互译不对称量ku通过以下公式获取:

53、;

54、当前向互译路径差dsf和后向互译路径差dsb的路径变化接近时,表示前后规则体系具有互相解释能力;

55、当一个方向路径变化大于另一个方向时表示共同字段值v在生命周期传递过程中产生了方向性的业务解释偏移。

56、优选的,折痕值融合生成单元以双向承载偏移量j作为基础偏移量,利用互译不对称量ku对基础偏移量进行方向修正,使计算结果能够体现前后规则解释迁移的不均衡程度;

57、最后将前向承载距离qfo和后向承载距离qbo形成的双向共同偏移量加入计算,得到孪生语义折痕值f;

58、孪生语义折痕值f通过以下公式获取:

59、;

60、以孪生语义折痕值f为基础,关联当前产生折痕值ff的生命周期节点编号、共同字段值v、前向互译路径差dsf、后向互译路径差dsb,并拟合为语义折痕结果cmn。

61、优选的,孪生折痕传播追溯模块包括折痕节点传播验证单元和全生命周期语义可信结果生成单元;

62、折痕节点传播验证单元提取语义折痕结果cmn中的语义折痕节点位置,并根据语义折痕节点位置确定当前字段语义发生变化的起始节点,将节点作为折痕起始节点;

63、沿数字孪生生命周期顺序读取后续节点中的字段使用记录,筛选仍引用共同字段值vv的生命周期节点,形成后续生命周期节点序列;

64、式中,nm表示按照时间顺序排列的第m个后续使用节点

65、对于每一个后续生命周期节点ni,读取该节点实际执行的业务解释动作,并分别调用折痕起始节点之前保存的前节点生成规则片段rf和折痕起始节点之后保存的后节点生成规则片段rb,对同一个业务解释动作进行双规则推演;

66、将后续节点业务解释动作输入前节点生成规则片段rf,沿前节点规则判断路径执行匹配,得到前规则推演结果xf;同时,将相同业务解释动作输入后节点生成规则片段rb,沿后节点规则判断路径执行匹配,得到后规则推演结果xb;

67、对前规则推演结果xf与后规则推演结果xb进行路径一致性分析:

68、当前规则推演结果xf与后规则推演结果xb均能够到达相同业务解释动作时,将当前节点标记为语义未传播节点;

69、当前规则推演结果xb能够保持当前业务解释动作,而xf无法沿原规则路径生成当前业务解释动作时,将当前节点标记为折痕传播节点;

70、根据连续出现的折痕传播节点数量生成语义传播长度g,公式为:;

71、式中,表示第i个后续生命周期节点的传播标识,当节点属于折痕传播节点时取1,否则取0;

72、全生命周期语义可信结果生成单元对共同字段值vv、孪生语义折痕值ff、折痕起始节点位置以及语义传播长度gg进行生命周期关联,将共同字段值vv作为追踪对象,将折痕起始节点作为语义变化定位点,将语义传播长度gg作为影响范围描述量;

73、按照数字孪生生命周期顺序生成全生命周期语义可信追溯结果t,公式如下:

74、;

75、式中,表示折痕传播路径,用于记录语义变化产生节点以及后续传播节点。

76、在生成过程中,进一步对折痕传播路径p中每个生命周期节点关联对应的规则版本、业务解释动作和节点位置,使最终追溯结果能够同时展示:

77、共同字段值v在生命周期中的流转过程;

78、孪生语义折痕值f首次产生的位置;

79、语义折痕沿后续节点传播的长度g;

80、发生语义解释变化的完整生命周期路径。

81、一种基于数字孪生的数据全生命周期可信追溯方法,包括以下步骤:

82、步骤一、同值语义原片析取模块对前节点字段值vf与后节点字段值vb进行归一比对,获取共同字段值v,并沿字段赋值路径前节点生成规则片段rf、后节点生成规则片段rb、前节点业务解释动作ef和后节点业务解释动作eb,并形成同值语义原片aw;

83、步骤二、反事实互译残差生成模块以同值语义原片aw为基础,对前后规则和业务解释动作进行双向交换推演,获取前向互译路径差dsf和后向互译路径差dsb,并生成语义互译残差cm;

84、步骤三、双向语义承载偏移评估模块以语义互译残差cm为基础,对共同字段值v在前后规则中的反向允许域进行求解,取得前向承载距离qfo和后向承载距离qbo,并生成双向承载偏移量j;

85、步骤四、孪生语义折痕值生成模块根据前向互译路径差dsf和后向互译路径差dsb生成互译不对称量ku,并结合双向承载偏移量j、前向承载距离qfo和后向承载距离qbo生成孪生语义折痕值f,并形成语义折痕结果cmn;

86、步骤五、孪生折痕传播追溯模块依据语义折痕结果cmn对后续生命周期节点进行双规则解释,取得语义传播长度g,并根据共同字段值v、孪生语义折痕值f和语义传播长度g生成全生命周期语义可信追溯结果t。

87、本发明提供了一种基于数字孪生的数据全生命周期可信追溯方法及系统,具备以下有益效果:

88、(1)系统运行时,根据前向互译路径差dsf与后向互译路径差dsb计算互译不对称量ku,并将互译不对称量ku、双向承载偏移量j、前向承载距离qfo和后向承载距离qbo纳入孪生语义折痕值f的计算;随后将孪生语义折痕值f与生命周期节点编号、共同字段值v、前向互译路径差dsf及后向互译路径差dsb组合成语义折痕结果cmn。语义折痕结果cmn能够标明字段语义开始变化的节点,并保留形成孪生语义折痕值f的路径依据,使规则版本变更、判断范围调整、枚举含义替换、状态组合变化或业务流程迁移引起的语义变化具有可核验的定位依据。

89、(2)以前节点赋值位置和后节点赋值位置为起点沿数据依赖方向反向遍历,仅连续读取直接参与共同字段值v生成的赋值语句、条件语句和中间运算语句,并在到达第一个能够改变共同字段值v取值结果的条件分支时停止遍历,分别压缩形成前节点生成规则片段rf和后节点生成规则片段rb。基于实际执行语句确定规则片段的起止范围,可以排除未参与共同字段值v形成过程的程序语句,使前节点生成规则片段rf和后节点生成规则片段rb集中表征共同字段值v在两个节点中的取值依据,便于查明字段数值相同但生成条件已经变化的情形。

90、(3)从前节点原生执行路径pff与前规则承载后解释路径pfb的规则入口逐级比对判断节点,以最后一次共同经过的判断节点确定前向互译铰接节点hf,并统计前向互译铰接节点hf之后两条路径各自独立经过的判断节点数量,取得前向互译路径差dsf;同时,按照相同处理从后节点原生执行路径pbb与后规则承载前解释路径pbf中取得后向互译铰接节点hb和后向互译路径差dsb,再由前向互译路径差dsf与后向互译路径差dsb计算语义互译残差cm。上述计算以分叉位置和分叉后独立路径长度为依据,使语义偏离具有明确的路径来源,并可分辨前规则解释后节点业务解释动作eb与后规则解释前节点业务解释动作ef时产生的不同偏离程度。

91、(4)从语义折痕结果cmn中的语义折痕节点位置确定折痕起始节点,沿数字孪生生命周期顺序读取后续节点的字段使用记录,并筛选仍引用共同字段值v的生命周期节点;对于每个筛选出的生命周期节点,分别调用前节点生成规则片段rf和后节点生成规则片段rb推演同一业务解释动作,取得前规则推演结果xf和后规则推演结果xb。通过比较前规则推演结果xf与后规则推演结果xb是否能够到达相同业务解释动作,可以区分共同字段值v的普通延续使用与语义折痕传播,防止仅因后续节点继续使用相同字段值便认定语义始终一致。