一种基于word文档为模板的数据渲染可视化方法与流程
本发明涉及文档数据处理,尤其涉及一种基于word文档为模板的数据渲染可视化方法。
背景技术:
1、随着企业数字化管理和业务数据自动化处理需求的不断增长,以word文档作为固定模板,将业务系统中的结构化数据自动写入文档并生成可视化报告的技术受到广泛关注。现有的word模板数据渲染方法主要按照模板中预设的数据标记依次读取业务数据,并通过串行执行或普通多线程方式完成文本、表格、图片及图表的替换和更新,但是在实际应用中普遍存在以下问题:
2、当模板包含大量文档对象和数据记录时,现有方法缺少对渲染任务依赖关系及运行资源状态的统一管理,容易出现任务等待时间长、处理资源分配不均和内存占用过高等问题,影响文档生成效率;多个渲染任务并行修改同一表格、图表或相邻文档节点时,现有调度方法难以根据文档对象修改范围和访问权限识别任务冲突,容易造成数据覆盖、对象引用失效及版式错乱;现有任务控制方式通常采用固定执行顺序和固定超时阈值,无法根据任务执行进度、资源变化和文档对象占用状态动态调整执行过程,任务中断后还可能重复处理已完成内容;当生成文档出现表格越界、图表偏移或分页异常时,现有方法通常需要重新渲染整份文档,导致异常修复时间较长,难以兼顾word文档数据渲染的效率、稳定性和版式准确性。
3、因此,如何提供一种基于word文档为模板的数据渲染可视化方法是本领域技术人员亟需解决的问题。
技术实现思路
1、本发明的一个目的在于提出一种基于word文档为模板的数据渲染可视化方法,本发明采用改进heft算法与改进smdp模型相结合的方法,通过解析word模板文档建立模板渲染单元、渲染任务依赖图和任务执行上下文,并在heft算法中引入对象冲突边生成,根据文档对象修改范围和访问权限约束冲突任务,实现渲染任务有序调度;在此基础上,通过任务执行上下文状态构造和驻留时间转移机制,根据任务进度、资源变化及对象占用状态动态控制任务执行、中断和恢复,并结合版式校验与局部重执行修复异常对象,具有渲染效率高、对象冲突少、资源利用合理及版式稳定的优点。
2、根据本发明实施例的一种基于word文档为模板的数据渲染可视化方法,包括如下步骤:
3、s1、获取word模板文档并进行结构解析,生成模板渲染单元和模板渲染指令集;
4、s2、获取待渲染业务数据,建立数据绑定关系,将模板渲染指令集拆分为渲染任务,构建渲染任务依赖图;
5、s3、根据渲染任务依赖图建立任务执行上下文,将渲染任务写入待执行队列;
6、s4、获取运行资源状态,将渲染任务依赖图、待执行队列和运行资源状态输入heft算法,heft算法引入对象冲突边生成,依据文档对象修改范围和文档对象访问权限生成文档对象冲突边,输出渲染任务调度结果;
7、s5、按照渲染任务调度结果执行渲染任务,将任务执行上下文和运行资源状态输入改进smdp模型,改进smdp模型包括基于任务执行上下文的状态构造和驻留时间转移机制,输出状态转移结果;
8、s6、根据状态转移结果渲染待渲染业务数据,合并中间渲染结果,生成初始可视化word文档;
9、s7、对初始可视化word文档进行版式校验,定位目标渲染任务,根据任务执行上下文进行局部重执行,生成目标可视化word文档。
10、可选的,所述s1具体为:
11、获取word模板文档,读取对应的文档包,按照文件路径和引用关系提取文档内容信息、样式信息、对象关系信息和页面结构信息;
12、根据提取结果识别各文档对象,获取对象层级、引用标识和版式属性,建立样式继承关系、对象引用关系和页面归属关系,形成文档结构信息;
13、根据预设数据标记识别文档结构信息中的可写入位置,将数据来源相同、文档对象相同或版式连续的可写入位置划分为模板渲染单元,并为各模板渲染单元配置单元标识;
14、根据各模板渲染单元对应的数据写入类型、文档对象操作类型和版式处理类型生成渲染指令,按照执行先后关系对所述渲染指令进行编排,生成模板渲染指令集。
15、可选的,所述s2具体为:
16、获取待渲染业务数据,对所述待渲染业务数据进行格式校验和层级解析,提取数据字段、数据记录及数据层级关系;
17、读取各模板渲染单元对应的预设数据标记和单元标识,将所述数据字段与所述预设数据标记进行匹配,并将所述数据记录关联至对应的模板渲染单元,生成数据绑定关系;
18、根据所述数据绑定关系,从模板渲染指令集中提取各模板渲染单元对应的渲染指令,按照所述数据记录和所述模板渲染单元对所述渲染指令进行分组,生成多个渲染任务;
19、按照数据读取顺序和渲染指令执行顺序对各渲染任务进行排序,将输出数据被其他渲染任务读取的渲染任务标记为前驱任务,将读取前驱任务输出数据的渲染任务标记为后继任务;
20、根据各渲染任务对应的数据记录数量和文档对象操作范围计算资源需求量,按照各渲染任务在渲染指令执行顺序中的排列位置生成处理优先级,并在相邻渲染指令之间标记可中断位置;
21、将各渲染任务设置为任务节点,按照所述前驱任务与所述后继任务之间的对应关系建立有向连接边,基于所述任务节点和所述有向连接边构建渲染任务依赖图。
22、可选的,所述s3具体为:
23、读取渲染任务依赖图,提取各渲染任务对应的前驱任务、后继任务、处理优先级、资源需求量和可中断位置;
24、读取各渲染任务对应的模板渲染单元和渲染指令,根据模板渲染单元对应的文档对象引用信息生成文档对象句柄;
25、根据渲染任务的执行进度设置任务状态,记录待渲染业务数据对应的数据读取位置和渲染指令对应的指令执行位置,并建立中间渲染结果的存储位置和存储状态;
26、将所述任务状态、所述文档对象句柄、所述数据读取位置、所述指令执行位置、所述中间渲染结果的存储位置和存储状态、所述资源需求量及所述可中断位置关联至对应的渲染任务,建立任务执行上下文;
27、筛选不存在前驱任务或前驱任务已经完成的渲染任务,按照处理优先级进行排序并写入待执行队列,将其余渲染任务设置为等待状态,并在对应的前驱任务完成后写入所述待执行队列。
28、可选的,所述s4具体为:
29、采集处理器运行数据、内存占用数据、渲染缓存使用数据和文档对象锁定数据,对采集的数据进行时间对齐,生成运行资源状态;
30、读取待执行队列中各渲染任务对应的任务执行上下文和模板渲染单元,根据文档对象句柄定位各渲染任务操作的文档对象,并根据渲染指令覆盖的文档结构范围生成文档对象修改范围;
31、按照文档对象锁定数据和各渲染任务对应的操作类型,配置各渲染任务对相应文档对象的读取权限、写入权限和独占权限,形成文档对象访问权限;
32、将渲染任务依赖图、待执行队列和运行资源状态输入heft算法,heft算法引入对象冲突边生成,将不同渲染任务对应的文档对象修改范围进行交叉比对,并对文档对象修改范围存在重叠且文档对象访问权限相互冲突的渲染任务建立文档对象冲突边;
33、将文档对象冲突边加入渲染任务依赖图,按照处理优先级设置文档对象冲突边的连接方向,并重新计算各渲染任务对应的向上排序值,生成渲染任务排序序列;
34、根据运行资源状态和各渲染任务对应的资源需求量,计算各渲染任务在不同处理资源上的最早开始时间和最早完成时间,并将各渲染任务分配至最早完成时间对应的处理资源;
35、按照渲染任务排序序列记录各渲染任务对应的执行次序、处理资源、预计开始时间、预计完成时间、内存缓冲区和文档对象访问权限,生成渲染任务调度结果。
36、可选的,所述将文档对象冲突边加入渲染任务依赖图,按照处理优先级设置文档对象冲突边的连接方向,并重新计算各渲染任务对应的向上排序值,生成渲染任务排序序列,具体为:
37、读取文档对象冲突边对应的两个渲染任务,比较所述两个渲染任务的处理优先级,将处理优先级较高的渲染任务设置为起始任务,将另一渲染任务设置为终止任务;当处理优先级相同时,依次比较数据读取顺序、渲染指令执行顺序和模板渲染单元排列顺序,将排列在前的渲染任务设置为起始任务;
38、检索终止任务至起始任务之间的有向连接路径,不存在所述有向连接路径时,按照起始任务指向终止任务的方向设置文档对象冲突边;存在所述有向连接路径时,按照原有有向连接关系设置文档对象冲突边的连接方向;
39、将完成方向设置的文档对象冲突边加入渲染任务依赖图,对更新后的渲染任务依赖图进行拓扑遍历,标记不存在后继任务的出口任务;
40、根据各渲染任务的数据处理量、资源需求量和运行资源状态,分别计算各渲染任务在不同处理资源上的预计执行时间,并对所述预计执行时间进行平均处理,生成平均执行代价;
41、根据相邻渲染任务对应的数据记录数量、文档对象修改范围和文档对象访问权限交接时间,计算关联传递代价;
42、从出口任务开始按照拓扑顺序反向递推,将出口任务的平均执行代价记录为向上排序值,将其他渲染任务的平均执行代价与各后继任务对应的关联传递代价及向上排序值之和中的最大值相加,得到其他渲染任务对应的向上排序值;
43、按照向上排序值由大到小排列各渲染任务,当向上排序值相同时,按照处理优先级和渲染指令执行顺序进行排列,生成渲染任务排序序列。
44、可选的,所述改进smdp模型包括状态输入模块、上下文状态构造模块、驻留时间转移模块和状态输出模块,所述驻留时间转移模块中嵌入驻留时间转移机制;
45、状态输入模块从任务执行上下文中提取任务状态、文档对象句柄、数据读取位置、指令执行位置、中间渲染结果的存储位置和存储状态、资源需求量及可中断位置,从运行资源状态中提取处理器占用率、可用内存容量、渲染缓存容量和文档对象锁定状态,按照渲染任务标识进行关联,生成状态输入数据;
46、上下文状态构造模块执行基于任务执行上下文的状态构造,将数据读取位置和指令执行位置转换为执行进度状态,将文档对象句柄和文档对象锁定状态转换为文档对象占用状态,将处理器占用率、可用内存容量和渲染缓存容量转换为运行资源变化状态,并将中间渲染结果的存储状态、资源需求量和可中断位置写入状态表示,生成状态表示;
47、驻留时间转移模块根据渲染任务进入当前任务状态的起始时刻和当前采集时刻计算状态持续时间,并根据指令执行位置、可中断位置和对应渲染指令的执行代价计算预计执行时间;
48、所述驻留时间转移机制根据状态表示、状态持续时间和预计执行时间生成可执行状态转移集合;
49、状态输出模块按照预计执行时间、资源占用量和运行资源状态变化量对所述可执行状态转移集合进行排序,选取排列在首位的可执行状态转移,记录对应的渲染任务、任务状态、指令执行位置和资源配置,生成状态转移结果。
50、可选的,所述驻留时间转移机制具体为:
51、在驻留时间转移模块中,按照渲染任务标识从状态表示中提取任务状态、执行进度状态、文档对象占用状态和运行资源变化状态,并按照采集时刻进行排列,生成任务状态序列;
52、读取渲染任务进入当前任务状态的起始时刻和当前采集时刻,计算状态持续时间,并根据渲染指令数量、资源需求量和已完成的同类型渲染任务执行时间,生成基础驻留时间;
53、根据处理器占用率、可用内存容量、渲染缓存容量和文档对象锁定状态调整基础驻留时间,结合距离下一可中断位置的预计执行时间,生成驻留时间阈值;
54、当状态持续时间未超过驻留时间阈值且运行资源状态满足资源需求量时,生成继续执行状态;当状态持续时间超过驻留时间阈值且渲染任务到达可中断位置时,生成中断执行状态,并保存数据读取位置、指令执行位置和中间渲染结果;
55、当运行资源状态不满足资源需求量,或文档对象占用状态表明文档对象存在访问冲突时,生成运行资源重新分配状态;当任务状态为中断状态且中间渲染结果存在时,根据指令执行位置生成任务恢复状态;
56、将继续执行状态、中断执行状态、运行资源重新分配状态和任务恢复状态分别与当前任务状态建立状态转移关系,并根据任务状态、资源需求量、文档对象占用状态和可中断位置进行筛选,生成可执行状态转移集合。
57、可选的,所述s6具体为:
58、读取状态转移结果,当状态转移结果为继续执行状态时,按照指令执行位置继续执行渲染指令;当状态转移结果为中断执行状态时,保存当前文档对象修改内容和任务执行上下文;当状态转移结果为运行资源重新分配状态时,保存当前文档对象修改内容和任务执行上下文,按照状态转移结果中的资源配置调整处理资源,并从指令执行位置继续执行对应的渲染任务;当状态转移结果为任务恢复状态时,根据任务执行上下文中的中间渲染结果的存储位置读取中间渲染结果,并从指令执行位置继续执行对应的渲染任务;
59、对于继续执行状态、运行资源重新分配状态或任务恢复状态对应的渲染任务,根据数据绑定关系读取待渲染业务数据,将所述待渲染业务数据写入对应的模板渲染单元,并按照模板渲染指令集更新文档内容和版式属性;
60、在渲染任务到达可中断位置或完成当前渲染指令后,保存当前文档对象修改内容,记录数据读取位置、指令执行位置和文档对象修改范围,生成中间渲染结果;
61、按照渲染任务依赖图合并各中间渲染结果,并对文档结构关系进行一致性校验,生成初始可视化word文档。
62、可选的,所述s7具体为:
63、读取初始可视化word文档中的页面结构信息,提取各文档对象对应的位置、尺寸、样式和分页信息,生成文档版式数据;
64、将所述文档版式数据与word模板文档对应的页面结构信息进行比对,识别版式异常,生成版式校验结果;
65、根据所述版式校验结果提取异常文档对象和异常位置,通过文档对象句柄查询对应的模板渲染单元,并根据模板渲染单元与渲染任务之间的对应关系定位目标渲染任务;
66、读取目标渲染任务对应的任务执行上下文,根据异常文档对象对应的渲染指令确定异常指令执行位置,并将所述异常指令执行位置之前的最近可中断位置设置为局部重执行起始位置,从所述局部重执行起始位置重新读取待渲染业务数据和渲染指令,对异常文档对象及关联文档对象进行局部重执行,生成局部重执行结果;
67、将所述局部重执行结果写入对应的文档对象修改范围,保留其他中间渲染结果,并对更新后的页面结构信息进行再次校验;当再次校验不存在版式异常时,合并局部重执行结果和中间渲染结果,生成目标可视化word文档。
68、本发明的有益效果是:
69、本发明通过改进heft算法与改进smdp模型的协同处理,针对word模板数据渲染中存在的任务依赖复杂、资源分配不均、文档对象并发冲突及异常文档重复渲染问题,对word模板文档进行结构解析,建立模板渲染单元、数据绑定关系、渲染任务依赖图和任务执行上下文;在任务调度环节,根据文档对象修改范围和访问权限识别重叠写入及独占访问任务,在heft算法中生成文档对象冲突边,重新计算任务排序值和最早完成时间,实现依赖约束、对象访问约束与运行资源状态下的协同调度,避免表格、图表及相邻文档节点被重复覆盖;在任务执行环节,改进smdp模型基于任务执行上下文构造执行进度、文档对象占用和运行资源变化状态,并通过驻留时间转移机制动态生成继续执行、中断执行、资源重新分配和任务恢复状态,实现渲染任务自适应控制;最终通过中间渲染结果合并、版式校验和异常对象局部重执行,减少整篇文档重复处理,提高word文档数据渲染效率、资源利用率、并发稳定性和版式准确性。
版权声明:本站专利文献数据主要来源于国家知识产权局等公开渠道,由 技术新讯 进行整理汇编。页面设计及数据汇编的著作权归本站所有。全部内容仅供个人学习、科研评估与技术交流参考,严禁用于任何商业用途(包括但不限于直接生产制造、技术转让、倒卖数据等)。
免责条款:专利技术具有时效性,本站不对资料的绝对准确性、完整性和可实施性提供任何明示或暗示的担保。因参考本站内容造成的直接或间接损失,本站不承担相关法律责任。若您认为本站内容有侵权问题,请及时提供权属证明与我们联系,本站将在核实后依法处理。反馈意见:yyfuon@163.com