元模型驱动的组件数据批量预取与多粒度刷新方法及系统与流程
本技术涉及前端数据加载与缓存管理,尤其涉及一种元模型驱动的组件数据批量预取与多粒度刷新方法及系统。
背景技术:
1、在当前的web应用前端架构中,企业级复杂业务系统普遍采用声明式配置驱动、同屏渲染多个独立数据组件的页面构建模式。在此类架构下,通常利用元模型预先定义页面所包含的各功能组件及其对应的数据来源与取数参数,各组件在运行时各自独立执行数据获取与渲染逻辑。
2、现有技术中,针对上述多组件页面的数据加载与更新,主要采用以下几种实现方式。
3、方式一,各组件独立取数模式。每个组件各自封装独立的取数逻辑,在页面加载时分别发起数据请求。该方式在组件数量较多时会引发大量并发或瀑布式网络请求,即“请求风暴”,不仅拖慢首屏加载速度,亦导致后端服务瞬时承受过高压力,甚至触发限流或熔断。
4、方式二,基于缓存机制的数据复用方案。部分系统引入缓存以减少重复请求,但缓存键设计通常仅包含组件标识等有限维度,未纳入工作区、数据版本、透视图、对比态等业务上下文维度。当上述上下文发生变化时,因缓存键未能反映变化,组件可能命中与当前上下文不匹配的旧缓存数据,即“缓存串味”;若将缓存键设计得过于精细以规避该问题,则又因缓存粒度过细而降低命中率,迫使系统反复执行全量请求。
5、方式三,写操作后的刷新机制。现有方案通常仅提供两档刷新粒度:其一为仅刷新当前组件自身,虽开销小但导致其他相关组件仍显示旧数据,界面不一致;其二为触发整页重新加载,虽能保证数据一致但代价高昂且重置用户交互状态。当需要刷新多个指定组件时,若逐一发起独立请求,则将重新退化为请求风暴问题。
6、此外,因响应式布局裁剪、权限过滤等原因而实际不可见的组件,在现有方案中仍按常规流程发起数据请求,造成网络与计算资源的浪费。
7、基于此,提出本发明。
技术实现思路
1、为解决现有技术在多组件页面场景下存在请求数量随组件数线性膨胀、缓存上下文混淆导致数据错乱、刷新粒度与请求开销难以兼顾以及不可见组件无效请求的技术问题,本发明旨在于提供一种元模型驱动的组件数据批量预取与多粒度刷新方法及系统,从而实现首屏及各类刷新场景下请求数量恒为单次、缓存上下文精准隔离、且支持任意粒度刷新而不引入额外请求开销。
2、为实现上述目的,本发明提供如下技术方案:
3、本发明在第一方面提供了一种元模型驱动的组件数据批量预取与多粒度刷新方法,包括:通过元模型为各组件分别声明配置数据源描述信息,生成包含各组件标识及其对应数据源描述信息的映射配置;响应于数据获取触发事件,获取当前多维上下文信息,根据所述映射配置中各组件对应的数据源描述信息与所述多维上下文信息,分别为各组件生成对应的多维分区缓存键;根据所述映射配置确定待取数的目标组件集合,以所述目标组件集合中各组件对应的数据源描述信息作为取数参数,向服务端发起单次批量数据请求,并接收包含所述目标组件集合中各组件所需数据的批量响应结果;所述批量数据请求失败时,不由各组件分别发起自动重试;对所述批量响应结果执行形态对齐处理,使归属于各组件的原始数据分别转换为该组件通过独立请求所对应的数据结构;分别以各组件对应的多维分区缓存键为索引,将形态对齐处理后的数据写入缓存,以使组件挂载或读取数据时,以该组件对应的多维分区缓存键查询缓存并获取数据;响应于数据刷新触发事件,根据所述映射配置确定待刷新的组件集合中各组件对应的数据源描述信息,以该数据源描述信息作为取数参数向服务端发起单次批量数据请求,并将返回的数据经所述形态对齐处理后按各组件对应的多维分区缓存键重新写入缓存;所述待刷新的组件集合为单个组件、多个指定组件或全量组件中的任意一种。
4、本发明在第一方面提供了一种优选方案,所述数据源描述信息用于指明对应组件的数据源类型与取数参数;所述多维分区缓存键由以下部分组合而成:固定前缀、组件标识、数据源类型、经稳定序列化处理后的数据源描述信息、以及由所述多维上下文信息拼接而成的上下文串;所述多维上下文信息包括工作区标识、数据版本号、业务对象身份标识、对象类型、透视图标识以及对比态专属参数中的至少一种;对比态场景与非对比态场景因所述对比态专属参数的有无或取值不同而落入不同的缓存分区。通过明确缓存键的具体组成结构与上下文维度,确保缓存键生成的可操作性与可重复性,使不同上下文(含对比态与非对比态)的数据自动落入相互隔离的缓存分区,从键层面杜绝跨上下文数据串味。
5、本发明在第一方面提供了一种优选方案,所述稳定序列化处理具体包括:在对非数组类型的对象结构进行序列化时,先提取该对象的全部自有属性名并按字典序排序,再按排序后的属性名顺序依次取出对应的属性值,以重建为新对象后继续执行序列化;若序列化过程因存在循环引用或不可序列化类型而抛出异常,则停止对该对象的序列化处理,并以该对象的默认字符串表示作为其序列化结果。通过对非数组对象按属性名字典序排序后序列化,使语义等价的数据源描述信息在不同运行时环境下产生一致的序列化结果,避免因属性书写顺序不同而误判为不同缓存键,保证缓存键的稳定性和一致性;同时对序列化异常设置兜底处理,增强系统的可靠性。
6、本发明在第一方面提供了一种优选方案,所述多维分区缓存键由同一键构造函数生成;写入缓存所采用的缓存键与组件读取时所采用的缓存键由所述键构造函数相同且基于相同的数据源描述信息与多维上下文信息生成。通过限定写入键与读取键由同一键构造函数基于相同的输入生成,使二者必然一致,保证预填数据被组件精确命中,避免因键不一致而导致的缓存失效。
7、本发明在第一方面提供了一种优选方案,所述根据所述映射配置确定待取数的目标组件集合,具体包括:遍历所述映射配置中的各组件,将同时具备组件标识且声明了数据源类型的组件纳入所述目标组件集合;遍历过程中若遇同一组件对象再次出现则停止当前遍历路径的继续下行以防范环,并将已纳入所述目标组件集合的各组件按组件标识去重。通过明确待取数组件的判定标准、防环机制与去重规则,确保目标组件集合的确定完整且无冗余,从源头上保障批量请求的范围准确。
8、本发明在第一方面提供了一种优选方案,在根据所述映射配置确定待取数的目标组件集合之前,还包括:依预设的可见性判定规则对所述映射配置中的组件进行剪枝,所述可见性判定规则基于当前页面的裁剪状态和/或当前多维上下文信息判定组件是否可见,被判定为不可见的组件不纳入所述目标组件集合。通过将剪枝步骤置于批量请求之前,使不可见组件从源头上不纳入取数流程,避免无效请求对网络与计算资源的浪费。
9、本发明在第一方面提供了一种优选方案,所述数据刷新触发事件为全量刷新时,还包括:优先查询页面结构缓存,若命中则跳过页面结构的重新获取,直接对全量组件执行单次批量数据请求;若未命中则先获取页面结构,再执行全量组件的单次批量数据请求。通过在全量刷新时复用已缓存的页面结构,避免不必要的结构获取请求,使全量刷新仅产生组件数据的单次批量请求,进一步缩减刷新场景下的请求开销。
10、本发明在第一方面提供了一种优选方案,所述全量刷新通过发布-订阅广播机制通知订阅方,由所述订阅方统一编排页面结构的按需获取与全部组件的批量取数及预填,以实现页面结构与组件数据的协同刷新;所述广播机制为具名频道的发布-订阅,发起方向约定名称的广播频道发出携带业务作用域标识的通知消息,订阅方收到消息后校验所述业务作用域标识与自身当前所处作用域一致时执行刷新编排。通过单一订阅方统一编排全量刷新流程,避免各组件各自订阅导致全量刷新退化为多次独立请求,保证全量刷新依然恒为单次批量请求,同时通过作用域标识校验避免多工作区间的广播串扰。
11、本发明在第一方面提供了一种优选方案,还包括:为写入缓存的各数据设置保鲜期,在保鲜期内所述缓存被读取时直接命中,超出保鲜期则触发后台重新取数;缓存中存储的各数据在不再被任何组件引用后保留一回收期限,超时未被重新引用则从缓存中回收。通过设置保鲜期与回收期限,使缓存既不会因过早失效而频繁取数,也不会因无限累积而导致内存膨胀,同时回收期限长于保鲜期使用户短暂离开后返回时仍可立即看到缓存数据,兼顾了缓存的有效性与资源利用率的平衡,提升了用户体验。
12、本发明在第二方面提供了一种元模型驱动的组件数据批量预取与多粒度刷新系统,用于执行所述的方法,包括:映射配置模块,用于通过元模型为各组件分别声明配置数据源描述信息,生成包含各组件标识及其对应数据源描述信息的映射配置;缓存键生成模块,用于响应于数据获取触发事件,获取当前多维上下文信息,根据所述映射配置中各组件对应的数据源描述信息与所述多维上下文信息,分别为各组件生成对应的多维分区缓存键;批量取数模块,用于根据所述映射配置确定待取数的目标组件集合,以所述目标组件集合中各组件对应的数据源描述信息作为取数参数,向服务端发起单次批量数据请求,并接收包含所述目标组件集合中各组件所需数据的批量响应结果;所述批量数据请求失败时,不由各组件分别发起自动重试;形态对齐模块,用于对所述批量响应结果执行形态对齐处理,使归属于各组件的原始数据分别转换为该组件通过独立请求所对应的数据结构;缓存预填模块,用于分别以各组件对应的多维分区缓存键为索引,将形态对齐处理后的数据写入缓存,以使组件挂载或读取数据时,以该组件对应的多维分区缓存键查询缓存并获取数据;刷新协同模块,用于响应于数据刷新触发事件,根据所述映射配置确定待刷新的组件集合中各组件对应的数据源描述信息,以该数据源描述信息作为取数参数向服务端发起单次批量数据请求,并将返回的数据经所述形态对齐处理后按各组件对应的多维分区缓存键重新写入缓存;所述待刷新的组件集合为单个组件、多个指定组件或全量组件中的任意一种。
13、与现有技术相比,本发明能实现如下有益技术效果:
14、本发明首先,以元模型生成的映射配置作为统一数据源,将各组件的取数需求集中表征于该映射配置中,在此基础上,以该映射配置为依据确定待取数的目标组件集合,并以该集合中各组件对应的数据源描述信息作为取数参数,向服务端发起单次批量数据请求,从而将原本多个组件独立发起的多次请求聚合为单次请求,从机制上消除了请求风暴的产生根源,使得请求数量不再随组件数量增加而线性增长。同时,批量数据请求失败时,不由各组件分别发起自动重试,从而避免了失败后各组件因常规重试策略而退化回大量独立请求,从请求重试层面封堵了请求风暴的回流路径。其次,缓存键的生成同时依据数据源描述信息与多维上下文信息,完整覆盖了影响组件数据显示归属的全部维度,使不同上下文下的数据落入相互隔离的缓存分区,从缓存键层面避免了跨上下文的数据串味;结合形态对齐处理将批量响应中归属于各组件的原始数据转换为该组件通过独立请求所对应的数据结构,并以各组件对应的多维分区缓存键为索引写入缓存,使写入键与查询键的一致性以及数据形态的一致性共同保证了预填数据能够被组件精确命中,避免了因键不匹配或数据结构不匹配而导致的缓存失效。
15、同时,本发明通过统一的刷新模型解决了刷新粒度与请求开销难以兼顾的问题。在数据刷新阶段,以待刷新的组件集合为操作对象,该集合可为单个、多个或全部组件,覆盖了从精细化刷新到全局刷新的全部粒度需求,无论该集合包含多少组件,均以该集合中各组件对应的数据源描述信息作为取数参数向服务端发起单次批量数据请求,并将返回数据经形态对齐后按各自缓存键重新写入缓存,使得任意粒度的刷新均统一为单次批量请求和单次缓存预填的处理模式,刷新粒度与请求数量解耦,既无需承受整页重载的代价,也不会因逐一刷新多个组件而退化为请求风暴。
16、综上,本发明实现了首屏及各类刷新场景下请求数量恒为单次、缓存上下文精准隔离、支持任意粒度刷新而不引入额外请求开销的技术效果。
版权声明:本站专利文献数据主要来源于国家知识产权局等公开渠道,由 技术新讯 进行整理汇编。页面设计及数据汇编的著作权归本站所有。全部内容仅供个人学习、科研评估与技术交流参考,严禁用于任何商业用途(包括但不限于直接生产制造、技术转让、倒卖数据等)。
免责条款:专利技术具有时效性,本站不对资料的绝对准确性、完整性和可实施性提供任何明示或暗示的担保。因参考本站内容造成的直接或间接损失,本站不承担相关法律责任。若您认为本站内容有侵权问题,请及时提供权属证明与我们联系,本站将在核实后依法处理。反馈意见:yyfuon@163.com