JS脚本引擎分布事务控制方法、装置、设备及存储介质与流程

摘要: 本发明涉及计算机软件处理,尤其涉及一种js脚本引擎分布事务控制方法、装置、设备及存储介质。背景技术:1、在企业级低代码开发平台领域,常规技术方案采用微服务前后端...
JS脚本引擎分布事务控制方法、装置、设备及存储介质与流程

本发明涉及计算机软件处理,尤其涉及一种js脚本引擎分布事务控制方法、装置、设备及存储介质。

背景技术:

1、在企业级低代码开发平台领域,常规技术方案采用微服务前后端分离架构(如java spring cloud),开发者需要掌握java、spring boot、数据库操作等多种技术栈。

2、对于分布式事务控制,业界通常直接集成成熟的开源分布式事务框架。

3、seata(阿里开源):提供自动事务模式(auto transaction mode,at)、尝试-确认-取消(try-confirm-cancel,tcc)、saga等多种事务模式,通过事务协调器(transactionmanager,tc)、事务管理器(transaction manager,tm)、资源管理器(resource manager,rm)三组件协作实现分布式事务。

4、tc负责全局事务协调,tm负责开启/提交/回滚全局事务,rm负责分支事务的注册与状态上报。

5、bytetcc(字节跳动开源):基于tcc模式的分布式事务框架,开发者需实现try/confirm/cancel三个接口。

6、spring transaction:spring生态原生的声明式事务管理,通过@transactional注解+面向切面编程(aspect-oriented programming,aop)切面实现单数据源事务管理,但其分布式事务能力依赖java 事务api(java transaction api,jta)或第三方框架扩展。

7、现有低代码平台若需后端事务控制,通常采用以下两种路径之一:

8、路径a:后端仍使用java编写业务逻辑,前端使用低代码搭建ui,事务控制完全依赖java后端的spring transaction或集成seata;

9、路径b:低代码平台将用户编写的脚本翻译为java代码或sql,再通过java运行时的标准事务机制执行。

10、上述方案的共同特点是:要么不要求开发者用脚本语言编写后端事务性业务逻辑,要么脚本仅作为配置层,实际事务控制仍由宿主语言(java/c#)的事务框架完成。

11、当开发者仅掌握javascript这一种语言时,上述方案均无法满足单语言全栈开发且具备分布式事务控制能力的需求。

12、现有技术的缺点在于:

13、缺点一:语言特性与业务需求的根本性矛盾

14、javascript脚本语言(js)作为一种弱类型、事件驱动、异步非阻塞的脚本语言,其设计初衷为浏览器端的用户交互逻辑,原生不具备数据库事务控制的语法(如begintransaction / commit / rollback)和运行时支持。

15、而低代码平台的核心价值主张是降低开发门槛:要求开发者仅需掌握js和结构化查询语言(structured query language,sql)即可进行全栈后端业务开发。

16、当后端业务涉及多数据库写入操作(如同时更新订单库和库存库)时,js的异步非阻塞特性与分布式事务的原子性、一致性、隔离性、持久性(atomicity、consistency、isolation、durability,acid)强一致性要求之间存在根本性冲突:js中常见的promise/async-await异步模式无法直接映射到两阶段提交(two-phase commit,2pc)协议的同步阻塞等待语义。

17、缺点二:开源事务框架与闭源平台的数据架构不匹配

18、现有开源分布式事务框架(seata、spring cloud sleuth、bytetcc等)均基于特定技术生态构建。

19、以seata为例,其at模式深度依赖:

20、a) 特定的数据库连接池代理(seata datasourceproxy),需在应用中额外配置代理数据源;

21、b) undo_log表(需在建表语句中预置);

22、c) 全局事务id(transaction id,xid)的跨服务传递机制(通过远程过程调用(remote procedure call,rpc) filter/interceptor在服务调用链中透传xid);

23、d) 其tc事务协调器需独立部署并维护全局锁表。

24、而本平台采用自主构建的数据访问层(dynamicdatasource+ dataoperate+dataoperatorfacade),连接池管理、线程模型、rpc调用链路均为自研,与开源框架的上述技术前提存在多层面的不兼容:

25、a) 数据源代理机制不同:本平台通过abstractroutingdatasource的determinecurrentlookupkey()方法实现动态路由,而非seata的datasourceproxy代理模式,两者无法叠加;

26、b) 线程变量传递模型不同:本平台使用阿里巴巴可传递线程局部变量(transmittable thread local,ttl)实现跨线程池的上下文传递,而seata依赖其自有的rootcontext进行xid绑定,传递机制不兼容;

27、c) rpc调用机制不同:本平台通过nashorn脚本引擎的同步eval执行js + forest超文本传输协议(hypertext transfer protocol,http)客户端进行服务间调用,而非spring cloud feign + sentinel的rpc调用链,xid的跨服务传播路径完全不同。

28、基于上述分析,直接套用任何现有的开源框架,都会与本平台的技术架构产生根本性冲突,难以实现兼容。

29、缺点三:嵌套事务回滚的保存点控制困难

30、在单方法内操作多个数据库时(例如一个js函数先更新数据库a的表x,再更新数据库b的表y,再更新数据库a的表z),会产生多层嵌套事务。

31、当中间某次数据库操作失败时,需要精确判定回滚范围:是回滚到最近一次操作a表x之后(保留a表x的更新),还是回滚所有操作(全部撤销),抑或仅回滚失败的那个操作所涉及的数据库(部分回滚)。

32、现有开源方案中,spring transaction的savepoint机制仅支持单数据源内的嵌套事务保存点,无法跨数据源管理;seata的at模式虽支持全局事务的回滚,但回滚粒度为整个全局事务,不支持回滚到全局事务中的第n个分支事务之前的细粒度控制:多层事务回滚到哪里去,哪一部分回滚哪一部分保留无法解决。

技术实现思路

1、本发明的主要目的在于提供一种js脚本引擎分布事务控制方法、装置、设备及存储介质,旨在解决现有技术中javascript脚本语言原生缺乏事务控制机制且其异步特性与分布式事务强一致性要求存在冲突,以及现有分布式事务框架与低代码平台自研数据架构不兼容,导致无法在单一脚本语言环境下实现可靠分布式事务控制的技术问题。

2、第一方面,本发明提供一种js脚本引擎分布事务控制方法,所述js脚本引擎分布事务控制方法包括以下步骤:

3、构建包含事务管理栈和脚本调用栈的执行上下文,并将业务脚本加载至js脚本引擎中;

4、通过所述js脚本引擎执行所述业务脚本,在执行过程中将监测到的数据库操作对应的事务管理器存入所述事务管理栈,并同步更新所述脚本调用栈;

5、在脚本执行结束时,依据所述脚本调用栈判定事务源帧,并按照所述事务管理栈的存储顺序执行事务提交或事务回滚。

6、可选地,所述构建包含事务管理栈和脚本调用栈的执行上下文,并将业务脚本加载至js脚本引擎中,包括:

7、初始化脚本执行环境,分配独立的内存空间作为执行上下文,并在所述执行上下文中实例化事务管理栈与脚本调用栈;其中,所述事务管理栈用于存储事务管理器与事务状态对象的映射关系,所述脚本调用栈用于存储脚本调用的层级信息;

8、读取待执行的业务脚本,将所述业务脚本加载至js脚本引擎的当前执行上下文中;

9、将所述事务管理栈及对应所述业务脚本的脚本调用栈绑定至所述当前执行上下文。

10、可选地,所述读取待执行的业务脚本,将所述业务脚本加载至js脚本引擎的当前执行上下文中,包括:

11、向js脚本引擎的当前执行上下文中注入平台对象,所述平台对象包括api调用对象、公共工具对象、业务流程管理对象及策略中心对象;

12、读取待执行的业务脚本,将所述业务脚本载入注入有所述平台对象的当前执行上下文中,通过所述平台对象建立所述业务脚本与系统底层能力的通信通道,使得所述业务脚本在执行过程中调用所述系统底层能力。

13、可选地,所述通过所述js脚本引擎执行所述业务脚本,在执行过程中将监测到的数据库操作对应的事务管理器存入所述事务管理栈,并同步更新所述脚本调用栈,包括:

14、在所述js脚本引擎执行所述业务脚本的过程中,拦截所述业务脚本发起的数据库操作请求;

15、根据预设的动态数据源路由规则确定目标数据源事务管理器;

16、生成与所述目标数据源事务管理器对应的目标事务状态对象,将所述目标数据源事务管理器及所述目标事务状态对象存入所述事务管理栈;

17、通过所述js脚本引擎获取当前脚本执行点的调用帧信息,将所述调用帧信息存入所述脚本调用栈,以实现所述事务管理栈与所述脚本调用栈的同步更新。

18、可选地,所述根据预设的动态数据源路由规则确定目标数据源事务管理器,包括:

19、继承抽象路由数据源类,覆写路由键确定逻辑,并利用可传递线程局部变量维护数据库组标识和数据库schema标识;

20、在拦截到所述数据库操作请求时,将目标数据库组标识和所述数据库schema标识设置至所述可传递线程局部变量;

21、基于所述可传递线程局部变量中的所述数据库组标识和所述数据库schema标识生成路由键;

22、根据所述路由键定位对应的物理数据源实例,并获取所述物理数据源实例关联的目标数据源事务管理器。

23、可选地,所述在脚本执行结束时,依据所述脚本调用栈判定事务源帧,并按照所述事务管理栈的存储顺序执行事务提交或事务回滚,包括:

24、获取所述脚本调用栈的栈顶帧信息,根据所述栈顶帧信息确定栈顶帧的类型;

25、在所述栈顶帧为主函数调用帧或当前调用栈中不存在已标记为事务源的活跃帧时,判定当前调用帧为事务源帧;

26、在判定所述当前调用帧为事务源帧时,按照后进先出的顺序从所述事务管理栈中弹出事务管理器,获取事务状态对象中的数据库连接对象;

27、根据所述数据库连接对象执行事务提交或事务回滚操作;

28、在判定当前调用帧非事务源帧时,弹出当前调用帧,由上层事务源帧执行事务提交或事务回滚操作。

29、可选地,所述根据所述数据库连接对象执行事务提交或事务回滚操作,包括:

30、检测所述数据库连接对象的连通状态;

31、在所述数据库连接对象已关闭时,跳过回滚操作并记录系统日志;

32、在所述数据库连接对象未关闭时,通过所述事务管理器对所述数据库连接对象所属的事务执行回滚操作;

33、在完成所有事务管理器的回滚步骤后,清理所述执行上下文并释放当前调用帧持有的分布式锁;

34、在所述业务脚本在执行过程中产生的异常状态信息指示未发生异常时,通过所述事务管理器对所述数据库连接对象所属的事务执行提交操作。

35、第二方面,为实现上述目的,本发明还提出一种js脚本引擎分布事务控制装置,所述js脚本引擎分布事务控制装置包括:

36、上下文构建模块,用于构建包含事务管理栈和脚本调用栈的执行上下文,并将业务脚本加载至js脚本引擎中;

37、脚本执行栈管理模块,用于通过所述js脚本引擎执行所述业务脚本,在执行过程中将监测到的数据库操作对应的事务管理器存入所述事务管理栈,并同步更新所述脚本调用栈;

38、事务提交回滚模块,用于在脚本执行结束时,依据所述脚本调用栈判定事务源帧,并按照所述事务管理栈的存储顺序执行事务提交或事务回滚。

39、第三方面,为实现上述目的,本发明还提出一种js脚本引擎分布事务控制设备,所述js脚本引擎分布事务控制设备包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的js脚本引擎分布事务控制程序,所述js脚本引擎分布事务控制程序配置为实现如上文所述的js脚本引擎分布事务控制方法的步骤。

40、第四方面,为实现上述目的,本发明还提出一种存储介质,所述存储介质上存储有js脚本引擎分布事务控制程序,所述js脚本引擎分布事务控制程序被处理器执行时实现如上文所述的js脚本引擎分布事务控制方法的步骤。

41、本发明提出的js脚本引擎分布事务控制方法,通过构建包含事务管理栈和脚本调用栈的执行上下文,并将业务脚本加载至js脚本引擎中;通过所述js脚本引擎执行所述业务脚本,在执行过程中将监测到的数据库操作对应的事务管理器存入所述事务管理栈,并同步更新所述脚本调用栈;在脚本执行结束时,依据所述脚本调用栈判定事务源帧,并按照所述事务管理栈的存储顺序执行事务提交或事务回滚;能够在javascript脚本引擎内部构建独立的事务控制体系,利用事务管理栈与脚本调用栈的双栈协同机制,精确记录脚本执行过程中的数据库操作资源与调用层级关系,从而在脚本执行结束时准确判定事务源帧并按照正确的资源栈顺序执行提交或回滚操作,有效解决了脚本语言原生缺乏事务控制能力及异步执行与事务一致性要求的冲突问题,实现了低代码平台下纯脚本语言的分布式事务一致性保障。