数据库慢查询自动化调优方法、装置、设备、介质及产品与流程

摘要: 本发明涉及数据库,尤其涉及一种数据库慢查询自动化调优方法、装置、设备、介质及产品。背景技术:1、数据库系统在oltp业务场景下通常承载高并发、低延迟的在线事务处...
数据库慢查询自动化调优方法、装置、设备、介质及产品与流程

本发明涉及数据库,尤其涉及一种数据库慢查询自动化调优方法、装置、设备、介质及产品。

背景技术:

1、数据库系统在oltp业务场景下通常承载高并发、低延迟的在线事务处理请求,查询性能直接影响业务吞吐与用户体验。为定位性能瓶颈,业界普遍使用慢查询日志记录执行耗时超过阈值的sql语句及部分统计指标,例如执行时间、扫描行数、锁等待。运维人员或性能平台可以基于慢日志对慢sql进行汇总、排序与告警,从而辅助数据库性能治理。然而,现有慢日志机制在实践中仍存在明显局限,导致慢sql治理难以自动化、闭环化。

技术实现思路

1、本发明提供了一种数据库慢查询自动化调优方法、装置、设备、介质及产品,以提高数据慢查询的自动化调优效率。

2、根据本发明的一方面,提供了一种数据库慢查询自动化调优方法,该方法包括:

3、从慢日志文件中获取问题对象的样本sql结构化数据;

4、基于诊断智能体,对问题对象的样本sql结构化数据进行诊断分析,得到sql分析结果;

5、基于候选生成智能体,根据候选搜索策略对sql分析结果进行sql优化,得到候选优化sql方案;

6、基于验证智能体对原始sql和候选优化sql分别执行多轮基准测试,得到测试执行结果;

7、对所述测试执行结果进行等价校验,得到校验结果。

8、根据本发明的另一方面,提供了一种数据库慢查询自动化调优装置,该装置包括:

9、结构化数据确定模块,用于从慢日志文件中获取问题对象的样本sql结构化数据;

10、sql分析模块,用于基于诊断智能体,对问题对象的样本sql结构化数据进行诊断分析,得到sql分析结果;

11、sql优化模块,用于基于候选生成智能体,根据候选搜索策略对sql分析结果进行sql优化,得到候选优化sql方案;

12、sql验证模块,用于基于验证智能体对原始sql和候选优化sql分别执行多轮基准测试,得到测试执行结果;

13、结果校验模块,用于对所述测试执行结果进行等价校验,得到校验结果。

14、根据本发明的另一方面,提供了一种电子设备,所述电子设备包括:

15、至少一个处理器;以及

16、与所述至少一个处理器通信连接的存储器;其中,

17、所述存储器存储有可被所述至少一个处理器执行的计算机程序,所述计算机程序被所述至少一个处理器执行,以使所述至少一个处理器能够执行本发明任一实施例所述的数据库慢查询自动化调优方法。

18、根据本发明的另一方面,提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机指令,所述计算机指令用于使处理器执行时实现本发明任一实施例所述的数据库慢查询自动化调优方法。

19、根据本发明的另一方面,提供了一种计算机程序产品,所述计算机程序产品包括计算机程序,所述计算机程序在被处理器执行时实现根据本发明任一实施例所述的数据库慢查询自动化调优方法。

20、本发明实施例的技术方案,通过从慢日志文件中获取问题对象的样本sql结构化数据;基于诊断智能体,对问题对象的样本sql结构化数据进行诊断分析,得到sql分析结果;基于候选生成智能体,根据候选搜索策略对sql分析结果进行sql优化,得到候选优化sql方案;基于验证智能体对原始sql和候选优化sql分别执行多轮基准测试,得到测试执行结果;对测试执行结果进行等价校验,得到校验结果。上述技术方案,相比于对模型进行专项训练的方案,本发明以通用大模型为核心,多智能体配合实现慢查询sql的自动化调优并对调优结果进行验证,无需重新训练,不仅实现了慢查询的准确调优,还能够显著降低维护成本。

21、应当理解,本部分所描述的内容并非旨在标识本发明的实施例的关键或重要特征,也不用于限制本发明的范围。本发明的其它特征将通过以下的说明书而变得容易理解。

1.一种数据库慢查询自动化调优方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,基于诊断智能体,对问题对象的样本sql结构化数据进行诊断分析,得到sql分析结果,包括:

3.根据权利要求1所述的方法,其特征在于,从慢日志文件中获取问题对象的样本sql结构化数据,包括:

4.根据权利要求1所述的方法,其特征在于,基于候选生成智能体,根据候选搜索策略对sql分析结果进行sql优化,得到候选优化sql方案,包括:

5.根据权利要求4所述的方法,其特征在于,所述候选搜索策略包括按照风险等级进行sql优化顺序;先生成不改变语义且风险低于风险阈值的候选优化sql,再生成结构性改写的候选优化sql,并行生成不改写sql的候选优化方案;不改写sql的候选优化方案包括索引建议候选方案、统计信息更新候选方案、以及参数调整候选方案。

6.根据权利要求1所述的方法,其特征在于,所述测试执行结果包括原始sql的原始执行结果和候选优化sql的优化执行结果;

7.根据权利要求1所述的方法,其特征在于,基于验证智能体对原始sql和候选优化sql分别执行多轮基准测试,得到测试执行结果的同时,还包括:

8.一种数据库慢查询自动化调优装置,其特征在于,包括:

9.一种电子设备,其特征在于,所述电子设备包括:

10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有计算机指令,所述计算机指令用于使处理器执行时实现权利要求1-7中任一项所述的数据库慢查询自动化调优方法。

11.一种计算机程序产品,其特征在于,所述计算机程序产品包括计算机程序,所述计算机程序在被处理器执行时实现根据权利要求1-7中任一项所述的数据库慢查询自动化调优方法。