一种基于大数据的报表分析方法、装置、设备和介质与流程

技术特征：
1.一种基于大数据的报表分析方法，其特征在于：包括：步骤10、通过系统集成服务接口，从至少一个业务系统获取数据，然后抛转至数据仓库；通过etl工具，定时抽取数据至数据仓库；步骤20、根据数据库的存储过程、函数、配置事件，进行实时数据清洗及批量分析；步骤30、通过报表工具选取需要分析的数据，制作实时报表，对数据进行可视化呈现。2.根据权利要求1所述的方法，其特征在于：所述步骤10中，系统集成服务接口包括webservice接口和webapi接口。3.根据权利要求1所述的方法，其特征在于：所述步骤10中，通过etl工具，定时抽取数据至数据仓库，具体包括：通过etl工具接收用户定义的数据挖掘过程，并配置相关的组件信息，然后将用户定义的数据挖掘过程模型转换成可在hadoop上运行的代码，该转换包括过程模型分析、依赖关系分析、代码模板解析；将数据挖掘组件连接起来构成数据挖掘过程，所述数据挖掘组件封装不同的数据操作逻辑，分成数据挖掘算法组件、连接器组件以及用户自定义组件；以hadoop提供的框架作为数据挖掘过程执行平台，向执行框架提交代码，运用云平台的并行计算能力实现挖掘过程的并行化，定时抽取数据至数据仓库。4.根据权利要求1所述的方法，其特征在于：所述方法还包括：将所述数据库的存储过程、函数、配置事件转为sql语句，供其它数据仓库执行使用。5.一种基于大数据的报表分析装置，其特征在于：包括：数据获取模块、数据处理模块以及报表模块；所述数据获取模块，用于通过系统集成服务接口，从至少一个业务系统获取数据，然后抛转至数据仓库；通过etl工具，定时抽取数据至数据仓库；所述数据处理模块，用于根据数据库的存储过程、函数、配置事件，进行实时数据清洗及批量分析；所述报表模块，用于通过报表工具选取需要分析的数据，制作实时报表，对数据进行可视化呈现。6.根据权利要求5所述的装置，其特征在于：所述数据获取模块中，系统集成服务接口包括webservice接口和webapi接口。7.根据权利要求5所述的装置，其特征在于：所述数据获取模块中，通过etl工具，定时抽取数据至数据仓库，具体包括：通过etl工具接收用户定义的数据挖掘过程，并配置相关的组件信息，然后将用户定义的数据挖掘过程模型转换成可在hadoop上运行的代码，该转换包括过程模型分析、依赖关系分析、代码模板解析；将数据挖掘组件连接起来构成数据挖掘过程，所述数据挖掘组件封装不同的数据操作逻辑，分成数据挖掘算法组件、连接器组件以及用户自定义组件；以hadoop提供的框架作为数据挖掘过程执行平台，向执行框架提交代码，运用云平台的并行计算能力实现挖掘过程的并行化，定时抽取数据至数据仓库。8.根据权利要求5所述的装置，其特征在于：所述数据处理模块还用于将所述数据库的存储过程、函数、配置事件转为sql语句，供其它数据仓库执行使用。9.一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时实现如权利要求1至4任一项所述的方法。
10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现如权利要求1至4任一项所述的方法。

技术总结
本发明实施例公开了一种基于大数据的报表分析方法、装置、设备和介质，涉及大数据处理技术领域，所述方法包括：步骤10、通过系统集成服务接口，从至少一个业务系统获取数据，然后抛转至数据仓库；通过ETL工具，定时抽取数据至数据仓库；步骤20、根据数据库的存储过程、函数、配置事件，进行实时数据清洗及批量分析；步骤30、通过报表工具选取需要分析的数据，制作实时报表。本发明提供的一种基于大数据的报表分析方法、装置、设备和介质，打通企业内部的数据孤岛，快速搭建的企业级Web报表平台。快速搭建的企业级Web报表平台。快速搭建的企业级Web报表平台。


技术研发人员：蔡树春 刘景慧 陈凤明
受保护的技术使用者：福建升腾资讯有限公司
技术研发日：2021.06.09
技术公布日：2021/10/23