一种算法模块高效调度系统的制作方法

技术特征：
1.一种算法模块高效调度系统，包括服务器模块（1），其特征在于，所述服务器模块（1）用于进行程序评分计算，所述服务器模块（1）输出端连接有分布式调度单元（2），所述分布式调度单元（2）用于根据不同分析对象所需的算力动态分配相应分析功能，且就近的分配所需进行分布式的整体任务调度，所述分布式调度单元（2）输出端与分布算法单元（3）的输入端电性连接，所述分布算法单元（3）用于通过算法得到分布计算对象相应任务向量，所述分布算法单元（3）输出端与索引判重模块（4）输入端电性连接，所述索引判重模块（4）用于分析对象内容是否重复，所述索引判重模块（4）输出端与服务器模块（1）输入端电性连接，所述服务器模块（1）输出端与ai评分调度模块（6）的输入端电性连接，所述ai评分调度模块（6）用于根据分布式调度情况输出调度策略将分析对象调出，所述ai评分调度模块（6）输出端与视频存储模块（8）的输入端电性连接，所述视频存储模块（8）用于存储分析对象数据在服务器中的索引地址，所述视频存储模块（8）输出端与视频导入模块（7）的输入端电性连接，所述视频导入模块（7）用于导入视频对象数据至服务器模块（1）进行分析，所述视频导入模块（7）输出端与服务器模块（1）输入端电性连接。2.根据权利要求1所述的一种算法模块高效调度系统，其特征在于，所述索引判重模块（4）输出端与数据库单元（5）输入端电性连接，所述数据库单元（5）用于存储分析后的对象数据。3.根据权利要求1所述的一种算法模块高效调度系统，其特征在于，所述分布式调度单元（2）包括视频分析模块（201），所述视频分析模块（201）用于分析视频所需的运算能力，所述视频分析模块（201）输出端与ai计算模块（204）的输入端电性连接，所述ai计算模块（204）用于通过python本地函数调用接入的评分复位器。4.根据权利要求3所述的一种算法模块高效调度系统，其特征在于，所述视频分析模块（201）输出端与任务抓取模块（202）的输入端电性连接，所述任务抓取模块（202）用于抓取需要判定的对象任务。5.根据权利要求4所述的一种算法模块高效调度系统，其特征在于，所述任务抓取模块（202）输出端与评分接口模块（203）输入端电性连接，所述评分接口模块（203）用于根据调用评分判断最终得分。6.根据权利要求1所述的一种算法模块高效调度系统，其特征在于，所述分布算法单元（3）包括算法策略模块（301），所述算法策略模块（301）用于提供分布式匹配算法的迭代更新，所述算法策略模块（301）输出端与信息反馈模块（302）的输入端电性连接，所述信息反馈模块（302）用于对分配处理后的对象处理结果进行反馈，所述信息反馈模块（302）输出端与路径去重模块（303）的输入端电性连接，所述路径去重模块（303）用于分析算法匹配路径的去重化处理，所述路径去重模块（303）输出端与异常检测模块（304）输入端电性连接，所述异常检测模块（304）用于对算法最优解异常进行判断。7.根据权利要求6所述的一种算法模块高效调度系统，其特征在于，所述信息反馈模块（302）输出端与局部领域搜索模块（305）的输入端电性连接，所述局部领域搜索模块（305）用于分析策略的相同替换作用。8.根据权利要求2所述的一种算法模块高效调度系统，其特征在于，所述数据库单元（5）包括高可用关系型数据库模块（501），所述高可用关系型数据库模块（501）用于存储评分后的各类数据，所述高可用关系型数据库模块（501）输入端与数据分布模块（502）输出端
电性连接，所述数据分布模块（502）用于分析数据类型进行分布存储。9.根据权利要求8所述的一种算法模块高效调度系统，其特征在于，所述数据分布模块（502）输入端与数据向量映射模块（503）的输出端电性连接，所述数据向量映射模块（503）用于根据输入的算法阈值数据进行数据向量的优化映射。10.根据权利要求1所述的一种算法模块高效调度系统的应用方法，其特征在于，具体包括以下步骤：s1、收集学生答卷、视频的物理位置编排队列任务；s2、收集显卡内存算力，根据单个任务所需内存，控制单个显卡的并发数；s3、根据不同模型深度范围为基础模型的0.33-1.67倍，不同模型每层卷积核个数为基础模型的0.5-2倍，依据检测场景的精度速度需求选择不同的模型结构；s4、根据单台服务器最大负载情况，就近拉取算法所需的n路视频，采用分布式锁就近分配任务；s5、针对显卡异常进行重新分配机制。

技术总结
本发明公开了一种算法模块高效调度系统，属于资源调度系统技术领域，包括服务器模块，所述服务器模块用于进行程序评分计算，所述服务器模块输出端连接有分布式调度单元，所述分布式调度单元用于根据不同分析对象所需的算力动态分配相应分析功能。本发明中，通过设置的分布算法单元，基于蚁群分布式调度算法，能够通过蚁群算法快速获取最优调度策略，能够对输入视频数据智能分配，合理利用硬件组件，并且能够通过设计的分布式调度单元，在最优策略获得后，能够对调度任务进行抓取分配分析，提高对大量图像数据的智能评分处理能力，并且通过对评分数据的智能分离，能够提高实验分值的快速判断，满足使用需要。满足使用需要。


技术研发人员：熊建国 刘建华 杨正山 刘晓建 孙鹏飞
受保护的技术使用者：上海大风实验室设备有限公司
技术研发日：2022.09.29
技术公布日：2023/1/31