一种培训系统评测方法及装置与流程

1.本发明属于计算机技术领域，尤其涉及一种培训系统评测方法及装置。


背景技术：

2.顾名思义，培训系统是用来对学员或者用户进行培训的系统，经过培训系统的培训，能够使得用户或学员获得必备的技能。
3.现有操作培训主要分为实景培训、仿真机培训和虚拟培训，实景培训采用真实设备，通常采用教员讲解模式，仿真机培训采用计算机仿真与设备模型结合的方式，学员通过操作设备模型后，计算机屏幕能够显示操作效果，且增加了操作内容，虚拟培训采用虚拟仿真技术，学员可以在虚拟环境中进行模拟操作，现阶段的交互设备多为鼠标、键盘或遥控手柄，对培训系统完成后往往需要对系统进行评测，以发现培训系统的缺陷所在，方便对培训系统进行进一步改进。
4.现有的评测在进行时均是基于用户的认知和操作水平来进行的，但是用户的认知和操作水平时也是因人各异的，随着评测的进行，认知和操作往往出现分化，这就导致面对培训系统进行操作后获得的评价得分也不同，容易导致一些用户的体验感较差，而培训系统也难以捕捉到相应的评测环节，从而无法进行改进。


技术实现要素：

5.本发明实施例的目的在于提供一种培训系统评测方法及装置，旨在解决上述背景技术中提出的问题。
6.本发明实施例是这样实现的，一方面，一种培训系统评测方法，所述方法包括以下步骤：将专家的第一评测指令在培训系统的全功能模式下运行，基于运行的结果将专家的第一评测指令按照操作经验等级进行区分；基于区分后专家的第一评测指令生成对应的评测操作提示，将若干评测操作提示均按照不同的操作环节进行分解；在用户输入第二评测指令时，匹配分解后的评测操作提示，逐步运行至少一名用户的第二评测指令并且获取运行结果对应的评价等级；基于所述评价等级重新匹配分解后的评测操作提示，以使得该评测操作提示能够与上一阶段的第二评测指令的操作能力等级相匹配；根据用户的第二评测指令的逐步运行结果生成阶段评测得分，判断该阶段评测得分与预设期望得分的高低；当所述阶段评测得分低于预设期望得分时，对分解后的评测操作提示进行增强处理，以使得后续评测得分能够逐步趋于所述预设期望得分，否则，保持原评测操作提示的匹配顺序。
7.作为本发明的进一步方案，所述将专家的第一评测指令在培训系统的全功能模式
下运行，基于运行的结果将专家的第一评测指令按照操作经验等级进行区分具体包括：记录专家输入的第一评测指令；通过第一评测指令控制培训系统在全功能模式下运行，得到该模式下的运行结果；基于该模式下的运行结果将专家的第一评测指令按照操作经验等级进行区分。
8.作为本发明的再进一步方案，所述基于区分后专家的第一评测指令生成对应的评测操作提示，将若干评测操作提示均按照不同的操作环节进行分解具体包括：根据区分后的专家的第一评测指令获取对应的评测操作视频；获取培训系统的所有操作模式，定义所有操作模式中每个操作模式的环节；将评测操作视频分解成若干分别与所述每个操作模式的环节相对应且满足预设时长的操作子视频。
9.作为本发明的又进一步方案，所述在用户输入第二评测指令时，匹配分解后的评测操作提示，逐步运行至少一名用户的第二评测指令并且获取运行结果对应的评价等级具体包括：定期获取用户输入的第二评测指令；根据所述第二评测指令匹配操作经验处于非最高或非最低等级对应的操作子视频，将所述操作子视频在用户输入第二评测指令时进行展示；逐步运行至少一名用户的第二评测指令并且获取培训系统根据第二评测指令运行得到的评价等级。
10.作为本发明的进一步方案，所述基于所述评价等级重新匹配分解后的评测操作提示，以使得该评测操作提示能够与上一阶段的第二评测指令的操作能力等级相匹配具体包括：获取操作经验处于非最高或非最低等级对应的操作能力评分档信息；判断所述评价等级是否处于所述操作能力评分档内；若是，则维持所述操作子视频等级对应的等级不变；若否，则判断所述评价等级是否高于所述操作能力评分档，若该评价等级高于所述操作能力评分档，则将操作子视频的等级提升至该评价等级对应的等级，若该评价等级低于所述操作能力评分档，则将操作子视频的等级降低至该评价等级对应的等级。
11.作为本发明的进一步方案，所述根据用户的第二评测指令的逐步运行结果生成阶段评测得分，判断该阶段评测得分与预设期望得分的高低具体包括：获取用户处于阶段评测完成状态下的总得分；设定阶段预设期望得分阈值以及获取阶段综合期望得分阈值，其中阶段综合期望得分阈值为包含该阶段以及所有前阶段期望得分阈值之和；判断用户处于阶段评测完成状态下的总得分是否高于阶段综合预设期望得分阈值。
12.作为本发明的进一步方案，所述当所述阶段评测得分低于预设期望得分时，对分解后的评测操作提示进行增强处理，以使得后续评测得分能够逐步趋于所述预设期望得分具体包括：当所述阶段评测得分低于预设期望得分时，获取所有用户的阶段得分，根据所有
用户的阶段得分计算每一阶段用户的平均得分；判断该用户的阶段得分是否低于每一阶段用户的平均得分，若是，标记该用户的对应阶段为评测待增强阶段；判断阶段得分低于每一阶段用户的平均得分的阶段数目达到预设阈值时，将对应的阶段标记为评测改进阶段，将该评测改进阶段进行反馈；获取评测待增强阶段中阶段得分低于平均得分的幅度在预设幅度内的评测阶段，获取该评测阶段对应的评测类型；根据该评测类型获取后续评测阶段中对应的同类型评测阶段，将与该同类型评测阶段相关联的且经过匹配后的操作子视频进行分帧处理，并且根据该用户的后续操作实现局部放大处理。
13.作为本发明的进一步方案，所述方法还包括：在该用户进行后续阶段的评测时，检测用户的间隔指令输入时间；当用户的间隔指令输入时间差超过预设等待时长，切换评测模式为增强处理模式，且向用户发出当前阶段支持分帧定位以及局部放大处理的操作提示。
14.作为本发明的进一步方案，另一方面，一种培训系统评测装置，所述装置包括：专家评测模块，用于将专家的第一评测指令在培训系统的全功能模式下运行，基于运行的结果将专家的第一评测指令按照操作经验等级进行区分；分解模块，用于基于区分后专家的第一评测指令生成对应的评测操作提示，将若干评测操作提示均按照不同的操作环节进行分解；用户评测模块，用于在用户输入第二评测指令时，匹配分解后的评测操作提示，逐步运行至少一名用户的第二评测指令并且获取运行结果对应的评价等级；匹配模块，用于基于所述评价等级重新匹配分解后的评测操作提示，以使得该评测操作提示能够与上一阶段的第二评测指令的操作能力等级相匹配；生成及判断模块，用于根据用户的第二评测指令的逐步运行结果生成阶段评测得分，判断该阶段评测得分与预设期望得分的高低；增强模块，用于当所述阶段评测得分低于预设期望得分时，对分解后的评测操作提示进行增强处理，以使得后续评测得分能够逐步趋于所述预设期望得分，否则，保持原评测操作提示的匹配顺序。
15.本发明实施例提供的一种培训系统评测方法及装置，在用户评测过程中能够自适应匹配评测操作提示，能够及时在评测中发现用户的知识技能薄弱之处，在用户的后续的阶段评测中能够据此提升用户的培训评测体验感，当所述阶段评测得分低于预设期望得分时，对分解后的评测操作提示进行增强处理，以使得后续评测得分能够逐步趋于所述预设期望得分，否则，保持原评测操作提示的匹配顺序，不仅能够基于用户的知识和操作技能层面上进行分析，还能够考虑到培训系统自身的不足所在，并且在评测中及时地对分解后的评测操作提示进行增强处理，使得即使是在测评中也能够使用户对培训系统的体验感较好，也方便后续据此对培训系统进行相应的改进，以此提升培训系统对用户的吸引度。
附图说明
16.图1是一种培训系统评测方法的主流程图。
17.图2是匹配分解后的评测操作提示，逐步运行至少一名用户的第二评测指令并且获取运行结果对应的评价等级的流程图。
18.图3是基于所述评价等级重新匹配分解后的评测操作提示的流程图。
19.图4是对分解后的评测操作提示进行增强处理的流程图。
20.图5是本发明另一种实施例的流程图。
21.图6是一种培训系统评测装置的主结构图。
具体实施方式
22.为了使本发明的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。
23.以下结合具体实施例对本发明的具体实现进行详细描述。
24.本发明提供的一种培训系统评测方法及装置，解决了背景技术中的技术问题。
25.如图1所示，为本发明的一个实施例提供的一种培训系统评测方法的主流程图，所述一种培训系统评测方法包括：步骤s10：将专家的第一评测指令在培训系统的全功能模式下运行，基于运行的结果将专家的第一评测指令按照操作经验等级进行区分；步骤s11：基于区分后专家的第一评测指令生成对应的评测操作提示，将若干评测操作提示均按照不同的操作环节进行分解；步骤s12：在用户输入第二评测指令时，匹配分解后的评测操作提示，逐步运行至少一名用户的第二评测指令并且获取运行结果对应的评价等级；步骤s13：基于所述评价等级重新匹配分解后的评测操作提示，以使得该评测操作提示能够与上一阶段的第二评测指令的操作能力等级相匹配；步骤s14：根据用户的第二评测指令的逐步运行结果生成阶段评测得分，判断该阶段评测得分与预设期望得分的高低，这里的逐步运行表示是根据第二评测指令分阶段进行运行的；步骤s15：当所述阶段评测得分低于预设期望得分时，对分解后的评测操作提示进行增强处理，以使得后续评测得分能够逐步趋于所述预设期望得分，否则，保持原评测操作提示的匹配顺序。
26.本实施例在应用时，可以采用仿真机培训和/或虚拟培训与实景培训相结合的方式实现系统培训；基于运行的结果将专家的第一评测指令按照操作经验等级进行区分，基于区分后专家的第一评测指令生成对应的评测操作提示，将若干评测操作提示均按照不同的操作环节进行分解，在用户输入第二评测指令时，匹配分解后的评测操作提示，逐步运行至少一名用户的第二评测指令并且获取运行结果对应的评价等级，基于所述评价等级重新匹配分解后的评测操作提示，以使得该评测操作提示能够与上一阶段的第二评测指令的操作能力等级相匹配，能够及时在评测中发现用户的知识技能薄弱之处，在用户的后续的阶段评测中能够据此提升用户的培训评测体验感，当所述阶段评测得分低于预设期望得分时，对分解后的评测操作提示进行增强处理，以使得后续评测得分能够逐步趋于所述预设期望得分，否则，保持原评测操作提示的匹配顺序，不仅能够基于用户的知识技能层面上进
行分析，还能够考虑到培训系统自身的不足所在，并且在评测中及时地对分解后的评测操作提示进行增强处理，使得即使是在测评中也能够使用户对培训系统的体验感较好，也方便后续据此对培训系统进行相应的改进，以此提升培训系统对用户的吸引度。
27.作为本发明的一种优选实施例，所述将专家的第一评测指令在培训系统的全功能模式下运行，基于运行的结果将专家的第一评测指令按照操作经验等级进行区分具体包括：步骤s101：记录专家输入的第一评测指令；步骤s102：通过第一评测指令控制培训系统在全功能模式下运行，得到该模式下的运行结果；步骤s103：基于该模式下的运行结果将专家的第一评测指令按照操作经验等级进行区分。
28.本实施例在应用时，专家的评测应当基于全功能模式下运行，即对于所有的培训系统的操作，专家均应该涉及，不同的专家操作经验等级也有差别，其将会导致运行结果之间存在差异。
29.作为本发明的一种优选实施例，所述基于区分后专家的第一评测指令生成对应的评测操作提示，将若干评测操作提示均按照不同的操作环节进行分解具体包括：步骤s111：根据区分后的专家的第一评测指令获取对应的评测操作视频；步骤s112：获取培训系统的所有操作模式，定义所有操作模式中每个操作模式的环节；步骤s113：将评测操作视频分解成若干分别与所述每个操作模式的环节相对应且满足预设时长的操作子视频。
30.评测操作视频可以是对专家进行操作时基于全身录制的操作视频，也可以是配合录制的带有声音讲解的视频，也可以进行指令输入的步骤视频，在此不做限定，其是为了方便对后续用户进行操作指导，以达到对培训系统进行评测的目的，获取培训系统的所有操作模式，定义所有操作模式中每个操作模式的环节以及将评测操作视频分解成若干分别与所述每个操作模式的环节相对应且满足预设时长的操作子视频，即从模式
→
环节，操作子视频最终落实到环节上，实质是对操作视频的细化，方便后续评测阶段对应操作子视频的重新匹配。
31.如图2所示，作为本发明的一种优选实施例，所述在用户输入第二评测指令时，匹配分解后的评测操作提示，逐步运行至少一名用户的第二评测指令并且获取运行结果对应的评价等级具体包括：步骤s121：定期获取用户输入的第二评测指令；步骤s122：根据所述第二评测指令匹配操作经验处于非最高或非最低等级对应的操作子视频，将所述操作子视频在用户输入第二评测指令时进行展示；步骤s123：逐步运行至少一名用户的第二评测指令并且获取培训系统根据第二评测指令运行得到的评价等级。
32.本实施例在应用时，操作经验等级可以从高到底划分为至少三级，若是仅为三级，则选定操作经验等级处于适中等级（二级）对应的操作子视频，若是大于三级，则可以根据实际操作进行随机选取非最高等级或非最低等级对应的操作子视频，该实际操作可以让用
户按照自身认知程度去选择，例如在开始进行测试前让用户进行认知专业名词测试，按照专业测试进行赋分，再按照赋分划分等级，将该等级与操作子视频对应的等级一一对应，根据划分对等级去选择操作经验处于非最高或非最低等级对应的操作子视频，这里的操作经验处于非最高或非最低等级对应的操作子视频，可以理解的是，其为操作经验既不处于十分熟练，也不是处于十分生疏的状态，这符合绝大多数用户培训操作时的知识和技能水平。
33.如图3所示，作为本发明的一种优选实施例，所述基于所述评价等级重新匹配分解后的评测操作提示，以使得该评测操作提示能够与上一阶段的第二评测指令的操作能力等级相匹配具体包括：步骤s131：获取操作经验处于非最高或非最低等级对应的操作能力评分档信息，操作能力评分档信息包含的操作能力评分档是与操作经验等级一一对应的；步骤s132：判断所述评价等级是否处于所述操作能力评分档内；步骤s133：若是，则维持所述操作子视频等级对应的等级不变；步骤s134：若否，则判断所述评价等级是否高于所述操作能力评分档，若该评价等级高于所述操作能力评分档，则将操作子视频的等级提升至该评价等级对应的等级，若该评价等级低于所述操作能力评分档，则将操作子视频的等级降低至该评价等级对应的等级。
34.应当理解的是，设置非最高或非最低等级对应的操作能力评分档，无论是后续判断所述评价等级是否处于所述操作能力评分档内、所述评价等级是否高于所述操作能力评分档、或者若该评价等级低于所述操作能力评分档，在将评测操作提示进行重新匹配时，无论是将操作子视频提升至该评价等级对应的等级，还是将操作子视频降低至该评价等级对应的等级，能够从整体上大大提升操作子视频匹配操作的效率。
35.作为本发明的一种优选实施例，所述根据用户的第二评测指令的逐步运行结果生成阶段评测得分，判断该阶段评测得分与预设期望得分的高低具体包括：步骤s141：获取用户处于阶段评测完成状态下的总得分；步骤s142：设定阶段预设期望得分阈值以及获取阶段综合期望得分阈值，其中阶段综合期望得分阈值为包含该阶段以及所有前阶段期望得分阈值之和；步骤s143：判断用户处于阶段评测完成状态下的总得分是否高于阶段综合预设期望得分阈值。
36.本实施例在应用时，通过设定阶段预设期望得分阈值以及获取阶段综合期望得分阈值，其中阶段综合期望得分阈值为包含该阶段以及所有前阶段期望得分阈值之和，即阶段综合期望得分阈值是累加递增的，判断用户处于阶段评测完成状态下的总得分是否高于阶段综合预设期望得分阈值，利于进行后续的综合判断，为分解后的评测操作提示进行增强处理做准备。
37.如图4所示，作为本发明的一种优选实施例，所述当所述阶段评测得分低于预设期望得分时，对分解后的评测操作提示进行增强处理，以使得后续评测得分能够逐步趋于所述预设期望得分具体包括：步骤s151：当所述阶段评测得分低于预设期望得分时，获取所有用户的阶段得分，根据所有用户的阶段得分计算每一阶段用户的平均得分；步骤s152：判断该用户的阶段得分是否低于每一阶段用户的平均得分，若是，标记
该用户的对应阶段为评测待增强阶段；步骤s153：判断阶段得分低于每一阶段用户的平均得分的阶段数目达到预设阈值时，将对应的阶段标记为评测改进阶段，将该评测改进阶段进行反馈；步骤s154：获取评测待增强阶段中阶段得分低于平均得分的幅度在预设幅度内的评测阶段，获取该评测阶段对应的评测类型，例如，低于平均得分幅度在10%的得分对应的评测阶段均被获取评测类型，需要在后续评测中重点关注；步骤s155：根据该评测类型获取后续评测阶段中对应的同类型评测阶段，将与该同类型评测阶段相关联的且经过匹配后的操作子视频进行分帧处理，并且根据该用户的后续操作实现局部放大处理。
38.举例而言，例如判断用户的优势在于操作探索型还是纯知识类操作型等，以此发现规律，在用户的后续的阶段评测中能够根据对用户进行分帧查看或者局部放大等操作提示，据此可以获得更加详细的操作指导，以此提升用户的培训评测体验感，当然这些评测阶段中部分阶段会被标记为评测改进阶段，方便开发者参考。
39.可以理解的是，这里所说的阶段可以等同于前述的环节，也可以是前述环节的分解，即子环节，二者具有对应的关系，判断该用户的阶段得分是否低于每一阶段用户的平均得分，即该用户对培训系统涵盖相关技能的认知水平以及掌握程度、根据操作子视频进行操作的熟练程度有限，且低于平均水平，判断阶段得分低于每一阶段用户的平均得分的阶段数目达到预设阈值时，将对应的阶段标记为评测改进阶段，将该评测改进阶段进行反馈，例如该用户的若干阶段的得分分别为67、60、65、70和68，而对应的每一阶段的平均得分为65、65、60、72和65，达标为得分67、65、68对应的阶段，且预设阈值为3，那么67、65、68对应的阶段均为评测改进阶段，表明这些阶段存在待改进之处，可以将该评测改进阶段反馈到培训系统相应的专家模块上，方便专家进行对应的操作评测更改以及培训系统开发者的参考，以能够不断向利于提升用户培训操作能力的方向进行改进。
40.如图5所示，作为本发明的一种优选实施例，所述方法还包括：步骤s201：在该用户进行后续阶段的评测时，检测用户的间隔指令输入时间；步骤s202：当用户的间隔指令输入时间差超过预设等待时长，切换评测模式为增强处理模式，且向用户发出当前阶段支持分帧定位以及局部放大处理的操作提示。
41.本实施例在应用时，当用户在进行评测遇到难度时，其输入的评测指令就会变慢，通过检测到用户间隔的指令输入时间超过预设等待时长，切换为评测模式为增强处理模式，即对用户发出能够对操作子视频进行分帧画面定位以及对视频或者画面进行局部放大处理的提示，方便用户根据该提示进行相应的操作，进而提升用户的评测体验感。
42.如图6所示，作为本发明的另一种优选实施例，另一方面，一种培训系统评测装置，所述装置包括：专家评测模块100，用于将专家的第一评测指令在培训系统的全功能模式下运行，基于运行的结果将专家的第一评测指令按照操作经验等级进行区分；分解模块200，用于基于区分后专家的第一评测指令生成对应的评测操作提示，将若干评测操作提示均按照不同的操作环节进行分解；用户评测模块300，用于在用户输入第二评测指令时，匹配分解后的评测操作提示，逐步运行至少一名用户的第二评测指令并且获取运行结果对应的评价等级；
匹配模块400，用于基于所述评价等级重新匹配分解后的评测操作提示，以使得该评测操作提示能够与上一阶段的第二评测指令的操作能力等级相匹配；生成及判断模块500，用于根据用户的第二评测指令的逐步运行结果生成阶段评测得分，判断该阶段评测得分与预设期望得分的高低；增强模块600，用于当所述阶段评测得分低于预设期望得分时，对分解后的评测操作提示进行增强处理，以使得后续评测得分能够逐步趋于所述预设期望得分，否则，保持原评测操作提示的匹配顺序。
43.本发明上述实施例中提供了一种培训系统评测方法，并基于该培训系统评测方法提供了一种培训系统评测装置，在用户输入第二评测指令时，匹配分解后的评测操作提示，逐步运行至少一名用户的第二评测指令并且获取运行结果对应的评价等级，基于所述评价等级重新匹配分解后的评测操作提示，以使得该评测操作提示能够与上一阶段的第二评测指令的操作能力等级相匹配，在用户的后续的阶段评测中能够据此提升用户的培训评测体验感，当所述阶段评测得分低于预设期望得分时，对分解后的评测操作提示进行增强处理，以使得后续评测得分能够逐步趋于所述预设期望得分，否则，保持原评测操作提示的匹配顺序，不仅能够基于用户的知识技能层面上进行分析，还能够考虑到培训系统自身的不足所在，并且在评测中及时地对分解后的评测操作提示进行增强处理，使得即使是在测评中也能够使用户对培训系统的体验感较好，也方便后续据此对培训系统进行相应的改进，以此提升培训系统对用户的吸引度。
44.为了能够加载上述方法和系统能够顺利运行，该系统除了包括上述各种模块之外，还可以包括比上述描述更多或更少的部件，或者组合某些部件，或者不同的部件，例如可以包括输入输出设备、网络接入设备、总线、处理器和存储器等。
45.所称处理器可以是中央处理单元（centralprocessingunit，cpu），还可以是其他通用处理器、数字信号处理器（digitalsignalprocessor，dsp）、专用集成电路（applicationspecificintegratedcircuit，asic）、现成可编程门阵列（field-programmablegatearray，fpga）或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等，上述处理器是上述系统的控制中心，利用各种接口和线路连接各个部分。
46.本应该理解的是，虽然本发明各实施例的流程图中的各个步骤按照箭头的指示依次显示，但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明，这些步骤的执行并没有严格的顺序限制，这些步骤可以以其它的顺序执行。而且，各实施例中的至少一部分步骤可以包括多个子步骤或者多个阶段，这些子步骤或者阶段并不必然是在同一时刻执行完成，而是可以在不同的时刻执行，这些子步骤或者阶段的执行顺序也不必然是依次进行，而是可以与其它步骤或者其它步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
47.以上所述实施例的各技术特征可以进行任意的组合，为使描述简洁，未对上述实施例中的各个技术特征所有可能的组合都进行描述，然而，只要这些技术特征的组合不存在矛盾，都应当认为是本说明书记载的范围。
48.以上所述实施例仅表达了本发明的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对本发明专利范围的限制。应当指出的是，对于本领域的普通技术人员
来说，在不脱离本发明构思的前提下，还可以做出若干变形和改进，这些都属于本发明的保护范围。因此，本发明专利的保护范围应以所附权利要求为准。
49.以上所述仅为本发明的较佳实施例而已，并不用以限制本发明，凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等，均应包含在本发明的保护范围之内。