问答数据修订方法、装置、电子设备及计算机程序产品与流程
本申请属于数据处理,尤其涉及一种问答数据修订方法、问答数据修订装置、电子设备及计算机程序产品。
背景技术:
1、随着视觉语言模型的发展,包括图像、问题及答案的问答数据集被广泛用于视觉语言模型的训练、测试和性能评价。问答数据集的质量会对视觉语言模型的训练效果及评价结果产生影响。
2、目前,问答数据集通常通过人工标注、模型生成或者二者结合的方式获得。受图像内容复杂、标注人员理解偏差以及模型生成结果不稳定等因素影响,问答数据中的答案可能存在对象识别错误、属性描述错误、数量描述错误和/或位置关系描述错误等问题。若直接使用包含错误答案的问答数据,可能降低问答数据集的准确性,并影响视觉语言模型的训练效果。
3、对问答数据进行人工核验和修改需要消耗较多的人力及时间,尤其在问答数据规模较大的情况下,处理效率较低。因此,如何提高问答数据的处理效率和准确性,成为目前需要解决的问题。
技术实现思路
1、本申请提供了一种问答数据修订方法、问答数据修订装置、电子设备及计算机程序产品,可以提高问答数据的处理效率和准确性。
2、第一方面,本申请提供了一种问答数据修订方法,包括:
3、获取待处理的问答数据样本,问答数据样本包括原始图像、问题和原始答案;
4、对原始答案进行分句处理,得到至少一个原始分句;
5、针对每个原始分句,根据原始图像确定与原始分句对应的第一待评价图像,并基于第一待评价图像对原始分句进行正确性评分;
6、根据各个原始分句的正确性评分,从至少一个原始分句中确定错误分句;
7、在存在错误分句的情况下,基于原始图像、原始答案和错误分句,对原始答案中的错误分句进行修订,并保留原始答案中除错误分句以外的原始分句,得到修订答案;
8、基于修订答案、原始图像及问题生成已修订问答数据样本。
9、第二方面,本申请提供了一种问答数据修订装置,包括:
10、获取模块,用于获取待处理的问答数据样本,问答数据样本包括原始图像、问题和原始答案;
11、第一分句模块,用于对原始答案进行分句处理,得到至少一个原始分句;
12、第一评分模块,用于针对每个原始分句,根据原始图像确定与原始分句对应的第一待评价图像,并基于第一待评价图像对原始分句进行正确性评分;
13、第一确定模块,用于根据各个原始分句的正确性评分,从至少一个原始分句中确定错误分句;
14、修订模块,用于在存在错误分句的情况下,基于原始图像、原始答案和错误分句,对原始答案中的错误分句进行修订,并保留原始答案中除错误分句以外的原始分句,得到修订答案;
15、生成模块,用于基于修订答案、原始图像及问题生成已修订问答数据样本。
16、第三方面,本申请提供了一种电子设备,上述电子设备包括存储器、处理器以及存储在上述存储器中并可在上述处理器上运行的计算机程序,上述处理器执行上述计算机程序时实现如上述第一方面的方法的步骤。
17、第四方面,本申请提供了一种计算机可读存储介质,上述计算机可读存储介质存储有计算机程序,上述计算机程序被处理器执行时实现如上述第一方面的方法的步骤。
18、第五方面,本申请提供了一种计算机程序产品,上述计算机程序产品包括计算机程序,上述计算机程序被一个或多个处理器执行时实现如上述第一方面的方法的步骤。
19、本申请与现有技术相比存在的有益效果是:本申请通过对原始答案进行分句处理,并基于各原始分句对应的第一待评价图像分别进行正确性评分,能够定位原始答案中与原始图像不一致的错误分句;进而在保留其它原始分句的情况下,基于原始图像对错误分句进行针对性修订,减少修订过程对原有正确内容的影响,从而提高问答数据修订的准确性及已修订问答数据样本的质量。
20、可以理解的是,上述第二方面至第五方面的有益效果可以参见上述第一方面中的相关描述,在此不再赘述。
1.一种问答数据修订方法,其特征在于,包括:
2.如权利要求1所述的问答数据修订方法,其特征在于,所述根据所述原始图像确定与所述原始分句对应的第一待评价图像,包括:
3.如权利要求1所述的问答数据修订方法,其特征在于,所述基于所述第一待评价图像对所述原始分句进行正确性评分,包括:
4.如权利要求1所述的问答数据修订方法,其特征在于,所述根据各个所述原始分句的正确性评分,从至少一个所述原始分句中确定错误分句,包括:
5.如权利要求1所述的问答数据修订方法,其特征在于,所述基于所述原始图像、所述原始答案和所述错误分句,对所述原始答案中的所述错误分句进行修订,并保留所述原始答案中除所述错误分句以外的原始分句,得到修订答案,包括:
6.如权利要求1至5任一项所述的问答数据修订方法,其特征在于,在基于所述修订答案、所述原始图像及所述问题生成已修订问答数据样本之前,所述问答数据修订方法还包括:
7.如权利要求6所述的问答数据修订方法,其特征在于,在根据所述平均正确性评分,确定所述修订答案是否通过验证之后,所述问答数据修订方法还包括:
8.一种问答数据修订装置,其特征在于,包括:
9.一种电子设备,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求1至7任一项所述的方法。
10.一种计算机程序产品,其特征在于,所述计算机程序产品包括计算机程序,所述计算机程序被一个或多个处理器执行时实现如权利要求1至7任一项所述的方法。
版权声明:本站专利文献数据主要来源于国家知识产权局等公开渠道,由 技术新讯 进行整理汇编。页面设计及数据汇编的著作权归本站所有。全部内容仅供个人学习、科研评估与技术交流参考,严禁用于任何商业用途(包括但不限于直接生产制造、技术转让、倒卖数据等)。
免责条款:专利技术具有时效性,本站不对资料的绝对准确性、完整性和可实施性提供任何明示或暗示的担保。因参考本站内容造成的直接或间接损失,本站不承担相关法律责任。若您认为本站内容有侵权问题,请及时提供权属证明与我们联系,本站将在核实后依法处理。反馈意见:yyfuon@163.com