基于错误分型的图像文字差异化重构方法与流程

摘要: 本发明涉及图像文字处理,具体为基于错误分型的图像文字差异化重构方法。背景技术:1、图像文字重构技术是智能图像编辑和生成式图像处理中的重要技术方向,旨在对图像中的...
基于错误分型的图像文字差异化重构方法与流程

本发明涉及图像文字处理,具体为基于错误分型的图像文字差异化重构方法。

背景技术:

1、图像文字重构技术是智能图像编辑和生成式图像处理中的重要技术方向,旨在对图像中的错误文字、缺失文字或位置异常文字进行识别和修复,使重构后的文字内容与预期文本保持一致,同时尽量降低对原有图像背景和版式结构的影响。近年来,随着文字检测识别技术和局部图像修复技术的发展,图像中的文字区域能够被较准确地定位,并可通过局部重绘、区域填充或文字覆盖等方式实现文字校正。

2、现有技术中,通常先对图像执行文字检测与识别,将识别结果与目标文字进行比对,在发现文字错误后,根据检测得到的文字区域生成修复区域,并对该区域执行统一的局部重绘或背景修复处理。该类方法对于存在明确文字检测区域的普通字符错误具有一定适用性,但不同文字错误对应的空间信息并不相同。例如,字符替换时通常能够获得对应错误字符的检测区域,附加字符虽具有实际字符区域却不存在对应目标字符,缺失字符则不存在可直接利用的识别字符区域,而位置异常字符又同时涉及原字符位置和目标字符位置两个空间区域。通过上述技术方案,不同错误状态下可用于确定重构范围的空间参照数据存在明显差异。

技术实现思路

1、针对现有技术存在的不足,本发明提供基于错误分型的图像文字差异化重构方法。

2、为了实现上述目的,本发明的技术方案如下:

3、本发明公开了基于错误分型的图像文字差异化重构方法,包括以下步骤:

4、获取待处理图像及包括目标字符序列和目标文字区域的目标文字数据;识别所述待处理图像,生成识别字符序列及字符区域数据;

5、对所述目标字符序列与识别字符序列进行字符对齐,建立目标字符与识别字符之间的字符对应关系;根据所述目标字符序列在目标文字区域中的排列关系生成各目标字符对应的目标字符基准位置数据,并根据除当前目标字符对应识别字符之外、与各自对应目标字符内容一致的其他识别字符的字符区域数据,对所述目标字符基准位置数据进行布局校正,生成目标字符位置数据;

6、根据所述字符对应关系及字符内容是否一致生成表征匹配、不匹配、缺失及附加关系的字符对应状态数据,并根据匹配字符的字符区域数据与对应目标字符位置数据生成空间差异数据,据此确定文字错误状态;

7、根据所述文字错误状态生成包括文字写入区域数据和背景恢复区域数据的重构区域数据,其中,不匹配字符生成背景恢复区域数据和文字写入区域数据,缺失字符依据邻接匹配字符及目标字符位置数据生成文字写入区域数据,附加字符生成背景恢复区域数据,位置异常字符分别生成背景恢复区域数据和文字写入区域数据;

8、根据背景恢复区域数据的邻接非文字像素数据生成填充像素数据并写入对应背景恢复区域;根据目标字符序列以及匹配字符的字符区域数据中提取或预设的文字样式数据生成目标字符图像数据,并写入对应文字写入区域;当二者存在重叠时,以目标字符图像数据的写入结果作为重叠区域的最终像素结果,得到重构图像;

9、重新识别所述重构图像,更新字符对应状态数据和空间差异数据;满足匹配及空间差异条件时输出所述重构图像,否则更新文字错误状态并重复重构;达到预设最大重构次数仍不满足输出条件时,停止重构并输出当前重构图像。

10、与现有技术相比,本发明的有益效果为:

11、1、本发明通过字符对应状态数据与空间差异数据共同表征图像文字的内容对应关系和空间对应关系,使得文字内容错误与文字位置异常能够在同一数据处理链中得到区分,避免仅依据字符识别结果进行统一校正时无法反映文字空间状态的问题,从而为不同文字错误对应的重构处理提供明确的数据基础。

12、2、本发明依据不同文字错误状态所具有的空间可观测信息分别形成文字写入区域数据和背景恢复区域数据,使得具有识别字符区域的错误能够利用已有区域确定重构范围,而缺失字符能够利用邻接匹配字符及目标字符位置确定写入范围,附加字符和位置异常字符能够形成与原字符位置对应的背景恢复区域,从而减少因统一采用识别字符区域作为重构范围而产生的区域缺失、背景残留或非目标区域修改。

13、3、本发明将目标字符图像数据与文字写入区域关联,并利用背景恢复区域邻接的非文字像素生成填充像素,在完成字符内容重构的同时对原字符区域进行像素恢复;重构结果再次参与字符对应状态和空间差异的更新,使得前述错误状态判断和重构区域生成机制能够依据重构结果继续调整,因此能够形成针对文字内容与空间位置共同约束的反馈重构过程。

1.基于错误分型的图像文字差异化重构方法,其特征在于,包括以下步骤:

2.根据权利要求1所述的基于错误分型的图像文字差异化重构方法,其特征在于,生成所述目标字符基准位置数据和目标字符位置数据包括:

3.根据权利要求2所述的基于错误分型的图像文字差异化重构方法,其特征在于,根据所述字符对应关系以及字符内容是否一致生成表征匹配、不匹配、缺失及附加关系的字符对应状态数据具体包括:

4.根据权利要求3所述的基于错误分型的图像文字差异化重构方法,其特征在于,根据匹配字符的字符区域数据与对应目标字符位置数据生成空间差异数据,并据此确定文字错误状态具体包括:

5.根据权利要求4所述的基于错误分型的图像文字差异化重构方法,其特征在于,不匹配字符依据对应字符区域数据生成背景恢复区域数据和文字写入区域数据具体包括:

6.根据权利要求4所述的基于错误分型的图像文字差异化重构方法,其特征在于,缺失字符依据邻接匹配字符及目标字符位置数据生成文字写入区域数据具体包括:

7.根据权利要求4所述的基于错误分型的图像文字差异化重构方法,其特征在于,所述背景恢复区域数据和所述文字写入区域数据的生成具体包括:

8.根据权利要求4所述的基于错误分型的图像文字差异化重构方法,其特征在于,根据所述目标字符序列及匹配字符的字符区域数据中提取或预设的文字样式数据生成目标字符图像数据包括:

9.根据权利要求8所述的基于错误分型的图像文字差异化重构方法,其特征在于,得到重构图像具体包括:

10.根据权利要求9所述的基于错误分型的图像文字差异化重构方法,其特征在于,重新识别所述重构图像具体包括: