一种超声视频的分类提取方法与流程

1.本发明涉及视频处理技术领域，尤其是一种超声视频的分类提取方法。


背景技术：

2.近年来，由于医疗资源的不合理分配，医疗纠纷的发生率越来越高，医生往往针对患者的投诉无法进行举证；尤其是超声医生，在超声检查过程中，超声检查的动态视频是没有留存的，只有静态的截图，因此面对医疗纠纷，往往难以提供完整的超声检查证据。因此，对于超声检查来说，通过对超声扫查的视频进行完整存储，可以为超声医生在后期遇到医疗纠纷时快速的提供完整的超声检查证据，降低医生的医疗风险；
3.现有的超声记录仪上所保存的超声视频是一整段视频，包含有各种模式和各种器官的混合影像数据，比如有甲状腺扫查的状态、有乳腺多普勒彩超的状态、有超声仪器休眠状态等，但是，对所保存的一整段超声视频进行阅片与分析时，可能只需要某几种状态的影像数据信息，而从一整段超声视频中快速筛选出真正需要的某个状态下的影像数据信息，可能需要花费很长时间进行大量观看与人工筛选，造成了时间资源上的浪费，加大了人员工作量。
4.如何提高超声视频的阅片效率以及精准定位关于某状态的超声视频的播放位置，是超声视频分析领域急需解决的重要问题。


技术实现要素：

5.为了克服上述现有技术中的缺陷，本发明提供一种超声视频的分类提取方法，能够根据不同的状态类别进行超声视频的分割，将原始的超声视频转换为便于阅片与备查的若干个超声短视频，可以按需定位查找相应的超声短视频。
6.为实现上述目的，本发明采用以下技术方案，包括：
7.一种超声视频的分类提取方法，包括以下步骤：
8.s1，定义超声视频的不同状态类别，包括：扫查状态、测量状态、探头转换提示状态、信息展示状态；
9.所述扫查状态是指：对某部位进行扫查时，超声视频中的该部位的扫查画面；
10.所述测量状态是指：超声视频中的对病灶的方位及大小进行确认与标注的画面；
11.所述探头转换提示状态是指：超声视频中的探头转换提示画面；
12.所述用户信息展示状态是指：超声视频中的用户信息展示画面；
13.s2，对超声视频中的每一帧图像分别进行判断，判断每一帧图像的所属状态类别；
14.s3，根据每一帧图像的所属状态类别，对超声视频进行分割并分类存储。
15.步骤s2中，对超声视频中的某帧图像进行判断，具体方式如下所示：
16.s21，对该帧图像分别进行动静态识别、文字识别、颜色识别；
17.动静态识别：若该帧图像与相邻的前一帧图像之间的像素差大于设定数值，则该帧图像为动态图像；若该帧图像与相邻的前一帧图像之间的像素差均小于设定数值，则该
帧图像为静态图像；其中，若该帧为第一帧图像，则该帧图像为静态图像；
18.文字识别：读取该帧图像中的文字信息，包括：扫查部位的文字信息、测量标尺的文字信息、探头转换提示的文字信息、用户信息的文字信息；
19.s22，根据该帧图像的动静态识别、文字识别的结果，判断该帧图像的所属状态类别；
20.若该帧图像为动态图像，且该帧图像中仅包含扫查部位的文字信息，则该帧图像为扫查状态；
21.若该帧图像为动态图像，且该帧图像中包含扫查部位和测量标尺的文字信息，则该帧图像为测量状态；
22.若该帧图像为静态图像，且该帧图像中包含探头转换提示的文字信息，则该帧图像为探头转换提示状态；
23.若该帧图像为静态图像，且该帧图像中包含用户信息的文字信息，则该帧图像为用户信息展示状态；
24.在步骤s2之前，先对超声视频进行区域划分，划分出各类文字信息的识别区域；
25.在步骤s21中，在各类文字信息的识别区域中分别读取对应的文字信息。
26.所述扫查状态包括：b超扫查状态、多普勒彩超扫查状态、超声造影扫查状态；所述测量状态包括：b超测量状态、多普勒彩超测量状态、超声造影测量状态；
27.在步骤s2之前，先对超声视频进行区域划分，划分出超声影像识别区域；
28.步骤s21中，还对图像的超声影像识别区域进行颜色识别，即根据图像的超声影像识别区域中的各个像素点的像素值，判断超声影像的识别区域的颜色；
29.步骤s22中，若该帧图像为扫查状态，且该帧图像的超声影像识别区域为灰色，则该帧图像为b超扫查状态；若该帧图像为扫查状态，且该帧图像的超声影像识别区域为彩色，则该帧图像为多普勒彩超扫查状态；若该帧图像为扫查状态，且该帧图像的超声影像识别区域为橙黄色，则该帧图像为超声造影扫查状态；
30.若该帧图像为测量状态，且该帧图像的超声影像识别区域为灰色，则该帧图像为b超测量状态；若该帧图像为测量状态，且该帧图像的超声影像识别区域为彩色，则该帧图像为多普勒彩超测量状态；若该帧图像为测量状态，且该帧图像的超声影像识别区域为橙黄色，则该帧图像为超声造影测量状态。
31.超声视频的状态类别还包括：黑屏状态、开关机状态；
32.在步骤s2之前，先对超声视频进行区域划分，划分出开关机文字信息的识别区域；
33.步骤s21中，在开关机文字信息的识别区域中读取开关机的文字信息；
34.还对图像的整个区域进行颜色识别，即根据图像的整个区域中的各个像素点的像素值，判断图像的整个区域颜色；
35.步骤s22中，若该帧图像为静态图像，且该帧图像的整个区域为黑色以及该帧图像中的没有文字信息，则该帧图像为黑屏状态；
36.若该帧图像为动态图像，且该帧图像的整个区域为彩色以及该帧图像中包含开关机的文字信息，则该帧图像为开关机状态。
37.步骤s3中，将同一状态下的连续若干帧图像单独存储为一个视频，并对该视频进行状态标记，该视频即为超声视频中所分割出的该状态下的视频。
38.本发明的优点在于：
39.(1)本发明根据不同的状态类别进行超声视频的分割，将从超声设备上采集的完整的原始超声视频转换为便于阅片与备查的超声短视频，从而可以通过状态类别和时间定位查找相应的超声短视频。
40.(2)从超声设备上获取的原始完整超声视频包含大量的信息，通常包含超声设备的休眠与开关机、探头转换提示、用户信息展示、等大量与诊断无关的影像数据。针对工作人员而言，本发明可以将较长的原始超声视频视频分割成较短的仅包含一种状态的视频，在不改变整体视频的总长度的前提下，提供了一种快速检索与查找的途径，提供一种快速的超声视频分析功能，帮助工作人员迅速定位并分析某特定状态下的视频数据，提高工作人员的使用体验与超声视频的分析效率。
附图说明
41.图1为本发明的一种超声视频的分类提取方法的方法流程图。
具体实施方式
42.下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
43.对超声设备的超声影像数据进行采集存储，获取超声视频；具体是对超声设备中的显示器所显示的视频进行采集存储，获取超声视频，即超声视频为显示器所显示的视频。
44.由图1所示，本发明的一种超声视频的分类提取方法，包括以下步骤：
45.s1，定义超声视频的不同状态类别，包括：黑屏状态、扫查状态、测量状态、探头转换提示状态、信息展示状态、开机关机状态。
46.所述黑屏状态是指：超声视频中的黑屏画面。
47.所述扫查状态是指：对某部位进行扫查时，超声视频中的该部位的扫查画面。本实施例中，所述扫查状态包括：b超扫查状态、多普勒彩超扫查状态、超声造影扫查状态。
48.所述测量状态是指：超声视频中的对病灶的方位及大小进行确认与标注的画面。本实施例中，所述测量状态包括：b超测量状态、多普勒彩超测量状态、超声造影测量状态。
49.所述探头转换提示状态是指：超声视频中的探头转换提示画面。
50.所述用户信息展示状态是指：超声视频中的用户信息展示画面。
51.所述开关机状态是指：超声视频中的开机或关机画面。
52.s2，对超声视频进行区域划分，划分出各类文字信息的识别区域，以及划分出超声影像识别区域。
53.其中，文字信息识别区域包括：扫查部位的文字信息识别区域、测量标尺的文字信息识别区域、探头转换提示的文字信息识别区域、用户信息的文字信息识别区域、开关机的文字信息识别区域。
54.s3，利用状态机算法分别判断超声视频中的每一帧图像的状态；具体如下所示：
55.s31，对该帧图像分别进行动静态识别、文字识别、颜色识别。
56.动静态识别：若该帧图像与相邻的前一帧图像之间的像素差大于设定数值，则该帧图像为动态图像；若该帧图像与相邻的前一帧图像之间的像素差均小于设定数值，则该帧图像为静态图像；其中，若该帧为第一帧图像，则该帧图像为静态图像。
57.文字识别：在各类文字信息的识别区域中读取文字信息，分别读取扫查部位的文字信息、测量标尺的文字信息、探头转换提示的文字信息、用户信息的文字信息、开关机的文字信息。
58.本实施例中，利用easyocr库中的中文、英文、拉丁文等文字识别库，读取超声视频的单帧图像中的文字信息。例如：在扫查部位的文字信息识别区域读取到文字信息，则判断为包含扫查部位的文字信息，且读取到的文字信息为“甲状腺”，即当前扫查部位为甲状腺；在测量标尺的文字信息识别区域读取到文字信息，则判断为包含测量标尺的文字信息，且读取到的文字信息为“measure”；在开关机的文字信息识别区域读取到文字信息，则判断为包含开关机的文字信息，且读取到的文字信息为“aplio”。
59.颜色识别：根据该帧图像的整个区域中的各个像素点的像素值，判断该帧图像的整个区域颜色；以及根据该帧图像的超声影像识别区域中的各个像素点的像素值，判断该帧图像的超声影像识别区域颜色。
60.本实施例中，利用open
‑
cv库中的color_bgr2hsv函数将图像从bgr颜色空间转换为hsv颜色空间，通过设置不同的阈值，判断各个区域的颜色，如：
61.某像素点的hsv值在设定的橙黄色范围内，则判定橙黄色像素点；若像素点的hsv值在设定的黑色范围内，则判定黑色像素点；若像素点的hsv值在设定的红色范围内，则判定红色像素点；若像素点的hsv值在设定的蓝色范围内，则判定蓝色像素点；
62.若该帧图像的整个区域中的黑色像素点的数量大于20000个，则判定该帧图像的整个区域为黑色。
63.s32，根据该帧图像的动静态识别、文字识别、颜色识别的结果，判断该帧图像的状态。
64.若该帧图像为静态图像，且该帧图像的整个区域为黑色，以及该帧图像中的没有文字信息，则该帧图像为黑屏状态。
65.若该帧图像为动态图像，且该帧图像的超声影像识别区域为灰色，以及该帧图像中仅包含扫查部位的文字信息，则该帧图像为b超扫查状态。
66.若该帧图像为动态图像，且该帧图像的超声影像识别区域为彩色，以及该帧图像中仅包含扫查部位的文字信息，则该帧图像为多普勒彩超扫查状态。
67.若该帧图像为动态图像，且该帧图像的超声影像识别区域为橙黄色，以及该帧图像中仅包含扫查部位的文字信息，则该帧图像为超声造影扫查状态。
68.若该帧图像为动态图像，且该帧图像的超声影像识别区域为灰色，以及该帧图像中包含扫查部位和测量标尺的文字信息，则该帧图像为b超测量状态。
69.若该帧图像为动态图像，且该帧图像的超声影像识别区域为彩色，以及该帧图像中包含扫查部位和测量标尺的文字信息，则该帧图像为多普勒彩超测量状态。
70.若该帧图像为动态图像，且该帧图像的超声影像识别区域为橙黄色，以及该帧图像中包含扫查部位和测量标尺的文字信息，则该帧图像为超声造影测量状态。
71.若该帧图像为静态图像，且该帧图像的整个区域不为黑色，以及该帧图像中包含
探头转换提示的文字信息，则该帧图像为探头转换提示状态。
72.若该帧图像为静态图像，且该帧图像的整个区域不为黑色，以及该帧图像中包含用户信息的文字信息，则该帧图像为用户信息展示状态。
73.若该帧图像为动态图像，且该帧图像的整个区域为彩色，以及该帧图像中包含开关机的文字信息，则该帧图像为开关机状态。
74.本实施例中，若存在无法判断状态的图像，则根据该帧图像的动静态识别、文字识别、颜色识别的结果，以及根据无法判断状态的该帧图像的相邻的一帧或两帧图像的状态，判断该帧图像的近似状态，并将其归类至近似状态中，
75.若动静态识别、文字识别、颜色识别的三个结果中，能够满足某个状态的两个判断要求，则该帧图像的近似状态即为该状态；
76.若动静态识别、文字识别、颜色识别的三个结果中，能够满足某个状态的一个判断要求，且与该帧图像相邻的一帧图像的状态也为该状态，则该帧图像的近似状态即为该状态。
77.s4，根据每一帧图像的状态，对超声视频进行分割并分类存储，具体如下所示：将同一状态下的连续的若干帧图像单独存储为一个视频，并对该视频进行状态标记，该视频即为超声视频中所分割出的该状态下的视频。
78.以上仅为本发明创造的较佳实施例而已，并不用以限制本发明创造，凡在本发明创造的精神和原则之内所作的任何修改、等同替换和改进等，均应包含在本发明创造的保护范围之内。