一种残膜回收机防缠绕挑膜装置的制 一种秧草收获机用电力驱动行走机构

图像标注方法、存储介质和处理器与流程

2021-11-24 21:20:00 来源:中国专利 TAG:


1.本发明涉及图像处理技术领域,具体而言,涉及一种图像标注方法、存储介质和处理器。


背景技术:

2.医学影像标注需要专业的医学领域从业人员来进行,门槛相对较高,尤其是对于三维影像标注,需要很强的专业度和长期的阅片经验积累。医生的工作通常又是十分繁重,专业医生只能抽出部分时间进行人工智能方面训练数据集的标注,因此,对医学图像的标注效率较低。
3.针对上述的问题,目前尚未提出有效的解决方案。


技术实现要素:

4.本发明实施例提供了一种图像标注方法、存储介质和处理器,以至少解决现有技术中对医学图像的标注效率较低的技术问题。
5.根据本发明实施例的一个方面,提供了一种图像标注方法,包括:确定待标注的医学图像集;将医学图像集中的医学图像分发至至少一个第一终端,其中,第一终端用于对接收到的医学图像进行数据标注;接收至少一个第一终端返回的医学图像的标注信息;将返回的医学图像的标注信息分发至至少一个第二终端,其中,第二终端用于对标注信息进行质检;将通过质检的标注信息作为医学图像的目标标注信息。
6.进一步地,在将所述医学图像集中的医学图像分发至至少一个第一终端之前,所述方法还包括:解析所述医学图像集中医学图像的目标信息;获取所述医学图像集中医学图像对应的诊断报告;基于所述目标信息和所述医学图像集中医学图像对应的诊断报告对所述医学图像集中的医学图像构建任务。
7.进一步地,将所述医学图像集中的医学图像分发至至少一个第一终端包括:基于构建的任务将所述医学图像集中的医学图像分发至至少一个第一终端。
8.进一步地,将所述医学图像集中的医学图像分发至至少一个第一终端包括:选择任务分发模式;若所述任务分发模式为第一模式,则将所述医学图像集中的同一份医学图像发送至至少一个第一终端;若所述任务分发模式为第二模式,则将所述医学图像集中的医学图像平均分发至至少一个第一终端;若所述任务分发模式为第三模式,则根据各个所述第一终端中的用户的时间信息分配所述医学图像集中的医学图像。
9.进一步地,在将返回的所述医学图像的所述标注信息分发至至少一个第二终端之后,所述方法还包括:若检测到所述标注信息不符合预设条件,则获取所述标注信息对应的质检信息;将所述标注信息对应的质检信息上传至预设系统;所述第一终端的用户基于所述预设系统中的质检信息,调整标注策略。
10.进一步地,在将所述医学图像集中的医学图像分发至至少一个第一终端之后,所述方法还包括:对所述医学图像集中的病灶区域增加3d标注框;通过在多平面重建上展示
的各个面调整所述3d标注框的边界来调整病灶的标注位置;在所述病灶的标注位置上添加病灶的属性信息。
11.进一步地,在确定待标注的医学图像集之后,在将所述医学图像集中的医学图像分发至至少一个第一终端之前,所述方法还包括:采用目标模型对所述医学图像集中的医学图像进行辅助标注,获取辅助标注后的医学图像集;将所述医学图像集中的医学图像分发至至少一个第一终端包括:将辅助标注后的医学图像集中的医学图像分发至至少一个第一终端。
12.进一步地,所述方法还包括:将通过质检的标注信息作为所述目标模型的训练集,其中,所述训练集用于为训练所述目标模型提供训练数据。
13.进一步地,辅助标注后的医学图像集中包括:肋骨分割结果,在将通过质检的标注信息作为所述医学图像的目标标注信息之后,所述方法还包括:根据所述医学图像集中的医学图像的病灶3d标注框信息,结合所述肋骨分割结果,得到病灶的分割标注信息。
14.根据本发明实施例的一个方面,提供了一种图像标注装置,包括:第一确定单元,用于确定待标注的医学图像集;第一分发单元,用于将所述医学图像集中的医学图像分发至至少一个第一终端,其中,所述第一终端用于对接收到的医学图像进行数据标注;第一接收单元,用于接收所述至少一个第一终端返回的所述医学图像的标注信息;第二分发单元,用于将返回的所述医学图像的所述标注信息分发至至少一个第二终端,其中,所述第二终端用于对所述标注信息进行质检;第二确定单元,用于将通过质检的标注信息作为所述医学图像的目标标注信息。
15.进一步地,所述装置还包括:第一解析单元,用于在将所述医学图像集中的医学图像分发至至少一个第一终端之前,解析所述医学图像集中医学图像的目标信息;第一获取单元,用于获取所述医学图像集中医学图像对应的诊断报告;第一构建单元,用于基于所述目标信息和所述医学图像集中医学图像对应的诊断报告对所述医学图像集中的医学图像构建任务。
16.进一步地,所述第一分发单元包括:第一分发模块,用于基于构建的任务将所述医学图像集中的医学图像分发至至少一个第一终端。
17.进一步地,所述第一分发单元包括:第一选择模块,用于选择任务分发模式;第一发送模块,用于若所述任务分发模式为第一模式,则将所述医学图像集中的同一份医学图像发送至至少一个第一终端;第二分发模块,用于若所述任务分发模式为第二模式,则将所述医学图像集中的医学图像平均分发至至少一个第一终端;第一分配模块,用于若所述任务分发模式为第三模式,则根据各个所述第一终端中的用户的时间信息分配所述医学图像集中的医学图像。
18.进一步地,所述装置还包括:第二获取单元,用于在将返回的所述医学图像的所述标注信息分发至至少一个第二终端之后,若检测到所述标注信息不符合预设条件,则获取所述标注信息对应的质检信息;第一上传单元,用于将所述标注信息对应的质检信息上传至预设系统;第一调整单元,用于所述第一终端的用户基于所述预设系统中的质检信息,调整标注策略。
19.进一步地,所述装置还包括:第一标注单元,用于在将所述医学图像集中的医学图像分发至至少一个第一终端之后,对所述医学图像集中的病灶区域增加3d标注框;第二调
整单元,用于通过在多平面重建上展示的各个面调整所述3d标注框的边界来调整病灶的标注位置;第一添加单元,用于在所述病灶的标注位置上添加病灶的属性信息。
20.进一步地,所述装置还包括:第三获取单元,用于在确定待标注的医学图像集之后,在将所述医学图像集中的医学图像分发至至少一个第一终端之前,采用目标模型对所述医学图像集中的医学图像进行辅助标注,获取辅助标注后的医学图像集;所述第一分发单元,还用于将辅助标注后的医学图像集中的医学图像分发至至少一个第一终端。
21.进一步地,所述装置还包括:第三确定单元,用于将通过质检的标注信息作为所述目标模型的训练集,其中,所述训练集用于为训练所述目标模型提供训练数据。
22.进一步地,辅助标注后的医学图像集中包括:肋骨分割结果,所述装置还包括:第四确定单元,用于在将通过质检的标注信息作为所述医学图像的目标标注信息之后,根据所述医学图像集中的医学图像的病灶3d标注框信息,结合所述肋骨分割结果,得到病灶的分割标注信息。
23.根据本发明实施例的一个方面,提供了一种图像标注方法,包括:云服务器接收待标注的医学图像集;所述云服务器将所述医学图像集中的医学图像分发至至少一个第一终端,其中,所述第一终端用于对接收到的医学图像进行数据标注;接收所述至少一个第一终端返回的所述医学图像的标注信息;将返回的所述医学图像的所述标注信息分发至至少一个第二终端,其中,所述第二终端用于对所述标注信息进行质检;将通过质检的标注信息作为所述医学图像的目标标注信息;所述云服务器返回所述医学图像的目标标注信息至客户端。
24.根据本发明实施例的一个方面,提供了一种存储介质,所述存储介质包括存储的程序,其中,在所述程序运行时控制所述存储介质所在设备执行上述任意一项所述的图像标注方法。
25.根据本发明实施例的一个方面,提供了一种处理器,所述处理器用于运行程序,其中,所述程序运行时执行上述任意一项所述的图像标注方法。
26.在本发明实施例中,采用对医学图像进行标注和质检相结合的方式,通过确定待标注的医学图像集;将医学图像集中的医学图像分发至至少一个第一终端,其中,第一终端用于对接收到的医学图像进行数据标注;接收至少一个第一终端返回的医学图像的标注信息;将返回的医学图像的标注信息分发至至少一个第二终端,其中,第二终端用于对标注信息进行质检;将通过质检的标注信息作为医学图像的目标标注信息,达到了提升对医学图像的标注的准确性的目的,同时对医学图像的标注环节和质检环节高效协同,从而提升了对医学图像的标注效率,进而解决了现有技术中对医学图像的标注效率较低的技术问题。
附图说明
27.此处所说明的附图用来提供对本发明的进一步理解,构成本技术的一部分,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
28.图1是根据本发明实施例的计算机终端的硬件结构框图;
29.图2是根据本发明实施例一提供的图像标注方法的流程图;
30.图3是根据本发明实施例一提供的可选的图像标注方法的示意图一;
31.图4是根据本发明实施例一提供的肋骨骨折标注的示意图;
32.图5是根据本发明实施例一提供的标注界面的示意图;
33.图6是根据本发明实施例一提供的质检界面的示意图;
34.图7是根据本发明实施例一提供的可选的图像标注方法的示意图二;
35.图8是根据本发明实施例二提供的图像标注方法的流程图;
36.图9是根据本发明实施例三提供的图像标注装置的示意图;以及
37.图10是根据本发明实施例的可选的计算机终端的结构框图。
具体实施方式
38.为了使本技术领域的人员更好地理解本发明方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分的实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本发明保护的范围。
39.需要说明的是,本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
40.首先,在对本技术实施例进行描述的过程中出现的部分名词或术语适用于如下解释:
41.roi:region of interest,感兴趣区域,对于一个空间中感兴趣的区域,通常是病灶存在的区域,用一种工具进行标注,一般在2d空间用长方形,3d空间用长方体。
42.mpr:multiplanar reconstruction,多平面重建,即对于一份3d医学影像数据,可以将其重建到任意平面上,比如冠状面、矢状面、横断面,用以提供至少一个角度进行观察。
43.实施例1
44.根据本发明实施例,提供了一种图像标注方法实施例,需要说明的是,在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行,并且,虽然在流程图中示出了逻辑顺序,但是在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤。
45.本技术实施例一所提供的方法实施例可以在移动终端、计算机终端或者类似的运算装置中执行。图1示出了一种用于实现图像标注方法的计算机终端(或移动设备)的硬件结构框图。如图1所示,计算机终端10(或移动设备10)可以包括一个或多个(图中采用102a、102b,
……
,102n来示出)处理器102(处理器102可以包括但不限于微处理器mcu或可编程逻辑器件fpga等的处理装置)、用于存储数据的存储器104、以及用于通信功能的传输装置。除此以外,还可以包括:显示器、输入/输出接口(i/o接口)、通用串行总线(usb)端口(可以作为i/o接口的端口中的一个端口被包括)、网络接口、电源和/或相机。本领域普通技术人员可以理解,图1所示的结构仅为示意,其并不对上述电子装置的结构造成限定。例如,计算机
终端10还可包括比图1中所示更多或者更少的组件,或者具有与图1所示不同的配置。
46.应当注意到的是上述一个或多个处理器102和/或其他数据处理电路在本文中通常可以被称为“数据处理电路”。该数据处理电路可以全部或部分的体现为软件、硬件、固件或其他任意组合。此外,数据处理电路可为单个独立的处理模块,或全部或部分的结合到计算机终端10(或移动设备)中的其他元件中的任意一个内。如本技术实施例中所涉及到的,该数据处理电路作为一种处理器控制(例如与接口连接的可变电阻终端路径的选择)。
47.存储器104可用于存储应用软件的软件程序以及模块,如本发明实施例中的图像标注方法对应的程序指令/数据存储装置,处理器102通过运行存储在存储器104内的软件程序以及模块,从而执行各种功能应用以及数据处理,即实现上述的应用程序的图像标注方法。存储器104可包括高速随机存储器,还可包括非易失性存储器,如一个或者多个磁性存储装置、闪存、或者其他非易失性固态存储器。在一些实例中,存储器104可进一步包括相对于处理器102远程设置的存储器,这些远程存储器可以通过网络连接至计算机终端10。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
48.传输装置106用于经由一个网络接收或者发送数据。上述的网络具体实例可包括计算机终端10的通信供应商提供的无线网络。在一个实例中,传输装置106包括一个网络适配器(network interface controller,nic),其可通过基站与其他网络设备相连从而可与互联网进行通讯。在一个实例中,传输装置106可以为射频(radio frequency,rf)模块,其用于通过无线方式与互联网进行通讯。
49.显示器可以例如触摸屏式的液晶显示器(lcd),该液晶显示器可使得用户能够与计算机终端10(或移动设备)的用户界面进行交互。
50.在上述运行环境下,本技术提供了如图2所示的图像标注方法。图2是根据本发明实施例一的图像标注方法的流程图。
51.步骤s201,确定待标注的医学图像集。
52.上述的待标注的医学图像集中可以包括多张医学图像。
53.步骤s202,将医学图像集中的医学图像分发至至少一个第一终端,其中,第一终端用于对接收到的医学图像进行数据标注。
54.各个标注员可以通过对应的第一终端对医学图像进行数据标注。
55.步骤s203,接收至少一个第一终端返回的医学图像的标注信息。
56.步骤s204,将返回的医学图像的标注信息分发至至少一个第二终端,其中,第二终端用于对标注信息进行质检。
57.在各个第二终端中的质检员可以对医学图像的标注信息进行质检。
58.步骤s205,将通过质检的标注信息作为医学图像的目标标注信息。
59.将通过质检的标注信息作为医学图像的目标标注信息,达到了提升对医学图像的标注的准确性的目的,同时对医学图像的标注环节和质检环节高效协同,从而提升了对医学图像的标注效率,进而解决了现有技术中对医学图像的标注效率较低的技术问题。通过上述步骤也实现了多人协作标注、多人协作质检的能力,并且将标注和质检环节打通,提高了质检员和标注员的沟通效率,从而也方便快速提高标注质量。
60.可选地,在本技术实施例提供的图像标注方法中,在将医学图像集中的医学图像分发至至少一个第一终端之前,该方法还包括:解析医学图像集中医学图像的目标信息;获
取医学图像集中医学图像对应的诊断报告;基于目标信息和医学图像集中医学图像对应的诊断报告对医学图像集中的医学图像构建任务。
61.如图3所示,对待标注的数据集(对应上述的医学图像集)进行任务构建。在任务构建阶段,系统会解析待标注的医学图像集中每一张医学图像的必要头信息(对应上述的目标信息),例如,解析出每一张医学图像的标识信息,并抽取每张医学图像对应的诊断报告。
62.通过上述步骤,可以对医学图像集中的医学图像构建出任务,其中,任务的信息里面会包括目标信息和医学图像对应的诊断报告,该信息为后续对医学图像的标注信息进行质检提供数据参考。
63.可选地,在本技术实施例提供的图像标注方法中,将医学图像集中的医学图像分发至至少一个第一终端包括:基于构建的任务将医学图像集中的医学图像分发至至少一个第一终端。
64.如图3所示,将基于构建的任务将医学图像集中的医学图像分发至至少一个第一终端,从而实现将医学图像分发至至少一个第一终端,以便在各个第一终端对医学图像进行标注。
65.可选地,在本技术实施例提供的图像标注方法中,将医学图像集中的医学图像分发至至少一个第一终端包括:选择任务分发模式;若任务分发模式为第一模式,则将医学图像集中的同一份医学图像发送至至少一个第一终端;若任务分发模式为第二模式,则将医学图像集中的医学图像平均分发至至少一个第一终端;若任务分发模式为第三模式,则根据各个第一终端中的用户的时间信息分配医学图像集中的医学图像。
66.在上述方案中,提供了多种任务分发模式,从而可以对医学图像进行灵活的分发。例如,在任务分发阶段,有多种模式可供选择,比如

背靠背’模式(对应上述的第一模式),也即,同一份医学图像,多人标注。

均分’模式(对应上述的第二模式),平均分配任务量给各个预设标注员。

抢单’模式(对应上述的第三模式),也即,不提前分配任务,标注员可结合自身时间合理安排标注工作,系统按照第一终端中的用户(标注员)的时间信息分配待标注的医学图像。
67.可选地,在本技术实施例提供的图像标注方法中,在将返回的医学图像的标注信息分发至至少一个第二终端之后,该方法还包括:若检测到标注信息不符合预设条件,则获取标注信息对应的质检信息;将标注信息对应的质检信息上传至预设系统;第一终端的用户基于预设系统中的质检信息,调整标注策略。
68.在各个终端,第一终端中标注员进行的标注经过提交会上传系统,对于已经标注的数据,在分发至至少一个第二终端(对应图3中的质检终端)之后,第二终端上的质检员就可以同步开始进行质检,如果发现不合格的标注信息(也即,标注信息不符合预设条件),比如漏标、错标、标注不符合规范,在第二终端上质检员可以备注信息栏填写不合格的原因,然后提交到系统。相关的标注员根据质检员的信息提示可以快速发现自身的标注问题,调整后续对图像标注的策略,从而提升第一终端中标注员的标注水平和质量。另外,对于质检合格的标注信息,可以作为医学图像的目标标注信息,还可以将其纳入训练集,作为样本数据。
69.可选地,在本技术实施例提供的图像标注方法中,在将医学图像集中的医学图像分发至至少一个第一终端之后,该方法还包括:对医学图像集中的病灶区域增加3d标注框;
通过在多平面重建上展示的各个面调整3d标注框的边界来调整病灶的标注位置;在病灶的标注位置上添加病灶的属性信息。
70.具体到标注阶段,本技术中还提供了一种基于mpr的3d标注功能,能够实现在2d平面进行3d标注的能力。这种建立在mpr重建上的一种3d roi标注工具,具备在3d空间中对病灶进行灵活快速标注的能力,基于3d标注工具对医学图像集中的病灶区域增加3d标注框。标注过程中通过预置长方体可以快速为病灶区域新增一个3d标注框,然后通过在mpr各个面调整标注框边界来精调病灶位置,双击标注框可调整到一个更友好的影像观测距离以获得更好的标注体验。在病灶属性选择面板上,可以为每一个病灶选择提前定义一些属性信息,比如,病灶类型、位置、概率等。通过上述方案,可以直观的对医学图像进行病灶标注。
71.mpr标注界面,以肋骨骨折标注为例,如图4所示,可以在界面上对肋骨骨折区域采用3d标注框(如图4中的长方形的小框)进行标注,通过在mpr各个面调整标注框边界来精调肋骨骨折的位置。另外,标注员操作页面的线框图如图5所示,在标注员操作页面里,本技术还提供了在任务构建阶段抽取的诊断报告帮助医生快速聚焦到病灶附近区域,节省查看时间。质检员操作页面的线框图如图6所示,质检员可以确定标注信息是否合格或者待定。需要说明的是,质检员和标注员的备注框也可以设计成多轮对话的形式,方便历史交流信息的查看。另外,基于mpr的3d标注可以标注任何器官上的病灶,不仅限于肋骨骨折,标注工具或者标注框可以是长方体,也可以是球体等其他形式。mpr的展示界面不限于一定是横断面、冠状面、矢状面,可以通过放大只展示其中任意一个面,也可以是任意两个面。
72.另外,在标注员操作页面里,本技术提供了在任务构建阶段抽取的诊断报告可以帮助医生快速聚焦到病灶附近区域,比如,是左肋还是右肋、左肺还是右肺等,提高了标注效率,因此可以节省医生宝贵的时间。
73.可选地,在本技术实施例提供的图像标注方法中,在确定待标注的医学图像集之后,在将医学图像集中的医学图像分发至至少一个第一终端之前,该方法还包括:采用目标模型对医学图像集中的医学图像进行辅助标注,获取辅助标注后的医学图像集;将医学图像集中的医学图像分发至至少一个第一终端包括:将辅助标注后的医学图像集中的医学图像分发至至少一个第一终端。
74.对于给定待标注数据集(对应上述的待标注的医学图像集),ai前辅助模块会使用经过小部分标注数据训练过的深度学习模型(对应上述的目标模型)对待标注数据进行辅助标注,产生的结果包括肋骨分割结果、骨折3d检测框、骨折类型、骨折位置(所处肋骨编号,左边肋骨依次为l1~l12,右边肋骨依次为r1ˉr12)、骨折所处肋骨分段(前段、腋段、后段)以及置信度。上述过程即是对医学图像集中的医学图像进行辅助标注,在将辅助标注后的医学图像集中的医学图像分发至多个第一终端之后,即是人工标注阶段,标注员会被随机分配到经过ai辅助标注的医学图像,在这个基础上,标注员可以依次查看每一处病灶是否标注正确,包括标注框的位置,各项属性的正确性。如果病灶本身是假阳,可以选择删除,其余情况可以酌情调整标注框和属性。如果发现ai有漏标的情况,标注员可以直接增加新的病灶标注。最后将返回的医学图像的标注信息分发至多个第二终端之后,提交给质检员进行审核。质检员根据标注员基于ai辅助的标注进行审查,可以决定是否需要标注员进行二次修改。这种双重把关的机制对于提高整体标注质量是十分重要的,可以提高对医学图像的标注质量。
75.可选地,在本技术实施例提供的图像标注方法中,该方法还包括:将通过质检的标注信息作为目标模型的训练集,其中,训练集用于为训练目标模型提供训练数据。
76.对于上述的目标模型可能为小部分标注数据训练过的深度学习模型。为了保证目标模型的准确性,将通过质检的标注信息作为目标模型的训练集,从而通过学习训练对目标模型更新。
77.可选地,在本技术实施例提供的图像标注方法中,辅助标注后的医学图像集中包括:肋骨分割结果,在将通过质检的标注信息作为医学图像的目标标注信息之后,该方法还包括:根据所述医学图像集中的医学图像的病灶3d标注框信息,结合所述肋骨分割结果,得到病灶的分割标注信息。
78.需要说明的是,对于经过质检的标注信息,ai后辅助模块需要在这个基础上,为每一个病灶生成一个分割标注,具体方法可以为根据ai前辅助模块生成的肋骨分割结果,将每一个3d标注框放置到肋骨分割结果的坐标系下,框内非零部分即为骨折病灶的分割标注(也即,确定肋骨分割结果的病灶的分割标注信息)。这样可以避免单独再训练一个肋骨骨折分割模型。并且这种方法极大地省去了需要人力进行像素级分割标注的工作,提高了标注效率也减少了标注成本。
79.综上,经过ai前辅助模块、人工标注和质检模块以及ai后辅助模块这三个部分,如图7所示,在人工标注和质检环节两端增加ai前辅助和ai后辅助进行肋骨骨折标注的范式,可以在只有部分人力参与的情况下,得到丰富的肋骨骨折标注结果,即肋骨骨折检测和分割所需要的全部标注信息。上述方案除了可以用于大批量的数据标注场景,也可用于对ai前辅助模块进行算法效果评审,通过可视化对比算法不同版本之间的性能差异。另外,本方案不局限于肋骨骨折标注,适用于多数检测和分割标注都需要的场景,只是不同场景下,ai前辅助模块和ai后辅助模块的具体操作方式可能需要适当修改。其中,ai前辅助模块除了选择最新版本进行ai辅助标注,也可选择多个版本进行标注再进行多版本融合,得到一个综合的ai辅助标注结果。
80.需要说明的是,对于前述的各方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本发明并不受所描述的动作顺序的限制,因为依据本发明,某些步骤可以采用其他顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作和模块并不一定是本发明所必须的。
81.通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到根据上述实施例的方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如rom/ram、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,或者网络设备等)执行本发明各个实施例的方法。
82.实施例2
83.本技术提供了如图8所示的图像标注方法。图8是根据本发明实施例二的图像标注方法的流程图。
84.步骤s801,云服务器接收待标注的医学图像集;
85.步骤s802,云服务器将医学图像集中的医学图像分发至至少一个第一终端,其中,第一终端用于对接收到的医学图像进行数据标注;接收至少一个第一终端返回的医学图像的标注信息;将返回的医学图像的标注信息分发至至少一个第二终端,其中,第二终端用于对标注信息进行质检;将通过质检的标注信息作为医学图像的目标标注信息;
86.步骤s803,云服务器返回医学图像的目标标注信息至客户端。
87.通过上述步骤,在云服务器中采用了对医学图像的标注环节和质检环节高效协同的方式,从而保证了对医学图像的标注的准确性同时也提升了对医学图像的标注效率,,进而解决了现有技术中对医学图像的标注效率较低的技术问题。
88.需要说明的是,本技术实施例中的云服务器对医学图像集中的医学图像的处理方式与实施例一中的方法内容相同,在此不再赘述。
89.需要说明的是,对于前述的各方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本发明并不受所描述的动作顺序的限制,因为依据本发明,某些步骤可以采用其他顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作和模块并不一定是本发明所必须的。
90.通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到根据上述实施例的方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如rom/ram、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,或者网络设备等)执行本发明各个实施例的方法。
91.实施例3
92.根据本发明实施例,还提供了一种用于实施上述图像标注方法的装置,如图9所示,该装置包括:第一确定单元901、第一分发单元902、第一接收单元903、第二分发单元904和第二确定单元905。
93.具体地,第一确定单元901,用于确定待标注的医学图像集;第一分发单元902,用于将医学图像集中的医学图像分发至至少一个第一终端,其中,第一终端用于对接收到的医学图像进行数据标注。
94.第一接收单元903,用于接收至少一个第一终端返回的医学图像的标注信息。
95.第二分发单元904,用于将返回的医学图像的标注信息分发至至少一个第二终端,其中,第二终端用于对标注信息进行质检。
96.第二确定单元905,用于将通过质检的标注信息作为医学图像的目标标注信息。
97.综上,本技术实施例二提供的图像标注装置,通过第一确定单元901确定待标注的医学图像集;第一分发单元902将医学图像集中的医学图像分发至至少一个第一终端,其中,第一终端用于对接收到的医学图像进行数据标注;第一接收单元903接收至少一个第一终端返回的医学图像的标注信息;第二分发单元904将返回的医学图像的标注信息分发至至少一个第二终端,其中,第二终端用于对标注信息进行质检;第二确定单元905将通过质检的标注信息作为医学图像的目标标注信息,达到了提升对医学图像的标注的准确性的目的,同时对医学图像的标注环节和质检环节高效协同,从而提升了对医学图像的标注效率,
进而解决了现有技术中对医学图像的标注效率较低的技术问题。
98.可选地,在本技术实施例二提供的图像标注装置中,该装置还包括:第一解析单元,用于在将医学图像集中的医学图像分发至至少一个第一终端之前,解析医学图像集中医学图像的目标信息;第一获取单元,用于获取医学图像集中医学图像对应的诊断报告;第一构建单元,用于基于目标信息和医学图像集中医学图像对应的诊断报告对医学图像集中的医学图像构建任务。
99.可选地,在本技术实施例二提供的图像标注装置中,第一分发单元包括:第一分发模块,用于基于构建的任务将医学图像集中的医学图像分发至至少一个第一终端。
100.可选地,在本技术实施例二提供的图像标注装置中,第一分发单元包括:第一选择模块,用于选择任务分发模式;第一发送模块,用于若任务分发模式为第一模式,则将医学图像集中的同一份医学图像发送至至少一个第一终端;第二分发模块,用于若任务分发模式为第二模式,则将医学图像集中的医学图像平均分发至至少一个第一终端;第一分配模块,用于若任务分发模式为第三模式,则根据各个第一终端中的用户的时间信息分配医学图像集中的医学图像。
101.可选地,在本技术实施例二提供的图像标注装置中,该装置还包括:第二获取单元,用于在将返回的医学图像的标注信息分发至至少一个第二终端之后,若检测到标注信息不符合预设条件,则获取标注信息对应的质检信息;第一上传单元,用于将标注信息对应的质检信息上传至预设系统;第一调整单元,用于第一终端的用户基于预设系统中的质检信息,调整标注策略。
102.可选地,在本技术实施例二提供的图像标注装置中,该装置还包括:第一标注单元,用于在将医学图像集中的医学图像分发至至少一个第一终端之后,对医学图像集中的病灶区域增加3d标注框;第二调整单元,用于通过在多平面重建上展示的各个面调整3d标注框的边界来调整病灶的标注位置;第一添加单元,用于在病灶的标注位置上添加病灶的属性信息。
103.可选地,在本技术实施例提供的图像标注装置中,该装置还包括:第三获取单元,用于在确定待标注的医学图像集之后,在将医学图像集中的医学图像分发至至少一个第一终端之前,采用目标模型对医学图像集中的医学图像进行辅助标注,获取辅助标注后的医学图像集;第一分发单元,还用于将辅助标注后的医学图像集中的医学图像分发至至少一个第一终端。
104.可选地,在本技术实施例二提供的图像标注装置中,该装置还包括:第三确定单元,用于将通过质检的标注信息作为目标模型的训练集,其中,训练集用于为训练目标模型提供训练数据。
105.可选地,在本技术实施例二提供的图像标注装置中,辅助标注后的医学图像集中包括:肋骨分割结果,该装置还包括:第四确定单元,用于在将通过质检的标注信息作为医学图像的目标标注信息之后,根据所述医学图像集中的医学图像的病灶3d标注框信息,结合所述肋骨分割结果,得到病灶的分割标注信息。
106.此处需要说明的是,上述的第一确定单元901、第一分发单元902、第一接收单元903、第二分发单元904和第二确定单元905对应于实施例1中的步骤s201至步骤s205,五个单元与对应的步骤所实现的实例和应用场景相同,但不限于上述实施例一所公开的内容。
需要说明的是,上述模块作为装置的一部分可以运行在实施例一提供的计算机终端10中。
107.实施例4
108.本发明的实施例可以提供一种计算机终端,该计算机终端可以是计算机终端群中的任意一个计算机终端设备。可选地,在本实施例中,上述计算机终端也可以替换为移动终端等终端设备。
109.可选地,在本实施例中,上述计算机终端可以位于计算机网络的多个网络设备中的至少一个网络设备。
110.在本实施例中,上述计算机终端可以执行应用程序的图像标注方法中以下步骤的程序代码:确定待标注的医学图像集;将医学图像集中的医学图像分发至至少一个第一终端,其中,第一终端用于对接收到的医学图像进行数据标注;接收至少一个第一终端返回的医学图像的标注信息;将返回的医学图像的标注信息分发至至少一个第二终端,其中,第二终端用于对标注信息进行质检;将通过质检的标注信息作为医学图像的目标标注信息。
111.上述计算机终端还可以执行应用程序的图像标注方法中以下步骤的程序代码:在将所述医学图像集中的医学图像分发至至少一个第一终端之前,所述方法还包括:解析所述医学图像集中医学图像的目标信息;获取所述医学图像集中医学图像对应的诊断报告;基于所述目标信息和所述医学图像集中医学图像对应的诊断报告对所述医学图像集中的医学图像构建任务。
112.上述计算机终端还可以执行应用程序的图像标注方法中以下步骤的程序代码:将所述医学图像集中的医学图像分发至至少一个第一终端包括:基于构建的任务将所述医学图像集中的医学图像分发至至少一个第一终端。
113.上述计算机终端还可以执行应用程序的图像标注方法中以下步骤的程序代码:将所述医学图像集中的医学图像分发至至少一个第一终端包括:选择任务分发模式;若所述任务分发模式为第一模式,则将所述医学图像集中的同一份医学图像发送至至少一个第一终端;若所述任务分发模式为第二模式,则将所述医学图像集中的医学图像平均分发至至少一个第一终端;若所述任务分发模式为第三模式,则根据各个所述第一终端中的用户的时间信息分配所述医学图像集中的医学图像。
114.上述计算机终端还可以执行应用程序的图像标注方法中以下步骤的程序代码:在将返回的所述医学图像的所述标注信息分发至至少一个第二终端之后,所述方法还包括:若检测到所述标注信息不符合预设条件,则获取所述标注信息对应的质检信息;将所述标注信息对应的质检信息上传至预设系统;所述第一终端的用户基于所述预设系统中的质检信息,调整标注策略。
115.上述计算机终端还可以执行应用程序的图像标注方法中以下步骤的程序代码:在将所述医学图像集中的医学图像分发至至少一个第一终端之后,所述方法还包括:对所述医学图像集中的病灶区域增加3d标注框;通过在多平面重建上展示的各个面调整所述3d标注框的边界来调整病灶的标注位置;在所述病灶的标注位置上添加病灶的属性信息。
116.上述计算机终端还可以执行应用程序的图像标注方法中以下步骤的程序代码:在确定待标注的医学图像集之后,在将所述医学图像集中的医学图像分发至至少一个第一终端之前,所述方法还包括:采用目标模型对所述医学图像集中的医学图像进行辅助标注,获取辅助标注后的医学图像集;将所述医学图像集中的医学图像分发至至少一个第一终端包
括:将辅助标注后的医学图像集中的医学图像分发至至少一个第一终端。
117.上述计算机终端还可以执行应用程序的图像标注方法中以下步骤的程序代码:所述方法还包括:将通过质检的标注信息作为所述目标模型的训练集,其中,所述训练集用于为训练所述目标模型提供训练数据。
118.上述计算机终端还可以执行应用程序的图像标注方法中以下步骤的程序代码:辅助标注后的医学图像集中包括:肋骨分割结果,在将通过质检的标注信息作为所述医学图像的目标标注信息之后,所述方法还包括:根据所述医学图像集中的医学图像的病灶3d标注框信息,结合所述肋骨分割结果,得到病灶的分割标注信息。
119.可选地,图10是根据本发明实施例的一种计算机终端的结构框图。如图10所示,该计算机终端可以包括:一个或多个(图10中仅示出一个)处理器、存储器。
120.其中,存储器可用于存储软件程序以及模块,如本发明实施例中的图像标注方法和装置对应的程序指令/模块,处理器通过运行存储在存储器内的软件程序以及模块,从而执行各种功能应用以及数据处理,即实现上述的图像标注方法。存储器可包括高速随机存储器,还可以包括非易失性存储器,如一个或者至少一个磁性存储装置、闪存、或者其他非易失性固态存储器。在一些实例中,存储器可进一步包括相对于处理器远程设置的存储器,这些远程存储器可以通过网络连接至终端。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
121.处理器可以通过传输装置调用存储器存储的信息及应用程序,以执行下述步骤:确定待标注的医学图像集;将医学图像集中的医学图像分发至至少一个第一终端,其中,第一终端用于对接收到的医学图像进行数据标注;接收至少一个第一终端返回的医学图像的标注信息;将返回的医学图像的标注信息分发至至少一个第二终端,其中,第二终端用于对标注信息进行质检;将通过质检的标注信息作为医学图像的目标标注信息。
122.处理器还可以通过传输装置调用存储器存储的信息及应用程序,以执行下述步骤:在将所述医学图像集中的医学图像分发至至少一个第一终端之前,所述方法还包括:解析所述医学图像集中医学图像的目标信息;获取所述医学图像集中医学图像对应的诊断报告;基于所述目标信息和所述医学图像集中医学图像对应的诊断报告对所述医学图像集中的医学图像构建任务。
123.处理器还可以通过传输装置调用存储器存储的信息及应用程序,以执行下述步骤:将所述医学图像集中的医学图像分发至至少一个第一终端包括:基于构建的任务将所述医学图像集中的医学图像分发至至少一个第一终端。
124.处理器还可以通过传输装置调用存储器存储的信息及应用程序,以执行下述步骤:将所述医学图像集中的医学图像分发至至少一个第一终端包括:选择任务分发模式;若所述任务分发模式为第一模式,则将所述医学图像集中的同一份医学图像发送至至少一个第一终端;若所述任务分发模式为第二模式,则将所述医学图像集中的医学图像平均分发至至少一个第一终端;若所述任务分发模式为第三模式,则根据各个所述第一终端中的用户的时间信息分配所述医学图像集中的医学图像。
125.处理器还可以通过传输装置调用存储器存储的信息及应用程序,以执行下述步骤:在将返回的所述医学图像的所述标注信息分发至至少一个第二终端之后,所述方法还包括:若检测到所述标注信息不符合预设条件,则获取所述标注信息对应的质检信息;将所
述标注信息对应的质检信息上传至预设系统;所述第一终端的用户基于所述预设系统中的质检信息,调整标注策略。
126.处理器还可以通过传输装置调用存储器存储的信息及应用程序,以执行下述步骤:在将所述医学图像集中的医学图像分发至至少一个第一终端之后,所述方法还包括:对所述医学图像集中的病灶区域增加3d标注框;通过在多平面重建上展示的各个面调整所述3d标注框的边界来调整病灶的标注位置;在所述病灶的标注位置上添加病灶的属性信息。
127.处理器还可以通过传输装置调用存储器存储的信息及应用程序,以执行下述步骤:在确定待标注的医学图像集之后,在将所述医学图像集中的医学图像分发至至少一个第一终端之前,所述方法还包括:采用目标模型对所述医学图像集中的医学图像进行辅助标注,获取辅助标注后的医学图像集;将所述医学图像集中的医学图像分发至至少一个第一终端包括:将辅助标注后的医学图像集中的医学图像分发至至少一个第一终端。
128.处理器还可以通过传输装置调用存储器存储的信息及应用程序,以执行下述步骤:所述方法还包括:将通过质检的标注信息作为所述目标模型的训练集,其中,所述训练集用于为训练所述目标模型提供训练数据。
129.处理器还可以通过传输装置调用存储器存储的信息及应用程序,以执行下述步骤:辅助标注后的医学图像集中包括:肋骨分割结果,在将通过质检的标注信息作为所述医学图像的目标标注信息之后,所述方法还包括:根据所述医学图像集中的医学图像的病灶3d标注框信息,结合所述肋骨分割结果,得到病灶的分割标注信息。
130.采用本发明实施例,提供了一种图像标注方法的方案。采用对医学图像进行标注和质检相结合的方式,通过确定待标注的医学图像集;将医学图像集中的医学图像分发至至少一个第一终端,其中,第一终端用于对接收到的医学图像进行数据标注;接收至少一个第一终端返回的医学图像的标注信息;将返回的医学图像的标注信息分发至至少一个第二终端,其中,第二终端用于对标注信息进行质检;将通过质检的标注信息作为医学图像的目标标注信息,达到了提升对医学图像的标注的准确性的目的,同时对医学图像的标注环节和质检环节高效协同,从而提升了对医学图像的标注效率,进而解决了现有技术中对医学图像的标注效率较低的技术问题。
131.本领域普通技术人员可以理解,图10所示的结构仅为示意,计算机终端也可以是智能手机(如android手机、ios手机等)、平板电脑、掌声电脑以及移动互联网设备(mobile internet devices,mid)、pad等终端设备。图10其并不对上述电子装置的结构造成限定。例如,计算机终端10还可包括比图10中所示更多或者更少的组件(如网络接口、显示装置等),或者具有与图10所示不同的配置。
132.本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令终端设备相关的硬件来完成,该程序可以存储于一计算机可读存储介质中,存储介质可以包括:闪存盘、只读存储器(read

only memory,rom)、随机存取器(random access memory,ram)、磁盘或光盘等。
133.实施例5
134.本发明的实施例还提供了一种存储介质。可选地,在本实施例中,上述存储介质可以用于保存上述实施例一所提供的图像标注方法所执行的程序代码。
135.可选地,在本实施例中,上述存储介质可以位于计算机网络中计算机终端群中的
任意一个计算机终端中,或者位于移动终端群中的任意一个移动终端中。
136.可选地,在本实施例中,存储介质被设置为存储用于执行以下步骤的程序代码:确定待标注的医学图像集;将医学图像集中的医学图像分发至至少一个第一终端,其中,第一终端用于对接收到的医学图像进行数据标注;接收至少一个第一终端返回的医学图像的标注信息;将返回的医学图像的标注信息分发至至少一个第二终端,其中,第二终端用于对标注信息进行质检;将通过质检的标注信息作为医学图像的目标标注信息。
137.存储介质还被设置为存储用于执行以下步骤的程序代码:在将所述医学图像集中的医学图像分发至至少一个第一终端之前,所述方法还包括:解析所述医学图像集中医学图像的目标信息;获取所述医学图像集中医学图像对应的诊断报告;基于所述目标信息和所述医学图像集中医学图像对应的诊断报告对所述医学图像集中的医学图像构建任务。
138.存储介质还被设置为存储用于执行以下步骤的程序代码:将所述医学图像集中的医学图像分发至至少一个第一终端包括:基于构建的任务将所述医学图像集中的医学图像分发至至少一个第一终端。
139.存储介质还被设置为存储用于执行以下步骤的程序代码:将所述医学图像集中的医学图像分发至至少一个第一终端包括:选择任务分发模式;若所述任务分发模式为第一模式,则将所述医学图像集中的同一份医学图像发送至至少一个第一终端;若所述任务分发模式为第二模式,则将所述医学图像集中的医学图像平均分发至至少一个第一终端;若所述任务分发模式为第三模式,则根据各个所述第一终端中的用户的时间信息分配所述医学图像集中的医学图像。
140.存储介质还被设置为存储用于执行以下步骤的程序代码:在将返回的所述医学图像的所述标注信息分发至至少一个第二终端之后,所述方法还包括:若检测到所述标注信息不符合预设条件,则获取所述标注信息对应的质检信息;将所述标注信息对应的质检信息上传至预设系统;所述第一终端的用户基于所述预设系统中的质检信息,调整标注策略。
141.存储介质还被设置为存储用于执行以下步骤的程序代码:在将所述医学图像集中的医学图像分发至至少一个第一终端之后,所述方法还包括:对所述医学图像集中的病灶区域增加3d标注框;通过在多平面重建上展示的各个面调整所述3d标注框的边界来调整病灶的标注位置;在所述病灶的标注位置上添加病灶的属性信息。
142.存储介质还被设置为存储用于执行以下步骤的程序代码:在确定待标注的医学图像集之后,在将所述医学图像集中的医学图像分发至至少一个第一终端之前,所述方法还包括:采用目标模型对所述医学图像集中的医学图像进行辅助标注,获取辅助标注后的医学图像集;将所述医学图像集中的医学图像分发至至少一个第一终端包括:将辅助标注后的医学图像集中的医学图像分发至至少一个第一终端。
143.存储介质还被设置为存储用于执行以下步骤的程序代码:所述方法还包括:将通过质检的标注信息作为所述目标模型的训练集,其中,所述训练集用于为训练所述目标模型提供训练数据。
144.存储介质还被设置为存储用于执行以下步骤的程序代码:辅助标注后的医学图像集中包括:肋骨分割结果,在将通过质检的标注信息作为所述医学图像的目标标注信息之后,所述方法还包括:根据所述医学图像集中的医学图像的病灶3d标注框信息,结合所述肋骨分割结果,得到病灶的分割标注信息。
145.上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
146.在本发明的上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其他实施例的相关描述。
147.在本技术所提供的几个实施例中,应该理解到,所揭露的技术内容,可通过其它的方式实现。其中,以上所描述的装置实施例仅仅是示意性的,例如所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,单元或模块的间接耦合或通信连接,可以是电性或其它的形式。
148.所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
149.另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
150.所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:u盘、只读存储器(rom,read

only memory)、随机存取存储器(ram,random access memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
151.以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。
再多了解一些

本文用于企业家、创业者技术爱好者查询,结果仅供参考。

发表评论 共有条评论
用户名: 密码:
验证码: 匿名发表

相关文献