生成装置、生成方法、生成程序和诊断支持系统与流程

1.本发明涉及生成装置、生成方法、生成程序以及诊断支持系统。


背景技术：

2.存在一种系统，该系统使用显微镜拍摄放置在载玻片上的观察目标，生成数字化的病变图像，并且对病变图像执行各种图像分析。例如，观察目标是取自患者的组织或细胞，并且对应于一种器官、唾液、血液等。
3.在传统系统中，如果用户指定病变图像上的分析目标区域，则通过预定分析程序对指定区域进行分析，并且输出最终分析结果。用户在参考分析结果的同时调整用于分析处理的参数。
4.引用列表
5.专利文献
6.专利文献1：us2007/030529a
7.专利文献2：us2009/208134a。


技术实现要素：

8.技术问题
9.在用户选择多个分析目标区域的情况下，优选选择具有特性变化的区域，因为可以获得具有各种特性的区域的分析结果。然而，传统系统仍然不能支持选择具有特性变化的区域。
10.因此，本公开提出了可以支持选择具有特性变化的区域的生成装置、生成方法、生成程序和诊断支持系统。
11.问题的解决方案
12.为了解决上述问题，本发明的实施方式所涉及的生成装置具有：生成部，基于在与病变有关的图像中设置的局部区域的特征值，生成分布信息，将由该局部区域内包含的特征值指定的特征空间上的局部区域的分布以与局部区域相关联的状态可视化地方式布置在特征空间上。
附图说明
13.图1是示出根据本实施方式的诊断支持系统的示图。
14.图2是用于描述根据本实施方式的成像处理的示图。
15.图3是用于描述根据本实施方式的成像处理的示图。
16.图4是用于描述生成局部图像(平铺图像)的处理的示图。
17.图5是用于描述根据本实施方式的病变图像的示图。
18.图6是用于描述根据本实施方式的病变图像的示图。
19.图7是示出观察者观看病变图像的模式的实例的示图。
20.图8是示出包括在服务器中的观看历史存储部的实例的示图。
21.图9a是示出医疗信息系统所包括的诊断信息存储部的示图。
22.图9b是示出了包括在医疗信息系统中的诊断信息存储部的示图。
23.图9c是示出医疗信息系统所包括的诊断信息存储部的示图。
24.图10是用于描述根据本实施方式的生成装置的处理的示图。
25.图11是示出根据本实施方式的生成装置的配置的功能框图。
26.图12是示出病变图像db的数据结构的实例的示图。
27.图13是示出局部区域表142的数据结构的实例的示图。
28.图14是示出特性分布表的数据结构的实例的示图。
29.图15是用于描述由显示控制部执行的处理(2)的示图。
30.图16是用于描述由显示控制部执行的处理(3)的示图。
31.图17是用于描述由显示控制部执行的处理(4)的示图。
32.图18是用于描述由显示控制部执行的处理(5)的示图。
33.图19是用于描述由显示控制部执行的处理(6)的示图。
34.图20是用于描述由显示控制部执行的处理(7)的示图。
35.图21是用于描述由显示控制部执行的处理(8)的示图。
36.图22是用于描述由显示控制部执行的处理(9)的示图。
37.图23是示出根据本实施方式的生成处理装置的处理过程的流程图。
38.图24是示出实现生成装置的功能的计算机的实例的硬件配置图。
具体实施方式
39.在下文中，基于附图详细描述本公开的实施方式。在下面的实施方式中，相同的部件由相同的附图标记表示，并且省略重复的描述。
40.本公开根据以下项顺序进行描述。
41.《实施方式》
42.1.根据本实施方式的系统的配置
43.2.关于各种信息
44.2-1.病变图像
45.2-2.观看历史信息
46.2-3.诊断信息
47.3.根据本实施方式的生成装置
48.3-1.生成装置的处理
49.3-2.生成装置的功能结构
50.4.处理过程
51.5.根据本实施方式的生成装置的效果
52.6.硬件配置
53.7.结论
54.[1.根据实施方式的系统的配置]
[0055]
首先，使用图1说明根据第一实施方式的诊断支持系统1。图1是示出根据第一实施
方式的诊断支持系统1的示图。如图1所示，诊断支持系统1包括病变系统10和生成装置100。
[0056]
病变系统10是主要由病理学家使用的系统，并且例如用于实验室或医院。如图1所示，病变系统10包括显微镜11、服务器12、显示控制装置13和显示装置14。
[0057]
显微镜11是具有光学显微镜的功能的成像装置，并且对放置在载玻片上的观察目标进行成像并且获取作为数字图像的病变图像(医学图像的实例)。观察目标是例如取自患者的组织或细胞，如一块器官、唾液或血液。
[0058]
服务器12是将由显微镜11捕获的病变图像存储并保存在未示出的存储部中的装置。在接受来自显示控制装置13的观看请求时，服务器12从未示出的存储部中搜索病变图像，并且将找到的病变图像发送给显示控制装置13。此外，在接受从生成装置100获取病变图像的请求时，服务器12在存储部中搜索病变图像，并且将找到的病变图像发送给生成装置100。
[0059]
显示控制装置13将观看从用户接受的病变图像的请求发送至服务器12。然后，显示控制装置13控制显示装置14显示从服务器12接受的病变图像。
[0060]
显示装置14具有使用例如液晶、el(电致发光)、crt(阴极射线管)等的屏幕。显示装置14可以与4k或8k兼容，并且可以由多个显示装置形成。显示装置14显示通过显示控制装置13控制显示装置14显示的病变图像。尽管稍后描述细节，服务器12存储关于由病理学家经由显示装置14观察的病变图像的区域的观看历史信息。
[0061]
生成装置100将获取病变图像的请求发送至服务器12并且从服务器12接受病变图像。病变图像的特征值的信息被附加到从服务器12接受的病变图像。生成装置100生成并显示病变图像被划分为多个局部区域的信息以及分布信息，其中，局部区域在由包括在局部区域中的特征值指定的特征空间上的分布以与局部区域相关联的状态可视化地布置在特征空间中。将在“3.根据本实施方式的生成装置”中给出生成装置100的详细描述。
[0062]
[2.关于各种信息]
[0063]
[2-1.病变图像]
[0064]
如上所述，通过由显微镜11成像的观察目标生成病变图像。首先，使用图2和图3描述显微镜11的成像处理。图2和图3是用于描述根据第一实施方式的成像处理的示图。下面描述的显微镜11包括用于以低分辨率成像的低分辨率成像部和用于以高分辨率成像的高分辨率成像部。
[0065]
在图2中，包含观察目标a10的载玻片g10包括在成像区域r10中，成像区域r10是可以通过显微镜11拍摄的区域。例如，载玻片g10被放置在未示出的载物台上。显微镜11利用低分辨率成像部对成像区域r10成像以生成整体图像，该整体图像是观察目标a10被整体成像的病变图像。在图2中示出的标签信息l10中，写入用于识别观察目标a10的识别信息(例如，字符串或qr码(注册商标))。可以通过预先将写入标签信息l10中的识别信息与患者相关联来识别与整体图像相对应的患者。在图2的实例中，写入“#001”作为识别信息。在标签信息l10中，例如，可以写入观察目标a10的简要描述。
[0066]
随后，在生成整体图像之后，显微镜11从整体图像中指定包括观察目标a10的区域，并且使用高分辨率成像部对通过以预定尺寸划分包括观察目标a10的区域而获得的划分区域依次成像。例如，如图3所示，显微镜11指定第一图像区域r11，并且生成高分辨率图像i11，该高分辨率图像是示出观察目标a10的局部区域的图像。随后，显微镜11移动载物台
以使用高分辨率成像部成像区域r12，并且生成对应于区域r12的高分辨率图像i12。类似地，显微镜11生成与区域r13、r14等相对应的高分辨率图像i13、i14等。尽管图3仅示出直至区域r18，显微镜11顺次移动载物台以使用高分辨率成像部对对应于观察目标a10的所有划分区域成像，并且生成对应于划分区域的高分辨率图像。
[0067]
同时，当移动载物台时，载玻片g10可在载物台上移动。如果载玻片g10移动，则可出现观察目标a10的未拍摄区域。如图3所示，即使载玻片g10移动，显微镜11也可以通过利用高分辨率成像部执行成像以使得相邻的划分区域部分重叠来防止未拍摄区域的出现。
[0068]
上述低分辨率成像部和高分辨率成像部可以是不同的光学系统，或者可以是相同的光学系统。在相同的光学系统的情况下，显微镜11根据成像目标改变分辨率。此外，虽然上述示出了通过移动载物台改变成像区域的实例，但是可通过移动光学系统(高分辨率成像部等)的显微镜11改变成像区域。此外，图3示出了显微镜11从观察目标a10的中心部分执行成像的实例。然而，显微镜11可以以与在图3中示出的成像顺序不同的顺序对观察目标a10成像。例如，显微镜11可以从观察目标a10的外周部执行成像。此外，上述示出了通过高分辨率成像部仅成像包括观察目标a10的区域的实例。然而，因为存在不能精确地检测包括观察目标a10的区域的情况，所以显微镜11可以划分在图2中示出的整个成像区域r10或者载玻片g10的整个区域，并且使用高分辨率成像部对它们进行成像。
[0069]
随后，由显微镜11生成的每个高分辨率图像被划分成预定尺寸。因此，从高分辨率图像生成局部图像(在下文中，写成平铺图像)。现在将使用图4来描述这一点。图4是用于描述产生局部图像(平铺图像)的处理的示图。图4示出对应于图3中所示的区域r11的高分辨率图像i11。下面的描述是基于由服务器12从高分辨率图像生成局部图像的假设给出的。然而，可以通过除了服务器12之外的装置(例如，安装在显微镜11内部的信息处理装置等)生成局部图像。
[0070]
在图4所示的实例中，服务器12划分一个高分辨率图像i11以生成100个平铺图像t11、t12等。例如，当高分辨率图像i11的分辨率是2560
×
2560[像素]时，服务器12从高分辨率图像i11生成具有256
×
256[像素]的分辨率的100个平铺图像t11、t12等。类似地，服务器12将其他高分辨率图像分成类似尺寸以生成平铺图像。
[0071]
在图4所示的实例中，区域r111、r112、r113和r114是与相邻的其他高分辨率图像(图4中未示出)重叠的区域。服务器12通过利用诸如模板匹配的技术执行重叠区域的定位来对彼此相邻的高分辨率图像执行拼接处理。在这种情况下，服务器12可通过在拼接处理之后划分高分辨率图像来产生平铺图像。可选择地，服务器12可在拼接处理之前产生除了区域r111、r112、r113或r114之外的区域的平铺图像，并在拼接处理之后产生区域r111、r112、r113和r114的平铺图像。
[0072]
以这种方式，服务器12生成作为观察目标a10的捕获图像的最小单元的平铺图像。然后，服务器12顺序地合成最小单元的平铺图像，并因此产生不同类别的平铺图像。具体地，服务器12合成预定数量的相邻平铺图像以产生一个平铺图像。现在将使用图5和图6描述这一点。图5和图6是用于描述根据本实施方式的病变图像的示图。
[0073]
图5的上部示出了由服务器12从每个高分辨率图像生成的最小单元的平铺图像组。在图5的上部的实例中，服务器12合成在平铺图像之中彼此相邻的四个平铺图像t111、t112、t211和t212，并因此产生一个平铺图像t110。例如，当每个平铺图像t111、t112、t211
和t212的分辨率是256
×
256时，服务器12生成具有256
×
256的分辨率的平铺图像t110。类似地，服务器12合成彼此相邻的四个平铺图像t113、t114、t213和t214，并因此生成平铺图像t120。以这种方式，服务器12生成平铺图像，在每个平铺图像中，最小单元的预定数量的平铺图像被合成。
[0074]
此外，服务器12生成平铺图像，在所述平铺图像中的每个最小单元的平铺图像被合成的平铺图像中，彼此相邻的平铺图像被进一步合成。在图5的实例中，服务器12合成彼此相邻的四个平铺图像t110、t120、t210和t220，从而生成一个平铺图像t100。例如，当平铺图像t110、t120、t210和t220中的每个的分辨率是256
×
256时，服务器12生成具有256
×
256的分辨率的平铺图像t100。例如，从合成彼此相邻的四个平铺图像的具有512
×
512的分辨率的图像，服务器12通过执行诸如四像素平均、加权滤波(相比较远像素更强烈地反映较近像素的处理)或1/2稀疏化处理的处理，来生成具有256
×
256的分辨率的平铺图像。
[0075]
通过重复这样的合成处理，服务器12最终生成具有与最小单元的平铺图像的分辨率相似的分辨率的一个平铺图像。例如，当如在上述实例中最小单元的平铺图像的分辨率是256
×
256时，服务器12通过重复上述合成处理最终生成具有256
×
256的分辨率的一个平铺图像t1。
[0076]
图6示意性示出了图5中所示的平铺图像。在图6所示的实例中，最低层的平铺图像组是由服务器12生成的最小单元的平铺图像。此外，第二最低类别的平铺图像组是在合成最低层的平铺图像组之后的平铺图像。最高层的平铺图像t1指示最终生成的一个平铺图像。以这种方式，服务器12生成具有类似图6所示的金字塔结构的层次结构的平铺图像组作为病变图像。
[0077]
图5所示的区域d表示在显示装置14的显示画面等上显示的区域的实例。例如，假定显示装置能够执行显示的分辨率是三个垂直平铺图像和四个水平平铺图像。在这种情况下，与在图5中示出的区域d一样，在显示装置上显示的观察目标a10的细节程度根据待显示的平铺图像所属的类别变化。例如，当使用最低层的平铺图像时，详细地显示观察目标a10的小区域。当使用更高层的平铺图像时，更粗略地显示观察目标a10的更大区域。
[0078]
服务器12在未示出的存储部中存储与图6中示出的那些类似的各种类别的平铺图像。例如，服务器12将每个平铺图像与能够唯一地识别平铺图像的平铺识别信息(局部图像信息的实例)一起存储。在这种情况下，当从另一装置(例如，显示控制装置13)接受获取包括平铺识别信息的平铺图像的请求时，服务器12将与平铺识别信息对应的平铺图像发送给另一装置。此外，例如，服务器12可以将每个平铺图像与识别每个类别的类别识别信息以及可以在同一类别中进行唯一识别的平铺识别信息一起存储。在这种情况下，当从另一装置接收获取包括类别识别信息和平铺识别信息的平铺图像的请求时，服务器12将属于与类别识别信息对应的类别的平铺图像中与平铺识别信息对应的平铺图像发送到另一装置。
[0079]
服务器12可以将如图6所示的不同类别的平铺图像存储在除了服务器12之外的存储装置中。例如，服务器12可以将各种类别的平铺图像存储在云服务器等中。此外，图5和图6中示出的生成平铺图像的处理可以由云服务器等执行。
[0080]
服务器12可以不存储所有类别的平铺图像。例如，服务器12可以仅存储最低层的平铺图像，可以仅存储最低层的平铺图像和最高层的平铺图像，或者可以仅存储预定类别(例如，奇数位置类别、偶数位置类别等)的平铺图像。此时，当从另一装置请求未存储的类
别的平铺图像时，服务器12通过动态合成存储的平铺图像来生成从另一装置请求的平铺图像。由此，服务器12可以通过使要保存的平铺图像稀疏来防止存储容量的紧密性。
[0081]
虽然以上实例没有提及成像条件，但是服务器12可以针对每个成像条件存储各种类别的平铺图像，如在图6中示出的那些。成像条件的实例包括至对象(观察目标a10等)的焦距。例如，显微镜11可以执行成像，同时改变至相同对象的焦距。在这种情况下，对于每个焦距，服务器12可以存储如图6所示的各种类别的平铺图像。改变焦距的原因在于，因为可能存在半透明的观察目标a10，所以存在适合于对观察目标a10的表面成像的焦距或适合于对观察目标a10的内部成像的焦距。换言之，通过改变焦距，显微镜11可以生成观察目标a10的表面被成像的病变图像或者观察目标a10的内部被成像的病变图像。
[0082]
成像条件的其他实例包括用于观察对象a10的染色条件。具体地，在病变诊断中，观察目标a10的特定部分(例如，细胞核等)可以用发光物质染色。发光物质是例如当用特定波长的光照射时发光的物质。存在以下情况：相同的观察目标a10用不同的发光物质染色。在这种情况下，服务器12可以针对每个应用的发光物质存储各种类别的平铺图像，如图6所示的那些平铺图像。
[0083]
上述平铺图像的数量和分辨率仅是实例，并且视情况而定，可根据系统而改变。例如，由服务器12合成的平铺图像的数量不限于四个。例如，服务器12可以重复合成3
×
3＝9个平铺图像的处理。此外，尽管以上实例示出了平铺图像的分辨率是256
×
256的实例，但平铺图像的分辨率可以是除了256
×
256之外的分辨率。
[0084]
显示控制装置13使用采用与上述分层结构的平铺图像组兼容的系统的软件应用，并根据用户经由显示控制装置13的输入操作，从分层结构的平铺图像组中提取期望的平铺图像，并将提取的平铺图像输出到显示装置14。具体地，显示装置14显示用户选择的任意分辨率的图像中用户选择的任意部分的图像。通过这样的处理，用户可以在改变观察放大倍率的同时获得观察观察目标的感觉。即，显示控制装置13用作虚拟显微镜。此处的虚拟观察放大倍率对应于实践中的分辨率。
[0085]
[2-2.观看历史信息]
[0086]
接下来，使用图7描述观看保存在服务器12中的病变图像的历史信息。图7是示出观察者观看病变图像的模式的实例的示图。在图7所示的实例中，假设诸如病理学家的观看者依次观察病变图像i10的区域d1、d2、d3、
…
、和d7。在这种情况下，显示控制装置13首先根据观看者的观看操作从服务器12获取对应于区域d1的病变图像。响应于来自显示控制装置13的请求，服务器12从存储部获取形成对应于区域d1的病变图像的一个或多个平铺图像，并且将获取的一个或多个平铺图像传输至显示控制装置13。然后，显示控制装置13将由从服务器12获取的一个或多个平铺图像形成的病变图像显示在显示装置14上。例如，当存在多个平铺图像时，显示控制装置13并排显示多个平铺图像。类似地，每当观察者执行改变显示区域的操作时，显示控制装置13从服务器12获取对应于待显示区域(区域d2、d3、...、d7等)的病变图像，并且在显示装置14上显示所获取的病变图像。
[0087]
在图7的示例中，观看者首先观看相对较大的区域d1，但是发现在区域d1中没有要仔细观察的区域，因此将观看区域移动到区域d2。然后，观看者发现在区域d2中存在期望仔细观察的区域，因此放大区域d2的局部区域并观看区域d3。然后，观看者进一步将观看区域移动到区域d4，该区域d4是区域d2的局部区域。然后，观看者发现在区域d4中存在期望更仔
细观察的区域，因此扩大区域d4的局部区域并观察区域d5。以此方式，观看者还观看区域d6和d7。例如，对应于区域d1、d2和d7的病变图像是放大1.25倍的显示图像，对应于区域d3和d4的病变图像是放大20倍的显示图像，并且对应于区域d5和d6的病变图像是放大40倍的显示图像。显示控制装置13获取并显示存储在服务器12中的分层结构的平铺图像组中与这些倍率相对应的类别的平铺图像。例如，与区域d1和d2相应的平铺图像的类别高于与区域d3相应的平铺图像的类别(即，更靠近图6中示出的平铺图像t1的类别)。
[0088]
当以上述方式观察病变图像时，显示控制装置13以预定的采样周期获取观察信息。具体地，显示控制装置13在预定时间获取所观察的病变图像的中心坐标和显示倍率，并且将获取的观察信息存储在服务器12的存储部中。
[0089]
现在将使用图8描述这一点。图8是示出包括在服务器12中的观察历史存储部12a的实例的示图。如图8所示，观察历史存储部12a存储诸如“采样”、“中心坐标”、“倍率”以及“时间”的信息。“采样”表示存储观察信息的时间顺序。“中心坐标”表示所观察的病变图像的位置信息。在该实例中，中心坐标是由观察的病变图像的中心位置表示的坐标，并且对应于最低层的平铺图像组的坐标系的坐标。“倍率”表示所观察的病变图像的显示倍率。“时间”表示从观察开始所经过的时间。图8的实例示出采样周期是30秒。即，显示控制装置13每30秒将观察信息保存在观察历史存储部12a中。然而，本发明不限于该实例，并且采样周期可以是例如0.1至10秒，或者可以在该范围之外。
[0090]
在图8的示例中，采样“1”表示图7所示的区域d1的观察信息，采样“2”表示区域d2的观察信息，采样“3”和“4”表示区域d3的观察信息，采样“5”表示区域d4的观察信息，采样“6”、“7”和“8”表示区域d5的观察信息。即，图8的实例示出了观察区域d1约30秒，观察区域d2约30秒，观察区域d3约60秒，观察区域d4约30秒，以及观察区域d5约90秒。以这种方式，可以从观察历史信息中提取每个区域的观察时间。
[0091]
此外，可以从观察历史信息中提取观察每个区域的次数。例如，假设每次执行改变显示区域的操作(例如，移动显示区域的操作或改变显示尺寸的操作)时显示的病变图像的每个像素的显示次数增加一。例如，在图7所示的实例中，如果首先显示区域d1，则包括在区域d1中的每个像素的显示次数是1。接下来，如果显示区域d2，则包括在区域d1和区域d2两者中的每个像素的显示次数是两次，并且不包括在区域d1中但是包括在区域d2中的每个像素的显示次数是一次。因为可以通过参考观察历史存储部12a的中心坐标和倍率识别显示区域，所以可以通过分析存储在观察历史存储部12a中的观察历史信息，提取显示病变图像的每个像素(其也可以被称为每个坐标)的次数。
[0092]
如果观看者在预定时间段(例如，5分钟)内不执行改变显示位置的操作，则显示控制装置13可暂停存储观察信息的处理。此外，尽管以上实例示出了观察的病变图像通过中心坐标和放大倍率存储为观察信息的实例，但是本发明不限于该实例，并且观察信息可以是任何信息，只要其可以识别观察的病变图像的区域即可。例如，显示控制装置13可以存储识别对应于所观察的病变图像的平铺图像的平铺识别信息或者指示对应于所观察的病变图像的平铺图像的位置的信息，作为病变图像的观察信息。此外，虽然在图8中省略图示，但是识别患者、医疗记录等的信息存储在观察历史存储部12a中。即，在观察信息的同时存储图8中所示的观察历史存储部12a，并且可以关联患者、医疗记录等。
[0093]
[2-3.诊断信息]
[0094]
接下来，使用图9a至图9c来描述存储在病变系统10中的诊断信息。图9a至图9c是示出包括在病变系统10中的诊断信息存储部的示图。图9a至图9c示出了针对各种待检查器官将诊断信息存储在不同表中的实例。例如，图9a示出存储关于乳腺癌试验的诊断信息的表格的实例，图9b示出存储关于肺癌试验的诊断信息的表格的实例，以及图9c示出存储关于大肠试验的诊断信息的表格的实例。
[0095]
图9a所示的诊断信息存储部30a存储诸如“患者id”、“病变图像”、“诊断结果”、“分级”、“组织类型”、“基因测试”、“超声波测试”以及“药物”的信息。“患者id”表示用于识别患者的识别信息。“病变图像”表示在诊断期间由病理学家保存的病变图像。在“病变图像”中，可以存储表示相对于整体图像要保存的图像区域的位置信息(中心坐标、倍率等)，而不是图像本身。“诊断结果”是由病理学家诊断的结果，并且表示例如病变部位的存在或不存在以及病变部位的类型。“分级”表示疾病部位的进展程度。“组织类型”表示疾病部位的类型。“基因测试”表示基因测试的结果。“超声波测试”表示超声波测试的结果。药物指示关于给患者的药物的信息。
[0096]
图9b所示的诊断信息存储部30b存储关于在肺癌测试中执行的“ct测试”而不是图9a所示的诊断信息存储部30a中存储的“超声波测试”的信息。在图9c所示的诊断信息存储部30c中，存储在大肠检查中进行的“内窥镜检查”而不是在图9a所示的诊断信息存储部30a中存储的“超声波检查”的信息。
[0097]
在图9a至图9c的实例中，“正常”被存储在“诊断结果”中的情况表示病变诊断的结果是否定的，并且“正常”以外的信息存储在“诊断结果”中的情况表示病变诊断的结果是肯定的。虽然图9a至图9c描述了项目(病变图像、诊断结果、分级、组织类型、基因测试、超声波测试和药物)在与患者id相关联时被存储的情况，但是关于诊断和测试的信息在与患者id相关联时被存储就足够了，并且不是所有项目都是必需的。
[0098]
[3.根据本实施方式的生成装置]
[0099]
[3-1.生成装置的处理]
[0100]
接下来，描述根据本实施方式的生成装置100的处理的实例。图10是用于描述根据本实施方式的生成装置100的处理的示图。在图10中，使用病变图像ima1进行描述。假设病变图像ima1包括细胞区域(观察目标)a11。生成装置100通过网格或超像素划分病变图像ima1，并且由此设置多个局部区域。在以下描述中，当第n行和第m列的局部区域被指示时，视情况将其写为局部区域p(n，m)。多个局部区域是分析目标区域“roi(感兴趣区域)”的候选。
[0101]
另一方面，生成装置100例如生成表示由两个轴(或者一个轴)构成的特征空间fs1的特性分布信息dis1。例如，假设特征空间fs1的水平轴是与多种特征值中的第一特征值对应的轴。假定特征空间fs1的纵轴是与多种特征值中的第二特征值对应的轴。假定预先设定第一特征值和第二特征值。
[0102]
生成装置100对包含在病变图像ima1中的多个局部区域执行以下处理。生成装置100计算局部区域所包含的特征值(第一特征值和第二特征值)，在由计算出的特征值确定的特征空间fs1上可视化地配置分布(分布的范围)。局部区域的各特征值是最大值、最小值等分布扩展的信息。
[0103]
例如，在通过局部区域p(2，8)的特征值指定的特征空间fs1的分布为分布dis(2，
8)的情况下，生成装置100在特征空间fs1中可视地配置分布dis(2，8)。分布dis(2，8)与局部区域p(2，8)相关联。生成装置100对其他局部区域也反复执行上述处理，生成特性分布信息dis1。另外，在以下的说明中，将可视化地配置于特征空间fs1的局部区域p(n，m)的分布简单地记载为dis(n，m)。
[0104]
生成装置100在显示屏幕上显示划分为多个局部区域的病变图像ima1和特征分布信息dis1。当从参考显示屏幕的用户接受局部区域的选择时，生成装置100通告对应于所选择的局部区域的分布。例如，当从用户接受局部区域p(6，5)的选择时，生成装置100突出局部区域p(6，5)的分布dis(6，5)。
[0105]
因此，在接受局部区域的选择时，生成装置100可视化地通告所选择的局部区域的分布；由此，用户能够掌握所选择的局部区域的特性分布。因此，生成装置100使得可以支持选择具有特性变化的局部区域。即，在理解每个局部区域的特性分布的扩展的同时，用户可以从多个局部区域中选择具有目标特性的局部区域作为分析目标区域(roi)。
[0106]
尽管图10中所示的实例描述了生成装置100分立显示病变图像ima1和特性分布信息dis1的情况，然而，病变图像ima1和特性分布信息dis1可以并排显示在同一屏幕上。
[0107]
[3-2.生成装置的功能配置]
[0108]
接下来，描述根据本实施方式的生成装置100的功能配置的实例。图11是示出了根据本实施方式的生成装置的配置的功能框图。如图11所示，生成装置100包括通信部110、输入部120、显示部130、存储部140以及控制部150。
[0109]
通信部110通过使用例如网络接口卡(nic)等获得。通信部110以有线或无线方式连接至未示出的网络，并且经由网络执行与病变系统10等的信息的发送和接收。稍后描述的控制部150经由通信部110与这些装置执行信息的发送和接收。
[0110]
输入部120是通过其将多条信息输入至生成装置100的输入装置。输入部120对应于键盘、鼠标、触摸面板等。用户操作输入部120以在病变图像上选择局部区域等。
[0111]
显示部130是显示从控制部150输出的信息的显示装置。显示部130对应于液晶显示器、有机el(电致发光)显示器、触摸面板等。例如，显示部130显示图10中描述的病变图像、特性分布信息等。
[0112]
存储部140包括病变图像db(数据库)141、局部区域表142、以及特性分布表143。存储部140例如通过使用诸如ram(随机存取存储器)或闪存的半导体存储器元件或诸如硬盘或光盘的存储装置来获得。
[0113]
病变图像db 141是存储多个病变图像的数据库。图12是示出病变图像db 141的数据结构的实例的示图。如图12所示，病变图像db 141包括“患者id”、“病变图像id”、“病变图像”以及“特征值”。患者id是唯一地识别患者的信息。病变图像id是唯一地识别病变图像的信息。病变图像表示在诊断期间由病理学家保存的病变图像(图像数据)。从服务器12传输病变图像。病变图像对应于全切片图像(wsi)等。
[0114]
特征值是从一个对应的病变图像的整体获得的特征值。例如，特征值包括病变图像中存在的每个细胞的提取结果的信息、图像元素、以及每个细胞与特定肿瘤区域之间的距离。每个细胞的提取结果包括“关于细胞核的大小、形状、和染色强度”、“关于细胞膜的大小、形状、染色强度、细胞密度”等。图像元素包括cnn(卷积神经网络)特征值、颜色、亮度值、频率特性等。
[0115]
除了患者id、病变图像和特征值之外，病变图像db 141还可以保持诸如在图9a至图9c中描述的“诊断结果”、“分级”、“组织类型”、“基因测试”、“超声波测试”以及“药物”的信息。特征值可以由稍后描述的计算部152基于病变图像计算，或者可以从服务器12获取。
[0116]
局部区域表142是保存关于通过划分病变图像获得的多个局部区域的信息的表。图13是示出局部区域表142的数据结构的实例的示图。如图13中所示，局部区域表142包括“病变图像id”、“局部区域id”、“坐标”、“roi标志”以及“特征值分布信息”。
[0117]
病变图像id是唯一地识别病变图像的信息。为每个病变图像设置多个局部区域。局部区域id是识别病变图像中的每个局部区域的信息。坐标指示局部区域的坐标。例如，局部区域的坐标由局部区域的左上角的坐标和右下角的坐标指定。roi标志表示对应的局部区域(由局部区域id指定的局部区域)是否注册为roi。例如，在相应的局部区域注册为roi的情况下，对应于局部区域id的roi标志为“on”。在对应的局部区域未注册为roi的情况下，与局部区域id对应的roi标志为“off”。在以下描述中，局部区域id“p(n，m)”的局部区域简写为局部区域p(n，m)。
[0118]
特征值分布信息是一个对应局部区域中的特征值的分布的信息。特征值分布信息包括定义代表点的信息和定义分布的扩展的信息。定义代表点的信息包括特征值的平均值、中值、模式值等。定义分布的扩展的信息包括直方图、方差、标准偏差、最大值和最小值、四分位数等。
[0119]
特性分布表143是保存与特征空间中的局部区域的分布有关的信息的表。图14是表示特性分布表的数据结构的实例的示图。如图14所示，特征分布表143将病变图像id、局部区域id以及分布的范围相关联。病变图像id是唯一地识别病变图像的信息。局部区域id是识别病变图像中的局部区域的信息。
[0120]
分布的范围是表示特征空间中的局部区域的分布的范围的信息。对于特征空间，根据分配给特征空间的轴的特征值的种类，可能存在不同的特征空间。局部区域的分布按每个特征空间设定。在图14所示的实例中，设置与特征空间fs1、fs2、fs3等对应的局部区域的分布范围。例如，特征空间fs1是具有第一特征值和第二特征值的轴的特征空间。特征空间fs2是具有第二特征值和第四特征值的轴的特征空间。特征空间fs3是具有第五特征值的轴的特征空间(直方图)。尽管在图14中，说明了特征空间fs1-fs3的分布范围，但是特性分布表143也可以具有以其他种类的特征量为轴的特征空间的分布范围。
[0121]
返回图11。控制部150包括获取部151、计算部152、生成部153、显示控制部154和分析部155。控制部150通过例如cpu(中央处理单元)或mpu(微处理单元)通过使用ram(随机存取存储器)等作为工作区域执行存储在生成装置100中的程序(分析程序的实例)的处理来操作。控制部150可由例如诸如asic(专用集成电路)或fpga(现场可编程门阵列)的集成电路执行。
[0122]
获取部151是向服务器12发送获取病变图像的请求并从服务器12获取病变图像的处理部。获取部151将所获取的病变图像配准在病变图像db 141中。假设病变图像id和患者id被给予病变图像。在病变图像的除患者id之外的特征值的信息被附加到病变图像的情况下，获取部151将病变图像的特征值注册在病变图像db 141中。此外，图9a至图9c中描述的诸如“诊断结果”、“分级”、“组织类型”、“基因测试”、“超声波测试”以及“药物”的信息可附接至病变图像。
[0123]
计算部152是将病变图像划分成多个局部区域并且计算每个局部区域的特征值分布信息的处理部。
[0124]
现在将描述通过计算部152将病变图像划分成多个局部区域的处理的实例。计算部152从病变图像db 141获取病变图像，并且通过预先设置的网格、超像素等将病变图像划分成多个局部区域。计算部152将局部区域id分配给每个局部区域，并且在将病变图像id、局部区域id、以及坐标关联在一起的同时将其注册在局部区域表142中。计算部152将对应于局部区域id的roi标志设置为初始值，“off”。
[0125]
现在将描述计算部152计算每个局部区域的特征值分布信息的处理的实例。计算部152从注册在病变图像db 141中的病变图像的特征值中获取与局部区域p(n，m)对应的特征值。与局部区域p(n，m)对应的特征值包括细胞的特征值(细胞核的大小、形状和染色强度)、细胞膜的大小、细胞膜的染色强度和细胞密度。与局部区域p(n，m)对应的特征值包括局部区域p(n，m)中所包括的细胞(或局部区域p(n，m))和特定区域(单独给出的肿瘤区域)之间的距离的信息。与局部区域p(n，m)对应的特征值包括图像特征值(cnn特征值、颜色信息、频率特性等)。
[0126]
计算部152基于与局部区域p(n，m)对应的特征值计算特征值分布信息。例如，计算部152针对各种特征值计算定义代表点的信息和定义分布的扩展的信息。定义代表点的信息包括特征值的平均值、中值、模式值等。定义分布的扩展的信息包括直方图、方差、标准偏差、最大值和最小值、四分位数等。计算部152将局部区域p(n，m)的特征值分布信息注册在局部区域表142中。
[0127]
计算部152通过重复执行病变图像中包括的每个局部区域的上述处理来生成局部区域表142。此外，计算部152可对注册在病变图像db 141中的多个病变图像重复地执行上述处理。
[0128]
生成部153是根据局部区域表142来生成特性分布表143的处理部。在下文中，描述生成部153的处理的实例。
[0129]
生成部153从局部区域表142获取与局部区域p(n，m)对应的特征值分布信息。生成部153获取预先设定的特征空间的信息。在此，使用特征空间fs1进行说明。特征空间fs1是具有第一特征值和第二特征值两个轴的特征空间。
[0130]
生成部153从与局部区域p(n，m)对应的特征值分布信息中获取与第一特征值对应的“定义代表点的信息”和与第二特征值对应的“定义分布的扩展的信息”。生成部根据获取的信息，规定特征空间fs1上的局部区域p(n，m)的分布范围，将结果注册在特性分布表143中。生成部153确定局部区域p(n，m)的其他特征空间的分布的范围，将其结果注册在特性分布表143中。
[0131]
生成部153通过重复执行病变图像中包括的每个局部区域的上述处理来生成特性分布表143。此外，生成部153可针对多个病变图像的每个局部区域重复执行上述处理。
[0132]
显示控制部154是基于病变图像db 141、局部区域表142、以及特性分布表143生成包括病变图像和特性分布信息的屏幕信息并且使显示部130显示屏幕信息的处理部。在下文中，描述由显示控制部154执行的各种处理。
[0133]
现在将描述由显示控制部154执行的处理(1)。现在将利用图10描述显示控制部154所执行的处理(1)。显示控制部154使显示部130显示划分为多个局部区域的病变图像
ima1。显示控制部154基于局部区域表142设置用于病变图像ima1的多个局部区域。用户参考病变图像ima1并且操作输入部120以选择任何局部区域。
[0134]
在接受病变图像ima1的多个局部区域中任意局部区域的选择时，显示控制部154使显示部130显示特性分布信息dis1。例如，显示控制部154根据特征分布表143，指定与特征空间fs1对应的各局部区域的分布的范围，在特征空间fs1内可视化地配置各局部区域的分布；由此，生成特性分布信息dis1。显示控制部154在特性分布信息dis1中配置的多个分布中，强调与用户选择的局部区域对应的分布。
[0135]
例如，当从用户接受局部区域p(6，5)的选择时，显示控制部154突出局部区域p(6，5)的分布dis(6，5)。尽管省略图示，但是显示控制部154可以放大和显示所选择的局部区域p(6，5)。
[0136]
在从用户接受所选择的局部区域的注册请求时，显示控制部154参考局部区域表142并且将对应于已经接受注册请求的局部区域的roi标记设置为“on”。
[0137]
现在将描述由显示控制部154执行的处理(2)。图15是用于描述由显示控制部154执行的处理(2)的示图。显示控制部154根据特性分布表143生成特性分布信息dis1，使显示部130显示特性分布信息dis1。用户参考特性分布信息dis1并且操作输入部120以选择任何分布。
[0138]
在接受特性分布信息dis1的分布的选择时，显示控制部154使显示部130显示病变图像ima1-1。显示控制部154突出显示与在病变图像ima1-1的多个局部区域中用户选择的分布对应的局部区域。
[0139]
例如，当用户选择特性分布信息dis1的分布dis(6，4)时，显示控制部154突出显示病变图像ima1-1的局部区域p(6，4)。显示控制部154可以显示局部区域p(6，4)被放大的图像ima1-2。
[0140]
在从用户接受局部区域p(6，4)的注册请求时，显示控制部154参考局部区域表142并且将对应于已经接受注册请求的局部区域p(6，4)的roi标志设置为“on”。
[0141]
现在将描述由显示控制部154执行的处理(3)。图16是用于描述由显示控制部154执行的处理(3)的示图。显示控制部154根据特性分布表143生成特性分布信息dis1，使显示部130显示特性分布信息dis1。用户参考特性分布信息dis1并且操作输入部120以选择任意分布(多个分布)。用户可以通过指定特性分布信息dis1的范围来选择多个分布。
[0142]
在接受特性分布信息dis1的分布的选择时，显示控制部154使显示部130显示病变图像ima1-3。显示控制部154突出显示与在病变图像ima1-3的多个局部区域中用户选择的分布对应的局部区域。
[0143]
例如，显示控制部154假定由用户指定范围ran1，并且选择特性分布信息dis1的分布dis(4，3)、dis(4，8)、dis(3，12)、dis(6，4)和dis(6，6)。在这种情况下，显示控制部154突出显示病变图像ima1-3的局部区域p(4，3)、p(4，8)、p(3，12)、p(6，4)和p(6，6)。显示控制部154可以显示局部区域p(4，3)、p(4，8)、p(3，12)、p(6，4)和p(6，6)被放大的图像ima1-4。
[0144]
在从用户接受局部区域p(4，3)、p(4，8)、p(3，12)、p(6，4)和p(6，6)的注册请求时，显示控制部154参考局部区域表142并且将对应于已经接受注册请求的局部区域的roi标记设置为“on”。
[0145]
在已经指定了要注册为roi的局部区域的数量并且范围ran1中包括的局部区域的
分布数量超过指定数量的情况下，显示控制部154可以随机选择范围ran1的局部区域的分布以保持指定数量。此外，显示控制部154可以选择指定数量，使得局部区域的分布分散。通过提供这种功能，例如，可以呈现具有高度不规则性(例如大面积)并且接近肿瘤边缘的局部区域。
[0146]
现在将描述由显示控制部154执行的处理(4)。图17是用于描述由显示控制部154执行的处理(4)的示图。显示控制部154使显示部130显示被划分为多个局部区域的病变图像ima1-5。用户参考病变图像ima1-5并且操作输入部120以选择任意局部区域。
[0147]
在接受病变图像ima1-5的多个局部区域中的任意局部区域的选择时，显示控制部154使显示部130显示特性分布信息dis1。显示控制部154在特性分布信息dis1中布置的多个分布中，突出显示与用户选择的局部区域对应的分布。
[0148]
例如，当从用户接受局部区域p(6，6)的选择时，显示控制部154突出显示局部区域p(6，6)的分布dis(6，6)。在从用户接收局部区域p(6，6)的注册请求时，显示控制部154将对应于局部区域表142的局部区域p(6，6)的roi标志设置为“on”。
[0149]
在从操作输入部120的用户接受显示病变图像ima1-5的请求时，显示控制部154使显示部130显示病变图像ima1-5。显示控制部154参考局部区域表142并且突出显示roi标记是“on”的局部区域p(6，6)。
[0150]
在接受病变图像ima1-5的多个局部区域中的任意局部区域的选择时，显示控制部154使显示部130显示特性分布信息dis1。显示控制部154在特性分布信息dis1中布置的多个分布中，突出显示与用户选择的局部区域对应的分布。此外，显示控制部154突出显示与roi标记是“on”的局部区域对应的分布。
[0151]
例如，当从用户接受局部区域p(3，10)的选择时，显示控制部154突出显示局部区域p(3，10)的分布dis(3，10)。此外，显示控制部154突出对应于roi标记是“on”的局部区域p(6，6)的分布dis(6，6)。显示控制部154可以显示局部区域p(6，6)和p(3，10)被放大的图像ima1-6。
[0152]
现在将描述由显示控制部154执行的处理(5)。图18是用于描述由显示控制部154执行的处理(5)的示图。显示控制部154使显示部130显示被划分为多个局部区域的病变图像ima1-7。用户参考病变图像ima1-7并且操作输入部120以选择任意局部区域。
[0153]
在接受病变图像ima1-7的多个局部区域中的任意局部区域的选择时，显示控制部154使显示部130显示特性分布信息dis3。特性分布信息dis3表示特征空间fs3。例如，假设特征空间fs3的水平轴是与多种特征值中的第五特征值对应的轴。假定特征空间fs3的垂直轴是与频率对应的轴。特征空间fs3对应于直方图。
[0154]
显示控制部154在特性分布信息dis3中配置的多个分布中，突出显示与用户选择的局部区域对应的分布。例如，当从用户接受局部区域p(6，6)的选择时，显示控制部154突出显示局部区域p(6，6)的分布dis(6，6)。在从用户接收局部区域p(6，6)的注册请求时，显示控制部154将对应于局部区域表142的局部区域p(6，6)的roi标志设置为“on”。
[0155]
现在将描述由显示控制部154执行的处理(6)。图19是用于描述由显示控制部154执行的处理(6)的示图。显示控制部154使显示部130显示被划分为多个局部区域的病变图像ima1-8。用户参考病变图像ima1-8并且操作输入部120以选择任意局部区域。
[0156]
在接受病变图像ima1-8的多个局部区域中的任意局部区域的选择时，显示控制部
154使显示部130显示特性分布信息dis1-1。显示控制部154在特性分布信息dis1-1中布置的多个分布中，突出显示与用户选择的局部区域对应的分布。
[0157]
例如，当从用户接受局部区域p(6，4)的选择时，显示控制部154突出显示局部区域p(6，4)的分布dis(6，4)。在从用户接受局部区域p(6，4)的注册请求时，显示控制部154将对应于局部区域表142的局部区域p(6，4)的roi标志设置为“on”。
[0158]
显示控制部154在使显示部130显示特性分布信息dis1-1时，通过代表点显示所选择的局部区域的分布以外的分布。代表点对应于平均值、中值等。在图19所示的示例中，显示控制部154通过代表点显示局部区域p(6，4)的分布dis(6，4)以外的分布。
[0159]
现在将描述由显示控制部154执行的处理(7)。图20是用于描述由显示控制部154执行的处理(7)的示图。显示控制部154使显示部130显示被划分为多个局部区域的病变图像ima1-9。用户参考病变图像ima1-9并且操作输入部120以选择任何局部区域。
[0160]
在接受病变图像ima1-9的多个局部区域中的任意局部区域的选择时，显示控制部154使显示部130显示特征空间fs1的特性分布信息dis1-1。显示控制部154在特性分布信息dis1-1中布置的多个分布中，突出显示与用户选择的局部区域对应的分布。
[0161]
例如，显示控制部154在接受用户对局部区域p(6，4)的选择时，在特性分布信息dis1-1中突出显示局部区域p(6，4)的分布dis(6，4)。
[0162]
在此，显示控制部154在接受来自用户的变更特征空间的请求时，显示表示变更后的特征空间的特性分布信息。例如，当用户选择了特征空间fs2时，显示控制部154显示特性分布信息dis1-2。显示控制部154在特性分布信息dis1-2中突出显示局部区域p(6，4)的分布dis(6，4)。
[0163]
在从用户接受局部区域p(6，4)的注册请求时，显示控制部154将对应于局部区域表142的局部区域p(6，4)的roi标志设置为“on”。
[0164]
现在将描述由显示控制部154执行的处理(8)。图21是用于描述由显示控制部154执行的处理(8)的示图。当用户指定了特征空间fs1时，显示控制部154根据特性分布表143生成特性分布信息dis1-3，并且使显示部130显示特性分布信息dis1-3。
[0165]
接着，显示控制部154在用户指定特征空间fs2时，根据特性分布表143生成特性分布信息dis1-4，使显示部130显示特性分布信息dis1-4。
[0166]
例如，显示控制部154在用户指定范围ran2、选择了特性分布信息dis1-4的分布dis(2，1)、dis(6，4)、dis(7，4)、dis(1，3)、dis(9，8)、dis(10，11)、dis(8，8)、dis(4，6)并指定特征空间fs1之后，使显示部130显示特性分布信息dis1-5。
[0167]
显示控制部154在特性分布信息dis1-5中显示与在特性分布信息dis1-4中选择的特征空间fs1的分布对应的特征空间fs2的分布。在图21所示的实例中，显示特性分布信息dis1-5的分布dis(2，1)、dis(6，4)、dis(7，4)、dis(1，3)、dis(9，8)、dis(10，11)、dis(8，8)和dis(4，6)，而不显示其他分布。即，在某一特征空间fs1中指定有效区域的情况下，在特征空间fs2中显示与有效区域对应的分布。
[0168]
现在将描述由显示控制部154执行的处理(9)。图22是用于描述由显示控制部154执行的处理(9)的示图。当用户指定了特征空间fs2、fs3时，显示控制部154根据特性分布表143，生成特性分布信息dis1-6，使显示部130显示特性分布信息dis1-6。例如，特征空间fs3的范围ran3内所包含的局部区域的分布与特征空间fs2的范围ran3-1、ran3-2内所包含的
局部区域的分布相对应。
[0169]
当用户将特征空间fs3的范围从ran3改变为ran4时，显示控制部154生成特性分布信息dis1-7，并且使显示部130显示特性分布信息dis1-7。例如，在特征空间fs3的范围ran4所包含的局部区域的分布是特征空间fs2的ran3所包含的局部区域的分布的情况下，显示控制部154仅显示特征空间fs2的ran3所包含的jub区域的分布。即，在某一特征空间fs3中指定范围时，在特征空间fs2中显示对该范围有效的分布。
[0170]
返回图11。分析部155参考局部区域表142并且使用预定分析程序对roi标志变为“on”的局部区域执行分析，并且将最终分析结果输出至显示部130。用户可以在参考分析结果的同时调整用于分析处理的参数。
[0171]
[4.处理过程]
[0172]
接下来，使用图23描述根据本实施方式的生成装置100的处理过程。图23是示出根据本实施方式的生成处理装置的处理过程的流程图。生成装置100的获取部151获取分析目标病变图像(步骤s101)。获取部151获取整个病变图像的特征值(步骤s102)。
[0173]
生成装置100的计算部152以局部区域为单位计算特征值分布信息(步骤s103)。生成部153通过对各特征空间的局部空间的分布进行设定，生成特性分布表143(步骤s104)。
[0174]
生成装置100的显示控制部154显示被划分为多个局部区域的病变图像和特性分布信息(步骤s105)。显示控制部154接受局部区域的选择(步骤s106)。显示控制部154突出显示所选择的局部区域的分布(步骤s107)。
[0175]
在显示控制部154不接受注册所选择的局部区域的指令的情况下(步骤s108：否)，显示控制部154进行到步骤s106。另一方面，在显示控制部154已经接受注册所选择的局部区域的请求的情况下(步骤s108：是)，显示控制部154进行到步骤s109。
[0176]
显示控制部154将与所选择的局部区域对应的roi标志设定为on(步骤s109)。在添加roi的情况下(步骤s110：是)，生成装置100进行至步骤s106。另一方面，在不添加roi的情况下(步骤s110)，生成装置100结束处理。
[0177]
[5.根据本实施方式的生成装置的效果]
[0178]
在根据本实施方式的生成装置100中，生成部153基于病变图像中设置的局部区域的特征值分布信息生成特性分布信息，在该特性分布信息中局部区域在由包括在局部区域中的特征值指定的特征空间上的分布以与与局部区域相关联的方式可视化地布置在特征空间中。由此，可以支持选择具有特性变化的局部区域。
[0179]
此外，当通过使用roi执行分析处理的参数调整时，通过支持选择具有特性变化的局部区域，可以调整具有充分特性变化的roi。因此，当调整结果被应用于另一分析目标区域时，分析处理将不如预期地工作的风险可以降低。
[0180]
生成装置100基于在关于病变的图像中设置的多个局部区域的特征值，通过在特征空间中布置多个局部区域的分布来生成特性分布信息。由此，可以支持选择具有特性变化的多个局部区域。
[0181]
生成装置100显示设置多个局部区域的病变图像和特性分布信息，并且当选择局部区域时，显示对应于所选择的局部区域的特性分布信息的分布。因此，可以容易地掌握病变图像中所选择的局部区域的分布。
[0182]
生成装置100获取对应于病变图像的特征值，并且基于对应于病变图像的特征值
计算局部区域的特征值。由此，能够指定特征空间中的局部区域的分布。
[0183]
生成装置100基于多种特征值中的某些特征值来生成特性分布信息。例如，生成装置100基于多种特征值中的第一组合种类特征值来生成特性分布信息，并且基于第二组合种类特征值来生成另一特性分布信息。由此，可以显示与多种特征值中的用户针对的特征值相对应的特性分布信息。
[0184]
在生成装置100已接受局部区域的注册请求的情况下，生成装置100保存表示已接受注册请求的局部区域的已注册局部区域的信息，并进一步显示与已注册局部区域对应的特性分布信息的分布。因此，可以通告用户已经选择的局部区域(roi)的分布。
[0185]
生成装置100利用特征值的代表值来显示特性分布信息的各分布，在选择了局部区域的情况下，利用由具有该局部区域的特征值指定的扩展的分布来显示所选择的局部区域的分布。由此，能够容易地观察局部区域的分布范围。
[0186]
[6.硬件配置]
[0187]
例如，通过使用具有如图24中所示的配置的计算机1000，获得根据上述每个实施方式的生成装置。在下文中，使用根据本实施方式的生成装置100作为实例给出描述。图24是示出实现生成装置的功能的计算机1000的实例的硬件配置图。计算机1000包括cpu1100、ram1200、rom(只读存储器)1300、hdd(硬盘驱动器)1400、通信接口1500和输入/输出接口1600。计算机1000的每个部分通过总线1050连接。
[0188]
cpu1100基于存储在rom1300或hdd1400中的程序进行操作，并且控制各个部分。例如，cpu1100将存储在rom1300或hdd1400中的程序展开到ram1200上，并且执行与各种程序相对应的处理。
[0189]
rom1300存储诸如当计算机1000被激活时由cpu1100执行的bios(基本输入输出系统)的引导程序、取决于计算机1000的硬件的程序等。
[0190]
hdd1400是非暂时记录要由cpu1100执行的程序、要由程序使用的数据等的计算机可读记录介质。具体地，hdd1400是记录作为程序数据1450的实例的根据本公开的信息处理程序的记录介质。
[0191]
通信接口1500是用于计算机1000连接到外部网络1550(例如，互联网)的接口。例如，cpu1100经由通信接口1500从另一装置接收数据或者向另一装置发送由cpu1100生成的数据。
[0192]
输入/输出接口1600是用于连接输入/输出装置1650和计算机1000的接口。例如，cpu1100经由输入/输出接口1600从诸如键盘和鼠标的输入装置接收数据。此外，cpu1100经由输入/输出接口1600将数据传输至诸如显示器、扬声器或打印机的输出装置。输入/输出接口1600可用作读取记录在预定记录介质(媒介)中的程序等的介质接口。例如，介质是诸如dvd(数字通用盘)或pd(相变可重写盘)的光学记录介质、诸如mo(磁光盘)的磁光记录介质、磁带介质、磁记录介质、半导体存储器等。
[0193]
例如，在计算机1000用作根据实施方式的生成装置100的情况下，计算机1000的cpu1100执行加载到ram1200上的生成程序，以实现获取部151、计算部152、生成部153、显示控制部154、分析部155等的功能。hdd1400存储根据本公开的生成程序等。虽然cpu1100从hdd1400读取程序数据1450并执行程序数据，但是作为另一实例，可以经由外部网络1550从另一装置获取这些程序。
[0194]
[7.结论]
[0195]
一种生成装置，包括生成部。生成部根据在与病变有关的图像中设置的局部区域的特征值，生成分布信息，在该分布信息中将由包含在该局部区域中的特征值指定的特征空间上，该局部区域的分布与该局部区域相关联地视觉化地配置在该特征空间上。由此，可以支持选择具有特性变化的局部区域。
[0196]
生成部通过基于在关于病变的图像中设置的多个局部区域的特征值布置特征空间中的多个局部区域的分布来生成分布信息。由此，可以支持选择在具有特性变化的多个局部区域。
[0197]
生成装置进一步包括显示控制部，显示控制部显示关于病变的图像以及分布信息，在图像中设置了多个局部区域。当选择了局部区域时，显示控制部显示与所选择的局部区域对应的分布信息的分布。因此，可以容易地掌握病变图像中所选择的局部区域的分布。
[0198]
生成装置进一步包括：获取部，获取关于病变的图像的特征值；以及计算部，根据由获取部获取的特征值计算局部区域的特征值。由此，能够指定特征空间中的局部区域的分布。
[0199]
局部区域具有多种特征值，并且生成部基于多种特征值中的一些种类的特征值生成分布信息。生成部基于多种特征值中的第一组合种类特征值生成第一分布信息，并且基于第二组合种类特征值生成第二分布信息。由此，能够显示多种特征值中与用户针对的特征值对应的分布信息。
[0200]
在显示控制部已经接受局部区域的注册请求的情况下，显示控制部保存表示已经接受注册请求的局部区域的已注册局部区域的信息，并且进一步显示与已注册局部区域对应的分布信息的分布。因此，可以通告用户已经选择的局部区域(roi)的分布。
[0201]
显示控制部通过特征值的代表值来显示分布信息的每个分布。在选择了局部区域的情况下，显示控制部通过具有由该局部区域的特征量指定的扩展的分布，显示所选择的局部区域的分布。由此，能够容易地观察局部区域的分布范围。
[0202]
当在分布信息中指定选择范围时，显示控制部显示与包含在选择范围中的局部区域的分布对应的并且在关于病变的图像中设置的局部区域。由此，可以有效地显示对应于包括在选择范围中的局部区域的分布的局部区域。
[0203]
一种诊断支持系统，包括：显微镜；以及软件，用于处理与通过显微镜成像的物体对应的医疗图像，其中，软件(生成程序)使生成装置执行以下处理：基于在关于病变的图像中设置的局部区域的特征值，生成分布信息，在所述分布信息中，局部区域在由局部区域中包括的特征值指定的特征空间上的分布在与局部区域相关联时可视化地布置在特征空间中。由此，可以支持选择具有特性变化的局部区域。
[0204]
在本说明书中描述的效果仅是示例而不是限制性的，并且可以存在其他效果。
[0205]
本技术还可具有以下配置。
[0206]
(1)
[0207]
一种生成装置，包括：
[0208]
生成部，根据在与病变有关的图像中设置的局部区域的特征值，生成分布信息，在该分布信息中将由该局部区域内包含的特征值指定的特征空间上的该局部区域的分布以与该局部区域相关联的状态可视地配置在该特征空间上。
[0209]
(2)
[0210]
根据(1)的生成装置，其中生成部通过基于在关于病变的图像中设置的多个局部区域的特征值将多个局部区域的分布布置在特征空间中来生成分布信息。
[0211]
(3)
[0212]
根据(2)的生成装置，进一步包括：显示控制部，显示关于病变的图像和分布信息，在图像中设置多个局部区域。
[0213]
(4)
[0214]
根据(3)的生成装置，其中当选择了局部区域时，显示控制部显示与所选择的局部区域对应的分布信息的分布。
[0215]
(5)
[0216]
根据(1)至(4)中任一项的生成装置，进一步包括：获取部，获取有关病变的图像的特征值；以及计算部，根据由获取部获取的特征值计算局部区域的特征值。
[0217]
(6)
[0218]
根据(1)至(5)中任一项的生成装置，其中局部区域具有多种特征值，以及生成部根据多种特征值中的一些特征值生成分布信息。
[0219]
(7)
[0220]
根据(6)的生成装置，其中生成部基于多种特征值中的第一组合种类特征值生成第一分布信息，并基于第二组合种类特征值生成第二分布信息。
[0221]
(8)
[0222]
根据(3)的生成装置，其中在显示控制部已经接受局部区域的注册请求的情况下，显示控制部保存表示已经接受注册请求的局部区域的已注册局部区域的信息，并且进一步显示与已注册局部区域对应的分布信息的分布。
[0223]
(9)
[0224]
根据(3)的生成装置，其中显示控制部通过特征值的代表值来显示分布信息的每个分布。
[0225]
(10)
[0226]
根据(9)的生成装置，其中当选择了局部区域时，显示控制部利用具有由局部区域的特征值指定的扩展的分布，显示所选择的局部区域的分布。
[0227]
(11)
[0228]
根据(3)的生成装置，其中当在分布信息中指定选择范围时，显示控制部显示与包含在选择范围中的局部区域的分布对应的局部区域，并且在关于病变的图像中设置局部区域。
[0229]
(12)
[0230]
一种生成方法，包括：
[0231]
通过计算机，
[0232]
根据在与病变有关的图像中设置的局部区域的特征值，生成分布信息，在该分布信息中将在由局部区域内包含的特征值所指定的特征空间上使局部区域的分布在与所述局部区域相关联状态下可视化地布置在特征空间中。
[0233]
(13)
[0234]
一种生成程序，用于使计算机用作：
[0235]
生成部，根据在与病变有关的图像中设置的局部区域的特征值，生成分布信息，在该分布信息中将由该局部区域内包含的特征值指定的特征空间上的该局部区域的分布以与该局部区域相关联的状态可视地配置在该特征空间上。
[0236]
(14)
[0237]
一种诊断支持系统，包括：显微镜；以及用于处理与通过显微镜成像的对象相对应的医疗图像的软件，
[0238]
其中软件
[0239]
使生成装置执行以下处理：根据在与病变有关的图像中设置的局部区域的特征值，生成分布信息，在该分布信息中将由局部区域内包含的特征值所指定的特征空间上的局部区域的分布以与局部区域相关联的状态可见地配置在特征空间中。
[0240]
参考标号列表
[0241]
100 生成装置
[0242]
110 通信部
[0243]
120 输入部
[0244]
130 显示部
[0245]
140 存储部
[0246]
141 病变图像db
[0247]
142 局部区域表
[0248]
143 特性分布表
[0249]
150 控制部
[0250]
151 获取部
[0251]
152 计算部
[0252]
153 生成部
[0253]
154 显示控制部
[0254]
155 分析部。