信息处理装置及信息处理方法与流程

1.本公开涉及信息处理装置及信息处理方法。


背景技术：

2.在日本特开2017-41222号公报中记载有如下技术：预先关联地存储与第1处理相关的信息和与第2处理相关的信息，在使用电子数据而执行的第1处理中发生了错误的情况下，对电子数据执行第2处理。


技术实现要素：

3.近年来，从各种各样的运营商提供了字符识别、翻译、打印等对图像进行处理的服务，组合利用多个处理的情况也增加。作为用户，想要尽可能持续使用性能高的处理的组合，但有时虽然开始使用的性能高，但产生某些问题而使处理延迟等，导致性能下降。
4.于是，本公开的目的在于，在对图像组合使用多个处理的情况下，抑制产生了问题时的性能的下降。
5.根据本公开的第1方案，提供一种信息处理装置，其中，所述信息处理装置具备处理器，所述处理器进行以下处理：基于按照针对图像进行的一系列处理的每个组合而进行测试图像的处理所得到的结果，评价各组合所包含的处理的性能，从多个所述组合中选择所评价出的处理的性能满足第1选择条件的组合来处理正式的图像，在处理了所述正式的图像时的性能满足预先决定的切换条件的情况下，切换为所评价出的处理的性能满足第2选择条件的组合来处理所述正式的图像。
6.根据本公开的第2方案，在处理了所述正式的图像时的性能不满足所决定的基准的情况下满足所述切换条件。
7.根据本公开的第3方案，在由所述测试图像和所述正式的图像表示的信息的形式不同的情况下满足所述切换条件。
8.根据本公开的第4方案，所述处理器在满足了所述切换条件的情况下，在再次进行了使用所述测试图像的所述性能的评价的基础上，切换为满足所述第2选择条件的组合。
9.根据本公开的第5方案，所述处理器在满足了所述切换条件的情况下，在再次进行了使用所述正式的图像的所述性能的评价的基础上，切换为满足所述第2选择条件的组合。
10.根据本公开的第6方案，所述处理器基于针对正式的图像执行与满足所述第1选择条件的组合不同的组合所包含的处理的执行结果，进行再次的所述评价。
11.根据本公开的第7方案，所述处理器在切换为满足所述第2选择条件的组合之后不再满足所述切换条件的情况下，切换为满足所述第1选择条件的组合来处理所述正式的图像。
12.根据本公开的第8方案，所述处理器基于针对正式的图像执行与满足所述第2选择条件的组合不同的组合所包含的处理的执行结果，来判断是否不再满足所述切换条件。
13.根据本公开的第9方案，提供一种信息处理方法，其中，基于按照针对图像进行的
一系列处理的每个组合而进行测试图像的处理所得到的结果，评价各组合所包含的处理的性能，从多个所述组合中选择所评价出的处理的性能满足第1选择条件的组合来处理正式的图像，在处理了所述正式的图像时的性能满足预先决定的切换条件的情况下，切换为所评价出的处理的性能满足第2选择条件的组合来处理所述正式的图像。
14.发明的效果
15.根据所述第1方案，能够在针对图像而组合使用多个处理的情况下，抑制产生了问题时的性能的下降。
16.根据所述第2方案，与不进行切换时相比，能够容易发挥基准以上的性能。
17.根据所述第3方案，与不进行切换时相比，能够难以引起因形式的差异而不能发挥性能这样的情况。
18.根据所述第4方案，能够在切换时间点利用发挥更高性能的组合。
19.根据所述第5方案，每个针对正式的图像利用发挥更高性能的组合。
20.根据所述第6方案，与通过满足第1选择条件的组合再次进行评价的情况相比，能够在切换后容易利用发挥更高性能的组合。
21.根据所述第7方案，能够有效地利用满足第1选择条件的组合。
22.根据所述第8方案，与通过满足第2选择条件的组合再次进行评价的情况相比，能够在切换后容易利用发挥更高性能的组合。
23.根据所述第9方案，在针对图像而组合使用多个处理的情况下，能够抑制产生了问题时的性能的下降。
附图说明
24.图1是表示实施例的信息处理系统的整体结构的图。
25.图2是表示图像处理装置的硬件结构的图。
26.图3是表示外部装置的硬件结构的图。
27.图4是表示由信息处理系统实现的功能结构的图。
28.图5是表示所显示的操作画面的一例的图。
29.图6是表示所显示的顺序图像的一例的图。
30.图7是表示评价结果信息的一例的图。
31.图8是表示切换处理中的动作顺序的一例的图。
具体实施方式
32.[1]实施例
[0033]
图1表示实施例的信息处理系统1的整体结构。信息处理系统1是进行各种信息处理的系统。信息处理系统1具备通信线路2、图像处理装置10、以及多个外部处理装置20-1、20-2、
···
(在不区分它们的情况下称为“外部处理装置20”)。
[0034]
通信线路2是包含移动体通信网及因特网等的通信系统，对与本系统通信的装置等(＝装置、终端及系统等)彼此的数据交换进行中继。在通信线路2中，以有线通信的方式连接有图像处理装置10及外部处理装置20。另外，各装置与通信线路2的通信不限于图1的例子，也可以为有线通信及无线通信中的任意一方。
[0035]
图像处理装置10及外部处理装置20均是进行与图像相关的信息处理(以下称为“图像处理”)的装置。图像处理装置10进行打印、复印、扫描及传真等图像处理。外部处理装置20进行字符识别、翻译、物体识别及图像的文件形式的转换等图像处理。另外，在多个外部处理装置20所执行的图像处理中包含相互重复的图像处理。例如外部处理装置20-1、20-2均执行翻译处理。
[0036]
利用信息处理系统1的用户使用图像处理装置10及外部处理装置20中的至少一方来执行一系列的图像处理。用户例如使图像处理装置10执行文档的扫描处理。接着，用户使外部处理装置20根据被数据化的文档图像执行字符识别处理，使其他外部处理装置20执行识别出的字符的翻译处理。
[0037]
如上所述，在图像处理中存在能够在多个装置中执行的图像处理，但其性能根据装置而各不相同。在信息处理系统1中，进行各装置所进行的图像处理的性能的评价。用户将该评价作为参考，能够使性能更高的装置执行一系列的图像处理。之后详细说明性能的评价方法。
[0038]
图2表示图像处理装置10的硬件结构。图像处理装置10是具备处理器11、存储器12、储存器13、通信装置14、ui(＝user interface：用户接口)装置15、图像读取装置16、以及图像形成装置17的计算机。处理器11例如是cpu(＝central processing unit：中央处理单元)等运算装置，具有寄存器及周边电路等。存储器12是处理器11可读取的记录介质，具有ram(＝random access memory：随机存取存储器)及rom(＝read only memory：只读存储器)等。
[0039]
储存器13是处理器11可读取的记录介质，例如具有硬盘驱动器或闪存等。处理器11通过将ram用作工作区域并执行rom或储存器13所存储的程序，从而控制各硬件的动作。通信装置14是具有天线及通信电路等并进行经由通信线路2的通信的通信单元。
[0040]
ui装置15是向利用图像处理装置10的用户提供的接口。ui装置15例如具有触摸屏，该触摸屏具有作为显示单元的显示器和设置在显示器的表面上的触摸面板，ui装置15显示图像，并且受理来自用户的操作。此外，ui装置15除了具有触摸屏以外还具有键盘等操作件，受理对这些操作件的操作。
[0041]
图像读取装置16是读取表示在纸张等介质上的图像的硬件(所谓的扫描仪)，是从设置于本装置的介质读取图像的图像读取单元。图像形成装置17是在纸张等介质上形成图像的所谓的打印机，是通过一边输送设置于本装置的介质一边例如以电子照片方式转印图像使其定影而在该介质上形成图像的图像形成单元。
[0042]
另外，图像读取装置16及图像形成装置17并不是必须的结构，也可以不设置在图像处理装置10中。在该情况下，图像处理装置10与外部的图像读取装置16及图像形成装置17(也可以仅为它们中的一方)之间收发图像数据而进行图像处理即可。
[0043]
图3表示外部处理装置20的硬件结构。外部处理装置20是具备处理器21、存储器22、储存器23、通信装置24以及ui装置25的计算机。处理器21至ui装置25与图2所示的处理器11至ui装置15是相同种类的硬件。
[0044]
在信息处理系统1中，通过上述各装置的处理器执行程序而控制各部，从而实现以下所述的各功能。各功能所进行的动作也表示为实现该功能的装置的处理器所进行的动作。
[0045]
图4表示在信息处理系统1中实现的功能结构。图像处理装置10具备图像关联处理部101、处理请求部102、性能评价部103、评价结果输出部104、以及正式处理选择部105。外部处理装置20均具备图像关联处理部201。
[0046]
图像处理装置10的图像关联处理部101执行上述的打印处理等各种图像处理。外部处理装置20的图像关联处理部201执行上述的字符识别处理等各种图像处理。图像处理装置10的处理请求部102针对执行图像处理的功能，请求执行由用户请求的图像处理。处理请求部102显示用于受理用户的操作的操作画面。
[0047]
图5表示所显示的操作画面的一例。在图5的例子中，处理请求部102显示出本装置能够执行的图像处理的一览和外部处理装置20能够执行的图像处理的一览。处理请求部102在多个装置能够执行相同的图像处理的情况下，如图中的“字符识别处理(1)”及“字符识别处理(2)”那样标注分配给各装置的标号来识别。
[0048]
此外，处理请求部102显示出“请选择依次执行的图像处理。”这样的字符串和表示所执行的图像处理的顺序的顺序图像c1。在该操作画面中，用户从图像处理菜单中拖动想要执行的图像处理并放到顺序图像c1中。当进行上述操作时，处理请求部102在顺序图像c1中显示被放开的图像处理。
[0049]
图6表示显示出的顺序图像c1的一例。在图6的(a)的例子中，以第1个执行“扫描处理”、第2个执行“预处理(1)”、第3个执行“字符识别处理(2)”、第4个执行“转换处理(2)”的方式选择图像处理。在图6的(b)的例子中，以第1个执行“扫描处理”、第2个执行“转换处理(1)”、第3个执行“传真处理”的方式选择图像处理。
[0050]
另外，在图6的例子中，一系列处理为3个或4个，但也可以为2个，还可以为5个以上。在进行了按下未图示的执行按钮的操作时，处理请求部102请求各图像关联处理部(图像关联处理部101及图像关联处理部201)执行所选择的图像处理。
[0051]
性能评价部103基于按照针对图像进行的一系列处理的每个组合进行测试图像的处理而得到的结果，评价各组合所包含的处理的性能。一系列处理的组合例如在图6的(a)的例子中是“扫描处理”、“预处理(1)”、“字符识别处理(2)”、“转换处理(2)”这样的组合，在图6的(b)的例子中是“扫描处理”、“转换处理(1)”、“传真处理”这样的组合。
[0052]
性能评价部103所进行的性能评价在用户开始利用信息处理系统1之前预先进行。另外，即便在开始利用后，也可以在追加了新功能时进行性能的评价。在执行了用于进行处理的性能评价的评价操作的情况下，性能评价部103进行性能评价。评价操作例如是决定一系列处理的组合的操作和指定测试图像的操作。
[0053]
决定一系列处理的组合的操作以与图6的例子相同的方式进行。指定测试图像的操作是将预先生成的测试图像的文件上传到图像处理装置10的操作。此外，在包含扫描处理的情况下，进行扫描印刷有测试用的图像的纸张的操作作为指定测试图像的操作。
[0054]
当进行了评价操作时，性能评价部103针对通过评价操作而指定的测试图像，请求处理请求部102进行通过评价操作而决定的一系列处理。处理请求部102按照被请求的那样，请求各图像关联处理部(图像关联处理部101及图像关联处理部201)进行测试图像的处理。各图像关联处理部按照收到的请求，执行测试图像的处理。
[0055]
各图像关联处理部在执行测试图像的处理时，将表示执行后的处理结果的结果信息供给到性能评价部103。结果信息例如是处理所需的时间、用于处理的存储器的大小、识
别出的字符的准确度(字符识别处理的情况)及使用费用等。性能评价部103基于被供给的结果信息，评价上述的各组合所包含的处理的性能。
[0056]
性能评价部103例如生成将一系列处理的组合与性能的顺序对应起来的评价结果信息。
[0057]
图7表示评价结果信息的一例。在图7的例子中，预处理和字符识别处理的四种组合(组合1＝(1)和(1)、组合2＝(1)和(2)、组合3＝(2)和(1)、组合4＝(2)和(2))与性能的顺序对应起来。
[0058]
在组合1中，准确度是第1，但处理时间和使用费用是第4，存储器容量是第3。在组合2中，准确度和存储器容量是第2，处理时间和使用费用是第3。在组合3中，处理时间和使用费用是第2，准确度是第3，存储器容量是第4。在组合4中，准确度是第4，但处理时间、存储器容量及使用费用是第1。性能评价部103将生成的评价结果信息供给到评价结果输出部104。
[0059]
评价结果输出部104基于所供给的评价结果信息，输出针对至少2个一系列处理的组合的评价结果。评价结果输出部104将评价结果输出到正式处理选择部105。正式处理选择部105基于输出的评价结果，从多个处理的组合中选择评价出的处理的性能满足预先决定的第1选择条件的组合。
[0060]
正式处理选择部105例如在处理的性能的评价结果以图7那样的顺位表示的情况下，判断为成为平均顺位最高的顺位的组合满足第1选择条件。在图7的例子中，组合1、2、3、4的平均顺位为(1 4 3 4)
÷
4＝3、(2 3 2 3)
÷
4＝2.5、(3 2 4 2)
÷
4＝2.75、(1 4 3 4)
÷
4＝1.75，因此，正式处理选择部105判断为组合4满足第1选择条件。另外，正式处理选择部105也可以按照每个性能的种类进行加权来判断平均顺位。
[0061]
正式处理选择部105选择判断为满足第1选择条件的组合，将所选择的组合供给到处理请求部102。处理请求部102请求各图像关联处理部执行被供给的组合所示的一系列处理。各图像关联处理部通过所请求的一系列处理，即，由正式处理选择部105选择的组合的处理，来处理正式的图像。
[0062]
各图像关联处理部在执行正式的图像的处理时，将表示执行后的处理结果的结果信息供给到性能评价部103。性能评价部103基于被供给的正式的结果信息，与实施例同样地评价各组合所包含的处理的性能。性能评价部103生成表示正式图像中的评价结果的评价结果信息并供给到评价结果输出部104。
[0063]
评价结果输出部104判断对正式的图像进行了处理时的性能是否满足预先决定的切换条件。在本实施例中，评价结果输出部104在对正式的图像进行了处理时的性能不满足决定的基准的情况下，判定为满足了切换条件。评价结果输出部104例如预先将各处理的处理时间的阈值决定为基准，关于对正式的图像进行了处理时的处理时间为阈值以上的处理，处理的性能未达到基准，判定为满足了切换条件。
[0064]
评价结果输出部104在判定为满足了切换条件的情况下，将这一旨意向性能评价部103通知。性能评价部103在收到该通知的情况下，即，在满足了切换条件的情况下，再次使用测试图像进行性能的评价。评价结果输出部104将再次进行的评价的结果向正式处理选择部105输出。正式处理选择部105基于输出的评价结果，从多个处理的组合中选择评价出的处理的性能满足预先决定的第2选择条件的组合。
[0065]
第2选择条件是与满足第1选择条件的组合不同的组合所满足的条件。正式处理选择部105例如在处理的性能的评价结果以图7那样的顺位表示的情况下，判断为成为平均顺位第2高的顺位的组合满足第2选择条件。在图7的例子中，正式处理选择部105将平均顺位第2高的组合2选择为执行正式的处理的组合。
[0066]
处理请求部102请求各图像关联处理部执行由正式处理选择部105选择的组合所示的一系列处理。各图像关联处理部通过所请求的一系列处理、即满足第2选择条件的组合的处理来处理正式的图像。
[0067]
这样，各图像关联处理部在对正式的图像进行了处理时的性能满足切换条件的情况下，切换为评价出的处理的性能满足第2选择条件的组合来处理正式的图像。此外，各图像关联处理部在满足了切换条件的情况下，再次进行使用了测试图像的性能的评价，在此基础上，切换为满足第2选择条件的组合。
[0068]
图像处理装置10通过上述的结构，评价一系列处理的性能，在正式的处理中不能发挥评价那种程度的性能的情况下，进行切换处理的组合的切换处理。
[0069]
图8表示切换处理中的动作顺序的一例。首先，图像处理装置10(性能评价部103)受理用于进行处理的性能评价的评价操作(决定一系列处理的组合的操作及指定测试图像的操作)(步骤s11)。
[0070]
接着，图像处理装置10(处理请求部102)针对通过评价操作指定的测试图像，请求各图像关联处理部进行通过评价操作而决定的一系列处理(步骤s12)。接下来，图像处理装置10(性能评价部103)基于按照针对图像进行的一系列处理的每个组合而进行测试图像的处理所得到的结果，评价各组合所包含的处理的性能(步骤s13)。
[0071]
接着，图像处理装置10(正式处理选择部105)基于输出的评价结果，从多个处理的组合中选择评价出的处理的性能满足预先决定的第1选择条件的组合(步骤s14)。接下来，图像处理装置10(处理请求部102)请求各图像关联处理部执行所选择的组合所示的一系列处理(步骤s15)。
[0072]
接着，图像处理装置10(评价结果输出部104)判断处理了正式的图像时的性能是否满足切换条件(步骤s21)。图像处理装置10(评价结果输出部104)在判断为处理了正式的图像时的性能不满足切换条件(否)的情况下，结束该动作顺序。在步骤s21中判断为满足切换条件(是)的情况下，图像处理装置10(性能评价部103)再次进行使用了测试图像的性能的评价(步骤s22)
[0073]
接着，图像处理装置10(正式处理选择部105)基于步骤s22中的评价结果，从多个处理的组合中选择评价出的处理的性能满足预先决定的第2选择条件的组合(步骤s23)。接下来，图像处理装置10(处理请求部102)请求各图像关联处理部执行所选择的组合所示的一系列处理(步骤s24)。图像处理装置10在步骤s24之后返回到步骤s21进行动作。
[0074]
如上所述，信息处理系统1针对图像组合使用多个处理。而且，基于进行测试图像的处理而得到的结果来评价各处理的性能，例如选择评价最高的组合。但是，例如当在系统中存在不良情况等问题时，有时不能发挥评价那样的性能。在这样的情况下，在本实施例中，通过切换要使用的处理的组合，与不进行切换的情况相比，抑制了产生问题时的性能的下降。
[0075]
此外，在本实施例中，在处理了正式的图像时的性能不满足决定的基准的情况下
进行切换，因此，与在该情况下不进行切换时相比，容易发挥基准以上的性能。此外，在切换时再次进行性能的评价，因此，在切换时间点利用发挥更高性能的组合。
[0076]
[2]变形例
[0077]
上述实施例只不过是本公开的实施的一例，也可以如以下那样变形。此外，实施例及各变形例也可以根据需要组合地实施。
[0078]
[2-1]切换条件
[0079]
在实施例中，使用了在处理了正式的图像时的性能不满足所决定的基准的情况下满足的切换条件，但不限于此。例如，也可以将如下的条件用作切换条件，即，该条件是在从利用测试图像评价出的性能向处理了正式的图像时的相对于性能下降的下降率为阈值以上的情况下满足的条件。
[0080]
评价结果输出部104例如在处理时间的情况下，当正式的图像的处理时间t2比测试图像的处理时间t1长而使性能下降的情况下，例如将(t2-t1)
÷
t1计算为性能的下降率。这样，性能的下降率只要是性能越下降则越大的值即可。评价结果输出部104在计算出的下降率为阈值以上的情况下，判断为满足了切换条件。
[0081]
此外，也可以将在由测试图像和正式的图像表示的信息的形式不同的情况下满足的条件用作切换条件。例如如果是包含字符的图像，则在信息的形式中包含字体形式和手写形式。评价结果输出部104判断测试图像及正式的图像所包含的字符的形式，在判断的形式不同的情况下判断为满足了切换条件。由此，与在形式不同的情况下不进行切换时相比，难以引起因形式的差异而不能够发挥性能这样的情况。
[0082]
[2-2]再次的评价
[0083]
在实施例中，性能评价部103在满足了切换条件的情况下，再次进行了使用测试图像的性能的评价，但也可以再次进行不使用测试图像而使用了正式的图像的性能的评价。在该情况下，各图像关联处理部在满足了切换条件的情况下，再次进行使用了正式的图像的性能的评价，在此基础上，切换为满足第2选择条件的组合。由此，针对正式的图像而利用发挥更高性能的组合。
[0084]
另外，性能评价部103也可以基于针对正式的图像执行与满足第1选择条件的组合不同的组合所包含的处理的执行结果，进行再次的评价。由于在切换后通过与满足第1选择条件的组合不同的组合执行处理，因此与通过满足第1选择条件的组合进行再次的评价的情况相比，在通过在切换后可能被使用的其他组合进行了再次的评价的情况下，容易在切换后利用发挥更高性能的组合。
[0085]
[2-3]第1选择条件的重新利用
[0086]
在实施例中，各图像关联处理部在满足了切换条件的情况下，切换为所评价出的处理的性能满足第2选择条件的组合而处理了正式的图像，但在切换为满足第2选择条件的组合之后，例如有时由于系统的不良情况等影响而不再满足切换条件。
[0087]
在该情况下，各图像关联处理部也可以切换为满足第1选择条件的组合来处理正式的图像。是否不再满足切换条件的判断与实施例同样地由评价结果输出部104进行即可。即便针对满足第1选择条件的组合而满足了切换条件，当其原因是系统的暂时性错误等并经过了时间时，也有时会消除。
[0088]
在该情况下，即便再次使用满足第1选择条件的组合，也不满足切换条件。例如如
果将处理的性能最高的组合所满足的条件决定为第1选择条件，则根据本变形例，满足这样的第1选择条件的组合即处理的性能最高的组合有效地被利用。
[0089]
另外，评价结果输出部104也可以基于针对正式的图像执行与满足第2选择条件的组合不同的组合所包含的处理的执行结果，来判断是否不再满足切换条件。不同的组合可以是满足第1选择条件的组合，也可以是满足与第1选择条件及第2选择条件不同的选择条件的组合。
[0090]
在第二次切换后，通过与满足第2选择条件的组合不同的组合来执行处理，因此，与通过满足第2选择条件的组合进行再次的评价的情况相比，在通过在切换后可能被使用的其他组合进行了再次的评价的情况下，容易在切换后利用发挥更高性能的组合。
[0091]
[2-4]功能结构
[0092]
在信息处理系统1中实现的功能结构不限于图4所表示的结构。例如，在实施例中，图像处理装置10的评价结果输出部104进行了评价的结果的输出和是否满足切换条件的判断，但也可以由不同的功能分别进行这些动作。
[0093]
此外，例如也可以由1个功能进行性能评价部103及评价结果输出部104所进行的动作。此外，也可以由2个以上的信息处理装置或云服务提供的计算机资源来实现图像处理装置10所实现的功能。总之，如果图像处理系统整体上实现图4所表示的功能，则可以自由地决定各功能所进行的动作的范围及实现各功能的装置。
[0094]
[2-5]处理器
[0095]
在上述各实施例中，处理器是指广义的处理器，包含通用的处理器(例如cpu：central processing unit(中央处理单元)等)、专用的处理器(例如gpu：graphics processing unit(图形处理单元)、asic：application specific integrated circuit(专用集成电路)、fpga：field programmable gate array(现场可编程门阵列)、可编程逻辑器件等)。
[0096]
此外，上述各实施例中的处理器的动作不仅通过1个处理器完成，也可以通过存在于物理上分离的位置的多个处理器协同配合地完成。此外，处理器的各动作的顺序不仅仅限定于在上述各实施例中记载的顺序，也可以适当变更。
[0097]
[2-6]公开的范畴
[0098]
除了图像处理装置及外部处理装置等信息处理装置之外，本公开也被视为具备各信息处理装置的信息处理系统(信息处理系统1是其一例)。此外，本公开也被视为用于实现各信息处理装置所实施的处理的信息处理方法，还被视为用于使控制各信息处理装置的计算机发挥功能的程序。该程序可以以存储有该程序的光盘等记录介质的方式提供，也可以以经由因特网等通信线路下载到计算机并对其进行安装而能够利用等的方式提供。