通知控制装置、通知控制系统和通知控制方法与流程

1.本公开涉及通知控制装置、通知控制系统和通知控制方法。


背景技术：

2.以往存在一种通过图像或声音来进行向用户通知关于设备执行的处理的技术(参照专利文献1)。
3.现有技术文献
4.专利文献
5.专利文献1：日本特开2015-138538号公报


技术实现要素：

6.本发明要解决的问题
7.然而，如果与通知对象即用户的状态或行动无关地进行通知，则存在对用户的通知不适当的问题。
8.因此，本公开提供了一种适当地进行从设备向用户的通知的通知控制装置等。
9.解决问题的手段
10.本公开的通知控制装置，具备：取得部，取得与设备的动作相关的通知信息；第一通知控制部，发送使第一器件进行以所述通知信息为内容的第一通知的第一通知控制信号，并且取得所述第一通知后的针对所述第一器件的第一响应信息，判定所述第一响应信息是否是针对所述通知信息的响应；第二通知控制部，在所述第一通知控制部判定为所述第一响应信息不是针对所述通知信息的响应的情况下，发送使第二器件进行第二通知的第二通知控制信号，并且取得所述第二通知后的针对所述第二器件的第二响应信息，判定所述第二响应信息是否是针对所述通知信息的响应，所述第二通知以所述通知信息为内容，并且形态与所述第一通知不同；以及中止部，在所述第一通知控制部判定为所述第一响应信息是针对所述通知信息的响应的情况下，或者在所述第二通知控制部判定为所述第二响应信息是针对所述通知信息的响应的情况下，发送中止处理信号，所述中止处理信号使所述第一器件以及所述第二器件中止以所述通知信息为内容的通知。
11.根据上述方案，通知控制装置在发出了第一通知之后，在用户对第一通知没有响应的情况下进行第二通知，之后在对第一通知或者第二通知有响应的情况下中止通知。这样，通知控制装置在考虑是否有用户的响应的同时利用两个不同方式的通知，因此能够避免向已经识别了通知的内容的用户再次进行相同内容的通知，或者以用户不接受的形态反复进行通知。这样，通知控制装置能够适当地进行从设备向用户的通知。另外，还具有抑制用于通知的装置的处理负载的上升和功耗的上升并且抑制用户感到不快的效果。
12.另外，也可以是，在从发送所述第一通知控制信号起的规定时间以内判定为所述第一响应信息以及所述第二响应信息都不是针对所述通知信息的响应的情况下，所述第一通知控制部再次发送所述第一通知控制信号作为所述第一通知控制信号。
13.根据上述方案，通知控制装置在第一通知和第二通知之后，在用户对任一通知都没有响应的情况下，还进行第一通知的再次发送，因此能够使通过上述通知而未能接受通知的用户通过再次发送来接受通知。此外，能够避免对接受上述通知而进行了响应的用户进一步进行相同的通知。因此，通知控制装置能够一边进行第一通知的再次发送，一边更适当地进行从设备向用户的通知。
14.另外，也可以是，所述第一通知控制部发送使所述第一器件通过声音的输出来进行所述第一通知的信号作为所述第一通知控制信号，所述第二通知控制部发送使所述第二器件通过图像的显示来进行所述第二通知的信号作为所述第二通知控制信号。
15.根据上述方案，通知控制装置使用声音的输出作为第一通知，使用图像的显示作为第二通知。基于声音的通知的特征在于当输出与该通知相关的声音时需要被收听，而图像通知的特征在于只要是该图像被维持显示的状态随时都可以被用户接收。因此，通过使用基于声音的输出的通知和基于图像的显示的通知，用户更容易接受该通知。因此，通知控制装置能够使用基于声音的输出的通知和基于图像的显示的通知，适当地进行从设备向用户的通知。
16.另外，也可以是，在所述第一通知控制部取得了声音信号作为所述第一响应信息的情况下发送的所述中止处理信号，是在所述第一通知控制部取得了与针对所述设备的所述第一通知对应的所述操作信号作为所述第一响应信息时发送的中止处理信号。
17.根据上述方案，通知控制装置即使在取得了用户对作为第一通知的声音的输出的声音响应时，也在等待用户对设备进行行动之后中止通知。由此，能够防止用户仅进行基于声音的响应而忘记进行针对设备的行动。因此，通知控制装置可以在进一步促进用户针对设备进行行动的同时更适当地执行从设备到用户的通知。
18.另外，也可以是，在所述第二通知控制部取得了所述操作信号作为所述第二响应信息的情况下发送的所述中止处理信号，是在所述第二通知控制部取得了与针对所述设备的所述第二通知对应的操作信号作为所述第二响应信息时发送的中止处理信号。
19.根据上述方案，通知控制装置即使在取得了用户对作为第二通知的图像的显示的基于操作的响应时，也在等待用户进行针对设备的行动之后中止通知。由此，能够防止用户仅进行基于操作的响应而忘记进行针对设备的行动。因此，通知控制装置可以在进一步促进用户针对设备进行行动的同时更适当地执行从设备到用户的通知。
20.另外，本公开的通知控制系统，具备上述的通知控制装置、进行所述第一通知的所述第一器件以及进行所述第二通知的所述第二器件。
21.根据上述方案，起到与上述信息处理装置同样的效果。
22.另外，本公开的通知控制方法是通知控制装置执行的通知控制方法，其中，包括：取得步骤，取得与设备的动作相关的通知信息；第一通知控制步骤，发送使第一器件进行以所述通知信息为内容的第一通知的第一通知控制信号，并且取得所述第一通知后的针对第一器件的第一响应信息，判定所述第一响应信息是否是针对所述通知信息的响应；第二通知控制步骤，在所述第一通知控制步骤中判定为所述第一响应信息不是针对所述通知信息的响应的情况下，发送使第二器件进行第二通知的第二通知控制信号，并且取得所述第二通知后的针对第二器件的第二响应信息，判定所述第二响应信息是否是针对所述通知信息的响应，所述第二通知以所述通知信息为内容，并且形态与所述第一通知不同；以及中止步
骤，在所述第一通知控制步骤中判定为所述第一响应信息是针对所述通知信息的响应的情况下，或者在所述第二通知控制步骤中判定为所述第二响应信息是针对所述通知信息的响应的情况下，发送中止处理信号，所述中止处理信号使所述第一器件以及所述第二器件中止以所述通知信息为内容的通知。
23.根据上述方案，起到与上述信息处理装置同样的效果。
24.此外，这些概括性或具体的方案既可以通过系统、方法、集成电路、计算机程序或计算机可读取的cd-rom等记录介质来实现，也可以通过系统、方法、集成电路、计算机程序以及记录介质的任意组合来实现。
25.发明的效果
26.本公开的通知控制装置能够适当地进行从设备向用户的通知。
附图说明
27.图1是表示实施方式的通知控制系统和通知控制装置的结构的说明图。
28.图2是表示在实施方式的通知控制装置的控制下进行的通知的说明图。
29.图3是表示通过实施方式的中止处理而被中止的通知的第一说明图。
30.图4是表示通过实施方式的中止处理而被中止的通知的第二说明图。
31.图5是表示实施方式的中止处理的例子的说明图。
32.图6a是表示实施方式的基于图像的通知的第一例的说明图。
33.图6b是表示实施方式的基于图像的通知的第二例的说明图。
34.图6c是表示实施方式的基于声音的通知的例子的说明图。
35.图7是表示实施方式的用户的响应的各种形态的第一说明图。
36.图8是表示实施方式的用户的响应的各种形态的第二说明图。
37.图9是表示实施方式的通知控制装置的处理的流程图。
具体实施方式
38.以下，参照适当的附图，详细说明实施方式。但是，有时会省略不必要的详细说明。例如，有时省略已经公知的事项的详细说明或对于实质上相同的结构的反复说明。这是为了避免以下的说明不必要地变得冗长，使本领域技术人员容易理解。
39.此外，发明人为了本领域技术人员充分理解本公开而提供附图和以下说明，并不旨在通过这些来限定记载于所要保护的范围中的主题。
40.以下，在详细说明本发明的背景以及本发明要解决的课题之后，说明实施方式。
41.以往，使用洗衣机或空调等家电设备(也简称为设备)。设备在报告基于用户的指示进行了动作时，或者在催促用户行动时等，向用户进行通知。
42.从设备向用户的通知一般有基于声音的通知或基于图像的通知等。由设备进行的通知根据其方式，对于用户具有以下优点和缺点。
43.例如，基于声音的通知有如下优点：不仅是关注设备的用户，未关注设备的状态的用户也可以接收。另一方面，基于声音的通知需要在输出该通知的声音时被听取，换言之，存在如下缺点：在未输出声音时(更具体而言，输出声音后的时间)用户不能接收。
44.此外，基于图像的通知有如下优点：只要是在该图像被维持显示的状态下，无论何
时见到该正在显示的图像的用户都会接收到图像的通知。另一方面，基于图像的通知有如下缺点：没有看向图像的用户不会注意到而无法接收。
45.以往，存在一种通过图像或声音来进行与设备执行的处理相关的向用户的通知的技术(参照专利文献1)。
46.但是，如果与通知对象即用户的状态或行动无关地进行通知，则会向已经识别了通知的内容的用户再次进行相同内容的通知，或者以用户不接受的形态反复进行通知，从而导致各装置的处理负载上升以及功耗上升。另外，可能成为使用户感到不快的主要原因。
47.这样，以往，可能有从设备向用户的通知不适当的问题。
48.因此，本公开提供了一种适当地进行从设备向用户的包含声音的通知的通知控制装置等。
49.(实施方式)
50.在本实施方式中，说明适当地进行从设备向用户的包含声音的通知的通知控制装置等。
51.图1是表示本实施方式的通知控制系统1和通知控制装置10的结构的说明图。
52.如图1所示，通知控制系统1具备通知控制装置10、扬声器20、以及终端30。此外，通知控制系统1还可以具备设备40。
53.上述各装置具备通信接口，经由网络n可通信地连接。
54.通知控制装置10是控制设备40对用户u进行的通知的控制装置。通知控制装置10从设备40接收表示通知的内容的信息，控制分别由扬声器 20以及终端30进行的向用户u的通知。关于通知控制装置10的结构，将在后面详细说明。此外，说明通知控制装置10设置于用户u的住宅外的结构，但也可以配置于用户u的住宅内，另外，也可以内置于用户u的住宅内的设备(例如，电视接收机等)。
55.扬声器20是对用户u进行基于声音的输出的通知(也称为“基于声音的通知”)的扬声器。扬声器20输出从通知控制装置10取得的声音信号的声音，另外，通过麦克风对周围的声音进行收音来生成声音信号并发送到通知控制装置10。扬声器20在通知控制装置10的控制下对用户u进行基于声音的通知，此外，对用户u的声音进行收音，生成声音信号并发送到通知控制装置10。此外，扬声器20是智能扬声器，另外，也可以内置于配置在用户u的住宅内的设备(例如，空调等)。
56.终端30是对用户u进行基于图像的显示的通知(也称为“基于图像的通知”)的信息终端装置。终端30至少具备显示图像的显示画面和受理用户 u对所显示的图像的操作的操作器件。显示画面和操作器件可以通过触摸面板显示器来实现。此外，终端30是智能电话、平板电脑或个人计算机等，此外，也可以内置于配置在用户u的住宅内的设备(例如，电视接收机等)。
57.设备40是进行规定的动作的电气设备。设备40例如是洗衣机，以该情况为例进行说明，但也可以是空调、微波炉、电视接收机、录像机或电饭煲等。
58.设备40将与设备40的动作相关的信息发送到通知控制装置10。通知控制装置10基于与动作相关的信息的内容，将与设备40的动作相关的信息中的应该通知给用户u的信息判断为通知信息。然后，对于判断为通知信息的信息，作为在由通知控制装置10进行的控制下的通知信息的基于声音的通知或基于图像的通知。
59.具体而言，首先，通知控制装置10取得与设备40的动作相关的信息。通知控制装置10根据所取得的与动作相关的信息的内容来判断该信息是否是应该通知给用户u的信息。例如，在设备40是洗衣机的情况下，在与动作相关的信息是与“洗涤动作的结束”相关的信息时，设为该信息是应该通知给用户u的信息，判断为是“通知信息”。另一方面，在设备40是洗衣机的情况下，在与动作相关的信息是与“向漂洗工序的变化”相关的信息时，设为该信息不是应该通知给用户u的信息，判断为不是“通知信息”。
60.另外，通知控制装置10根据与动作有关的信息的内容判断是否是应该通知给用户u的信息即可，也可以是使用预先确定的表的方式。此外，除了与设备40的动作相关的信息之外，通知控制装置10还可以将用户的设定信息或与设备40关联的外部信息判断为通知控制装置10应该通知给用户u的信息(即通知信息)。例如，在设备40是洗衣机的情况下，在与动作相关的信息是与“洗涤动作的结束”相关的信息时，通知控制装置10也可以取得与天气相关的外部信息，如果洗涤结束后的天气是适合于洗涤物的干燥的天气(例如晴朗等)，则将包含催促用户u进行晾干洗涤物的作业的内容的信息判断为通知信息。
61.此外，设备40可以与经由通知控制装置10的上述通知独立地直接进行针对用户u的通知。此外，设备40可以判断与设备40的动作相关的信息中的应该通知给用户u的信息(通知信息)，并且可以将通知信息发送到通知控制装置10。
62.以下，对通知控制装置10进行详细说明。
63.如图1所示，通知控制装置10具备取得部11、声音通知控制部12、图像通知控制部13和中止部14。上述各功能部可以通过通知控制装置10 所具备的处理器(未图示)使用存储器(未图示)执行程序来实现。
64.取得部11是取得与设备40的动作相关的通知信息的功能部。通知信息包含预先确定的多个通知信息中的一个通知信息。通知信息例如是表示作为设备40的洗衣机结束了洗涤的动作的通知信息。该通知信息也可以说表示需要用户u取出洗涤结束后的洗涤物的行动。此外，取得部11可以从经由网络与设备40连接的服务器取得与设备40的动作相关的信息和通知信息。
65.声音通知控制部12是控制基于声音的通知的功能部。声音通知控制部 12向扬声器20发送第一通知控制信号，该第一通知控制信号使扬声器20 进行以取得部11取得的通知信息为内容的第一通知。上述第一通知的一例是基于声音的通知。第一通知控制信号是持续进行第一通知或者反复进行一次以上第一通知的信号。在第一通知是基于声音的通知的情况下，第一通知控制信号是使扬声器20反复进行一次以上的基于声音的通知的信号。此外，第一通知控制信号可以是包含反复进行基于声音的通知的控制的信号，也可以是包含与反复进行基于声音的通知相配合地进行基于声音的通知的控制的信号。
66.另外，声音通知控制部12取得基于用户u针对第一通知的行动的响应信息(也称为第一响应信息)，判定第一响应信息是否是针对通知信息的响应。响应信息是表示用户u已经做出响应的信息。响应信息具有预先确定的多个形态中的一个形态。第一响应信息是第一通知后的针对扬声器20的响应信息。这里，以声音通知控制部12取得表示用户u对第一通知发出的声音的声音信号作为第一响应信息的情况为例进行说明。此外，声音通知控制部12也可以取得表示用户u已对设备40进行了行动的操作信号作为第一响应信息。
67.第一响应信息具有规定的多个形态中的任意一个形态。例如，第一响应信息有时
具有表示用户u发出的声音的声音信号的形态，有时具有表示用户u对设备40进行了行动的信号的形态。关于第一响应信息的其他例子将在后面说明。
68.声音通知控制部12取得第一响应信息，在判定第一响应信息是否是针对通知信息的响应时，在进行第一通知之后的规定时间(相当于第一规定时间)以内取得第一响应信息，在判定为第一响应信息是针对通知信息的响应的情况下，发送通知开始信号。这里，第一规定时间具有根据第一响应信息的形态而决定的时间长度。例如，当第一响应信息具有表示用户u发出的声音的声音信号的形态时，第一规定时间可以设为数秒左右或1分钟左右以内，当第一响应信息具有表示用户u已对设备40进行了行动的信号的形态时，第一规定时间可以设为比上述长的、数分钟左右或10分钟左右以内。
69.图像通知控制部13是控制基于图像的通知的功能部。图像通知控制部 13在声音通知控制部12判定为第一响应信息不是针对通知信息的响应的情况下，发送第二通知控制信号，该第二通知控制信号使终端30进行第二通知，该第二通知是以上述通知信息为内容，并且利用与第一通知不同的形态下的通知。上述第二通知的一例是基于图像的通知。第二通知控制信号是使得持续地或反复一次以上地进行第二通知的信号。在第二通知是基于图像的通知的情况下，第二通知控制信号是维持基于图像的通知即图像的显示的信号。
70.另外，图像通知控制部13取得基于用户u针对第二通知的行动的响应信息(也称为第二响应信息)，判定响应信息是否是针对通知信息的响应。第二响应信息是针对第二通知后的终端30的响应信息。这里，以图像通知控制部13取得关于用户u针对第二通知对终端30进行的操作的操作信号作为第二响应信息的情况为例进行说明。另外，图像通知控制部13也可以取得表示用户u已对设备40进行了行动的操作信号作为第二响应信息。关于第二响应信息的其他例子将在后面说明。
71.中止部14是发送中止处理信号的功能部，该中止处理信号使扬声器20 正在执行的第一通知以及终端30正在执行的第二通知中止。当接收到中止处理信号时，扬声器20或终端30执行中止正在执行的第一通知或第二通知的中止处理。中止部14在声音通知控制部12判定为第一响应信息是针对通知信息的响应的情况下、或者图像通知控制部13判定为第二响应信息是针对通知信息的响应的情况下，发送中止处理信号，该中止处理信号使以扬声器20以及终端30的通知信息为内容的第一通知以及第二通知中止。中止处理信号可以是进行删除终端30显示的图像通知的控制的信号，也可以是进行中止扬声器20或终端30反复进行的通知的控制的信号。
72.另外，声音通知控制部12可以在判定为第一响应信息不是针对通知信息的响应的情况下，向图像通知控制部13发送使其发送第二通知控制信号的通知开始信号。
73.此外，在进行第一通知起的规定时间(相当于第二规定时间)以内判定为第一响应信息以及第二响应信息均不是针对通知信息的响应的情况下，声音通知控制部12可以再次发送第一通知控制信号。在这种情况下，中止部14在判定为取得了基于用户u针对所再次发送的第一通知控制信号的行动的第一响应信息的情况下，发送中止处理信号。在此，第二规定时间具有比第一规定时间长的时间长度。
74.也可以是，第一通知包含规定的多个通知信息中的一个通知信息，第二规定时间被确定为具有根据第一通知的内容而确定的时间长度。例如，在设备40是洗衣机的情况下并且在将洗涤结束设为通知信息的情况下，第二规定时间能够设为几分钟左右到1小时左
右。此外，在设备40是微波炉的情况下并且在将食物的加热已结束设为通知信息的情况下，第二规定时间也能够设为从几秒左右到1分钟左右，进而也能够设为从1分钟左右到 10分钟左右，以便在用户u忘记时进行通知。另外，在设备40是吸尘器的情况下并且在将内置于吸尘器的垃圾箱或者垃圾袋内的垃圾的量超过阈值(例如七成等)而接近满箱设为通知信息的情况下，第二规定时间能够设为从几小时到1天左右。
75.另外，作为一例，声音通知控制部12相当于第一通知控制部，图像通知控制部13相当于第二通知控制部。在这种情况下，第一器件相当于扬声器20，第一通知相当于基于声音的通知。此外，第二器件相当于终端30，第二通知相当于基于图像的显示的通知。
76.但是，作为另一例子，也可以构成为，声音通知控制部12相当于第二通知控制部，图像通知控制部13相当于第一通知控制部。在这种情况下，第一通知相当于基于图像的通知，第二通知相当于基于声音的通知。
77.此外，作为又一个例子，设备40可以相当于第一器件，或者，设备40 可以相当于第二器件。
78.以下，说明在通知控制装置10的控制下进行的通知的形态和通知的定时。
79.图2是表示在本实施方式的通知控制装置10的控制下进行的通知的说明图。
80.具体而言，图2以时间序列示出了例如用户u不对通知作出响应的情况下，在通知控制装置10的控制下分别由扬声器20和终端30进行的通知等的处理。
81.设为设备40在时刻t0结束了动作r1。设备40将表示动作r1结束了的通知信息发送到通知控制装置10。
82.通知控制装置10的取得部11取得设备40发送的通知信息。声音通知控制部12通过向扬声器20发送第一通知控制信息，进行控制使扬声器20 进行基于表示取得部11取得的通知信息的声音的通知n1。其结果，扬声器20在时刻t1进行通知n1。
83.声音通知控制部12进行基于用户u对通知n1的行动的响应信息的接收等待(图2的待机w1)。
84.待机w1在从进行针对扬声器20的通知的控制起的规定的待机时间 (相当于第一规定时间)以内的期间进行。在声音通知控制部12判定为在上述待机时间内未接收第一响应信息的情况下，图像通知控制部13通过向终端30发送第二通知控制信息，进行控制使终端30进行基于表示上述通知信息的图像的通知m1。其结果，终端30在时刻t11进行通知m1。
85.声音通知控制部12在进行通知n1后的规定的再次发送间隔(相当于第二规定时间)以内判定为未接收第一响应信息以及第二响应信息的情况下，不向扬声器20发送中止处理信号。扬声器20进行通知n1的再次发送即通知n2。
86.然后，声音通知控制部12在进行通知n2后的规定的再次发送间隔以内判定为未接收第一响应信息以及第二响应信息的情况下，不向扬声器20 发送中止处理信号，扬声器20进行通知n1的第二次再次发送即通知n3。扬声器20之后也反复进行通知n1的再次发送。另外，再次发送也可以在达到规定的再次发送次数(5次或10次等)的情况下中止。
87.这样，通知控制装置10进行控制，使得在基于声音的通知后没有用户 u针对声音的通知的响应的情况下进行基于图像的通知，并且进一步进行基于声音的通知的再次发送。由此，能够一边通过最初的基于声音的通知来引起用户u的注意，一边令其接收通知。此外，不能听取该声音的用户 u能够使用基于图像的通知来令其接收通知。此外，通过之后也
反复进行基于声音的通知的再次发送，能够一边引起用户u注意，一边并用基于图像的通知而令其接收通知。而且，由于这一系列的处理在等待取得来自用户u的响应信息的同时进行，因此可以抑制用户u感到不快。这样，通知控制装置10能够适当地进行从设备40到用户u的通知。
88.图3是表示本实施方式的由中止处理中止的通知的第一说明图。
89.具体而言，关于在通知控制装置10的控制下扬声器20和终端30分别进行通知等的处理，图3以时间序列示出了在用户u对基于图像的通知进行了响应的情况下扬声器20和终端30分别进行的处理。
90.图3示出在通知控制装置10的控制下扬声器20进行通知n1、终端30 进行通知m1的处理，图3所示的处理与图2所示的处理相同。
91.之后，设为用户u进行了基于针对终端30的图像的操作的响应rp。
92.终端30如果接收到由用户u进行的响应rp，则生成响应信息并发送到图像通知控制部13。图像通知控制部13从终端30接收响应信息，由此，中止部14向扬声器20和终端30发送使基于声音的通知和基于图像的通知中止的中止处理信号。中止处理信号的发送的结果是，时刻t12以后的基于图像的通知和基于声音的通知的再次发送即通知n2被中止。另外，终端 30也可以在接收到由用户u进行的响应rp后，进行使基于图像的通知中止的中止处理，将进行了中止处理的内容生成为响应信息。
93.图4是表示通过本实施方式的中止处理中止的通知的第二说明图。
94.具体而言，关于在通知控制装置10的控制下扬声器20和终端30分别进行通知等的处理，图4以时间序列示出了在用户u对基于声音的通知进行了响应的情况下，扬声器20和终端30分别进行的通知。
95.图4所示的、在通知控制装置10的控制下扬声器20进行通知n1、终端30进行通知m1，扬声器20进行通知n2的处理与图2所示的处理相同。
96.之后，设为用户u进行了基于声音的响应rp。
97.扬声器20如果接收到由用户u进行的响应rp，则生成响应信息并发送到声音通知控制部12。声音通知控制部12从扬声器20接收响应信息，由此，中止部14通过执行使基于声音的通知和基于图像的通知中止的中止处理，将中止处理信号发送到扬声器20和终端30。中止处理的结果是，使时刻t13之后的基于图像的通知和基于声音的通知的再次发送即通知n3中止。
98.以下，说明中止处理的各种例子。
99.在中止处理中，如上所述，也可以立即使基于声音的通知和基于图像的通知中止。此外，也可以是，在中止处理中，在等待直到规定的条件被满足之后，使基于声音的通知和基于图像的通知中止。参照图5说明在等待规定的条件被满足之后使通知中止的情况下的扬声器20和终端30的处理。
100.在此，规定的条件例如可以是从开始中止处理起经过规定时间(几秒～几分钟左右)、或者接收到表示接收了规定种类的响应的响应信息。规定种类的响应的一例是用户u针对与通知信息相关的设备40进行行动的形态 (参照后述的图8的(d))，并且图5示出了这种情况。
101.图5是表示本实施方式的中止处理的例子的说明图。
102.具体而言，关于在通知控制装置10的控制下扬声器20和终端30分别进行的通知等的处理，图5以时间序列示出了用户u对基于图像的通知进行了响应的情况下扬声器20和终端30分别进行的处理。
103.在图5中，直到做出用户u的响应rp为止的处理与图3中的情况相同。
104.通知控制装置10从终端30接收表示进行了用户u的基于声音的响应rp的响应信息时，开始中止处理(时刻t21)。在该时间点，通知控制装置 10不使基于声音的通知和基于图像的通知中止而继续。
105.之后，设为在通过由声音通知控制部12进行的控制而进行了基于声音的通知n2和n3之后，进行了用户u的响应rpa。响应rpa是基于针对设备40的行动的响应。设备40将表示进行了用户u的响应rpa的响应信息发送到通知控制装置10。此外，上述响应信息的发送源不限于设备40，也可以是扬声器20或终端30。
106.在中止处理中，中止部14接收表示进行了用户u的响应rpa的响应信息时，通过向扬声器20和终端30发送中止处理信号，使基于声音的通知和基于图像的通知中止(时刻t22)。中止处理的结果是，时刻t14之后的基于图像的通知和基于声音的通知的再次发送即通知n4被中止。
107.即，中止部14根据在图像通知控制部13取得了操作信号作为第二响应信息的情况下发送的中止处理信号，在图像通知控制部13取得了表示用户u对设备40进行了行动的信号作为第二响应信息时，发送中止处理信号。
108.此外，上述中止处理也适用于当声音通知控制部12取得声音信号作为第一响应信息时执行的中止处理。也就是说，中止部14可以根据声音通知控制部12取得了声音信号作为第一响应信息的情况下所发送的中止处理信号，在声音通知控制部12取得了表示与针对设备40的第二通知对应的操作信号作为第一响应信息时，发送中止处理信号。
109.以这种方式，通知控制装置10能够一边在更可靠地进行向用户u的通知，一边催促用户u基于该通知针对设备40进行行动。在用户u对通知进行了基于声音的响应或基于针对图像的操作的响应的情况下，用户u是否实际进行针对设备40的行动是未知的。因此，如果持续通知直到确认用户u实际进行了针对设备40的行动时为止，并且在能够确认用户u实际进行了针对设备40的行动的情况下中止通知，则能够进一步加强敦促用户 u实际进行针对设备40的行动。
110.图6a和图6b是表示本实施方式的基于图像的通知的例子的说明图。图6a以时间序列示出了在由通知控制装置10进行的控制下的基于图像的通知的例子。此外，图6a所示的终端30的处理与图4不同，图6a所示的终端30的处理以外的处理与图4相同。
111.如上所述，图像通知控制部13通过在终端30的画面上显示图像来进行通知。
112.原则上，图像的显示是通过在终端30所具备的画面上开始图像的显示之后维持该显示来进行的。但是，在终端30允许消除图像的显示的操作的情况下，通过由用户u进行的操作，基于图像的通知被停止。在这种情况下，说明更适当地进行基于图像的通知的技术。
113.图6a示出了如下情况：终端30在由图像通知控制部13进行的控制下在时刻t31开始基于图像的通知m1，之后，通过由用户u进行的操作，消除与通知m1相关的图像。
114.在这种情况下，图像通知控制部13在图像被消除后再次执行进行图像的通知的控制。其结果，终端30在图像被消除后的规定的时刻t32再次执行基于图像的通知m2。例如，图
像通知控制部13监视是否显示有与通知相关的图像，在检测到没有显示图像的情况下再次显示图像，从而进行上述显示。
115.之后，当进行了由用户u进行的响应rp时，基于图像的通知被中止，与上述情况相同。
116.以这种方式，通知控制装置10在由终端30进行的基于图像的通知被中止的情况下，能够通过再次开始基于图像的通知来继续。
117.此外，仅维持图像的显示有时不能重新引起用户u的关注，不能使用户u注意到图像的显示。在这种情况下，说明更适当地进行基于图像的通知的技术。
118.图6b示出了终端30在图像通知控制部13的控制下在时刻t31开始了基于图像的通知m1的情况。
119.在此，在终端30维持图像的显示即一直仅显示图像而没有变化的情况下，用户u有时不会关注到终端30的画面。
120.在这种情况下，图像通知控制部13暂时消除在终端30显示的图像，之后再次通过图像的显示来进行通知m2(时刻t35)。之后也同样地，暂时消除在终端30显示的图像，之后再次通过图像的显示来进行通知m3(时刻 t36)。这样，反复进行图像的显示相当于基于图像的通知的再次发送。
121.之后，当进行了由用户u进行的响应rp时，基于图像的通知被中止的处理与上述相同。
122.通过这样做，能够在引起用户u的新的关注的同时向用户u通知基于图像的通知，能够催促用户u注意到图像的显示。
123.图6c是表示本实施方式的基于声音的通知的例子的说明图。
124.图6c以时间序列示出了在通知控制装置10的控制下进行的基于声音的通知的例子。此外，图6c所示的通知控制装置10以及扬声器20的处理与图4不同，上述处理以外的处理与图4相同。
125.如图6c所示，通知控制装置10通过按照扬声器20的每个再次发送间隔发送通知控制信息，来控制扬声器20的通知的定时。扬声器20接收通知控制装置10发送的通知控制信息，在每次接收时进行通知(具体而言是通知n1以及n2)。
126.在这种情况下，通知控制装置10在接收到响应信息时不对扬声器20 发送中止处理信号，换言之，禁止对扬声器20发送中止处理信号。这是因为，如果通知控制装置10不发送通知控制信息，则扬声器20不会进行通知，所以通过通知控制装置10不发送通知控制信息，能够使由扬声器20 进行的通知(具体而言是通知n3)中止。
127.通过这样做，在接收到由扬声器20进行的、由用户u进行的响应rp 之后的基于图像的通知和基于声音的通知被中止。
128.在图4所示的假定通知控制装置10和扬声器20的处理的情况下，扬声器20需要具备用于按照每个再次发送间隔进行多次通知的定时器功能，以及使多次执行的通知根据中止处理信号的接收而停止的功能。
129.另一方面，在假定图6c所示的通知控制装置10和扬声器20的处理的情况下，扬声器20仅具备在每次接收通知控制信息时进行通知的功能即可，能够简化功能结构。另外，在设为通知控制装置10控制由多个扬声器20 进行的通知的结构的情况下，具有通过修改通
知控制装置10具有的程序，能够变更与由多个扬声器20进行的通知相关的动作的优点。
130.图7和图8是表示本实施方式的由用户u进行的响应的变形形态的说明图。
131.声音通知控制部12或图像通知控制部13能够将以下所示的用户u的声音、操作或行动作为响应来进行处理。
132.图7的(a)示出了基于声音的响应且该响应明确的例子。
133.具体而言，扬声器20进行“洗涤已结束”的基于声音的通知，用户u 对此进行“明白”这样的基于声音的响应。“明白”这样的响应是对通知明确地响应。除上述之外，也可以是“好的”或“知道了”这样的具有肯定的意思的语言。
134.在这种情况下，声音通知控制部12能够判定为用户u对基于声音的通知进行了肯定的响应。
135.图7的(b)示出了基于声音的响应且该响应不明确的例子。
136.具体而言，扬声器20进行“洗涤已结束”的基于声音的通知，用户u 对此如自言自语般地进行“好的、好的”这样基于声音的响应。这里，可以认为“好的、好的”这样的声音并不是对通知明确地响应，但在进行了通知的状况下由用户u发出的自言自语般的“好的、好的”这样的声音可以认为是在暗示接受了通知。除了上述内容之外，也可以是自言自语般的“那去做吧”那样的暗示接受了通知的言语。
137.在这种情况下，声音通知控制部12能够判定为用户u对基于声音的通知进行了肯定的响应。
138.图7的(c)示出了针对图像的响应的例子。
139.具体而言，终端30通过在画面上显示包含“洗涤已结束”的字符串的图像来进行基于图像的通知，用户u对此通过操作附加了“ok”的字符串的图标来进行响应。
140.在这种情况下，声音通知控制部12能够判定为用户u对基于图像的通知进行了肯定的响应。
141.图8的(d)示出了用户u针对设备40的基于行动的响应的例子。
142.具体而言，扬声器20进行“洗涤已结束”的基于声音的通知，用户u 对此通过打开作为设备40的洗衣机的洗涤槽的门，进行取出洗涤物的行动来进行响应。
143.在这种情况下，在传感器检测到洗涤槽的门被打开或者洗涤槽的收纳物的重量减少的情况下，设备40将该检测结果发送到通知控制装置10。通知控制装置10的取得部11从设备40接收上述检测结果并传送到声音通知控制部12。声音通知控制部12能够判定为用户u对基于声音的通知进行了肯定的响应。另外，图8的(d)也能够被利用于对终端30的基于图像的通知的响应。
144.图8的(e)示出了针对反问后的再次通知的无响应的例子。
145.具体而言，设为扬声器20进行“洗涤已结束”的基于声音的通知，由于用户u不能识别该声音，所以进行“刚才说什么？”的反问之后，扬声器20再次进行“洗涤已结束”的基于声音的通知，用户u对此什么也没说 (即无响应)的状态。
146.在这种情况下，对第一次的基于声音的通知进行了反问的用户u对第二次的基于声音的通知无响应被认为是缘于能够识别到第二次的基于声音的通知。因此，声音通知控制部12能够判定为用户u对基于声音的通知进行了肯定的响应。
147.对如上构成的通知控制装置10所执行的处理(也称为通知控制方法)进行说明。
148.图9是表示本实施方式的通知控制装置10的处理的流程图。
149.在步骤s1中，取得部11取得通知信息，该通知信息是与设备40的动作相关的信息。
150.在步骤s2中，声音通知控制部12发送控制信号(第一通知控制信号)，该控制信号使扬声器20进行以步骤s1中取得的通知信息为内容的基于声音的通知。
151.在步骤s3中，声音通知控制部12取得基于用户u针对扬声器20按照步骤s2中发送的控制信号而进行的基于声音的通知的行动的响应信息。声音通知控制部12判定所取得的响应信息是否是针对通知信息的响应。在判定为响应信息是针对通知信息的响应的情况下(在步骤s3中为是)，进入步骤s11，否则(在步骤s3中为否)，进入步骤s4。
152.在步骤s4中，图像通知控制部13发送控制信号(第二通知控制信号)，该控制信号使终端30进行以步骤s1中取得的通知信息为内容的基于图像的通知。
153.在步骤s5中，图像通知控制部13取得基于用户u针对终端30按照步骤s4中发送的控制信号而进行的基于图像的通知的行动的响应信息。图像通知控制部13判定所取得的响应信息是否是针对通知信息的响应。在判定为响应信息是针对通知信息的响应的情况下(步骤s5中为是)，进入步骤 s11，否则(步骤s5中为否)，进入步骤s6。
154.在步骤s6中，声音通知控制部12发送使扬声器20进行表示在步骤 s1中取得的通知信息的基于声音的通知(即再次发送)的控制信号。
155.在步骤s7中，声音通知控制部12取得基于用户u针对扬声器20按照步骤s6中发送的控制信号进行的基于声音的通知的行动的响应信息。声音通知控制部12判定所取得的响应信息是否是针对通知信息的响应。在判定为响应信息是针对通知信息的响应的情况下(步骤s7中为是)，进入步骤 s11，否则(步骤s7中为否)，进入步骤s6。
156.在步骤s11中，中止部14发送使声音通知控制部12的基于声音的通知和图像通知控制部13的基于图像的通知中止的中止处理信号。在步骤s11 结束后，图9所示的一系列处理结束。
157.通过图9所示的一系列处理，通知控制装置能够适当地进行从设备向用户的通知。
158.另外，也可以是，扬声器20具备控制部，声音通知控制部12对扬声器20的控制部仅发送指示扬声器20的动作的信号。同样，也可以是，终端30具备控制部，图像通知控制部13对终端30的控制部仅发送指示终端 30的动作的信号。
159.此外，在本实施方式中，以第一器件和第二器件是不同的装置的情况为例进行了说明，但第一器件和第二器件也可以作为一个装置中的两个功能来实现。例如，能够构成为电视接收机的声音输出的功能相当于第一器件，该电视接收机的影像显示的功能相当于第二器件。
160.(变形例)
161.如上所述，示出了声音通知控制部12或者图像通知控制部13根据是否从扬声器20或者终端30接收到响应信息来判定用户u是否进行了针对通知信息的响应的实施方式，但不限定于该方式。
162.例如，也可以是声音通知控制部12接收扬声器20所取得的声音信息，分析所接收的声音信息，判定用户u是否进行了针对通知信息的响应的方式。同样地，也可以是，图像通知控制部13接收终端30的操作信息，分析所接收的操作信息，判定用户u是否进行了针对通知信息的响应的方式。
163.如上所述，本实施方式的通知控制装置在第一通知之后用户对第一通知没有响应的情况下，进行第二通知。这样，通知控制装置在考虑是否有用户的响应的同时利用两个不同方式的通知，因此能够避免向已经意识到通知内容的用户再次进行相同内容的通知，或者以用户不接受的形态反复进行通知。这样，通知控制装置能够适当地进行从设备向用户的通知。另外，还具有抑制用于通知的装置的处理负载的上升和功耗的上升并且抑制用户感到不快的效果。
164.此外，在第一通知之后到取得响应信息为止的等待时间根据该响应信息的形态来确定，因此通知控制装置能够根据响应信息的形态来调整进行第二通知的定时。因此，通知控制装置能够在进行第二通知的定时的调整的同时，更适当地进行从设备向用户的通知。
165.此外，通知控制装置在第一通知和第二通知之后，在用户对任一通知都没有响应的情况下，进一步进行第一通知的再次发送，因此能够使未能通过上述通知而接收到通知的用户通过再次发送来接收通知。此外，能够避免对接受上述通知而进行了响应的用户进一步进行相同的通知。因此，通知控制装置能够一边进行第一通知的再次发送，一边更适当地进行从设备向用户的通知。
166.此外，通知控制装置根据该通知的内容来确定直到再次发送第一通知为止的等待时间，因此能够根据通知的内容来调整再次发送的定时。因此，通知控制装置能够一边进行第一通知的再次发送定时的调整，一边更适当地进行从设备向用户的通知。
167.另外，通知控制装置使用声音的输出作为第一通知，使用图像的显示作为第二通知。基于声音的通知的特征在于在输出与该通知相关的声音时需要被收听，另一方面，基于图像的通知的特征在于只要是该图像的显示被维持的状态就可以随时被用户接收。因此，通过使用基于声音的输出的通知和基于图像的显示的通知，用户更容易接受该通知。因此，通知控制装置能够使用基于声音的输出的通知和基于图像的显示的通知，适当地进行从设备向用户的通知。
168.另外，通知控制装置取得针对作为第一通知的声音的输出的用户基于声音的响应，此外，取得针对作为第二通知的图像的显示的用户基于设备操作的响应。因此，通知控制装置能够使用用户的基于声音的响应和基于设备的操作的响应来适当地执行从设备向用户的通知。
169.另外，通知控制装置取得表示用户进行了针对设备的行动的信息，作为针对第一通知的响应。因此，通知控制装置能够将用户对设备进行了行动的情况用作响应，来适当地执行从设备向用户的通知。
170.另外，通知控制装置取得表示用户进行了针对设备的行动的信息，作为对第二通知的响应。因此，通知控制装置能够将用户对设备进行了行动的情况用作响应，来适当地执行从设备向用户的通知。
171.另外，通知控制装置即使在取得了针对作为第一通知的声音的输出的用户基于声音的响应时，也在等待用户进行针对设备的行动之后使通知控制中止。由此，能够防止用户仅进行基于声音的响应而忘记进行针对设备的行动。因此，通知控制装置能够一边更进一步促进用户对设备进行行动，一边更适当地进行从设备向用户的通知。
172.另外，通知控制装置即使在取得了针对作为第二通知的图像的显示的用户基于操作的响应时，也在等待用户进行针对设备的行动之后使通知控制中止。由此，能够防止用户
仅进行基于操作的响应而忘记进行针对设备的行动。因此，通知控制装置能够一边更进一步促进用户对设备进行行动，一边更适当地进行从设备向用户的通知。
173.如上所述，作为本公开的技术的例示，说明了实施方式。为此，已经提供了附图和详细的说明。
174.因此，在附图和详细的说明中记载的构成要素中，不仅包含为了解决课题所必需的构成要素，而且为了例示上述技术，还可以包含为了解决课题所非必需的构成要素。因此，在附图和详细的说明中记载了这些非必需的构成要素，不应立即认定这些非必需的构成要素是必需的。
175.此外，上述实施方式用于例示本发明中的技术，因此能够在所要保护的范围或其等同的范围内进行各种变更、置换、附加、省略等。
176.工业上的可利用性
177.本公开可应用于对基于设备的向用户的通知进行控制的控制装置。
178.附图标记说明
179.1通知控制系统
180.10通知控制装置
181.11取得部
182.12声音通知控制部
183.13图像通知控制部
184.14中止部
185.20扬声器
186.30终端
187.40设备
188.n网络
189.n1、n2、n3、n4、m1、m2、m3通知
190.t0、t1、t2、t3、t4、t11、t12、t13、t14、t21、t22、t31、t32、t35、t36时刻
191.r1动作
192.rp、rpa响应
193.u用户
194.w1待机。