控制装置、程序以及系统的制作方法

1.本发明涉及一种控制装置、程序以及系统。


背景技术：

2.近年来，正在开发一种针对用户进行的操作而输出反馈的各种装置。例如，在专利文献1中公开了如下技术：通过在利用者按下触摸面板的情况下使该触摸面板振动，来进行对于利用者的触觉的反馈。
3.现有技术文献
4.专利文献
5.专利文献1：日本特开2010-287231号公报


技术实现要素：

6.发明要解决的问题
7.另外，在对于针对gui(graphical user interface：图形用户接口)的输入操作而进行如上所述的使用振动的反馈的情况下，期待通过呈现与视觉表现之间的偏离少的振动来提高用户感知的感觉间的统一性。
8.因此，本发明是鉴于上述问题而完成的，本发明的目的在于提供一种能够对于针对gui的输入操作实现不自然感更少的振动呈现的结构。
9.用于解决问题的方案
10.为了解决上述问题，根据本发明的某个观点，提供一种控制装置，具备控制部，所述控制部在判定为受理了针对显示方式与经由操作部受理的输入对应地变化的视觉要素的所述输入的情况下，使振动呈现部呈现与所述输入对应的振动，所述控制部以使所述振动的呈现方式与所述视觉要素的显示方式的变化相对应地变化的方式控制与所述振动有关的特性。
11.另外，为了解决上述问题，根据本发明的另一个观点，提供一种程序，用于使计算机实现控制功能，所述控制功能是在判定为受理了针对显示方式与经由操作部受理的输入对应地变化的视觉要素的所述输入的情况下使振动呈现部呈现与所述输入对应的振动的功能，所述控制功能中以使所述振动的呈现方式与所述视觉要素的显示方式的变化相对应地变化的方式控制与所述振动有关的特性。
12.另外，为了解决上述问题，根据本发明的另一个观点，提供一种系统，具备：显示装置，其显示视觉要素，所述视觉要素的显示方式与经由操作部受理的输入对应地变化；振动呈现装置，其呈现振动；以及控制装置，其在判定为受理了针对所述视觉要素的所述输入的情况下，使振动呈现装置呈现与所述输入对应的振动，其中，所述控制装置以使所述振动的呈现方式与所述视觉要素的显示方式的变化相对应地变化的方式控制与所述振动有关的特性。
13.发明的效果
14.如以上说明的那样，根据本发明，提供一种能够对于针对gui的输入操作实现不自然感更少的振动呈现的结构。
附图说明
15.图1是示出本发明的一个实施方式所涉及的系统1的功能结构例的图。
16.图2是示出该实施方式所涉及的视觉要素的显示控制的一例的图。
17.图3是用于对与图2所示的视觉要素的显示方式的变化相对应的振动呈现的一例进行说明的图。
18.图4是示出本发明的一个实施方式所涉及的视觉要素的显示控制的一例的图。
19.图5是用于对与该实施方式所涉及的图4所示的视觉要素的显示方式的变化相对应的振动呈现的一例进行说明的图。
20.图6是示出本发明的一个实施方式所涉及的系统1的动作的流程的流程图。
具体实施方式
21.下面，参照添附附图来详细地说明本发明的优选的实施方式。此外，在本说明书以及附图中，针对具有实质相同的功能结构的构成要素标注相同的附图标记，从而省略重复说明。
22.《结构例》
23.图1是示出本发明的一个实施方式所涉及的系统1的功能结构例的图。如图1所示，本实施方式所涉及的系统1可以具备输入装置10、控制装置20、显示装置30以及振动呈现装置40。
24.(输入装置10)
25.输入装置10是受理针对本实施方式所涉及的系统1的输入的装置。本实施方式所涉及的输入装置10例如可以是触摸板、游戏控制器、视线检测设备、手势检测设备等。如图1所示，本实施方式所涉及的输入装置10例如具备操作部110和检测部120。
26.本实施方式所涉及的操作部110可以是用户执行输入的对象物。例如在输入装置10是触摸板的情况下，操作部110能够是用于用户进行滑动操作等的接触面。另外，例如在输入装置10是游戏控制器的情况下，操作部110能够是操纵杆、各种按钮等。此外，在用户进行的输入是利用视线操作或手势操作的输入的情况等不需要物理上的被操作设备的情况下，输入装置10也可以不必具备操作部110。
27.本实施方式所涉及的检测部120进行输入的检测和受理。另外，检测部120将与所受理的输入有关的信息输出到控制装置20。本实施方式所涉及的检测部120具有能够检测设想到的输入的结构。例如，在输入装置10是触摸板的情况下，检测部120可以具有将伴随对操作部110的输入操作而变化的压力的变化变换为电信号的压力传感器、将伴随输入操作而变化的静电电容的变化变换为电信号的静电电容传感器。
28.另外，例如在输入装置10是视线检测设备的情况下，检测部120可以具备用于检测用户的视线的摄像传感器。另外，例如在输入装置10是手势检测设备的情况下，检测部120可以具备用于检测用户作出的手势的加速度传感器、陀螺仪传感器等。
29.(控制装置20)
30.本实施方式所涉及的控制装置20基于输入装置10所受理的输入来控制振动呈现装置40进行的振动的呈现。另外，控制装置20也可以基于输入装置10所受理的输入来控制显示装置30进行的图像的显示。另外，控制装置20也可以对用于执行根据输入的受理而决定出的功能的各种装置(未图示)进行控制。如图1所示，本实施方式所涉及的控制装置20具备控制部210和存储部220。
31.控制部210的功能例如由cpu(central processing unit：中央处理单元)、微处理器等电子电路构成。对于本实施方式所涉及的控制部210所具有的功能的详细内容，另外进行详细说明。
32.本实施方式所涉及的存储部220存储与控制装置20、显示装置30、振动呈现装置40等的动作有关的各种信息。存储部220例如存储要使显示装置30显示的图像、用于决定该图像的显示方式的程序、用于决定要使振动呈现装置40呈现的振动的呈现方式的程序等。
33.(显示装置30)
34.本实施方式所涉及的显示装置30是按照控制装置20等进行的控制来显示各种图像的装置。如图1所示，本实施方式所涉及的显示装置30例如具备显示部310。
35.本实施方式所涉及的显示部310具有按照控制装置20等进行的控制来显示各种图像的功能。此时，显示部310按照基于输入所决定的显示方式来显示各种图像。因此，显示部310具备各种显示器等。
36.(振动呈现装置40)
37.本实施方式所涉及的振动呈现装置40具有按照控制装置20进行的控制来呈现振动的功能。如图1所示，本实施方式所涉及的振动呈现装置40例如具备振动呈现部410。
38.本实施方式所涉及的振动呈现部410进行具有控制装置20所决定的呈现方式的振动的呈现。因此，本实施方式所涉及的振动呈现部410具备能够产生振动的偏心马达(erm：eccentric rotating mass(偏心旋转质量))、线性振动器(lra：linear resonant actuator(线性谐振致动器))、压电(piezo)元件等各种致动器。
39.以上记述了本实施方式所涉及的系统1的功能结构例。此外，使用图1说明的上述的结构仅为一例，本实施方式所涉及的系统1的结构不限定于所述的例子。例如，输入装置10以及振动呈现装置40也可以作为单个装置进行安装。本实施方式所涉及的系统1的结构能够根据规范、运用而灵活地变形。
40.《控制的详细内容》
41.接着，对本实施方式所涉及的控制装置20进行的控制的详细内容进行记述。下面，假定本实施方式所涉及的控制装置20将振动的呈现作为针对向系统1的输入的反馈来进行控制的情况。此时，如果显示装置30显示的图像(各种视觉表现)与振动呈现装置40呈现的振动之间的偏离大，则用户可能会感觉到不自然感。
42.本发明所涉及的技术思想是着眼于上述的点而想到的，通过提高所显示的视觉表现与所呈现的振动的统一感，能够有效地减少用户会感觉到的不自然感。
43.因此，本发明的一个实施方式所涉及的控制装置20的控制部210具有如下功能：在判定为受理了针对视觉要素的输入的情况下，使振动呈现部410呈现与该输入对应的振动，该视觉要素的显示方式与经由操作部110受理的输入对应地变化。另外，本发明的一个实施方式所涉及的控制部210的特征之一在于，以使振动的呈现方式与视觉要素的显示方式的
变化相对应地变化的方式控制与振动有关的特性。
44.下面，详细地说明具有上述的特征的控制部210的功能。此外，下面假定用户使用与显示部310相独立地设置的操作部110来远程地对显示于显示部310的至少一个视觉要素进行输入的情况。操作部110例如也可以是与作为显示器的显示部310分离设置的触摸板。
45.另外，下面记述控制部210对由显示部310进行的包括至少一个视觉要素的图像的显示进行控制的情况。另一方面，本实施方式所涉及的对显示部310的控制也可以通过与控制部210相独立地设置的其它结构来实现。
46.图2是示出本实施方式所涉及的视觉要素的显示控制的一例的图。在图2中，从最上部至最下部按时间序列示出了与经由操作部110受理的输入对应地变化的视觉要素的显示方式。在此，上述的视觉要素是指构成gui的各种视觉组件。在本实施方式所涉及的视觉要素中，例如包括操作对象物、指示物。
47.本实施方式所涉及的操作对象物是成为经由操作部110受理输入的对象的视觉要素。作为操作对象物的一例，列举有图标、按钮、规定的字符列等。
48.另外，本实施方式所涉及的指示物是表示基于经由操作部110受理的输入而决定出的在显示于显示部310的图像(显示区域)上的指示位置的视觉要素。作为指示物的一例，列举有光标、指针。
49.本实施方式所涉及的视觉要素的特征之一在于显示方式与经由操作部110受理的输入对应地变化。例如，控制部210可以对作为视觉要素的显示方式的视觉要素的大小、形状或色彩表现(包括明度、饱和度、透明度、色相、纹理等)中的至少任一者进行控制。
50.例如，在图2中，作为操作对象物的一例，示出了5个图标i1～图标i5，作为指示物的一例，示出了光标c。此外，设为图标i1～图标i5被等间隔地配置。在该情况下，本实施方式所涉及的控制部210可以根据与经由操作部110受理的输入对应地变化的光标c同图标i1～图标i5之间的相对距离来使光标c、图标i1～图标i5的大小变化。例如可以是，控制部210使距光标c的距离最近的图标显示为最大、使距光标c的距离第二近的图标显示为第二大。
51.在图2的最上部所示的时刻t1，光标c的显示位置(光标c的中心或重心)与图标i1的显示位置(图标i1的中心或重心)一致。此时，由于光标c与图标i1之间的距离为零，因此控制部210可以使图标i1以规定的最大的大小显示，接下来，使与光标c之间的距离近的图标i2以与该距离相应的大小放大显示。
52.另外，控制部210也可以除了控制图标i1和图标i2的显示方式之外，还控制光标c的显示方式。由于光标c与图标i1之间的距离为零，因此控制部210可以控制为使光标c成为沿着图标i1的外周的大小(规定的最大的大小)。另外，控制部210可以将此状态作为图标i1被选择的状态进行处理，按照与后续的决定操作对应的输入来控制与图标i1对应的功能的执行。
53.在接下来的时刻t2，示出了例如通过用户对操作部110进行右方向的滑动操作从而光标c的显示位置相比于时刻t1而言向右方向移动了的状况。此时，由于光标c与图标i1之间的距离变远，控制部210可以控制为使光标c的大小相比于时刻t1而言缩小。另外，可以是，由于光标c与图标i1之间的距离变远，因此控制部210使图标i1相比于时刻t1而言缩小，由于光标c与图标i2之间的距离变近，因此使图标i2相比于时刻t1而言放大。
54.在接下来的时刻t3，示出了光标c再向右方向移动而位于图标i1与图标i2的正中
间的状况。此时，由于光标c与图标i1之间的距离以及光标c与图标i2之间的距离相同，因此控制部210可以控制为使图标i1和图标i2成为与上述距离相应的相同的大小。另外，此时，由于光标c与同光标c的距离最近的图标(图标i1和图标i2)之间的距离最大，因此控制部210可以使光标c以规定的最小的大小显示。
55.在接下来的时刻t4，示出了光标c再向右方向移动了的状况。此时，由于光标c与图标i2之间的距离变近，因此控制部210可以控制为使光标c的大小相比于时刻t3而言放大。另外，可以是，由于光标c与图标i1之间的距离变远，因此控制部210使图标i1相比于时刻t3而言缩小，由于光标c与图标i2之间的距离变近，因此使图标i2相比于时刻t3而言放大。
56.在接下来的时刻t5，示出了光标c再向右方向移动而与图标i2的显示位置一致了的状况。此时，由于光标c与图标i2之间的距离为零，因此控制部210可以控制为使图标i2以规定的最大的大小显示，并且使光标c成为沿着图标i2的外周的大小。另外，控制部210也可以使与光标c的距离第二近的图标i1及图标i3以与该距离相应的大小显示。
57.以上记述了关于本实施方式所涉及的视觉要素的显示方式的变化的一例。根据如上所述的针对指示物的控制，通过对指示物赋予视觉上的变化，能够有效地减少用户看漏指示物的可能性。另外，根据如上所述的针对操作对象物的控制，即使在未显示指示物的情况下，用户也能够更直观地掌握显示于显示部310的画面上的指示位置、输入操作的方向。
58.此外，在使用了图2的上述的说明中，作为视觉要素的显示方式的一例，记述了对视觉要素的大小进行控制的情况。此外，作为视觉要素的一例，控制部210也可以对视觉要素的形状进行控制。例如，控制部21可以进行如下控制：指示物与操作对象物之间的距离越近，则使指示物、操作对象物从圆形变得越接近于四边形。
59.另外，例如，作为视觉要素的一例，控制部210也可以对视觉要素的色彩表现进行控制。例如，控制部210可以进行如下控制：指示物与操作对象物之间的距离越近，则使指示物、操作对象物越接近于规定的饱和度、明度、透明度、色相、纹理等。
60.另外，在使用了图2的上述的说明中，记述了控制部210使多个操作对象物中的距指示物的距离最近的操作对象物和距指示物的距离第二近的操作对象物的显示方式变化的情况。另一方面，使显示方式变化的操作对象物的数量不限定于上述的例子。控制部210也可以使全部的操作对象物的显示方式分别根据与光标c之间的距离而变化。
61.以上对本实施方式所涉及的视觉要素的显示方式的控制进行了记述。接着，详细地说明与本实施方式所涉及的显示方式的变化相对应的振动的呈现控制。本实施方式所涉及的控制部210针对使振动呈现部410呈现的振动的特性以与指示物、操作对象物的显示方式的变化相对应地变化的方式进行控制。
62.对于上述的振动的特性，例如列举有振动的大小、振动的锐度。例如，在视觉要素的显示方式的变化联想到“大小”的变化的情况下，本实施方式所涉及的控制部210可以将振动的大小作为与上述振动有关的特性，以与视觉要素的显示方式的变化相对应地变化的方式控制该振动的大小。
63.对于联想到“大小”的变化的视觉要素的显示方式，例如列举有图2所示那样的视觉要素的大小(显示面积)。另外，例如，假定视觉要素的透明度、明度的变化也会影响用户所感知的视觉刺激的大小(强度)。因此，也可以是，在视觉要素的大小、透明度、明度等与输入对应地变化的情况下，控制部210以使振动的大小与如上所述的显示方式的变化相对应
地变化的方式进行控制。在该情况下，本实施方式所涉及的控制部210例如可以使与振动有关的频率的振幅作为振动的大小来进行变化。作为一例，可以是，视觉要素越大，则控制部210使振动呈现部410呈现越大的振动，视觉要素越小，则使振动呈现部410呈现越小的振动。
64.另一方面，在视觉要素的显示方式的变化联想到“锐度”的变化的情况下，本实施方式所涉及的控制部210可以将振动的锐度作为与振动有关的特性，以与视觉要素的显示方式的变化相对应地变化的方式控制该振动的锐度。
65.对于联想到“锐度”的变化的视觉要素的显示方式，例如列举有视觉要素的形状。作为具体例，假定在视觉要素的形状在圆形与多边形之间变化的情况下、或在视觉要素的形状逐渐变细地变化的情况下用户从该形状的变化会联想到“锐度”。另外，例如，假定视觉要素的饱和度、色相也会较大地影响用户感觉到的“锐度”。因此，可以是，在视觉要素所具有的如上所述的显示方式发生变化的情况下，控制部210以使振动的锐度与该显示方式的变化相对应地变化的方式进行控制。
66.在该情况下，例如，本实施方式所涉及的控制部210可以使与振动有关的频率的高低作为振动的锐度来进行变化。作为一例，可以是，在视觉要素的形状在圆形与四边形之间变化的情况下，视觉要素越接近于圆形，则控制部210使振动呈现部410呈现频率越低的振动，视觉要素越接近于四边形，则使振动呈现部410呈现频率越高的振动。
67.另外，例如，控制部210也可以使作为控制目标输入到振动呈现部410的振动波形的形状的类型作为振动的锐度来进行变化。作为一例，可以是，在视觉要素的形状在圆形与四边形之间变化的情况下，在视觉要素接近于圆形时，控制部210将输入到振动呈现部410的振动波形设为正弦波，在视觉要素接近于四边形的情况下，将输入到振动呈现部410的振动波形设为非正弦波(例如锯齿波或三角波)。
68.如以上所说明的那样，本实施方式所涉及的控制部210通过与发生变化的视觉要素的显示方式相应地控制振动的特性，来使视觉要素的显示方式与振动的呈现方式相对应。此时，可以是，例如在视觉要素的显示方式为规定的方式的情况下，本实施方式所涉及的控制部210使振动呈现部410呈现具有与该规定的方式相对应的呈现方式的振动。
69.图3是用于对与图2所示的视觉要素的显示方式的变化相对应的振动呈现的一例进行说明的图。在图3中示出了表示图2所示的时刻t1～t5的振动呈现的有无以及呈现的振动的大小、锐度的图表。
70.本实施方式所涉及的控制部210例如可以使与振动有关的特性同指示物的显示方式相对应地变化，该指示物的显示方式根据显示于显示部310的图像上的该指示物与操作对象物之间的相对位置而变化。例如，在图2所示的一例的情况下，控制部210使与振动有关的特性同光标c的显示方式相对应地变化，该光标c的显示方式根据与距离最近的图标之间的相对位置而变化。
71.另外，此时，可以是，至少在显示于显示部310的图像上操作对象物中的一个操作对象物与指示物之间的距离超过第一阈值的情况下、以及该距离低于第二阈值的情况下，本实施方式所涉及的控制部210使振动呈现部呈现与指示物的显示方式相对应的振动。
72.例如，在图2所示的时刻t2时图标i1与光标c的距离为上述第一阈值以下、在时刻t3时上述距离超过第一阈值的情况下，控制部210如图3所示那样控制振动呈现部410使得
在时刻t3呈现振动。另外，此时，光标c被以规定的最小的大小显示，因此控制部210使振动呈现部410呈现较小的振动。
73.另外，在图2所示的时刻t4时图标i1与光标c的距离为上述第二阈值以上、在时刻t5时上述距离低于第二阈值的情况下，控制部210如图3所示那样控制振动呈现部410使得在时刻t5呈现振动。另外，此时，光标c被以规定的最大的大小显示，因此控制部210使振动呈现部410呈现较大的振动。
74.根据如上所述的控制，通过在光标c的大小为最大的时刻呈现大的振动、在光标c的大小为最小的时刻呈现小的振动，能够实现与视觉要素的显示方式相对应的振动呈现，从而有效地减少用户会感觉到的不自然感。
75.此外，上面以在光标c的大小为最大或最小的情况下呈现振动的情况为例进行了记述。另一方面，呈现振动的时刻和次数不限定于上述的例子。控制部210例如也可以在图2所示的时刻t2、时刻t4使振动呈现部410呈现中间程度的大小的振动。
76.另外，也可以是，在光标c的显示方式的变化例如是如形状变化那样联想到“锐度”的变化的情况下，控制部210在如上所述的时刻使振动呈现部410呈现具有与光标c的显示方式的变化相对应的锐度的振动。
77.另一方面，也可以是，本实施方式所涉及的控制部210例如使振动呈现部410呈现如下的振动：该振动的呈现方式与视觉要素的显示方式的连续的变化相对应地连续变化。
78.图4是示出本实施方式所涉及的视觉要素的显示控制的一例的图。在图4中，从最上部至最下部按时间序列示出了与经由操作部110受理的输入对应地变化的视觉要素的显示方式。在时刻t6，光标c的显示位置与图标i1的显示位置一致，控制部210使图标i1以规定的最大的大小显示。同样地，控制部210在时刻t7使图标i2以规定的最大的大小显示，在时刻t8使图标i3以规定的最大的大小显示，在时刻t9使图标i4以规定的最大的大小显示，在时刻t10使图标i5以规定的最大的大小显示。
79.此外，虽然省略了作图，但是设为光标c和各图标的大小在各时刻之间如图2所示那样根据光标c与各图标之间的相对距离而变化。
80.在该情况下，例如，本实施方式所涉及的控制部210可以使与振动有关的特性同操作对象物的显示方式相对应地变化，该操作对象物的显示方式根据显示于显示部310的图像上的该操作对象物与指示物之间的相对位置而变化。例如，控制部210可以使振动的大小与图标的大小相对应地变化，该图标的大小根据与光标c之间的相对位置而变化。
81.另外，此时，本实施方式所涉及的控制部210可以使振动呈现部410连续地呈现与至少一个操作对象物中的显示方式的变化量最大的操作对象物的显示方式相对应的振动。
82.图5是用于对与图4所示的视觉要素的显示方式的变化相对应的振动呈现的一例进行说明的图。在图5中示出了表示图4所示的时刻t6至时刻t10的振动的大小、振动的锐度的时间序列变化的图表。
83.如图5所示，本实施方式所涉及的控制部210可以使振动呈现部410以如下方式连续地呈现振动：在时刻t6、时刻t7、时刻t8、时刻t9以及时刻t10呈现振动的大小为最大的振动，在各时刻之间呈现振动的大小为最小的振动。
84.根据如上所述的控制，能够呈现与伴随输入的受理而大小发生变化的图标中的被显示为最大的图标相对应的大小的振动，能够有效地提高视觉要素的演出与呈现的振动的
统一感。
85.此外，在各图标的显示方式的变化例如是如形状变化那样联想到“锐度”的变化的情况下，控制部210可以如上述那样使振动呈现部410连续地呈现具有与各图标的显示方式的变化相对应的锐度的振动。
86.《动作的流程》
87.接着，详细地记述本实施方式所涉及的系统1的动作的流程。图6是示出本实施方式所涉及的系统1的动作的流程的流程图。
88.首先，检测部120检测经由操作部110进行的输入，并进行该输入的受理(s102)。
89.接着，控制部210决定与同步骤s102中所受理的输入对应的视觉要素的显示方式的变化相对应的振动的呈现方式(s104)。此外，此时，控制部210可以决定与输入对应的视觉要素的显示方式，并基于该显示方式来控制显示部310进行的视觉要素的显示。
90.接着，控制部210基于步骤s104中所决定的呈现方式，来控制振动呈现部410进行的振动的呈现(s106)。
91.《补充》
92.以上参照添附附图详细地说明了本发明的优选的实施方式，但本发明不限定于所述的例子。显然，只要是具有本发明所属的技术领域中的常识的人，就能够在权利要求书所记载的技术思想的范畴内想到各种变更例或修正例，可以了解这些各种变更例或修正例当然也属于本发明的技术范围。
93.例如，在上述的实施方式中，将视觉要素根据用户有意识的输入而变化的情况作为主要的例子进行了说明。另一方面，视觉要素也可以根据用户无意识的输入、与环境变化相伴的输入、与设为对象的装置的状态变化相伴的输入而变化。例如，视觉要素也可以是以输入装置10等与用户之间的距离为输入而变化。另外，例如，视觉要素也可以是以环境音的大小、气温的变化等为输入而变化。另外，例如，视觉要素也可以是以搭载有系统1的车辆的速度等为输入而变化。根据上述的控制方法，即使在这样的情况下也能够实现与视觉要素的变化相对应的振动的呈现。
94.另外，本说明书中所说明的各装置的一系列的处理可以使用软件、硬件以及软件与硬件的组合中的任一种来实现。构成软件的程序例如被预先保存于设置在各装置的内部或外部的记录介质(非暂时性的介质：non-transitory media)。而且，各程序例如在由计算机执行时被读取到ram并由cpu等处理器来执行。上述记录介质例如是磁盘、光盘、光磁盘、快闪存储器等。另外，上述的计算机程序也可以不使用记录介质而经由例如网络来分发。
95.附图标记说明
96.1：系统；10：输入装置；110：操作部；120：检测部；20：控制装置；210：控制部；220：存储部；30：显示装置；310：显示部；40：振动呈现装置；410：振动呈现部。