家电交互方法、家电设备及存储介质与流程

1.本技术涉及智能家居技术领域，尤其涉及一种家电交互方法、家电设备及存储介质。


背景技术：

2.随着智能家居的发展，家电上可以实现的功能越来越丰富。例如，智能电视上集成了互联网技术，具备开放式操作系统与芯片，拥有开放式应用平台，可实双向人机交互，集影音、娱乐和数据等多种功能于一体，以满足用户多样化和个性化需求的电视产品。但是目前的家电设备的人机交互功能不够便利，需要进一步优化人机交互功能。


技术实现要素：

3.本技术提供了一种家电交互方法、家电设备及存储介质，可以优化用户和家电设备的交互体验，提高家电设备的智能性。
4.第一方面，本技术提供了一种家电交互方法，所述方法包括：
5.通过非接触采集装置获取用户的手部的位置信息，根据所述手部的位置信息确定所述手部的指尖位置；
6.根据所述指尖位置确定目标图形，并确定所述目标图形的尺寸信息；
7.若所述目标图形的尺寸信息符合第一预设条件，则对显示位置执行目标操作，其中，所述显示位置为用户的手部在所述显示器的显示区域中对应的位置。
8.第二方面，本技术还提供了一种家电设备，所述家电设备包括存储器和处理器；所述存储器用于存储计算机程序；所述处理器，用于执行所述计算机程序并在执行所述计算机程序时实现如上述的家电交互方法。
9.第三方面，本技术还提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时使所述处理器实现如上述的家电交互方法。
10.本技术公开了一种家电交互方法、家电设备及存储介质，所述方法包括：通过非接触采集装置获取用户的手部的位置信息，根据所述手部的位置信息确定所述手部的指尖位置；根据所述指尖位置确定目标图形，并确定所述目标图形的尺寸信息；若所述目标图形的尺寸信息符合第一预设条件，则对显示位置执行目标操作，其中，所述显示位置为用户的手部在所述显示器的显示区域中对应的位置。本技术实施例可以根据用户的手部的指尖位置确定目标图形，根据目标图形来确定用户的手部动作，进而确定用户的交互意图对应执行交互操作，本技术实施例可以优化用户和家电设备的交互体验，提高家电设备的智能性。
附图说明
11.为了更清楚地说明本技术实施例技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本技术的一些实施例，对于本领域普
通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
12.图1是本技术实施例提供的一种家电交互方法的示意流程图；
13.图2是本技术实施例提供的一种家电交互方法的场景示意图；
14.图3是本技术实施例提供的另一种家电交互方法的场景示意图；
15.图4是本技术实施例提供的另一种家电交互方法的场景示意图；
16.图5是本技术实施例提供的另一种家电交互方法的场景示意图；
17.图6是本技术实施例提供的另一种家电交互方法的场景示意图；
18.图7是本技术的实施例提供的一种家电设备的结构示意性框图。
具体实施方式
19.下面将结合本技术实施例中的附图，对本技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本技术一部分实施例，而不是全部的实施例。基于本技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本技术保护的范围。
20.附图中所示的流程图仅是示例说明，不是必须包括所有的内容和操作/步骤，也不是必须按所描述的顺序执行。例如，有的操作/步骤还可以分解、组合或部分合并，因此实际执行的顺序有可能根据实际情况改变。
21.应当理解，在此本技术说明书中所使用的术语仅仅是出于描述特定实施例的目的而并不意在限制本技术。如在本技术说明书和所附权利要求书中所使用的那样，除非上下文清楚地指明其它情况，否则单数形式的“一”、“一个”及“该”意在包括复数形式。
22.还应当进一步理解，在本技术说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合，并且包括这些组合。
23.本技术的实施例提供了一种家电交互方法、家电设备及存储介质。下面结合附图，对本技术的一些实施方式作详细说明。在不冲突的情况下，下述的实施例及实施例中的特征可以相互组合。
24.请参阅图1，图1是本技术的实施例提供的一种家电交互方法的示意流程图，该方法应用于家电设备，家电设备可以是电视机，家电设备包括非接触采集装置和显示器。如图1所示，该家电交互方法具体包括步骤s101至步骤s103。
25.s101、通过非接触采集装置获取用户的手部的位置信息，根据所述手部的位置信息确定所述手部的指尖位置。
26.其中，非接触采集装置可以是用于非接触式地检测手部的位置信息的装置，位置信息可以是用于体现手部的位置的数据。例如，非接触采集装置可以是摄像头，可以是3d摄像头。位置信息可以包括图像信息，还可以包括图像景深信息。
27.用户可以是在需要和家电设备进行交互时，通过做出手部动作来进行交互。用户一般会将手部放入到非接触采集装置的采集范围内，以便非接触采集装置可以采集到用户的手部的位置信息。家电设备在通过非接触采集装置获取到用户的手部的位置信息后，便知道用户需要和家电设备进行交互。
28.根据手部的位置信息可以确定用户的手部和非接触采集装置的位置关系，手部一般包括手指和手掌，根据手部的位置信息也可以确定手指和手掌的位置信息。而指尖是手
指上距离手掌最远的区域，因此也可以进一步确定手部的指尖的位置信息。
29.在一个实施例中，所述根据所述手部的位置信息确定所述手部的指尖位置的操作可以通过如下方式实施：
30.根据所述手部的位置信息确定所述手部的指尖的位置信息；根据所述指尖的位置信息确定所述指尖位置。
31.其中，可以是根据手部的位置信息确定手部的各个区域，例如，包括手指区域和手掌区域，手指区域可以划分为第一关节区域、第二关节区域和第三关节区域。将手指区域中远离手掌的子区域确定为指尖，获取指尖的位置信息，进而可以根据指尖的位置信息确定指尖位置。
32.指尖位置可以是在预设坐标系中的位置，例如，预设坐标系可以是三维坐标系，x轴和y轴位于水平面上，z轴和地面垂直，可以是以手掌心为原点，也可以是以非接触采集装置为原点。预设坐标系的类型和具体设置可以根据实际情况进行确定，在此不作限定。
33.s102、根据所述指尖位置确定目标图形，并确定所述目标图形的尺寸信息。
34.其中，指尖是手部的边缘区域，根据指尖位置确定的目标图形和手部形状相关联，目标图形的尺寸信息和手部形状的尺寸信息也相关联。
35.目标图形和指尖位置相对应，示例性地，可以是根据几个指尖位置确定一个多边形作为目标图形；还可以是根据几个指尖位置进行拟合算法，确定一个圆形，使得几个指尖位置和该圆形的边缘的距离之和最短。
36.尺寸信息为用于体现目标图形的尺寸大小的信息，可选地，尺寸信息可以包括面积，还可以包括周长。
37.手指越张开，几个指尖位置越分散，目标图形越大，对应的目标图形的尺寸信息也越大。而手指越并拢，几个指尖位置越靠近，目标图形会越小，对应的目标图形的尺寸信息也越小。
38.在一个实施例中，所述根据所述指尖位置确定目标图形的操作可以通过如下方式实施：
39.根据所述指尖位置确定至少三个顶点，其中，每个指尖位置对应一个顶点；将所述至少三个顶点构成的多边形确定为目标图形。
40.其中，三个点可以构成一个面，确定三个顶点可以构成一个三角形，确定四个顶点可以构成一个四边形。因此根据指尖位置确定至少三个顶点，至少三个顶点可以构成一个多边形，进而可以确定为目标图形。可以是根据所述手部的位置信息确定所述手部的至少三个指尖的指尖位置，根据每个指尖的指尖位置确定一个顶点。确定的至少三个指尖可以包括任意手指的指尖，在此不作限定。
41.如图2至图4所示，可以是根据手部10的大拇指指尖11a、中指指尖11b和小拇指指尖11c确定三个顶点，三个顶点构成三角形11，可以将三角形11确定为目标图形。图2中的手部10的手指比较张开，因此图2中的三角形11比较大，图3中的手部10的手指比较并拢，因此图3中的三角形11比较小，而图4中的手部10的手指放置比较常规，因此图4中的三角形11比较适中。
42.s103、若所述目标图形的尺寸信息符合第一预设条件，则对显示位置执行目标操作，其中，所述显示位置为用户的手部在所述显示器的显示区域中对应的位置。
43.其中，第一预设条件可以是和目标操作相对应的条件，如果目标图形的尺寸信息符合第一预设条件，用户的手部动作和目标操作相对应，则表示用户想要执行目标操作的交互，因此可以执行目标操作。目标操作的类型可以根据具体应用需求进行设置，本实施例中不做限定。
44.家电设备包括显示器，显示器用于输出显示区域。家电设备在和用户交互的时候，用户的交互动作在显示区域上有对应的位置，家电设备可以根据该位置确定用户的交互动作想要操作的位置。
45.另外，为了进一步优化交互体验，还会将用户的交互动作对应在显示区域进行显示，以便用户可以直观地看到自己的交互动作在显示区域上对应的位置，进一步用户可以更好地控制交互动作。
46.家电设备的非接触采集装置采集用户的手部的位置信息后，可以根据手部的位置信息确定手部在显示区域中对应的位置，此时如果还确定目标图形的尺寸信息符合第一预设条件，则可以确定用户的交互意图，用户想要在手部对应的显示位置执行目标操作。
47.本技术实施例可以根据用户的手部的指尖位置确定目标图形，根据目标图形来确定用户的手部动作，进而确定用户的交互意图对应执行交互操作，本技术实施例可以优化用户和家电设备的交互体验，提高家电设备的智能性。
48.在一个实施例中，若所述目标图形的尺寸信息和预设尺寸信息的比例符合第一比例，则确定所述目标图形的尺寸信息符合第一预设条件。
49.其中，可以是根据目标图形的尺寸和预设尺寸信息进行比较，以判断用户的手部上的动作是否和目标操作的交互动作相对应，进而可以判断用户的交互意图是否是执行目标操作。
50.预设尺寸信息可以是预设的一个尺寸信息，如果目标图形的尺寸信息和预设尺寸信息的比例符合第一比例，则可以确定用户的手部的动作是和目标操作对应的交互动作相对应，因此可以确定所述目标图形的尺寸信息符合第一预设条件。
51.在一个实施例中，可以是通过非接触采集装置持续获取用户的手部的位置信息；将在初始时间获取的手部的位置信息对应的目标图形的尺寸信息确定为预设尺寸信息；若在所述初始时间后获取的手部的位置信息对应的目标图形的尺寸信息和所述预设尺寸信息的比例符合第一比例，则确定所述目标图形的尺寸信息符合第一预设条件。
52.其中，非接触采集装置是持续采集用户的手部的位置信息，因此可以采集到用户的手部的动作的变化。
53.可以是在初始时间获取用户的手部的位置信息，并根据所述初始时刻的手部的位置信息确定所述手部的指尖位置，根据所述指尖位置确定目标图形，并确定所述目标图形的尺寸信息，如此可以获取到初始时刻的目标图形的尺寸信息，可以作为预设尺寸信息。
54.如果在初始时间后获取的手部的位置信息，并根据手部的位置信息所确定的目标图形的尺寸信息和所述预设尺寸信息的比例符合第一比例，可以确定用户的手部的动作发生了变化，且手部动作的变化符合目标操作对应的交互动作。因此，可以确定所述目标图形的尺寸信息符合第一预设条件，可以对显示位置执行目标操作。
55.在一个实施例中，所述对显示位置执行目标操作的操作可以通过如下方式实施：
56.确定所述显示位置的可移动显示信息；在检测到所述用户的手部发生移动时，根
据所述手部的移动信息控制所述可移动显示信息在显示区域进行相应的移动。
57.其中，目标操作可以是对显示区域中的可移动显示信息进行移动。可以确定显示位置对应的可移动显示信息，非接触采集装置可以检测用户的手部移动时的移动信息，进而根据移动信息相应地控制可移动显示信息进行移动。
58.示例性地，如图5所示，用户的手部对应的显示位置可以是电视机20的显示区域21的左上角的区域，该显示位置上有可移动显示信息30。用户如果想要把可移动显示信息30移动到右侧的区域，用户的手部可以进行向右的移动，如图6所示，根据用户的手部的移动信息相应控制可移动显示信息进行移动，可移动显示信息30从显示区域21左侧的位置移动至显示区域21的右侧的位置。
59.其中，可移动显示信息可以是电视机上的应用程序(app,application)的图标，也可以是电视机上的显示卡片，显示卡片内可以是对应电视机功能，还可以是其他显示信息，具体可以根据实际应用需求进行设置，在此不做限定。
60.在一个实施例中，所述根据所述手部的移动信息控制所述可移动显示信息在显示区域进行相应的移动之后，还包括如下操作：
61.若所述目标图形的尺寸信息符合第二预设条件，则确定当前所述用户的手部在所述显示区域中对应的位置，并确定为目的位置；
62.将所述可移动显示信息放置在所述目的位置。
63.其中，第二预设条件可以是和结束目标操作相对应的条件，如果目标图形的尺寸信息符合第二预设条件，则可以确定用户想要结束当前的目标操作。
64.因此，在根据所述手部的移动信息控制所述可移动显示信息在显示区域进行相应的移动时，如果确定的目标图形的尺寸信息符合第二预设条件，则表示用户想要停止对可移动显示信息的移动，因此可以确定当前所述用户的手部在所述显示区域中对应的位置，并确定为目的位置，将目的位置作为可移动显示信息的目的地，将所述可移动显示信息放置在所述目的位置上，完成了对可移动显示信息的移动。
65.如图6所示，用户的手部可以从左向右移动，且在用户的手部对应的显示位置移动到目的位置时，用户可以变化手部的动作，使得根据手部的位置信息确定的目标图形的尺寸信息符合第二预设条件，进而电视机20可以确定用户的交互意图是结束移动可移动显示信息30的操作，并将可移动显示信息30放置在右侧的目的位置。
66.在一个实施例中，所述确定所述显示位置的可移动显示信息的操作可以通过如下方式实施：
67.确定所述显示位置对应的网格区域，并确定所述网格区域内的可移动显示信息，其中，所述显示区域中包括多个网格区域；
68.相应地，所述将所述可移动显示信息放置在所述目的位置的操作可以通过如下方式实施：
69.确定所述目的位置对应的网格区域，将所述可移动显示信息放置在所述目的位置对应的网格区域。
70.其中，显示区域中包括多个网格区域，网格区域是显示区域中划分的子区域，一个网格可以对应放置一个可移动显示信息。如果用户的手部对应的显示位置位于一个网格区域内，则可以将这个网格区域内的可移动显示信息确定为需要进行移动的可移动显示信
息。相应地，移动结束时，也可以确定目的位置对应的网格区域，并将可移动显示信息放置在目的位置对应的网格区域内。
71.在一个实施例中，若所述目标图形的尺寸信息和预设尺寸信息的比例符合第二比例，则确定所述目标图形的尺寸信息符合第二预设条件。
72.其中，根据目标图形的尺寸和预设尺寸信息进行比较，以判断用户的手部上的动作是否和结束目标操作的交互动作相对应，进而可以判断用户的交互意图是否是结束执行目标操作。
73.如果目标图形的尺寸信息和预设尺寸信息的比例符合第二比例，则可以确定用户的手部的动作是和结束目标操作对应的交互动作相对应，因此可以确定所述目标图形的尺寸信息符合第二预设条件。
74.在一个实施例中，通过非接触采集装置持续获取用户的手部的位置信息；将在初始时间获取的手部的位置信息对应的目标图形的尺寸信息确定为预设尺寸信息；若在所述初始时间后获取的手部的位置信息对应的目标图形的尺寸信息和所述预设尺寸信息的比例符合第二比例，则确定所述目标图形的尺寸信息符合第二预设条件，其中，第一比例小于第二比例。
75.其中，本技术实施例是可移动显示信息进行移动的过程中持续获取用户的手部的位置信息，如果根据手部的位置信息所确定的目标图形的尺寸信息和所述预设尺寸信息的比例符合第二比例，可以确定用户的手部的动作发生了变化，相比开始执行目标操作时，目标图形的尺寸信息变大了，可以确定用户的手部动作的变化符合结束目标操作对应的交互动作，即用户想要停止操作目标操作。因此，可以确定所述目标图形的尺寸信息符合第二预设条件，可以对显示位置执行目标操作。
76.可选地，第一比例可以是小于70％，第二比例可以是大于70％。示例性地，如图2至4所示，用户可以在初始时间做出图2中的手部动作，即用户的手指比较张开，初始时间的目标图形11的尺寸信息较大，可以作为预设尺寸信息；用户如果想要移动显示区域中的可移动显示信息，如图3所示，用户可以并拢手指，相应的目标图形11的尺寸信息变小，如果该尺寸信息和预设尺寸信息相比小于70％，则可以确定执行目标操作，即开始移动可移动显示信息；用户如果想要停止移动可移动显示信息，如图4所示，用户可以张开手指，相应的目标图形11的尺寸信息会相比图3中的目标图形的尺寸信息变大，如果图4中的目标图形11的尺寸信息和预设尺寸信息相比大于70％，则可以确定停止执行目标操作，即停止移动可移动显示信息。
77.请参阅图7，图7是本技术的实施例提供的一种家电设备的结构示意性框图。该家电设备可以是电视机。
78.参阅图7，该家电设备100包括通过系统总线连接的处理器110、存储器120、非接触采集装置130和显示器140，其中，存储器120可以包括非易失性存储介质和内存储器。
79.非易失性存储介质可存储操作系统和计算机程序。该计算机程序包括程序指令，该程序指令被执行时，可使得处理器执行任意一种家电交互方法。
80.所述非接触采集装置用于采集位置信息，所述显示器用于输出显示区域。
81.处理器用于提供计算和控制能力，支撑整个家电设备的运行。
82.内存储器为非易失性存储介质中的计算机程序的运行提供环境，该计算机程序被
处理器执行时，可使得处理器执行任意一种家电交互方法。
83.本领域技术人员可以理解，图7中示出的结构，仅仅是与本技术方案相关的部分结构的框图，并不构成对本技术方案所应用于其上的家电设备的限定，具体的家电设备可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。
84.应当理解的是，处理器可以是中央处理单元(central processing unit，cpu)，该处理器还可以是其他通用处理器、数字信号处理器(digital signal processor，dsp)、专用集成电路(application specific integrated circuit，asic)、现场可编程门阵列(field-programmable gate array，fpga)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。其中，通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
85.其中，在一个实施例中，所述处理器用于运行存储在存储器中的计算机程序，以实现如下步骤：
86.通过非接触采集装置获取用户的手部的位置信息，根据所述手部的位置信息确定所述手部的指尖位置；
87.根据所述指尖位置确定目标图形，并确定所述目标图形的尺寸信息；
88.若所述目标图形的尺寸信息符合第一预设条件，则对显示位置执行目标操作，其中，所述显示位置为用户的手部在所述显示器的显示区域中对应的位置。
89.在一个实施例中，所述处理器在实现所述根据所述手部的位置信息确定所述手部的指尖位置时，用于实现：
90.根据所述手部的位置信息确定所述手部的指尖的位置信息；
91.根据所述指尖的位置信息确定所述指尖位置。
92.在一个实施例中，所述处理器在实现所述根据所述指尖位置确定目标图形时，用于实现：
93.根据所述指尖位置确定至少三个顶点，其中，每个指尖位置对应一个顶点；
94.将所述至少三个顶点构成的多边形确定为目标图形。
95.在一个实施例中，若所述目标图形的尺寸信息和预设尺寸信息的比例符合第一比例，则确定所述目标图形的尺寸信息符合第一预设条件。
96.在一个实施例中，所述处理器在实现所述对显示位置执行目标操作时，用于实现：
97.确定所述显示位置的可移动显示信息；
98.在检测到所述用户的手部发生移动时，根据所述手部的移动信息控制所述可移动显示信息在显示区域进行相应的移动。
99.在一个实施例中，所述处理器在实现所述根据所述手部的移动信息控制所述可移动显示信息在显示区域进行相应的移动之后，还用于实现：
100.若所述目标图形的尺寸信息符合第二预设条件，则确定当前所述用户的手部在所述显示区域中对应的位置，并确定为目的位置；
101.将所述可移动显示信息放置在所述目的位置。
102.在一个实施例中，若所述目标图形的尺寸信息和预设尺寸信息的比例符合第二比例，则确定所述目标图形的尺寸信息符合第二预设条件。
103.在一个实施例中，所述处理器在实现所述确定所述显示位置的可移动显示信息
时，用于实现：
104.确定所述显示位置对应的网格区域，并确定所述网格区域内的可移动显示信息，其中，所述显示区域中包括多个网格区域；
105.所述处理器在实现所述将所述可移动显示信息放置在所述目的位置时，用于实现：
106.确定所述目的位置对应的网格区域，将所述可移动显示信息放置在所述目的位置对应的网格区域。
107.在一个实施例中，所述处理器在实现所述通过非接触采集装置获取用户的手部的位置信息时，用于实现：
108.通过非接触采集装置持续获取用户的手部的位置信息；
109.所述处理器还用于实现：
110.将在初始时间获取的手部的位置信息对应的目标图形的尺寸信息确定为预设尺寸信息；
111.若在所述初始时间后获取的手部的位置信息对应的目标图形的尺寸信息和所述预设尺寸信息的比例符合第一比例，则确定所述目标图形的尺寸信息符合第一预设条件；
112.若在所述初始时间后获取的手部的位置信息对应的目标图形的尺寸信息和所述预设尺寸信息的比例符合第二比例，则确定所述目标图形的尺寸信息符合第二预设条件，其中，所述第一比例小于所述第二比例。
113.本技术的实施例中还提供一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序中包括程序指令，所述处理器执行所述程序指令，实现本技术实施例提供的任一项家电交互方法。
114.其中，所述计算机可读存储介质可以是前述实施例所述的家电设备的内部存储单元，例如所述家电设备的硬盘或内存。所述计算机可读存储介质也可以是所述家电设备的外部存储设备，例如所述家电设备上配备的插接式硬盘，智能存储卡(smart media card，smc)，安全数字(secure digital，sd)卡，闪存卡(flash card)等。
115.以上所述，仅为本技术的具体实施方式，但本技术的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本技术揭露的技术范围内，可轻易想到各种等效的修改或替换，这些修改或替换都应涵盖在本技术的保护范围之内。因此，本技术的保护范围应以权利要求的保护范围为准。