机械臂控制方法和皮肤表面处理设备与流程

1.本发明涉及机械控制技术领域，特别涉及一种可应用于皮肤表面处理的机械臂控制方法和皮肤表面处理设备。
2.

背景技术：

3.皮肤美容，是在不介入人体的美容方法，包括在皮肤、毛发等可为人们所视的部位局部实施的、非治疗目的的修饰方法。皮肤美容能够改善皮肤不理想的现状，提高皮肤健康度，延缓皮肤衰老。
4.具体来说，通过皮肤美容治疗能够改善包括且不限于如下症状：色斑、痤疮、毛孔、脱毛、皱纹和发黑。能让皮肤恢复正常的新陈代谢系统。
5.皮肤美容从肤色、肤质、肤龄、肤健四个方面全面地对皮肤进行改善提升，从症状、新陈代谢、根源、长远管理四个维度深入皮肤不同层次彻底解决皮肤问题。
6.在针对皮肤的处理操作中，会常用到多种工具。例如激光美容仪、ipl光子美容装置、射频仪器、超声紧肤仪器、脱毛仪、高压注水喷头等等。这些工具通常由经过训练的从业人员来操作，人工成本高昂。此外，过多且不同的人工介入无法保证和提供水平稳定且全程可控的服务品质，而且还有可能因为员工经验不足或人为粗心导致错误的处理引发医疗事故。
7.在对人体的表面进行处理的过程中，可以通过机器人手臂，也就是机械臂来握持这些美容设备和工具，并结合另外附设的各类传感器而提供稳定的非治疗目的的皮肤美容服务。具体而言，就是利用机械臂的运动特性，使之沿人类皮肤表面的几何形状移动，因此需要设计机械臂的运动轨迹，而且需要确保机械臂不会接触到人体表面的敏感区域或禁止处理的特殊区域（例如眼睛周边或伤口区域）以策安全。
8.为此，在现有技术中，往往尝试利用三维扫描装置，获取人体表面的三维点云，并根据这些三维点云生成机械臂的移动路径。
9.然而，在对整个皮肤表面部位进行处理的时候，三维点云的数据量将十分庞大。具体说来，取决于相机的分辨率和数据采集，仅针对人面部的扫描都可能会创建数十万个数据点， 由于机械臂的运动轨迹是点对点的运动的，根据如此数量的数据点进行运动也是不切实际的，因此需要对三维点云进行优化处理。
10.而，对于巨量的三维点云而言，无论是输入、存储、优化或是输出，都对控制器的性能提出了很高的要求。而如果控制器达不到要求，则很可能会导致数据溢出。
11.

技术实现要素：

12.为了解决或部分解决上述技术问题，本技术的实施方式提供了一种机械臂控制方法。
13.其中，机械臂控制方法包括如下步骤：将机械臂的处理对象的需处理表面分为至少两个关注区域；通过三维扫描装置，获取每个关注区域所对应的三维点云；优化各个三维点云；将各三维点云合并以获得执行点云；基于执行点云生成机械臂的移动路径；机械臂根据移动路径，对对象的表面进行处理。
14.本技术实施方式还公开了一种皮肤表面处理设备，包括：三维扫描装置、机械臂和控制器；其中，控制器用于将机械臂的处理对象的需处理表面分为至少两个关注区域；三维扫描装置用于获取每个关注区域所对应的三维点云；控制器用于优化各个三维点云，将各三维点云合并以获得执行点云，并基于执行点云生成机械臂的移动路径；机械臂用于根据移动路径，对对象的表面进行处理。
15.本技术实施方式还公开了一种计算机可读存储介质，存储有计算机程序，其中，计算机程序被执行时能够实现上述方法中的步骤。
16.本技术实施方式还公开了一种皮肤表面处理设备，包括存储器、处理器及通信组件，其中，存储器，用于存储程序；处理器，与存储器耦合，用于执行存储器中存储的程序，以用于：将机械臂的处理对象的需处理表面分为至少两个关注区域；通过三维扫描装置，获取每个关注区域所对应的三维点云；优化各个三维点云；将各三维点云合并以获得执行点云；基于执行点云生成机械臂的移动路径；机械臂根据移动路径，对对象的表面进行处理。
17.相比于现有技术而言，本技术的实施方式借助于：1、通过初步扫描来分析待处理对象的表面，以识别并设定禁止机械臂处理的区域，确保机械臂的处理安全性。
18.2、将处理对象的表面分为多个关注区域，使得数据量得到了分割；3、通过过滤和优化，摒弃了无用的三维点云数据，减少了单个三维点云的数据量；4、通过对多个三维点云的合并，获得了数据量小、可以被精确执行的执行点云。
19.因此相比于现有技术而言，本技术的实施方式对控制器性能要求低，可以降低皮肤表面处理设备的生产制造成本，提高其处理效率。
20.附图说明
21.为了更清楚地说明本技术实施方式或现有技术中的技术方案，下面将对实施方式或现有技术描述中所需要使用的附图作简单介绍。显而易见地，下面描述中的附图仅用于
示意本技术的一些实施方式，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图中未提及的技术特征、连接关系乃至方法步骤。
22.图1是本技术实施方式的将两个深度摄像头设置在同一结构元件上时的示意图；图2是本技术实施方式的将一个深度摄像头设置在机械臂上时的示意图；图3是本技术实施方式的一种机械臂控制方法的简要流程示意图；图4是本技术实施方式的三维点云在优化过滤前的示意图；图5是本技术实施方式的三维点云经优化过滤后的示意图；图6是本技术实施方式的一种机械臂控制方法在针对需处理表面进行处理的过程中的流程示意图；图7是本技术实施方式的一种皮肤表面处理设备的系统框图。
23.附图标记说明：1、三维扫描装置；11、深度摄像头；12、结构元件；2、机械臂；3、控制器； 31、上位机；32、下位控制模块；4、处理对象的表面；51、存储器；52、处理器；53、通信组件；54、显示器；55、电源组件；56、音频组件；6、表面处理工具；7、传感器。
24.具体实施方式
25.下面结合说明书附图，对本发明进行进一步的详细说明。
26.实施方式一如前文背景技术所分析的，现有技术尚缺乏一种具有更好的经济性和高性能的机械臂控制方法。
27.有鉴于此，本技术的第一实施方式提供了一种皮肤表面处理设备，参见图1或图2所示，包括：三维扫描装置1、机械臂2和控制器3；其中，控制器3将机械臂2的处理对象的需处理表面分为至少两个关注区域；三维扫描装置1是用于获取物体立体表面三维点云的装置。在本技术的实施方式中，三维扫描装置1用于获取每个关注区域所对应的三维点云；控制器3用于优化各个三维点云，将各三维点云合并以获得执行点云，并基于执行点云生成机械臂2的移动路径；机械臂2根据移动路径针对对象的表面4进行相应的处理。
28.在本技术的实施方式中，机械臂2上可以安装有各种表面处理工具6，如激光器、ipl光子美容装置、射频仪器、超声紧肤仪器、脱毛仪、高压注水喷头等。这些表面处理工具6同样可以与控制器3电性连接，以便其与机械臂2的移动路径彼此配合动作。
29.可以理解地，控制器3为广义上的控制器，其可以部分分立设置于机械臂2之外，也可以被完全集成在机械臂2以内。典型地，如图1或图2中所示，其可以包括装设在机械臂2上的下位控制模块32，以及连接下位控制模块32的上位机31（如计算机工作站、或是其他可移动、不可移动的终端），当控制器3同时包括下位控制模块32和上位机31时，上位机31可以负责将三维扫描装置1所获取和收集的数据分析处理之后，得出机械臂的执行动作数据。然
后，上位机31将执行动作数据输出到下位控制模块32之中，从而通过下位控制模块32实现机械臂2的操作逻辑。
30.另外，下位控制模块32往往可以是机械臂2自带的控制器，其不但提供针对机械臂2的控制接口，而且通常还可以负责为机械臂2供电。
31.可选地，三维扫描装置1可以包括静态地安装在同一结构元件12上的两个深度摄像头11。参见图1所示，在这一可选示例中，可以使用两个深度摄像头11，并将其安装在结构元件12上。其中，结构元件12可以是支撑架或一些常见种类的夹具。结构元件12的位置可以通过标尺标定，并可以被调整，以便适应不同体型的处理对象。在固定好深度摄像头11之后，可以在控制器3中预置深度摄像头11的坐标，从而保持校准。
32.在对物体的表面进行扫描的过程中，每个深度摄像头11都会生成一个三维点云。在此基础上，通过任意一个深度摄像头11都可以描绘出待处理对象的一侧表面。例如，以人脸作为待处理对象为例，通过设置于人脸左右两侧的深度摄像头11，可以在同一时间绘制出左脸和右脸的三维点云。进一步可选地，当处理对象为人脸时，关注区域可以为6至8个，对应地，深度摄像头11的数量也可以根据需求对应调整。
33.据此，控制器3可以针对这些三维点云进行优化和合并，从而获得执行点云并进而生成机械臂2的移动路径，而后驱动机械臂2沿着这一移动路径运动。
34.当然，在采用更多数量的深度摄像头11时，将这些深度摄像头11分别与各个关注区域对应，可以显著地提高扫描效率。
35.而可选地，三维扫描装置1也可以包括安装在机械臂2上的一个或多个深度摄像头11。
36.在一个可选示例中，参见图2所示，可以使用一个深度摄像头11，并将其安装在机械臂2上。
37.在控制器3中，可以根据机械臂2的运动轨迹随时获知机械臂2本身的确切位置，因此同样可以获知这一深度摄像头11的确切位置。因此借助于控制器3来控制机械臂2，在待处理对象前通过预设轨迹移动的过程中，即可借助单个深度摄像头11获得多个三维点云。在控制器3中，可以针对每个三维点云数据，标定深度摄像头11在拍摄该三维点云时的坐标数据，以便后续处理。
38.据此，控制器3同样可以针对这些三维点云进行优化和合并，从而获得执行点云并进而生成机械臂2的移动路径，而后驱动机械臂2沿着这一移动路径运动。
39.采用设置于机械臂2上的单个深度摄像头11时，由于无需设置多个深度摄像头11，因此可以显著地降低成本。
40.也就是说，本技术的实施方式还提供了一种机械臂控制方法，参见图3所示，包括如下步骤：将机械臂2的处理对象的需处理表面分为至少两个关注区域；通过三维扫描装置1，获取每个关注区域所对应的三维点云；优化各个三维点云；将各三维点云合并以获得执行点云；基于执行点云生成机械臂2的移动路径；机械臂2根据移动路径，对所述对象的表面进行处理。
41.可选地，控制器3可以通过初步扫描来分析处理对象的表面4，以识别并设定禁止机械臂2处理的区域。也就是说，在将机械臂的处理对象的需处理表面分为至少两个关注区域的步骤之前，还可以包括如下步骤：预扫描处理对象的表面4，以将处理对象的表面4标记为需处理表面和非处理表面。其中，需处理表面，顾名思义为需要被处理的表面。而非处理表面则是无需被处理的表面。非处理表面可以包括皮肤上的伤口、特殊器官如眼睛、耳朵、乳头、肚脐等等，或是在计划内并不打算处理的皮肤区域。
42.预扫描可以借助于快速扫描模式来实现，而通过预扫描摒弃了非处理表面，可以减少后续的关注区域的精细扫描和处理的时间，显著地提高机械臂的操作效率。优选地，可以基于ai图像识别技术来自动化地识别需处理表面和非处理表面。当然，在ai图像识别之后，为了确保准确性，还可以借助人工对识别的区域进行复核。
43.在深度摄像机从关注区域获取三维点云后，其所获取的三维点云数据量十分庞大，往往无法被直接使用。因此，可以通过多种方式优化各个三维点云，从而减少计算量。
44.具体可选地，参见图3、图6所示，优化各个三维点云的步骤，可以包括：使用双边过滤器对三维点云进行过滤处理，以减少其噪声。
45.双边过滤器属于图像去噪的一种方法。图像去噪的方法很多，如中值滤波，高斯滤波，维纳滤波等等。但这些降噪方法容易模糊图片的边缘细节，对于高频细节的保护效果并不明显。相比较而言，双边滤波器可以提供很好的边缘保护，也就是可以在去噪的同时，保护图像的边缘特性。而，本技术的发明人发现，对应构造机械臂2的移动路径这一技术方案而言，图像的边缘特性的清晰程度对提供最优化的移动路径至关重要。
46.在本技术的实施方式中，所采用的双边过滤器的核可以用数学表示为：其中ω是以
푥
为中心的窗口，
푥
是用于平滑强度差异的范围核，而
푔
푠
是用于平滑坐标差异的空间核。
47.图4和图5分别示意出了采用双边滤波器前后的三维点云变化，可以看到经过双边滤波器的过滤之后，获得了锐利、清晰、噪声少的三维点云。
48.而可选地，将各三维点云合并以获得执行点云的步骤，可以包括：将第一个三维点云和第二个三维点云的最近点进行迭代配准，合并成新的三维点云，将所合并成的新的三维点云和下一个三维点云进行迭代配准，如此反复，直到所有的三维点云都合并成执行点云。
49.所谓配准，指的是给定两个来自不同坐标系的三维数据点集，找到两个点集空间的变换关系，使得两个点集能统一到同一坐标系统中的过程。
50.本技术实施方式所选用的迭代配准算法，又可称之为迭代最近点（iterative closest point, icp）算法，是一种三维点云匹配算法。这一算法允许将从不同的深度相机（或位于不同位置的同一深度相机）获得的不同三维点云合并到单个三维点云中，平移和旋转三维点云以使其匹配而不会变形，直到获得最小误差为止。
51.经过这一算法获得的执行点云，其数据量相比于三维扫描装置1所获得的初始三维点云而言要小得多，从而易于被控制器3处理和执行。
52.具体说来，在执行点云中，具有表示3d信息的单个坐标原点。这一坐标原点可以被选择为与任意一深度摄像头11相同。由于坐标原点的位置是已知的，并且与机械臂2的坐标相关联，因此可以依据执行点云，增加补偿来为机械臂2生成任意的移动路径。
53.基于执行点云的移动路径无需考虑各个深度摄像头11所获取的三维点云之间因不同的坐标原点而带来的位置关系的计算，因此大幅度地降低了计算量。
54.据此，本技术的技术方案相比于现有技术而言，能够简化计算量并提高系统性能。
55.另外值得一提的是，对本技术的实施方式而言，在上述的合并步骤中，将三维点云合并后形成的执行点云可以仅仅是合并了某一两个关注区域的三维点云之后的产物，也可以是将所有的关注区域的关注区域全部合并之后的最终点云。取决于数据量的多寡，可以如图1所示，在全部合并之后统一由机械臂2执行，也可以如图6所示，由机械臂2一边执行，一边持续合并三维点云。因此可选地，移动路径可以在每覆盖一个关注区域之后连接至下一个关注区域，以便机械臂2能够顺畅地完成处理操作。
56.在现有技术中，未经过良好的数据处理，直接利用三维扫描装置1所获取的三维点云来生成机械臂2的运动轨迹。其数据量过于庞大，对机械臂2的工作系统提出了很高的要求。
57.而相比于现有技术而言，本技术的实施方式借助于：1、通过初步的预扫描来分析处理对象的表面4，识别并设定禁止机械臂处理的区域，确保了机械臂的处理安全性。
58.2、将处理对象的表面4分为多个关注区域，使得数据量得到了分割；3、通过过滤和优化，摒弃了无用的三维点云数据，减少了单个三维点云的数据量；4、通过对多个三维点云的合并，获得了数据量小、可以被精确执行的执行点云。
59.因此相比于现有技术而言，本技术的实施方式对控制器3性能要求低，可以降低皮肤表面处理设备的生产制造成本，提高其处理效率。由于借助了机械臂来替代传统的人工处理，因此提高了皮肤表面处理操作的品质稳定性和处理安全性。
60.实施方式二本技术的第二实施方式是第一实施方式的进一步改进，主要改进之处在于，在本技术的第二实施方式中，机械臂控制方法中的机械臂2根据移动路径处理对象的表面4的步骤，参见图1、图2所示，还包括：通过传感器7获取对象表面的状态数据；根据状态数据调整机械臂2的处理操作。
61.与之对应地，皮肤表面处理设备则包括：传感器7，获取对象表面的状态数据；控制器3根据所述状态数据调整所述机械臂2的处理操作。
62.可选地，状态数据可以包括温度或湿度。
63.在本技术中，传感器7可以是可以用对人体皮肤的状态进行检测的设备。传感器7的种类有多种。例如温度传感器7，可用于测量皮肤表面温度；湿度传感器7，可用于测量皮肤的湿度；摄像头，可用于检测皮肤的纹理；光谱传感器7，可用于对照射至皮肤的光谱或激光能量进行检测。传感器7的设置位置可以和深度摄像头11的设置位置相一致，也就是说，
当深度摄像头11被设置在结构元件12上时，传感器7也可以被设置在结构元件12上。而当深度摄像头11被设置在机械臂2上时，传感器7也可以被设置在机械臂2上。
64.当然，当多个深度摄像头11被设置在结构元件12上时，传感器7还可以被设置在机械臂2上，跟随机械臂运动并更准确及时地给予当前操作区域的状态数据反馈。而且，将传感器7设置在机械臂2上还能够防止机械臂2动作过程中可能对传感器7所产生的阻挡，提高了数据精度。
65.接下来，将以一些典型的传感器7为例，说明如何根据状态数据调整机械臂2的处理操作。
66.当传感器7包括温度传感器7时，温度传感器7可以检测机械臂2上的处理工具，如激光器的操作区域的温度，并发送给控制器3。
67.由于皮肤受到激光器的照射温度会上升。控制器3在检测到这一温度的上升达到或超过阈值时，可以控制激光器调低输出功率，也可以控制激光器关闭，甚至可以加快机械臂2在移动路径上的移动速度，从而缩短激光器在温度上升超过阈值的皮肤表面的停留时间。
68.当传感器7包括湿度传感器7时，湿度传感器7可以检测机械臂2上的处理工具的操作区域的湿度，并发送给控制器3。
69.由于皮肤湿度下降时，容易发生损伤。控制器3在检测到这一湿度的下降达到或超过阈值时，可以控制激光器调低输出功率，也可以控制高压喷头使其喷水，或控制雾化器起雾补充皮肤水分等等。
70.当传感器7包括光谱传感器7时，光谱传感器7可以检测机械臂2上的处理工具的操作区域的皮肤接收到的激光能量，并发送给控制器3。
71.由于皮肤短时间接收到过强的激光能量时，容易发生损伤。控制器3在检测到这一激光能量达到或超过阈值时，可以控制激光器调低输出功率，也可以控制激光器关闭，甚至可以加快机械臂2在移动路径上的移动速度，从而缩短激光器在激光能量累计超过阈值的皮肤表面的停留时间。
72.根据治疗类型和所使用的激光技术，传感器7所反馈的温度信息可用于稳定温度的安全裕度，湿度信息可用于优化和提升用户体验，激光能量则可以精确激光能量的输出剂量。
73.另外，可选地，通过传感器7获取对象表面的状态数据的步骤，还可以包括：在状态数据超出阈值限制时，调整移动路径以暂时避开对象的表面的超出阈值的部位。
74.实施方式三本技术的第三实施方式提供了一种计算机可读存储介质，存储有计算机程序，其中，计算机程序被执行时能够实现第一或第二实施方式中的方法的步骤或功能。
75.借助计算机程序能够自动化地完成上述步骤，提高效率。
76.据此，本技术的实施方式还提供了一种皮肤表面处理设备，参见图7所示，包括存储器51、处理器52及通信组件53，其中，存储器51，用于存储程序；处理器52，与存储器51耦合，用于执行存储器51中存储的程序，以用于：将机械臂2的处理对象的表面4分为至少两个关注区域；
通过三维扫描装置1，获取每个关注区域所对应的三维点云；优化各个三维点云；将各三维点云合并以获得执行点云；基于所述执行点云生成所述机械臂2的移动路径；所述机械臂2根据所述移动路径处理所述对象的表面。
77.进一步，皮肤表面处理设备还可以包括：通信组件53、显示器54、电源组件55、音频组件56等其它组件。本技术中仅示意性给出部分组件，并不意味着计算设备只包括这些。
78.最后应说明的是，本领域的普通技术人员可以理解，为了使读者更好地理解本技术，本技术的实施方式提出了许多技术细节。但是，即使没有这些技术细节和基于上述各实施方式的种种变化和修改，也可以基本实现本技术各权利要求所要求保护的技术方案。因此，在实际应用中，可以在形式上和细节上对上述实施方式作各种改变，而不偏离本技术的精神和范围。