基于混合现实技术的手工艺路径引导学习系统

1.本发明涉及混合现实领域，具体地说，涉及一种基于混合现实技术的手工艺路径引导学习系统和方法，该系统和方法可用于手机、平板电脑等移动终端上，利用已有的屏幕、摄像头等部件，通过减少成本完成相关手工艺的引导和辅助学习功能。


背景技术：

2.手工艺是指以手工劳动进行制作的具有独特艺术风格的工艺美术。有别于以大工业机械化方式批量生产规格化日用工艺品的工艺美术。
3.然而，对于初学者而言，手工艺的学习往往具有较高的门槛。通过图片、视频等方法进行学习具有较高的直观性，可以较快地理解手工艺的流程和制作方法，但空间立体感和体验感较弱，对于空间想象力和动手能力不强的初学者来说，亲自动手完成实践有一定困难。因此，借助于混合现实技术，可有效地帮助初学者身临其境地对制作流程进行感受和体验，从而提高学习效率和创作质量。而传统的虚拟现实眼镜等装置，只能为用户呈现屏幕中的画面，无法提供周围环境等信息。


技术实现要素：

4.本发明的目的在于针对现有技术的不足，提供一种基于混合现实技术的手工艺路径引导学习系统，可用于手工艺学习及练习中的空间路径规划引导。
5.本发明采用的技术方案如下：
6.一种基于混合现实技术的手工艺路径引导学习系统，所述系统是在手工艺制作过程中，基于混合现实技术在mr显示界面为用户提供画线引导路径，以供用户利用3d打印工具按照所述画线引导路径进行画线打印。
7.上述技术方案中，进一步的，所述系统具有如下功能模块：
8.模型导入选择模块，所述模块用于供用户向系统中导入所需模型或从示例模型库中选择所需模型；
9.参数调控模块，根据需求的目标手工艺结构，结合已选择或导入的模型，对单元件的轮廓、尺寸参数进行调整，确定符合目标手工艺结构要求的设计模型；
10.路径规划显示模块，用于将所述设计模型进行分层并对各层的打印路径进行规划从而形成各层的画线路径引导图，按照打印顺序将各层画线路径引导图依次呈现在mr显示界面中，用户根据mr显示界面所呈现的画线路径引导图进行3d打印工具描线打印，得到目标手工艺结构。
11.进一步的，所述的模型为实体模型或矢量路径。
12.进一步的，所述系统基于grasshopper工具构建交互界面，基于用户的选择和输入进行计算和建模；基于三维建模软件rhinoceros进行模型的预览；基于插件fologram实现界面和模型在移动终端虚拟世界中的同步，达到混合现实效果。
13.进一步的，所述路径规划的方法如下：根据用户对期望效果的选择，得到实际画线
的宽度、间隔、与模型边缘的夹角等参数，之后在模型边缘取一系列点，并根据路径参数将对应点进行连接，获得若干条线段，将这些线段按照顺序首尾相接，得到最终路径。
14.进一步的，所述的画线打印引导图是对路径的仿真模拟，利用grasshopper中的time trigger，基于速度等参数的设置，设定每10ms对画线所应移动的距离进行一次累加计算，计算出当前时刻所期望绘制的路径长度，并将当前画线位置在路径中进行标记，同时将对应路径着色，从而实现动画引导效果。
15.基于混合现实技术的手工艺路径引导学习制作方法，基于上述的系统实现，包括如下步骤：
16.步骤1：获取模型：在系统界面中选择示例模型或自行导入模型；
17.步骤2:设计模型参数：根据需求的目标结合mr系统中已选择或导入的模型，对其轮廓、尺寸等参数进行调整，确定模型的基本形状；
18.根据需求的目标，通过对模型进行镜像、旋转、阵列等变换，确定最终的设计模型；
19.步骤3:分层与路径规划
20.根据需求目标，可将多个功能需求不同的模型进行分层设定，在此基础上，系统根据用户选择对模型的画线路径进行规划，所述用户选择包括设定路径模拟的速度参数、在有多个复杂模型时设定模型路径模拟的顺序排列；
21.按照上述路径规划参数，该系统通过移动终端的摄像头获取实时画面，通过移动终端的显示屏显示所规划路径的模拟动画引导界面，动画引导界面可与实时场景画面相统一，达到混合现实效果；
22.步骤4:mr引导下的手工操作
23.使用者在混合现实学习引导实践中，不用佩戴额外的混合现实配件，直接在显示终端观看，并同时使用3d打印工具沿引导路径完成手工艺制作，使用者在使用引导系统时可随时暂停、继续、循环播放以及结束动画，达到更为人性化的学习效果。
24.获得打印完成的模型后还可以结合外界作用如热、水等外因诱导模型材料发生形变，达到所需效果。
25.本发明的有益效果是：
26.本发明的一种基于混合现实技术的手工艺路径引导学习系统，借助手机、平板电脑等移动终端的硬件传感器，使得用户无需购买整套虚拟现实设备，可以通过较少的成本投入使用mr系统完成相关手工艺的学习。混合现实技术提高了手工艺流程展示的空间立体感和用户的参与感，为用户提供了真实的模型预览和引导效果，更高效地帮助用户完成学习和设计，降低了学习门槛。
附图说明
27.图1是本发明一种具体方法流程示意图；
28.图2是本发明一种具体实例中的实际操作示意图。
29.图3是本发明具体实例中实际操作示意图。
30.图4是本发明系统的一种界面示意图。
31.图5是本发明系统的一种界面示意图。
32.图6是本发明对画线速度及分层性能的测试图。
33.图7-10分别为本发明的应用实例图。
具体实施方式
34.为了更好的理解本发明，下面将结合具体实施例和附图进一步阐述本发明的方案，但本发明的内容不仅仅局限于下面的实施例。
35.在手工艺制作过程中，本发明的基于混合现实技术的手工艺路径引导学习系统能够基于混合现实技术在mr显示界面为用户提供画线引导路径，以供用户利用3d打印工具按照所述画线引导路径进行画线打印。系统具有如下功能模块：
36.模型导入选择模块，所述模块用于供用户向系统中导入所需模型或从示例模型库中选择所需模型；
37.参数调控模块，根据需求的目标手工艺结构，结合已选择或导入的模型，在系统界面中可选择示例模型或自行导入模型，模型一般为实体模型(stl，obj，step等格式)或矢量路径(ai，dwg，dwf，svg等格式)。对单元件的轮廓、尺寸参数进行调整，可通过一系列系统提供的方式对输入模型进行变换，如镜像、旋转、阵列等，最终确定符合目标手工艺结构要求的设计模型；
38.路径规划模块，用于将所述设计模型进行分层并对各层的打印路径进行规划从而形成各层的画线路径引导图，按照打印顺序将各层画线路径引导图依次呈现在mr显示界面中，用户根据mr显示界面所呈现的画线路径引导图进行3d打印工具描线打印，得到目标手工艺结构。该模块中路径规划的方法如下：根据用户对期望效果的选择，如金属丝绕线花样、打印物件变形效果等，得到实际画线的宽度、间隔、与模型边缘的夹角等参数，之后在模型边缘取一系列点，并根据路径参数将对应点进行连接，获得若干条线段，将这些线段按照顺序首尾相接，得到最终路径。画线打印引导图是对路径的仿真模拟，可以利用grasshopper中的time trigger，基于速度等参数的设置，设定每一段时间如10ms对画线所应移动的距离进行一次累加计算，计算出当前时刻所期望绘制的路径长度，并将当前画线位置在路径中进行标记，同时将对应路径着色，从而实现动画引导效果。
39.在基于上述系统进行手工艺路径引导学习制作过程中，可先在系统中确定最终的设计模型；然后根据需求目标，可将多个功能需求不同的模型的进行分层设定，例如手绘画线案例中可设置完全填充件和间隔线填充件等，在手绘4d打印中可设置可变形件和不可变形件等，在金属丝绕线中可设置不同的绕线花样。在此基础上，系统根据用户选择对模型的画线路径进行规划，例如在手绘画线和手绘4d打印中可设定路径模拟的速度参数。在有多个复杂模型时还可以设定模型路径模拟的顺序排列，简化手工艺制作过程。
40.按照上述路径规划参数，该系统通过移动终端的摄像头获取实时画面，通过移动终端的显示屏显示所规划路径的模拟动画引导界面，动画引导界面可与实时场景画面相统一，达到混合现实效果。使用者在混合现实学习引导实践中，可不用佩戴额外的混合现实配件(例如头盔、眼镜)，直接在平板电脑等终端观看，并同时使用相关工具(如3d打印笔)沿引导路径完成手工艺制作。使用者在使用引导系统时可随时暂停、继续、循环播放以及结束动画，达到更为人性化的学习效果。进一步地，本发明mr系统可实时根据模型设计、参数调整模拟出对应效果，显示在虚拟世界中，提供设计预览，并应用于手机、平板电脑等移动终端，应用摄像头采集现实环境，将用户所设计模型通过终端屏幕与现实进行融合。
41.进一步地，本发明mr系统可使用grasshopper工具构建交互界面，基于用户的选择和输入进行计算和建模；使用三维建模软件rhinoceros进行模型的预览；使用其中的插件fologram实现界面和模型在移动终端虚拟世界中的同步，达到混合现实效果可通过fologram中的sync组件，完成模型同步；通过filter和gate组件进行筛选操作，完成含有多种选择的模型分层和参数设定功能。图2、3是本发明中一个自扭(twist)模型的打印实例，具体过程包括如下：
42.1、模型获取。根据需求的目标结合模型库在mr系统界面中选择模型或自行导入模型，相应的模型出现在虚拟世界中，与所用移动终端摄像头获取到的真实世界融合，显示在屏幕上。在系统中导入一个自扭(twist)模型，模型为stl文件。
43.2、模型参数设计
44.根据需求的目标结合mr系统中模型，对其轮廓、尺寸、变形程度和外轮廓曲线形状等参数进行调整，确定单元件的基本形状。调整为宽带：2cm，长度10cm，形变程度：3级。
45.根据需求的目标，通过一系列系统提供的方式对模型进行变换，如镜像、旋转、阵列等，确定最终的设计模型。该步骤中的每一次参数调整操作都会实时通过fologram插件传输给grasshopper中的程序，计算得到调整后的模型效果并更新在混合现实系统界面中。
46.3、分层与路径规划
47.对于多个模型的选择，将模型进行分层和组合，使得所选模型按照一定顺序进行排列。所选自扭模型的填充线与边缘的夹角顺序为：第一层45
°
，第二层-45
°
，上下两层填充线成正相交。系统据此在输入模型中绘制出分别平行排列的两组线段，并按顺序首尾相接，得到最终路径。设定路径模拟的速度参数为“简单易操作模式”，路径为用户规划成连续、易操作的轨迹。
48.按照分层顺序，根据选定模型的参数，将系统中引导的“画线位置”沿规划好的路径进行移动，同时将已经完成的部分进行上色，实现动画效果，并在混合现实中进行模拟。
49.4、mr引导下的手工操作
50.使用者使用3d打印笔，按照mr系统界面中的轨迹和速度引导，在现实世界中完成设计模型的画线打印，如图2、3所示为使用平板电脑在mr系统中进行路径引导4d打印的示意图。
51.其中，打印材料是直径为1.75毫米的热塑性材料pla(polymaker polymax)，打印笔的打印温度为170℃。
52.使用者在使用引导系统中可随时暂停、继续、循环播放以及结束4d打印引导动画。当用户根据系统引导完成手动4d打印画线后，将打印完成的模型放入80℃热水中进行加热，数秒后模型可发生形变，从而得到系统中设定的形变效果。
53.在完成多个模型打印时，用户可利用热塑性材料高温时的黏着性将多个模型进行组装，得到完整模型。
54.此外，采用本发明的系统及方法可以结合后处理能够丰富个性化手工艺的结构，可制作出复杂产品，如图7-10所示为本发明的一些应用实例。