电子设备、判定方法以及记录介质与流程

1.本发明涉及电子设备、判定方法以及记录介质。


背景技术：

2.近年来，已知对人的指甲等印刷对象印刷各种设计等的印刷装置(指甲打印装置)。
3.在这样的印刷装置中，需要使包含作为印刷对象的指甲等的指配置于特定的位置，在合适地进行对位的基础上进行印刷。
4.例如在专利文献1中，记载了为了能容易地进行印刷对象(例如指的指甲)的对位等而在配置印刷对象的配置部的近旁设置镜。
5.现有技术文献
6.专利文献
7.专利文献1：jp特开2020-103448号公报
8.但是，镜或者此外印刷对象的配置部周边，存在由于印刷时的墨水的飞散或与指的接触等而变脏的情况。若印刷对象的周边变脏，就有可能给印刷对象的识别等带来影响。


技术实现要素：

9.本发明鉴于以上那样的情况而提出，目的在于，提供能抑制印刷对象的识别精度的降低的电子设备、判定方法以及记录介质。
10.为了解决所述课题，本发明的电子设备的一个方式特征在于，具备：图像取得单元，其取得包含作为印刷对象的指甲的指图像以及包含状态随时间变化的特定部分的拍摄图像；和判定单元，其通过比较拍摄包含第1状态的所述特定部分的范围而得到的比较用图像和所述拍摄图像来判定所述特定部分的状态。
11.发明的效果
12.根据本发明，起到能抑制印刷对象的识别精度的降低的效果。
附图说明
13.图1是表示本实施方式所涉及的印刷装置的外观结构的主要部分立体图。
14.图2是表示本实施方式所涉及的印刷装置以及与其协作的终端装置的控制结构的主要部分框图。
15.图3是表示拍摄包含指甲的指而得到的指图像的一例的俯视图。
16.图4是表示比较用图像的一例的俯视图。
17.图5是表示拍摄图像的一例的俯视图。
18.图6是表示拍摄图像的一例的俯视图。
19.图7是表示本实施方式中的判定处理的流程图。
具体实施方式
20.参考图1到图7来说明本发明所涉及的电子设备、判定方法以及记录介质的一实施方式。
21.另外，在以下叙述的实施方式中，为了实施本发明而附加了技术上优选的种种限定，但并不将本发明的范围限定在以下的实施方式以及图示例。
22.此外，在以下的实施方式中，以电子设备是以手的指的指甲等为印刷对象的印刷装置(指甲打印装置)的情况为例进行说明。另外，本发明中的电子设备并不限定于以手的指的指甲为印刷对象的印刷装置。
23.图1是表示作为本实施方式中的电子设备的印刷装置的主要部分外观结构的立体图。图2是表示本实施方式中的印刷装置以及与其协作的终端装置的功能结构的框图。
24.另外，在以下的实施方式中，上下、左右以及前后是指图1等所示的朝向。此外，x方向、y方向是指图1等所示的方向。
25.如图1所示那样，印刷装置1具有形成为大致箱形的外壳2。
26.在外壳2的前面侧(印刷装置1的正面侧、图1中前侧)的下侧部分，形成有在左右方向(印刷装置1的横向、图1中左右方向、x方向)的大致中央部较大地开口的开口部21。开口部21至少具有能让指在装置内出入的宽度。开口部21可以具有能让手在装置内出入的程度的宽度。
27.在外壳2的上表面(顶板)、侧面等设有操作部22。操作部22是用户进行各种输入的功能部。在本实施方式中，图示在外壳2的上表面设有操作部22的示例。
28.操作部22例如是将印刷装置1的电源接通的电源开关按钮、使动作停止的停止开关按钮等，若操作操作部22，就将与操作相应的指示信号输出到后述的控制部11。
29.另外，在图示例中，示出操作部22由1个按钮构成的情况，但操作部22也可以由设于外壳2的上表面等的多个按钮等构成。
30.此外，在后述的显示部6的表面一体地构成触控面板的情况下，触控面板也作为操作部22发挥功能。
31.此外，在外壳2设有显示部6。在图示例中，在外壳2的上表面(顶板)配置显示部6。
32.显示部6是基于从后述的控制部11输出的图像数据等来使各种显示画面显示的显示单元。显示部6的大小、所设置的具体的位置等并不限定于图示例。
33.显示部6例如由液晶显示器(lcd：liquid crystal display，液晶显示器)、有机电致发光显示器、其他平板显示器等构成。另外，也可以在显示部6的表面一体地构成触控面板。在该情况下，该触控面板也作为操作部22发挥功能。
34.在本实施方式中，使拍摄配置于印刷装置1内的包含指甲t的指u而得到的指图像pi(后述的第1指图像pit、第2指图像pis、参考图3)等显示于显示部6。另外，如后述那样，在本实施方式中，由摄像机51拍摄包含“特定部分”的范围，取得拍摄图像pt(后述的第1拍摄图像ptt、第2拍摄图像pts、参考图5、图6)。可以在显示部6显示该拍摄图像pt。此外，也可以为了能目视确认拍摄包含初始状态(第1状态)的“特定部分”的范围而得到的比较用图像ps(后述的第1比较用图像pst、第2比较用图像pss、参考图4)与拍摄图像pt的比较，将它们并排显示。
35.显示于显示部6的内容并不限定于指图像pi等图像。例如在显示部6也可以显示用
户从操作部22等输入/选择的指甲设计、对用户的各种指示、引导、警告等。
36.此外，在本实施方式中，如后述那样，作为判定单元的控制部11对“特定部分”的状态(本实施方式中是污渍状况)进行判定，显示部6还作为对应于判定结果来对用户报知应对等的报知单元发挥功能。
37.在外壳2的内部、在与开口部21对应的位置，设有配置从开口部21插入的指u的指配置部3。
38.指配置部3具有作为载置指u的部分的配置部主体31。配置部主体31的宽度方向的中央部沿着长边方向些许凹陷，从而稳定地配置指u。另外，在配置部主体31可以设置例如由树脂等有柔软性的材料形成的缓冲构件。
39.指配置部3的跟前侧(图1中的y方向的跟前侧)被框状部32包围，框状部32的顶面被配置于指配置部3的指u的上侧顶接，作为约束指u的上方向的位置的指压发挥功能。
40.对于指配置部3的里侧(图1中的y方向的里侧)，上方开放，从开口部21插入并配置于指配置部3内的指u的指甲t的表面露出。
41.此外，在指配置部3的里侧设有顶接部33。配置于指配置部3的指u的前端部顶接到顶接部33。在指甲t与指u的前端相比更加伸长的情况下，指甲t的前端部分会挂到顶接部33，还作为指甲载置部发挥功能。
42.另外，设置框状部32、顶接部33并非必须。也可以设为不具备框状部32、顶接部33的结构。
43.此外，在指u的配置位置的近旁配置有镜35。在本实施方式中，在配置部主体31的左侧部设有镜35。另外，镜35的数量、配置位置并不限定于此，可以在配置部主体31的右侧部、指u的前端侧等也设有镜。
44.镜35例如可以使用在基材中使用了丙烯酸树脂等的合成树脂制的镜。另外，镜35的材质等并没有特别限定，例如可以是在基材中使用了玻璃的玻璃制的镜等。
45.镜35是在用后述的摄像机51拍摄配置于指配置部3的指u时辅助拍摄的辅助反射部。具体地，镜35是能将来自与摄像机51能直接拍摄的一方向(例如上方向)不同的方向(例如横向)的指图像收在摄像机51的能拍摄范围内的光学元件。
46.由于摄像机51通过能经由镜35取得从横向观察包含指甲t的指u的图像，能检测指甲t的高度方向的位置。
47.指配置部3以及镜35是本实施方式中的“特定部分”。作为“特定部分”的指配置部3以及镜35，状态随时间变化。
48.所谓“特定部分”的状态，例如是“特定部分”的污渍状况。如后述那样，在本实施方式中，作为电子设备的印刷装置1具备使墨水喷出来进行印刷的印刷头41，在印刷时墨水(墨水薄雾等)飞散。
49.作为“特定部分”的指配置部3、镜35的状态，伴随装置的使用，由于这样的墨水(未命中作为印刷对象的指甲t的墨水薄雾等)、配置于装置内的指u的皮脂、各种灰尘等附着而随时间变化(另外，在图5、图6中以点描示出附着污渍d的样子)。另外，“特定部分”的状态随时间变化要因并不限定于这里所示。例如，还设想，在为了减缓因更换印刷头41等从装置进行拆装时，使墨水喷出的面与指配置部3或镜35接触而附着了墨水的情况。
50.在本实施方式中，由后述的摄像机51拍摄配置于指配置部3的包含指甲t的指u，从
拍摄的图像(后述的指图像pi、参考图3)识别(检测)作为印刷对象的指甲t的形状、位置。
51.为此，指配置部3、特别是载置指u的配置部主体31或其周边，由黑色等易于与肤色识别的颜色的构件形成，以使得与指甲t等的对比度变得明确(参考图3～图6)。
52.例如，若作为“特定部分”的指配置部3由于墨水等而变脏，则黑色的构件逐渐变得发白，从而对比度会降低，变得难以识别划定指甲t的区域的轮廓。
53.此外，例如若镜35由于墨水等而变脏，则在镜35中映出的图像变得不清晰，变得难以从拍摄镜3而得到的图像(后述的指图像pi(第2指图像pis)、参考图3)识别(检测)作为印刷对象的指甲t。
54.为此，在指配置部3、镜35等“特定部分”变脏的情况下，优选除去污渍d(参考图5、图6)。
55.图2是表示本实施方式的印刷装置以及与其协作的终端装置的控制结构的主要部分框图。
56.如图2所示那样，印刷装置1除了具备前述的操作部22、显示部6以外，还具备印刷机构4、拍摄部5、通信部25等。
57.拍摄部5具备摄像机51和光源52。
58.摄像机51以及光源52的周围被例如由亚克力板等透明的树脂材料形成的未图示的保护构件包围，以使得墨水(墨水薄雾)等污渍不会直接附着于摄像机51的镜头等。
59.另外，保护构件的形状、所设置的范围等并没有特别限定，但优选至少配置在摄像机51以及光源52中的与指配置部3对置一侧。此外，形成保护构件的材料并不限定于亚克力板。保护构件只要不阻碍摄像机51所进行的拍摄、光源52所进行的照明即可，例如可以由玻璃等形成。
60.摄像机51例如是具备具有200万像素程度以上的像素的固体拍摄元件和镜头等而构成的小型的拍摄装置，是拍摄配置于印刷装置1内的包含指甲t的指u、作为“特定部分”的指配置部3、镜35等来取得各种图像的图像取得单元。此外，光源52例如是白色led等照明灯。
61.拍摄部5将载置于指配置部3的指u、指甲t、“特定部分”等拍摄对象用光源52进行照明。然后，由摄像机51拍摄该指u、“特定部分”等，来得到指图像pi(包含指甲图像的指u的图像、参考图3)、拍摄图像pt(包含“特定部分”且不含指u、指甲t的图像、参考图5、图6)等(拍摄对象的图像)。
62.图3是表示由摄像机拍摄的指图像的一例的图。
63.在本实施方式中，摄像机51配置于印刷装置1的上表面内侧等，如图3所示那样，能取得从上方向观察指u时的指图像pi(上表面图像、第1指图像pit、参考图3的右侧)。
64.此外，摄像机51构成为能取得经由作为辅助反射部的镜35收在能拍摄范围内的指图像pi(在本实施方式中从横向观察指u时的指图像、侧面图像、第2指图像pis、参考图3的左侧)。
65.如此地，通过除了能拍摄能从摄像机51的配置位置直接得到的图像以外，还能拍摄经由镜35的图像，不用改变摄像机51自身的位置、角度，就能以来自一方向(本实施方式中是上方向)的拍摄取得从多个方向观察指u时的指图像。另外，拍摄自身可以进行1次，例如也可以改变光源52的照度、聚焦等分多次进行。
66.在能得到将第1指图像pit(上表面图像)和第2指图像pis(侧面图像)包含在1个图像中这样的图像数据的情况下，例如可以如图3所示那样，将第1指图像pit(上表面图像)和第2指图像pis(侧面图像)并排作为1张图像显示于显示部6等。
67.此外，也可以从1个图像分别裁出第1指图像pit(上表面图像)和第2指图像pis(侧面图像)，并使显示部6等分开显示。进而，也可以将第1指图像pit(上表面图像)和第2指图像pis(侧面图像)分别作为不同图像取得，使显示部6分别分开显示。
68.此外，在本实施方式中，如图5以及图6所示那样，在未配置包含指甲t的指u的状态下，拍摄部5拍摄指配置部3、其周边来取得包含“特定部分”的拍摄图像pt。即，能取得从上方向观察指配置部3的周边的拍摄图像pt(上表面图像、第1拍摄图像ptt、参考图5、图6的右侧)和经由镜35从横向观察指配置部3的周边的拍摄图像pt(侧面图像、第2拍摄图像pts、参考图5、图6的左侧)。
69.拍摄图像pt是进行“特定部分”的污渍状况的判定(诊断)所需的图像。作为取得拍摄图像pt的定时，例如考虑各天的使用开始时(例如电源成为接通时)、使用印刷装置1的用户切换时、印刷装置1超过一定的累积使用时间的情况等。
70.另外，由拍摄部5得到的指图像pi、拍摄图像pt等图像数据可以存储于后述的存储部12中。
71.另外，在本实施方式中，将由拍摄部5的摄像机51拍摄包含第1状态的“特定部分”的范围而得到的比较用图像ps(从上方向观察指配置部3的周边的比较用图像ps即第1比较用图像pst、和从横向观察指配置部3的周边的比较用图像ps即第2比较用图像pss、参考图4)存储在后述的存储部12等。
72.在此，所谓“第1状态”，例如是印刷装置1的工厂出厂时的初始状态等、用户的装置使用前的状态。比较用图像ps例如在工厂出厂前的阶段取得，存储于存储部12等。
73.另外，比较用图像ps只要是未在指配置部3等“特定部分”附着污渍d的状态的图像即可，拍摄包含第1状态的“特定部分”的范围来取得比较用图像ps的定时并不限定于工厂出厂阶段(工厂出厂前、工厂出厂时)。例如也可以在印刷装置1送到用户的手边后，在进行印刷动作前等取得比较用图像ps。
74.比较用图像ps由于是与拍摄图像pt进行比较的图像，因此，优选在与拍摄拍摄图像pt时的条件同等的条件(例如照度、进行拍摄时的角度等)下拍摄。
75.印刷机构4如图2所示那样具备印刷头41、作为头移动单元的x方向移动电动机45、y方向移动电动机47(参考图2)等。
76.本实施方式的印刷头41是喷墨方式的印刷单元，与指甲表面对置的面(下侧的面)成为具备使墨水喷出的多个喷嘴口的墨水喷出面(均未图示)，将墨水微滴化，从墨水喷出面对指甲表面直接喷附墨水(喷出)来进行印刷。另外，具体的墨水的喷出方式等并没有特别限定。此外，印刷头41的结构并没有特别限定，例如是墨水喷出面等喷出机构部和存积墨水的墨盒成为一体的墨盒一体型的头。
77.印刷头41例如能喷出青(c；cyan)、洋红(m；magenta)、黄(y；yellow)等彩色墨水。另外，印刷头41的种类、数量并没有特别限定。例如可以除了上述那样的喷出彩色墨水的印刷头以外，还具备在印刷设计前印刷成为基底的液剂(例如白色的墨水等)的基底用的印刷头等。
78.x方向移动电动机45构成使印刷头41在装置的左右方向(x方向)上移动的x方向移动机构，y方向移动电动机47构成使印刷头41在装置的前后方向(y方向)上移动的方向移动机构。x方向移动电动机45、y方向移动电动机47例如是步进电动机，适宜地使印刷头41在xy方向上移动。
79.此外，印刷机构4具有用于检测印刷头41的位置的位置检测传感器48。位置检测传感器48例如是检测印刷头41的x方向、y方向的原点位置的原点传感器、掌握印刷头41的移动状况的编码器传感器等。
80.另外，位置检测传感器48的具体的种类、结构并没有特别限定。
81.此外，在本实施方式中，印刷装置1经由外部设备取得印刷于指甲t的设计(指甲设计)的数据等，印刷装置1具有在与外部设备之间进行信息的收发的通信部25。在此，所谓外部设备，例如是后述的终端装置8或各种服务器等。
82.印刷装置1与外部设备之间的通信例如通过无线lan等进行。另外，印刷装置1与外部设备之间的通信并不限定于此，可以是任意方式。例如，可以使用因特网等网络线路，也可以进行基于bluetooth(注册商标)、wi-fi等近距离无线通信标准的无线通信。此外，该通信并不限定于无线连接方式，也可以设为能通过有线连接在两者间进行各种数据的收发的结构。通信部25具备与设想进行通信的各种外部设备的通信方式、通信标准对应的天线芯片等。
83.搭载于印刷装置1的控制装置10是具备具有未图示的cpu(central processing unit，中央处理器)等处理器的控制部11、具有rom(read only memory，只读存储器)以及ram(random access memory，随机存取机器)等(均未图示)的存储部12(均未图示)的计算机。
84.在存储部12的rom等中存放用于使印刷装置1动作的各种程序、各种数据等。
85.特别在本实施方式中，工厂出厂时等拍摄的比较用图像ps(从上方向观察指配置部3的周边的比较用图像ps即第1比较用图像pst和从横向观察指配置部3的周边的较用图像ps即第2比较用图像pss、参考图4)的数据，存储在存储部12当中的即使将电源切断也不会被重置的非易失性的存储器中。
86.通过控制部11将存储于作为存储介质发挥功能的rom等的各种程序在ram的作业区域展开并执行，来综合地控制印刷装置1的各部的动作。
87.即，控制部11通过与程序(例如印刷处理应用程序、判定处理应用程序等)的共同工作，来实现用于让印刷装置1进行印刷或本实施方式中的判定处理等的各种功能。
88.另外，控制部11的各功能可以通过让控制部11执行程序(软件)来实现，也可以通过专用的模块(硬件)实现。
89.在本实施方式中，控制部11除了主要作为控制印刷机构4各部的动作的印刷控制单元、控制拍摄部5各部的动作的拍摄控制单元、控制显示部6的动作的显示控制单元等发挥功能以外，还作为从图像判定“特定部分”的状态(污渍状况等)的判定单元发挥功能。
90.作为印刷控制单元的控制部11，使印刷机构4的印刷头41以及各电动机(x方向移动电动机45、y方向移动电动机47)等动作，在配置于指配置部3的指u的指甲t按照印刷数据来印刷各种设计(指甲设计)。另外，印刷数据可以在控制部11中生成，也可以经由通信部25从终端装置8等外部装置接收。
91.作为显示控制单元的控制部11控制显示部6的动作，并进行按照各种图像数据的显示。
92.此外，作为显示控制单元的控制部11对应于作为判定单元的控制部11的判定结果来使显示部6显示各种消息、警告等，使显示部6作为对用户报知与判定结果相应的应对的报知单元发挥功能。
93.此外，作为拍摄控制单元的控制部11控制拍摄部5的摄像机51以及光源52的动作，来取得指图像pi、拍摄图像pt等。
94.另外，对于附着于指配置部3、镜35等“特定部分”的各种污渍d(参考图5、图6)，设想：有照度高的情况下易于看见的、些许降低照度的情况下易于看见的等各种外观、反光的形式。为此，作为拍摄控制单元的控制部11控制拍摄部5，改变光源52的照明照度(照度状况)等拍摄条件进行多次的拍摄，以使得在拍摄图像pt时，能在与各污渍d相应的最优的拍摄条件下取得图像。
95.作为判定单元的控制部11通过将拍摄包含第1状态(初始状态)的“特定部分”的范围而得到的比较用图像ps(第1比较用图像pst、第2比较用图像pss)、和拍摄包含“特定部分”的拍摄图像pt(拍摄未配置指u的状态的指配置部3周边的现状的图像、第1拍摄图像ptt以及第2拍摄图像pts)进行比较，来判定“特定部分”的状态(本实施方式中污渍状况)。
96.作为判定单元的控制部11所进行的“特定部分”的污渍状况的判定手法并没有特别限定，使用比较现状的图像即拍摄图像pt(第1拍摄图像ptt、第2拍摄图像pts)和正常状态(由于使用而变脏前的清洁状态)的图像即比较用图像ps(第1比较用图像pst、第2比较用图像pss)来评价其差分的差分法(比较法)。
97.另外，考虑对于指配置部3、镜35等每个“特定部分”最优的图像处理条件等不同。为此，控制部11优选从图像裁取各“特定部分”并在相同的部分彼此进行比较。
98.差分法(比较法)的具体的处理手法并没有特别限定，但使用输出将比较用图像ps和拍摄图像pt重合而得到的灰度差的差分图像的差分滤波器，来提取拍摄图像pt当中的从第1状态(初始状态)状态的图像即比较用图像ps发生变化的部位。
99.例如，将比较用图像ps以及拍摄图像pt的rgb的各值1点(dot)1点地进行比较，提取有灰度差(rgb各色的浓淡、明亮度的差)的点的差分。另外，在图4～图6中，为了图示的方便，以方眼(网格)示意地示出比较图像彼此时的最小单位(例如1像素、1点等)，但实际的比较对象成为更为细小的网格单位。
100.通过如此地提取比较用图像ps与拍摄图像pt的差分，能识别从第1状态(初始状态)发生变化的部位。
101.在本实施方式中，预先确定用于判定污渍状况的阈值，作为判定单元的控制部11基于该阈值来判断“特定部分”的状态。
102.即，例如，在图像整体(总面积、总点)当中、检测到差分的区域的面积超过阈值那样的成为某一定以上的面积值的情况下，控制部11判定为是需要清扫(清洁)的程度的污渍状况。
103.另外，作为判定单元的控制部11的污渍状况的判定基准并不限定于检测到差分的面积的大小。例如也可以将差分的大小(即，污渍的浓淡)等作为判断基准，还可以考虑面积的大小和差分的大小双方来进行污渍状况的判定。
104.另外，适宜设定成为何种程度的面积值、差分的大小时判断为需要清扫的阈值。此外，阈值可以在拍摄指配置部3周边而得到的第1拍摄图像ptt和拍摄镜35而得到的第2拍摄图像pts中设定不同的值。
105.此外，控制部11可以还作为印刷数据生成单元发挥功能，通过对指图像pi进行图像处理，来从指图像pi检测划定配置于指配置部3的指u的指甲t的区域的指甲轮廓，通过将所期望的设计(指甲设计)匹配到该指甲轮廓的内侧区域等，来生成印刷数据。在该情况下，可以对应于指甲的弯曲形状等来对印刷数据进行各种补正。
106.具体地，控制部11将由用户选择的设计(指甲设计)的图像数据裁出，进行适宜放大缩小、配置的调整等，并适配到从指图像取得的指甲轮廓内。
107.另外，在取得了指甲t的曲率等信息的情况下，控制部11可以基于该指甲t的曲率等来对印刷数据进行适宜曲面补正等。在进行了曲面补正等的情况下，能生成更符合指甲的形状的印刷数据。
108.此外，本实施方式的印刷装置1与作为外部设备的终端装置8进行协作。
109.在本实施方式中，终端装置8例如设想智能手机、平板终端等便携终端装置。另外，终端装置8只要能与印刷装置1通信即可，并不限定于智能手机等。例如也可以是游戏用的终端装置等。
110.如图2所示那样，终端装置8具备操作部83、通信部84、显示部85、控制装置80等。
111.操作部83能对应于用户的操作进行各种输入/设定等，若操作了操作部83，就将与该操作对应的输入信号发送到控制装置80。另外，在本实施方式中，在显示部85的表面一体地设置触控面板，用户还能通过对触控面板的触摸操作来进行各种输入/设定等操作。
112.另外，进行各种输入/设定等操作的操作部83并不限定于是触控面板的情况。例如，可以设置各种操作按钮、键盘、指向设备等作为操作部83。
113.此外，也可以通过操作终端装置8的操作部83，来在印刷装置1进行各种输入/设定等。例如可以通过用户操作操作部83，来使印刷装置1的印刷动作开启。
114.通信部84是在与印刷装置1的通信部25之间进行通信的通信单元。例如，通信部84从印刷装置1接收用摄像机51拍摄配置于印刷装置1内的包含指甲的指而得到的指图像pi、拍摄图像pt的数据等。
115.通信部84具备能在与印刷装置1的通信部25之间进行通信的无线通信模块等。
116.另外，通信部84只要能在与印刷装置1之间进行通信即可，可运用与印刷装置1的通信部25的通信标准相符的通信部。
117.显示部85例如由液晶显示器(lcd：liquid crystal display)、有机电致发光显示器、其他平板显示器等构成。显示部85按照控制部81的控制
に
，例如显示基于各种图像数据的图像、针对用户的消息画面、各种引导画面、警告显示画面等。
118.针对用户的消息画面、警告显示画面等也可以显示于印刷装置1的显示部6，并且，或者取代显示于显示部6而显示于终端装置8的显示部85。
119.例如，在作为判定单元的控制部11对污渍状况进行了判定的情况下，根据该判定结果，将对用户报知应对的报知画面显示于终端装置8的显示部85。在该情况下，终端装置8的显示作为85作为报知单元发挥功能。
120.另外，如前述那样，也可以在显示部85在表面一体地构成用于进行各种输入的触
控面板。在该情况下，触控面板还作为操作部83发挥功能。
121.控制装置80是具备由未图示的cpu(central processing unit，中央处理器)等构成的控制部81、和由未图示的rom(read only memory，只读存储器)以及ram(random access memory，随机存取机器)等构成的存储部82的计算机。
122.在存储部82中存放用于使终端装置8的各部动作的各种程序、各种数据等。
123.具体地，在本实施方式的rom等中，除了存放用于总括控制终端装置8的各部的动作程序以外，还存放用于进行利用了印刷装置1的印刷处理的印刷处理应用程序、显示控制处理应用程序等各种程序(均未图示)等，通过控制装置80将这些程序在例如ram的作业区域展开并执行，来控制终端装置8。
124.此外，在存储部82中，可存储有在印刷装置1中对指甲t印刷的设计(指甲设计)的数据。
125.控制部81综合地控制终端装置8的各部的动作。控制部81通过与存储于存储部82的程序(印刷处理应用程序等)的共同工作，来实现用于进行印刷装置1的印刷处理、使显示部85显示显示用图像等的处理等的各种功能。
126.接下来，参考图7等来说明本实施方式的判定方法。
127.图7是表示本实施方式中的判定处理的流程图。
128.在本实施方式中，如前述那样，在1天的印刷动作开始前、电源接通时、使用印刷装置1的用户切换时、1天的印刷动作结束时等，进行判定指配置部3、镜35等“特定部分”的状态(污渍状况)的判定处理。
129.具体地，首先，由拍摄部5的摄像机51拍摄作为“特定部分”的指配置部3的周边(未配置指u的状态的指配置部3周边)，取得拍摄图像pt(第1拍摄图像ptt、第2拍摄图像pts)(步骤s1、图像取得工序)。
130.拍摄图像pt优选在改变光源52的照度程度等拍摄条件的同时进行数次拍摄，得到在不同的条件下拍摄的多个拍摄图像pt。适宜设定在何种条件下进行几次拍摄等。所拍摄的拍摄图像pt被控制部11取得。
131.若取得拍摄图像pt，则作为判定单元的控制部11从存储部12读出比较用图像ps(第1比较用图像pst、第2比较用图像pss)，在其每个对应部分比较该比较用图像ps
と
拍摄图像pt，求取其差分(步骤s2、判定工序)。
132.在改变条件进行多次的拍摄的情况下，对所取得的全部拍摄图像pt进行与比较用图像ps的比较。
133.具体地，关于各拍摄图像pt，针对从上方向观察的第1拍摄图像ptt，与从相同方向观察的第1比较用图像pst进行比较，针对从横向观察的第2拍摄图像pts，与从相同方向观察的第2比较用图像pss进行比较。
134.然后，控制部11对于第1拍摄图像ptt、第2拍摄图像pts，分别取得通过与第1比较用图像pst、第2比较用图像pss的比较检测到差分的点的总面积等。
135.控制部11在与比较用图像ps的比较中判断是否在拍摄图像pt中有阈值以上的变化，即，与比较用图像ps进行比较，来判断产生差分的点数是否比预先确定的阈值多(步骤s3)。然后，在没有阈值以上的变化的情况下(步骤s3；“否”)，在此结束判定处理，移转到待机模式(步骤s4)。具体地，若这之后有印刷动作指示，就开始印刷机构4的印刷动作，在电源
被切断的情况下，在该状态下使全部动作停止。
136.例如在各拍摄图像pt(第1拍摄图像ptt、第2拍摄图像pts)如图5所示那样是稍微变脏的程度的情况下，则检测到差分的点的总面积也少，不超过阈值(步骤s3；“否”)。在该情况下，未到促使用户清扫的程度，能在此状态下继续进行印刷装置1的使用。
137.另一方面，在拍摄图像pt中有阈值以上的变化的情况下(步骤s3；“是”)，控制部11判定为作为“特定部分”的指配置部3、其周边变脏(步骤s5)，使促使用户清扫(清洁)的消息显示于印刷装置1的显示部6，将与判定结果相应的应对报知给用户(步骤s6)。另外，这时，可以在终端装置的显示部85也进行同样的显示。
138.例如，在各拍摄图像pt(第1拍摄图像ptt、第2拍摄图像pts)如图6所示那样，在本来为黑色的构件的指配置部3的周边由于墨水而变白的情况下(参考图6的“第1拍摄图像ptt”)、镜35变脏到仅能不清晰地映出指配置部3的周边的情况下(参考图6的“第2拍摄图像pts”)，即使在这样状态下拍摄指图像pi，也有不能从指图像pi正确地检测指甲轮廓的可能性。此外，若用户将指u配置于这样的状态的指配置部3，还有可能在指u、指甲t附着墨水等而变脏。在这样的情况下，是应促使用户清扫的污渍状况，检测到差分的点的总面积也变多。
139.另外，在本实施方式中，对从上方向观察指配置部3的周边的第1拍摄图像ptt和从横向观察指配置部3的周边的第2拍摄图像pts分别判定是否有阈值以上的变化。在第1拍摄图像ptt中有变化的情况下，认为指配置部3以及其周边自身变脏。与此相对，在第2拍摄图像pts中有变化的情况下，认为映出指配置部3的侧面的镜35变脏。
140.在本实施方式中，哪怕有第1拍摄图像ptt中出现的指配置部3等的污渍d、第2拍摄图像pts中出现的镜35的污渍d的任意一方，控制部11也判定为作为“特定部分”的指配置部3的周边变脏。
141.另外，对于第1拍摄图像ptt、第2拍摄图像pts的某一方超过阈值多少，也可以使显示部6等显示。
142.例如也可以在第1拍摄图像ptt不是超过阈值很多但第2拍摄图像pts较大超过阈值的情况下，特别将镜35变脏的意思报知给用户。如此一来，用户能特别获知需要清扫哪里。
143.若用户对应于报知的内容进行了清扫，就从操作部22等进行清扫完成的意思的输入。例如，在触控面板等设置“清扫完成按钮”，用户在进行清扫后，操作该“清扫完成按钮”。
144.若进行清扫完成的意思的输入操作(例如“清扫完成按钮”的操作)，就将与输入相应的信号输出到控制部11。
145.控制部11判断是否有清扫完成的意思的输入(步骤s7)，在确认不到输入的情况下(步骤s7；“否”)，回到步骤s6，重复消息的显示处理。
146.另一方面，在有清扫完成的意思的输入的情况下(步骤s7；“是”)，由拍摄部5的摄像机51再度拍摄作为“特定部分”的指配置部3的周边，取得拍摄图像pt(第1拍摄图像ptt、第2拍摄图像pts)(步骤s8)。
147.作为判定单元的控制部11，若取得拍摄了现状的拍摄图像pt，就从存储部12将比较用图像ps(第1比较用图像pst、第2比较用图像pss)读出，将该比较用图像ps和拍摄图像pt再度进行比较，求取其差分(步骤s9)。
148.然后，控制部11判断是否消除了拍摄图像pt中产生的阈值以上的变化(步骤s10)。
149.若用户正确地进行了清扫，作为“特定部分”的指配置部3的周边的污渍d就应当被去除，相对于比较用图像ps的差分就会消除。在消除了拍摄图像pt中产生的阈值以上的变化的情况下(步骤s10；“是”)，前进到步骤s4，结束判定处理。
150.另一方面，在拍摄图像pt中产生的阈值以上的变化尚未消除的情况下(步骤s10；“否”)，在将清扫的次数(从步骤s7到步骤s10循环的次数)设为“n”时，控制部11判断“n”是否比3次少(步骤s11)。
151.在本实施方式中，直到阈值以上的变化消除为止都重复用户所进行的清扫和污渍状况的判定，存储该判定重复了几次。
152.在“n”为1次或2次的情况下(步骤s11；“是”)，使拍摄部5也有可能变脏的的意思显示在显示部6等来对用户进行报知的基础上(步骤s12)，使促使用户清扫的消息显示于显示部6等(步骤s6)，重复以后的处理。
153.在不管用户是否清扫了指配置部3等、都未消除阈值以上的变化的情况下(污渍d残留的状态的情况)，有可能原因在于并非清扫对象的拍摄部5。为此，对用户示出拍摄部5变脏的可能性，进一步进行促使清扫的显示。
154.另一方面，在“n”为3次以上的情况下(步骤s11；“否”)，使表示与处置法相关的说明、应参考的使用说明书的说明页面等的消息等显示于显示部6(步骤s13)，使拍摄部5也有可能变脏的意思显示于显示部6等来报知给用户(步骤s12)，使促使用户清扫的消息显示于显示部6等(步骤s6)，重复以后的处理。
155.在也示出了拍摄部5可能变脏的基础上重复3次以上清扫仍旧残留有阈值以上的污渍d的情况下，设想：用户的清扫的方式有误的情况、镜35等开裂而附有伤痕的情况那样，成为即使进行清扫也无法消除的状态。
156.为此，例如将正确的清扫的方式、镜35的更换方法等清扫以外的处置法对用户建议，进而对用户进行谋求应对的报知。
157.另外，在重复任意的次数(例如6次等)也无法改善状况的情况下，例如可以成为示出与服务部门的联系方式等并中止处理的等设定。
158.若在保持指配置部3、镜35等“特定部分”变脏的状态下进行印刷动作，则即使拍摄指图像pi也无法正确地认识指甲轮廓，存在不能进行合适的指甲打印的可能性。关于这点，通过如本实施方式那样，判定“特定部分”的状态，根据需要要求用户应对，能将指配置部3、镜35等“特定部分”保持在没有污渍d的合适的状态，抑制作为印刷对象的指甲t的识别精度的降低。
159.此外，若在指配置部3等配置指u的部分或其周边附着墨水，下次使用时墨水就有可能会附着在用户的指u、指甲t而将指u等弄脏。若如本实施方式那样，掌握指配置部3等的污渍状况来促使清扫，就能避免指u等变脏。
160.如以上那样，作为本实施方式的电子设备的印刷装置1具备：摄像机51，其作为取得包含作为印刷对象的指甲以及状态随时间变化的“特定部分”(例如指配置部3、镜35等)的拍摄图像pt的图像取得单元；和控制部11，其作为通过比较拍摄包含第1状态(初始状态)的“特定部分”的范围而得到的比较用图像ps、和拍摄图像pt来判定“特定部分”的状态的判定单元。
161.对指甲t等印刷对象进行印刷的印刷装置1为了正确地掌握印刷对象(指甲t)的范围、形状、位置等而具有拍摄印刷对象(指甲t)的摄像机51，取得指图像pi来进行印刷对象(指甲t)的认识。
162.为了从指图像pi正确地认识指甲t的区域，在相对于指u、指甲t对比度卓越的指配置部3配置指、指甲来取得指甲t的上表面图像(第1指图像pit)，并且还需要经由镜35取得指甲t的侧面图像(第2指图像pis)，正确地掌握指甲t的高度方向的位置。
163.关于这点，若在指配置部3附着墨水，或附着指u的皮脂等，本来应是黑色的背景的指配置部3变得发白，与指u、指甲t的对比度变差(参考图6的第1拍摄图像ptt)。此外，根据污渍d的附着方式，有可能将污渍d的部分也认识为指甲t。若在该状态下拍摄指图像pi(第1指图像pit、参考图3)，就可能对甲轮廓产生误认识。此外，若在镜35附着墨水，或附着指u的皮脂等，镜35就会变得模糊(参考图6的第1拍摄图像ptt)，不再能映出清晰的图像。在该情况下，若在该状态下拍摄指图像pi(第2指图像pis、参考图3)，就有可能产生误认识。
164.在本实施方式中，比较拍摄使用前的第1状态(初始状态)的比较用图像ps和拍摄“特定部分”的现状的拍摄图像pt，来判定该变化(污渍状况)。为此，能事前合适地掌握指甲t等的认识精度降低的状态。然后，由于通过控制部11所进行的图像的比较处理来进行这样的变化(污渍状况)的判定，因此，与用户等目视判断污渍d等的有无的情况相比，能进行正确的判断。
165.此外，能防止指配置部3等在脏污的状态下使用，还能避免指u等变脏。
166.进而，在本实施方式中，由于基于由印刷装置1本来具有的摄像机51取得的图像来进行判定处理，不需要追加新的装置结构，就能简易地防止指甲t等认识精度的降低。
167.此外，根据本实施方式，“特定部分”包含配置与作为印刷对象的指甲t对应的指u的指配置部3以及辅助配置于指配置部3的指u以及指甲t的拍摄的作为辅助反射部的镜35。
168.若指配置部3、镜35变脏，则无法从指图像pi正确地认识指甲t的轮廓等的可能性变高。
169.关于这点，由于作为“特定部分”能看到指配置部3、镜35的状态的变化状况(污渍状况)，因此能抑制作为印刷对象的指甲t的认识精度的降低。
170.此外，根据本实施方式，“特定部分”的状态是“特定部分”的污渍状况。
171.在“特定部分”伴随使用而虽随时间不断变脏的情况下，通过能判定该污渍状况，能事前掌握指甲t等的认识精度降低的状态。
172.此外，根据本实施方式，作为判定单元的控制部11基于预先确定的阈值来判断“特定部分”的状态。
173.由此，能客观地判断状态(污渍状况、程度)，能合适地进行应对。
174.此外，根据本实施方式，还具备：报知单元，其对应于作为判定单元的控制部11的判定结果来对用户报知应对。
175.具体地，通过在显示部6、终端装置的显示部85显示“特定部分”的污渍状况、处置的方式等，来谋求用户的清扫等处置。
176.由此，在“特定部分”的污渍状况严重的情况下(例如超过阈值的情况下)，能进行清扫等，能消除给指甲t的认识带来影响的状态。为此，能事前掌握指甲t等的认识精度降低的状态。
177.此外，根据本实施方式，具备使墨水喷出来进行印刷的印刷单元，“特定部分”的状态由于墨水附着而随时间变化。
178.在使墨水喷出来进行印刷的情况下，在印刷时等墨水(墨水薄雾)飞散，并有可能附着于位于指甲t的周边的物品(例如指配置部3等)。
179.若在有这样的墨水污渍的状态下进行指甲认识、印刷，就有可能会误认识指甲t的轮廓，或者由墨水弄脏指u、指甲t。
180.关于这点，在本实施方式中，能掌握这样的墨水污渍所引起的指配置部3等的随时间变化并进行处置。为此，抑制了指甲t等的认识精度降低，能防止由于墨水而让指u等变脏。
181.另外，以上说明了本发明的实施方式，但本发明并不限定于相关的实施方式，能在不脱离其要旨的范围内进行种种变形，这点不言自明。
182.例如在本实施方式中，例示了“特定部分”是指配置部3、镜35等的情况，但“特定部分”并不限定于此。
183.只要是配置指u、指甲t的周边部分，就能宽泛地含在“特定部分”中。
184.此外，在本实施方式中，例示了“特定部分”的状态是“特定部分”的污渍状况的情况，但“特定部分”的状态并不限定于污渍状况。
185.例如，在发生镜35的破裂、缺失、各种要因引起的变形等的情况下，也有妨碍正常的指甲认识的可能性。在这些情况下，也可以判定为“特定部分”的状态的变化。
186.此外，在本实施方式中，通过在“特定部分”的状态变化一定的阈值以上的情况下使显示部6(或显示部85)进行显示，来报知给用户，但报知单元并不限定于显示部6(或显示部85)。
187.例如，在印刷装置1、终端装置8中具备声音输出部的情况下，可以通过警报音的输出、消息等声音引导来报知给用户。此外，也可以通过灯的点亮等来报知需要清扫等应对。
188.在这些情况下，声音输出部、灯等成为报知单元。
189.此外，在实施方式中，例示了在对用户促使清扫后有清扫完成的输入时将在工厂出厂时等拍摄的比较用图像ps与现状的拍摄图像pt进行比较的情况，但与拍摄图像pt进行比较的对象的图像并不限定于在工厂出厂时等拍摄的比较用图像ps。
190.例如，也可以在由用户进行了“特定部分”的清扫，并进行了清扫完成的意思的输入的情况下，再度拍摄用于确认现状的“特定部分”的状态的拍摄图像pt，将该拍摄图像pt和清扫前的拍摄图像pt进行比较。通过与清扫前的拍摄图像pt进行比较，能比较通过清扫消除了多少的污渍d，残留了多少污渍d。若使这样的比较图像显示于显示部6等，用户就容易判断对哪里进行清扫。
191.此外，在本实施方式中，例示了辅助反射部是镜35的情况，但辅助反射部并不限定于镜。辅助反射部只要是在与摄像机51能直接取得的从一方向观察指u时的指图像之外，能使摄像机51取得从与一方向不同的方向观察指u时的指图像的手段即可，例如可以是棱镜等、各种光学元件。
192.此外，在本实施方式中，示出印刷装置1作为单体而动作的情况，但印刷装置1也可以与终端装置8等各种外部设备协作进行判定处理、印刷处理等。
193.例如，可以从终端装置8的操作部83等进行印刷装置1中的判定处理的开始指示、
印刷处理的开始指示的输入、指甲设计(design)的选择等。
194.此外，也可以在终端装置8等外部设备进行印刷数据的生成等图像处理等利用各种数据处理的处理。在该情况下，将用印刷装置1的摄像机51拍摄的指图像pi等发送到终端装置8侧。
195.进而，关于本实施方式中的判定处理，可以也在终端装置8等外部装置中进行。在该情况下，例如在终端装置8的存储部82中存放用于进行判定处理的程序等，终端装置8的控制部81通过与该程序共同工作来作为判定单元发挥功能。
196.在该情况下，将用印刷装置1的摄像机51拍摄的拍摄图像pt、比较用图像ps的数据发送到终端装置8侧，终端装置8侧的控制部81基于这些数据来进行判定处理。另外，关于比较用图像ps的数据，可以也预先存储于终端装置8侧的存储部82。
197.如此地，在使终端装置8等外部装置承担各种处理的情况下，能以更简易的结构实现印刷装置1的控制部11。
198.此外，指甲设计的数据可以存储于印刷装置1的存储部12，例如也可以利用在终端装置8等各种外部设备的存储部中保存的数据。此外，可以构成为在能经由网络线路等连接的服务器装置等中存储指甲设计的图像数据，能访问服务器装置等来参考指甲设计的数据。
199.如此一来，不加大存储部12等的容量，也能从更多的指甲设计中选择进行印刷的设计。