口腔图像处理方法、装置及电子设备与流程

1.本技术涉及信息服务技术领域，特别是涉及口腔图像处理方法、装置及电子设备。


背景技术：

2.口腔检查主要是对口腔常见问题，如龋齿、牙周病等进行检查。定期口腔检查则通常是指在没有口腔疾病或自己没有感觉到口腔有问题的情况下，定期让牙医进行口腔健康检查，而不是已经发现有问题才去就医。其好处在于，及时了解口腔健康状况，早期发现问题，及时治疗，将疾病控制或消灭在萌芽状态。另外，还可以在医生的帮助下了解自己的口腔健康程度，进行保健咨询，获得更多的口腔保健知识，学会正确而有效的自我口腔保健方法。
3.但是，在传统的方式下，需要人们自行前往牙科门诊或者诊所等请牙医进行检查，因此，经常遇到由于没有时间去等情况，无法做到真正的“定期”检测。为了方便用户进行定期的口腔检查，一些信息系统可以为用户提供线上的口腔检查服务，用户可以按照要求上传自己的口腔照片，之后，系统可以通过算法模型获得检查结果，并反馈给用户。
4.通过这种方式能够帮助用户在无需亲自去看医生的情况下，获得口腔检查结果，但是，在实际应用中可能存在以下问题：由于算法模型进行检查的依据是用户上传的口腔照片，因此，如果想要确保检查结果具有一定的准确性，对用户上传的口腔照片的质量有比较高的要求。例如，通常需要用户分别提供对应不同口腔区域(例如，中间牙齿上排，中间牙齿下排，等等)多张照片，并且每个口腔区域也可能对应着各自的拍照要求，这就使得用户的操作成本及理解门槛上都有一定的限制。例如，如果对于位于口腔后方的牙齿区域，可能需要用户一只手拉开嘴巴，另一只手操作手机等移动终端设备进行拍照，使得用户的操作成本比较高，另外，这种很不舒服的操作姿势可能会导致操作终端设备的一只手出现抖动等情况，以至于所拍摄的照片模糊，无法达到算法要求，还需要用户重新拍摄，等等。而用户操作成本高会导致系统的用户转化率低，甚至留存率低等情况。
5.因此，如何在提供口腔检查服务的过程中，降低用户操作成本，成为需要本领域技术人员解决的技术问题。


技术实现要素：

6.本技术提供了口腔图像处理方法、装置及电子设备，能够降低提供口腔检查服务过程中的用户操作成本。
7.本技术提供了如下方案：
8.一种口腔图像处理方法，包括：
9.接收用户提交的口腔检查请求；
10.在所述用户将口腔局部区域露出给拍摄镜头的过程中，进行视频流采集；
11.对所采集到的视频流中包括的多个视频帧分别进行分析，在检测到符合要求的目标图像帧后，对所述目标图像帧进行抽取，以作为对应口腔局部区域的图像采集结果；
12.根据抽取到的目标图像帧进行口腔特征识别，以获得对应口腔局部区域的口腔图像识别结果。
13.一种口腔图像处理装置，包括：
14.请求接收单元，用于接收用户提交的口腔检查请求；
15.视频流采集单元，用于在所述用户将口腔局部区域露出给拍摄镜头的过程中，进行视频流采集；
16.图像帧抽取单元，用于对所采集到的视频流中包括的多个视频帧分别进行分析，在检测到符合要求的目标图像帧后，对所述目标图像帧进行抽取，以作为对应口腔局部区域的图像采集结果；
17.口腔特征识别单元，用于根据抽取到的目标图像帧进行口腔特征识别，以获得对应口腔局部区域的口腔图像识别结果。
18.一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现前述方法的步骤。
19.一种电子设备，包括：
20.一个或多个处理器；以及
21.与所述一个或多个处理器关联的存储器，所述存储器用于存储程序指令,所述程序指令在被所述一个或多个处理器读取执行时，执行前述方法的步骤。
22.根据本技术提供的具体实施例，本技术公开了以下技术效果：
23.通过本技术实施例，可以在所述用户将口腔局部区域露出给拍摄镜头的过程中，进行视频流采集，并基于视频流的视频帧分析，可以检测到符合要求的目标图像帧，将其作为对应口腔局部区域的图像采集结果进行抽取，以用于基于目标图像帧进行口腔特征识别，进而可以结合具体的图像识别算法等，获得对应口腔局部区域的检查结果。通过这种方式，使得用户不需要手动按下或者点击拍摄按钮，即可完成对口腔局部区域的图像采集，因此，可以降低用户操作成本，有利于提升图像采集的效率，并且，通过这种方式采集到的目标图像帧也可以获得更高的图像质量，有利于后续在此基础上进行进一步的分析计算。
24.当然，实施本技术的任一产品并不一定需要同时达到以上所述的所有优点。
附图说明
25.为了更清楚地说明本技术实施例或现有技术中的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本技术的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
26.图1是本技术实施例提供的系统架构的示意图；
27.图2是本技术实施例提供的方法的流程图；
28.图3
‑
1至3
‑
5是本技术实施例提供的界面的示意图；
29.图4是本技术实施例提供的装置的示意图；
30.图5是本技术实施例提供的电子设备的示意图。
具体实施方式
31.下面将结合本技术实施例中的附图，对本技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本技术一部分实施例，而不是全部的实施例。基于本技术中的实施例，本领域普通技术人员所获得的所有其他实施例，都属于本技术保护的范围。
32.在本技术实施例中，为了降低用户在拍摄口腔检查所需的照片过程中的操作成本，提供了相应的解决方案。在该方案中，具体的口腔检查服务系统在接收到用户的口腔检查服务请求后，可以开启用户终端设备中的图像摄取组件(摄像头等)，以进行视频流采集，同时，可以根据口腔检查所需的多个口腔局部区域(例如，前排上面，前排咬合面等)，对用户进行动作指导。这种动作指导可以是按照预定的步骤依次进行，每一步骤可以对应一个口腔局部区域。因此，在每一步指导中，可以指导用户按照要求做出对应的动作，进而露出对应的口腔局部区域。在每提供一个步骤的用户动作指导信息之后，可以根据预先设定的算法模型等，对接下来采集到的视频流中包括的多个视频帧分别进行分析，判断用户是否正确地按照指导信息执行对应的动作，以将口腔中的目标区域露出以被镜头采集到。在检测到符合要求的视频帧后，可以将该视频帧作为目标图像帧进行抽取，用以作为对应口腔局部区域的图像采集结果。之后，可以进行下一步骤的用户动作指导以及对应的下一口腔局部区域的目标图像帧抽取，直到完成各个局部区域的目标图像帧抽取。进而，可以根据抽取到的目标图像帧，提供对应口腔局部区域的检查结果。
33.通过本技术实施例提供的上述方法，由于系统可以通过视频流分析以及目标图像帧抽取，自动获取具体口腔局部区域的图像采集结果，而不再需要用户执行手动的按下终端设备或其屏幕中展示的拍摄按钮等动作，因此，用户在发出口腔检查请求后，只需要将终端设备架设好，使其嘴部区域能够进入到终端设备的摄像头采集范围。在具体采集的过程中，用户的两只手都可以用于完成指定的动作，而不必专门空出一只手来去执行按下或者点击拍摄按钮。因此，可以降低用户的操作成本，还可以降低由于两只手需要分别做不同的事情而为用户带来的不适，进而降低由于上述操作成本或者不适感造成的用户流失等情况的发生概率。
34.另外，在优选的实施方式中，还可以在进行上述用户动作指导以及目标图像帧抽取的过程中提供用于模拟各口腔局部区域分布情况的演示图形(例如，具体可以包括线框图等)。在抽取到某口腔局部区域的目标图像帧后，可以将演示图形中与该口腔局部区域对应的部分的显示效果进行处理，例如，对线框图中与具体局部区域对应的部分进行填色处理等，以用于标识该口腔局部区域已完成检查。这样，可以通过视觉映射帮助用户进行动作理解，以进一步提升图像采集效率。
35.从系统架构角度而言，如图1所示，本技术实施例可以在口腔检查服务系统(可以是基于某应用程序运行的轻应用、小程序，或者，也可以是独立的应用程序，或者，某个综合性的应用系统中的模块，等等)中，提供辅助用户进行各口腔局部区域图像采集的功能。该系统可以包括客户端以及服务端，客户端主要运行于用户的终端设备侧，服务端则可以运行于云端服务器中。其中，用户的终端设备可以包括pc机设备，或者，手机等移动终端设备，等等。具体用于进行视频帧分析的算法模型可以在服务端完成，也可以在客户端完成。其中，客户端侧进行处理的实现方式可以节省数据的网络传输时间，可充分利用客户端侧算
力和存储空间，产生数据到消费数据都在客户端侧完成，同时避免传输引起的隐私泄露风险。当然，如图1所示，具体根据抽取到的目标图像帧生成对应检查结果的操作可以由服务端来完成，也即，具体用于生成检查结果的算法模型可以保存在服务端，由服务端进行计算生成检查结果后，返回给客户端进行展示。
36.下面对本技术实施例提供的具体实现方案进行详细介绍。
37.实施例一
38.首先，该实施例一从口腔检测服务系统客户端的角度，提供了一种口腔图像处理方法，参见图2，该方法可以包括：
39.s201：接收用户提交的口腔检查请求。
40.具体实现时，可以口腔检查服务功能首页等页面中提供口腔检查的操作入口，例如，具体可以是显示有“口腔检查”等字样的按钮等。用户可以通过该操作入口发起具体的口腔检查服务请求。
41.在接收到用户的服务请求后，可以启动终端设备关联的摄像头等图像摄取组件，以进入到具体的图像采集流程整。具体实现时，还可以提示用户将摄像头设备或者手机等移动终端设备固定架设好，也即，即使用户使用手机等发起请求，也不需要用户一只手拿着手机，另一只手做拉开嘴巴等动作。当然，在使用手机等进行采集的方式下，可以采用设备的前置摄像头，以使得用户可以通过设备的屏幕实时查看到采集的结果。
42.s202：在所述用户将口腔局部区域露出给拍摄镜头的过程中，进行视频流采集。
43.在启动终端设备关联的摄像头等图像摄取组件之后，可以在界面中展示出具体采集到的视频流，用户可以按照步骤分别将多个口腔局部区域露出给拍摄镜头(也即，多个口腔局部区域依次进入到摄像头的图像采集区域范围内)，在此过程中，可以对用户进行视频流采集，以用于后续的目标图像帧抽取等处理。也就是说，用户只需要将具体的口腔局部区域露出给镜头即可，无需手动执行按下或者点击拍摄按钮等操作。
44.具体实现时，可以在界面中提供口腔局部区域的顺序信息，用户按照该顺序依次将多个口腔局部区域露出给拍摄镜头即可。例如，可以从上排中间区域开始，在完成该区域的目标图像帧抽取后，提示用户露出上排右侧区域，之后是上排左侧区域，上排牙齿咬合面，等等。
45.但是，在实际应用中，用户可能在理解各个局部区域的含义时可能会存在一些难度，例如，关于到底怎样才能将上排牙齿咬合面露出给镜头，用户可能会比较难以理解。因此，在可选的实施方式中，本技术实施例还可以按步骤提供用户动作指导信息。这种指导信息具体就可以用于指导用户按照要求做出对应的动作，以露出出对应的口腔局部区域。具体实现时，可以通过多种方式提供上述用户动作指导信息，例如，一种方式下，可以在用于展示所述视频流的界面上层，提供具体的用户动作指导文案信息。也即，用户可以通过界面查看到采集到的视频流的同时，查看到具体的指导文案，按照指导文案做出对应的动作即可。
46.其中，具体的用户动作指导信息可以分为多个步骤，依次提供给用户。其中，由于具体的口腔检查服务过程中，通常需要用户提供多个不同局部区域的图像，也即，需要用户分别露出出不同的口腔局部区域，才能采集到对应的图像。而在露出不同口腔局部区域时，需要用户做出不同的动作，因此，可以针对需要进行图像采集的多个不同的口腔局部区域，
将图像采集过程分为多个步骤，每个步骤用于完成其中一个口腔局部区域的图像采集，相应的，可以提供用于露出出对应口腔局部区域的用户动作指导信息。其中，各个口腔局部区域的采集顺序可以是预先确定的，当然，在具体实现时，具体的采集顺序是可以调整的。
47.具体开始进行视频流采集之后，首先可以提供第一个步骤的用户动作指导信息，用户可以按照该指导信息做出对应的动作。例如，如图3
‑
1所示，第一步骤的用户动作指导信息可以包括：“请在圆环范围内露出[上排牙齿中间区域]”，等等。完成第一个步骤的动作指导后可以进行视频帧分析以及目标图像帧抽取，之后，再进行下一步骤的动作指导，等等。
[0048]
需要说明的是，具体在提供指导信息时，除了文案形式的指导信息，还可以包括通过参考图片或者动图等形式提供的指导信息，等等。
[0049]
s203：对所采集到的视频流中包括的多个视频帧分别进行分析，在检测到符合要求的目标图像帧后，对所述目标图像帧进行抽取，以作为对应口腔局部区域的图像采集结果。
[0050]
在采集视频流的过程中，可以对所采集到的视频流中包括的多个视频帧分别进行分析。具体的，可以根据预先配置的算法模型进行具体的视频帧分析处理。其中，具体的算法模型中，可以通过多个信息维度，对具体的视频帧是否符合要求进行判断。例如，具体的信息维度可以包括光照、清晰度、口腔打开状态(可以包括打开、闭合等状态)、口腔区域大小、口腔局部区域露出状况(具体所需的口腔局部区域是否充分露出)，等等。具体实现时，还可以在分析的过程中向用户提供实时的反馈。其中，如果多个视频帧在其中一个或多个信息维度上均不符合要求，则可以提供对应的反馈信息。例如，假设发现光照不足，则可以提供“请提高房间灯光亮度”等反馈信息；或者，如果连续分析多个视频帧之后发现口腔局部区域仍然未充分露出，则也可以提供“请再将嘴巴向后拉一些”，等等。
[0051]
在检测到各个信息维度上均符合要求的视频帧之后，可以将其作为目标图像帧进行抽取，相应的，该目标图像帧就可以作为对应的口腔局部区域的图像采集结果。在可选的实现方式下，抽取到所述目标图像帧后，还可以向用户提供关于对应口腔局部区域图像采集成功的反馈信息。例如，如图3
‑
2所示，在抽取到上排中间区域的目标图像帧之后，可以提供“[上排中间区域]已完成检查”等反馈信息。
[0052]
在完成一个口腔局部区域的目标图像帧抽取之后，便可以提示用户露出出下一口腔局部区域，并进行下一口腔局部区域的目标图像帧抽取，直到口腔检查所需的全部口腔局部区域都完成目标图像帧抽取。当然，在开始进行下一口腔局部区域的目标图像帧抽取时，还可以提供该口腔局部区域对应的用户动作指导信息。例如，完成上排中间区域的目标图像帧提取之后，可以进行上排右侧区域的用户动作指导以及目标图像帧抽取，成功抽取到目标图像帧之后，如图3
‑
3所示，可以提供“上排右侧区域”已完成检查，等等。
[0053]
需要说明的是，具体的用户动作指导信息，主要可以包括在采集具体口腔局部区域的图像的过程中，需要用户执行的动作。其中，具体可以包括需要用户对自己的嘴部等器官执行的向一定方向拉开等动作。另外，针对一些特殊的口腔局部区域，可能还需要用户对终端设备(独立的摄像头设备，或者手机等集成有摄像头组件的终端设备)执行的动作。例如，如图3
‑
4所示，在需要采集“上排牙齿咬合面”的图像时，具体的用户动作指导信息可以包括“请翻转手机180度，露出[上排牙齿咬合面]”，等等。也就是说，正常情况下，手机等终
端设备都是带有摄像头等装置的一端朝上放置；但是，由于上排牙齿咬合面是朝下的，因此，如果摄像头的拍摄角度不变，则用户比较难以将“上排牙齿咬合面”露出给摄像头。为此，在本技术实施例中，在需要采集上述“上排牙齿咬合面”的图像时，还可以指导用户通过翻转手机等方式，使得镜头位于比较靠下的位置，这样，用户只需要正常张开嘴巴，通常就可以将“上排牙齿咬合面”露出给摄像头，进入到摄像头的摄取范围。
[0054]
另外，在具体实现时，除了可以提供用户动作指导信息，还可以在用于展示视频流的界面上层，提供用于模拟各口腔局部区域分布情况的演示图形。例如，具体的演示图形可以包括线框图等，此时，具体可以通过线框图的形式，在视频流界面上层绘制出牙齿分布图。其中，在初始状态下，也即，尚未抽取到目标图像帧的情况下，具体可以如图3
‑
1所示，演示图形中的具体牙齿图形可以是无填充的状态。为了向用户提供更直观的信息，还可以在抽取到某口腔局部区域的目标图像帧后，将演示图形中与该口腔局部区域对应的部分的显示效果进行处理，例如，对线框图中对应的部分进行填色处理等，以用于标识该口腔局部区域已完成检查。例如，在抽取到具体“上排中间区域”的目标图像帧之后，如图3
‑
2所示，可以将线框图中与“上排中间区域”对应的部分进行填色处理。后续在抽取到“上排右侧区域”的目标图像帧之后，可以如图3
‑
3所示，将线框图中与“上排右侧区域”对应的部分进行填色处理。类似的，在抽取到“上排牙齿咬合面”的目标图像帧之后，可以如图3
‑
5所示，将线框图中与“上排牙齿咬合面”对应的部分进行填色处理。
[0055]
具体实现时，由于界面展示出的视频流图像对于用户而言也是比较重要的参考，因此，具体展示上述演示图形的过程中，演示图形在进行显示效果处理前后均可以以半透明的形式进行展示，以降低对采集到的视频流图像造成遮挡。
[0056]
在可选的实现方式下，在对某口腔局部区域进行目标图像帧抽取的过程中，也即提供了该口腔局部区域对应的用户动作指导信息，但是抽取到具体的目标图像帧之前，还可以在线框图中该口腔局部区域对应的部分进行突出显示，例如，可以将对应的区域置为闪烁状态等。这样，可以通过视觉映射为用户提供更直观的信息，帮助用户更好地理解所提供的动作指导信息，知晓当前需要露出的局部区域所在的位置，以此提升采集效率。
[0057]
再者，在提供上述线框图的过程中，还可以提供进度条元素，并在每完成一个口腔局部区域的目标图像帧抽取或检查后，可以更新所述进度条的状态。例如，如图3
‑
1至3
‑
5所示，可以提供环形进度条，每完成一个口腔局部区域的目标图像帧抽取或检查后，可以在环形进度条中的圆弧进行填充，直到完成全部区域的目标图像帧抽取或检查之后，环形进度条可以被填满，等等。
[0058]
需要说明的是，上述对视频流的采集，以及对视频帧的分析，目标图像帧的抽取，线框图的填充等，都可以在客户端来完成，这样，从产生数据到消费数据都可以在客户端侧完成，避免由于数据传输等引起的隐私泄露风险。
[0059]
另外，由于是在视频流的基础上进行视频帧的分析，以及目标图像帧的抽取，而视频流相对于实际拍摄的视频文件而言，具有以下优点：首先，视频流是在不断变化的，可以通过对视频流中的视频帧进行实时的分析以及实时的反馈(包括用户的动作正确与否，等等)，可以帮助用户通过调整拍摄环境、自己的动作等，获取到符合要求的图像。其次，整个处理过程中不需要保存具体的视频文件，对于不符合要求的视频帧直接丢弃即可，仅需要保存目标图像帧，因此，更适合于在客户端侧完成具体的分析过程。
[0060]
s204：根据抽取到的目标图像帧进行口腔特征识别，以获得对应口腔局部区域的口腔图像识别结果。
[0061]
在抽取到具体口腔局部区域的目标图像帧之后，可以根据抽取到的目标图像帧进行口腔特征识别，以获得对应口腔局部区域的口腔图像识别结果，进而还可以根据这种识别结果，结合具体的算法模型等，提供对应口腔局部区域的检查结果等信息。具体实现时，可以在每完成一个口腔局部区域的目标图像帧抽取之后，便进行该口腔局部区域的图像处理。或者，还可以在完成多个或者全部口腔局部区域的目标图像帧抽取之后，再对各个口腔局部区域进行图像处理，等等。
[0062]
其中，具体对口腔局部区域进行图像处理时，可以是根据预先训练的算法模型来进行的，该算法模型可以是通过对大量的口腔图片以及对应的口腔问题进行学习后建立起来的。因此，通过将具体口腔局部区域对应的目标图像帧图像输入到算法模型，即可输出对应口腔局部区域是否存在口腔问题等检查结果。
[0063]
具体的，算法模型可以保存在服务端，此时，客户端可以将抽取到目标图像帧提交到服务端，由服务端通过算法模型进行计算，获取到检查结果后返回给客户端。当然，在终端设备算力等足够的情况下，具体的算法模型也可以保存在客户端，由客户端完成前期的采集以及后期的计算等全流程处理。
[0064]
如前文所述，具体的口腔检查服务系统可以以某个综合性的信息系统中的模块或者轻应用等形式存在。例如，这里所述得综合性的信息系统可以包括商品对象信息系统，此时，还可以结合商品对象信息系统的其他功能模块，为用户提供更丰富的信息。例如，可以根据检查结果提供相关的商品对象，和/或，提供相关的口腔保健知识信息，等等。其中，这里所述的商品对象可以包括对应有实物的商品对象，例如，牙膏、牙线等。或者，还可以包括服务型的商品对象，例如某具体服务场所提供的洗牙服务等。
[0065]
总之，通过本技术实施例，可以在所述用户将口腔局部区域露出给拍摄镜头的过程中，进行视频流采集，并基于视频流的视频帧分析，可以检测到符合要求的目标图像帧，将其作为对应口腔局部区域的图像采集结果进行抽取，以用于基于目标图像帧进行口腔特征识别，进而可以结合具体的图像识别算法等，获得对应口腔局部区域的检查结果。通过这种方式，使得用户不需要手动按下或者点击拍摄按钮，即可完成对口腔局部区域的图像采集，因此，可以降低用户操作成本，有利于提升图像采集的效率，并且，通过这种方式采集到的目标图像帧也可以获得更高的图像质量，有利于后续在此基础上进行进一步的分析计算。
[0066]
需要说明的是，本技术实施例中可能会涉及到对用户数据的使用，在实际应用中，可以在符合所在国的适用法律法规要求的情况下(例如，用户明确同意，对用户切实通知，等)，在适用法律法规允许的范围内在本文描述的方案中使用用户特定的个人数据。
[0067]
与前述方法实施例相对应，本技术实施例还提供了一种口腔图像处理装置，参见图4，该装置具体可以包括：
[0068]
请求接收单元401，用于接收用户提交的口腔检查请求；
[0069]
视频流采集单元402，用于在所述用户将口腔局部区域露出给拍摄镜头的过程中，进行视频流采集；
[0070]
图像帧抽取单元403，用于对所采集到的视频流中包括的多个视频帧分别进行分
析，在检测到符合要求的目标图像帧后，对所述目标图像帧进行抽取，以作为对应口腔局部区域的图像采集结果；
[0071]
口腔特征识别单元404，用于根据抽取到的目标图像帧进行口腔特征识别，以获得对应口腔局部区域的口腔图像识别结果。
[0072]
具体实现时，该装置还可以包括：
[0073]
指导信息提供单元，用于按步骤提供用户动作指导信息，所述用户动作指导信息用于指导用户按照要求做出对应的动作，以将与当前步骤对应的口腔局部区域露出给拍摄镜头；
[0074]
所述图像帧抽取单元具体可以用于：
[0075]
对提供所述用户动作指导信息后所采集到的视频流中包括的多个视频帧分别进行分析，并在检测到符合对应口腔局部区域要求的目标图像帧后进行目标图像帧抽取。
[0076]
具体的，所述指导信息提供单元具体可以用于：
[0077]
在用于展示所述视频流的界面上层，提供所述用户动作指导文案信息。
[0078]
其中，所述用户动作指导信息中要求的动作包括：要求用户对自身口腔相关器官做出的动作，和/或，要求用户对终端设备做出的动作。
[0079]
另外，所述图像帧抽取单元具体可以用于：
[0080]
从至少一个信息维度，对所述视频帧是否符合要求进行判断；
[0081]
所述装置还可以包括：
[0082]
反馈信息提供单元，用于如果多个视频帧在其中一个或多个信息维度上均不符合要求，则提供对应的反馈信息。
[0083]
其中，所述至少一个信息维度包括以下一个或多个：光照、清晰度、口腔打开状态、口腔区域大小、口腔局部区域露出状况。
[0084]
另外，该装置还可以包括：
[0085]
演示图形提供单元，用于在用于展示所述视频流的界面上层，提供用于模拟各口腔局部区域分布情况的演示图形；
[0086]
显示效果处理单元，用于在抽取到某口腔局部区域的目标图像帧后，将所述演示图形中与该口腔局部区域对应的部分的显示效果进行处理，以用于标识该口腔局部区域已完成检查。
[0087]
其中，所述演示图形在进行显示效果处理前后均可以以半透明的形式进行展示。
[0088]
另外，该装置还可以包括：
[0089]
提示单元，用于在对某口腔局部区域进行目标图像帧抽取的过程中，将所述演示图形中与该口腔局部区域对应的部分进行提示。
[0090]
再者，该装置还可以包括：
[0091]
进度条提供单元，用于提供进度条元素，并在每完成一个口腔局部区域的检查后，更新所述进度条的状态。
[0092]
此外，该装置还可以包括：
[0093]
信息提供单元，用于根据所述口腔图像识别结果提供相关的商品对象信息，和/或，提供相关的口腔保健知识信息。
[0094]
另外，本技术实施例还提供了一种计算机可读存储介质，其上存储有计算机程序，
该程序被处理器执行时实现前述方法实施例中任一项所述的方法的步骤。
[0095]
以及一种电子设备，包括：
[0096]
一个或多个处理器；以及
[0097]
与所述一个或多个处理器关联的存储器，所述存储器用于存储程序指令,所述程序指令在被所述一个或多个处理器读取执行时，执行前述方法实施例中任一项所述的方法的步骤。
[0098]
其中，图5示例性的展示出了电子设备的架构，例如，设备500可以是移动电话，计算机，数字广播终端，消息收发设备，游戏控制台，平板设备，医疗设备，健身设备，个人数字助理，飞行器等。
[0099]
参照图5，设备500可以包括以下一个或多个组件：处理组件502，存储器504，电源组件506，多媒体组件508，音频组件510，输入/输出(i/o)的接口512，传感器组件514，以及通信组件516。
[0100]
处理组件502通常控制设备500的整体操作，诸如与显示，电话呼叫，数据通信，相机操作和记录操作相关联的操作。处理元件502可以包括一个或多个处理器520来执行指令，以完成本公开技术方案提供的方法的全部或部分步骤。此外，处理组件502可以包括一个或多个模块，便于处理组件502和其他组件之间的交互。例如，处理部件502可以包括多媒体模块，以方便多媒体组件508和处理组件502之间的交互。
[0101]
存储器504被配置为存储各种类型的数据以支持在设备500的操作。这些数据的示例包括用于在设备500上操作的任何应用程序或方法的指令，联系人数据，电话簿数据，消息，图片，视频等。存储器504可以由任何类型的易失性或非易失性存储设备或者它们的组合实现，如静态随机存取存储器(sram)，电可擦除可编程只读存储器(eeprom)，可擦除可编程只读存储器(eprom)，可编程只读存储器(prom)，只读存储器(rom)，磁存储器，快闪存储器，磁盘或光盘。
[0102]
电源组件506为设备500的各种组件提供电力。电源组件506可以包括电源管理系统，一个或多个电源，及其他与为设备500生成、管理和分配电力相关联的组件。
[0103]
多媒体组件508包括在设备500和用户之间的提供一个输出接口的屏幕。在一些实施例中，屏幕可以包括液晶显示器(lcd)和触摸面板(tp)。如果屏幕包括触摸面板，屏幕可以被实现为触摸屏，以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。触摸传感器可以不仅感测触摸或滑动动作的边界，而且还检测与触摸或滑动操作相关的持续时间和压力。在一些实施例中，多媒体组件508包括一个前置摄像头和/或后置摄像头。当设备500处于操作模式，如拍摄模式或视频模式时，前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。
[0104]
音频组件510被配置为输出和/或输入音频信号。例如，音频组件510包括一个麦克风(mic)，当设备500处于操作模式，如呼叫模式、记录模式和语音识别模式时，麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器504或经由通信组件516发送。在一些实施例中，音频组件510还包括一个扬声器，用于输出音频信号。
[0105]
i/o接口512为处理组件502和外围接口模块之间提供接口，上述外围接口模块可以是键盘，点击轮，按钮等。这些按钮可包括但不限于：主页按钮、音量按钮、启动按钮和锁
定按钮。
[0106]
传感器组件514包括一个或多个传感器，用于为设备500提供各个方面的状态评估。例如，传感器组件514可以检测到设备500的打开/关闭状态，组件的相对定位，例如所述组件为设备500的显示器和小键盘，传感器组件514还可以检测设备500或设备500一个组件的位置改变，用户与设备500接触的存在或不存在，设备500方位或加速/减速和设备500的温度变化。传感器组件514可以包括接近传感器，被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件514还可以包括光传感器，如cmos或ccd图像传感器，用于在成像应用中使用。在一些实施例中，该传感器组件514还可以包括加速度传感器，陀螺仪传感器，磁传感器，压力传感器或温度传感器。
[0107]
通信组件516被配置为便于设备500和其他设备之间有线或无线方式的通信。设备500可以接入基于通信标准的无线网络，如wifi，或2g、3g、4g/lte、5g等移动通信网络。在一个示例性实施例中，通信部件516经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中，所述通信部件516还包括近场通信(nfc)模块，以促进短程通信。例如，在nfc模块可基于射频识别(rfid)技术，红外数据协会(irda)技术，超宽带(uwb)技术，蓝牙(bt)技术和其他技术来实现。
[0108]
在示例性实施例中，设备500可以被一个或多个应用专用集成电路(asic)、数字信号处理器(dsp)、数字信号处理设备(dspd)、可编程逻辑器件(pld)、现场可编程门阵列(fpga)、控制器、微控制器、微处理器或其他电子元件实现，用于执行上述方法。
[0109]
在示例性实施例中，还提供了一种包括指令的非临时性计算机可读存储介质，例如包括指令的存储器504，上述指令可由设备500的处理器520执行以完成本公开技术方案提供的方法。例如，所述非临时性计算机可读存储介质可以是rom、随机存取存储器(ram)、cd
‑
rom、磁带、软盘和光数据存储设备等。
[0110]
通过以上的实施方式的描述可知，本领域的技术人员可以清楚地了解到本技术可借助软件加必需的通用硬件平台的方式来实现。基于这样的理解，本技术的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在存储介质中，如rom/ram、磁碟、光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本技术各个实施例或者实施例的某些部分所述的方法。
[0111]
本说明书中的各个实施例均采用递进的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于系统或系统实施例而言，由于其基本相似于方法实施例，所以描述得比较简单，相关之处参见方法实施例的部分说明即可。以上所描述的系统及系统实施例仅仅是示意性的，其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性劳动的情况下，即可以理解并实施。
[0112]
以上对本技术所提供的口腔图像处理方法、装置及电子设备，进行了详细介绍，本文中应用了具体个例对本技术的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本技术的方法及其核心思想；同时，对于本领域的一般技术人员，依据本技术的思
想，在具体实施方式及应用范围上均会有改变之处。综上所述，本说明书内容不应理解为对本技术的限制。