电子设备和用于控制电子设备的方法与流程

技术特征：
1.一种电子设备，包括：相机；存储至少一个指令和多个对象识别模型的非易失性存储器；易失性存储器；和至少一个处理器，连接到所述非易失性存储器、所述易失性存储器和所述相机，并被配置为控制所述电子设备，其中，通过执行所述至少一个指令，所述至少一个处理器被配置为：基于所述电子设备的操作模式，将具有与所述操作模式对应的层级结构的层级对象识别模型加载到所述易失性存储器，所述层级对象识别模型包括所述多个对象识别模型中层级地布置在多个级别中的对象识别模型，通过将通过所述相机获得的对象图像输入到所述层级对象识别模型来获得关于对象的信息，以及基于关于所述对象的信息确定所述电子设备的操作。2.如权利要求1所述的电子设备，其中，所述至少一个处理器还被配置为：基于将所述操作模式确定为第一操作模式，将所述多个对象识别模型中用于标识所述对象是否是回避目标的第一级别对象识别模型加载到所述易失性存储器，所述第一级别对象识别模型在所述多个级别中的所述层级对象识别模型中的第一级别处，以及基于通过将所述对象图像输入到所述第一级别对象识别模型获得的所述对象的特征数据，标识所述对象是否是回避目标。3.如权利要求2所述的电子设备，其中，所述至少一个处理器还被配置为：基于将所述操作模式确定为第二操作模式，将所述多个对象识别模型中的所述第一级别对象识别模型和用于标识所述对象的类型的至少两个第二级别对象识别模型加载到所述易失性存储器，所述至少两个第二级别对象识别模型在比所述多个级别中的所述层级对象识别模型中的所述第一级别低的第二级别处，以及基于所述对象是否是回避目标，在所述至少两个第二级别对象识别模型中标识来自所述第一级别对象识别模型的所述对象的特征数据将被输入到的至少一个第二级别对象识别模型。4.如权利要求3所述的电子设备，其中，所述至少一个处理器还被配置为：通过将通过所述第一级别对象识别模型获得的所述对象的特征数据输入到所述至少一个第二级别对象识别模型来标识所述对象的类型。5.如权利要求4所述的电子设备，其中，所述至少一个处理器还被配置为：基于标识出的所述对象的类型，控制所述电子设备以不同地执行与所述第二操作模式对应的操作。6.如权利要求4所述的电子设备，其中，所述至少一个处理器还被配置为：基于将所述操作模式确定为第三操作模式，将所述多个对象识别模型中的所述第一级别对象识别模型、所述至少一个第二级别对象识别模型和至少一个第三级别对象识别模型加载到所述易失性存储器，所述至少一个第三级别对象识别模型被加载在比所述多个级别中的所述层级对象识别模型中的所述第二级别低的第三级别处，并且能够识别人的面部。7.如权利要求6所述的电子设备，其中，所述至少一个处理器还被配置为：基于通过所述至少一个第二级别对象识别模型将所述对象的类型标识为人，通过将人的所述特征数据
输入到所述至少一个第三级别对象识别模型而标识所述对象图像中包括的人脸是否是预先注册的人脸。8.如权利要求1所述的电子设备，其中，所述至少一个处理器还被配置为：基于将通过所述相机获得的新对象的图像作为所述对象图像，将所述操作模式确定为学习模式，获得所述新对象的特征数据，基于所述新对象的特征数据和关于所述多个对象识别模型的信息，在所述多个对象识别模型中确定与所述新对象对应的对象识别模型，以及控制以基于所述新对象的特征数据来训练所述多个对象识别模型中的所述确定的对象识别模型和另一个对象识别模型，所述另一个对象识别模型作为所述多个级别中的所述层级对象识别模型中确定的对象识别模型的较高级别可连接。9.如权利要求1所述的电子设备，还包括：显示器，其中，所述至少一个处理器还被配置为：基于将所述操作模式确定为学习模式，控制所述显示器以显示指示所述多个对象识别模型的用户界面(ui)，基于在将通过所述相机获得的新对象的图像作为所述对象图像的同时通过ui选择与所述新对象对应的对象识别模型，通过将所述新对象的图像输入到选择的对象识别模型来获得所述新对象的特征数据，基于由用户输入与所述新对象对应的类的名称，将所述新对象的特征数据标识为输入了所述名称的与所述新对象对应的所述类的数据，以及控制以基于与所述新对象对应的所述类的数据训练所述多个对象识别模型中的所述选择的对象识别模型和另一个对象识别模型，所述另一个对象识别模型作为所述多个级别中的所述层级对象识别模型中所述选择的对象识别模型的较高级别可连接。10.一种控制电子设备的方法，所述电子设备包括易失性存储器和存储多个对象识别模型的非易失性存储器，所述方法包括：基于所述电子设备的操作模式，将具有与所述操作模式对应的层级结构的层级对象识别模型加载到所述易失性存储器，所述层级对象识别模型包括所述多个对象识别模型中层级地布置在多个级别中的对象识别模型；通过将通过相机获得的对象图像输入到所述层级对象识别模型来获得关于对象的信息；以及基于关于所述对象的信息确定所述电子设备的操作。11.如权利要求10所述的方法，其中，所述加载还包括：基于将所述操作模式确定为第一操作模式，将所述多个对象识别模型中用于标识所述对象是否是回避目标的第一级别对象识别模型加载到所述易失性存储器，所述第一级别对象识别模型在所述多个级别中的所述层级对象识别模型中的第一级别处；以及基于通过将所述对象图像输入到所述第一级别对象识别模型获得的所述对象的特征数据，标识所述对象是否是回避目标。12.如权利要求11所述的方法，其中，所述加载还包括：
基于将所述操作模式确定为第二操作模式，将所述多个对象识别模型中的所述第一级别对象识别模型和用于标识所述对象的类型的至少两个第二级别对象识别模型加载到所述易失性存储器，所述至少两个第二级别对象识别模型在比所述多个级别中的所述层级对象识别模型中的所述第一级别低的第二级别处；以及基于所述对象是否是回避目标，在所述至少两个第二级别对象识别模型中标识来自所述第一级别对象识别模型的所述对象的特征数据将被输入到的至少一个第二级别对象识别模型。13.如权利要求12所述的方法，还包括：通过将通过所述第一级别对象识别模型获得的所述对象的特征数据输入到所述至少一个第二级别对象识别模型来标识所述对象的类型。14.如权利要求13所述的方法，其中，确定所述电子设备的所述操作还包括：基于标识出的所述对象的类型，控制所述电子设备以不同地执行与所述第二操作模式对应的操作。15.如权利要求15所述的方法，还包括：基于通过所述至少一个第二级别对象识别模型将所述对象的类型标识为人，通过将人的所述特征数据输入到至少一个第三级别对象识别模型而标识所述对象图像中包括的人脸是否是预先注册的人脸。

技术总结
电子设备包括相机、存储至少一个指令和多个对象识别模型的非易失性存储器、易失性存储器和处理器，该处理器连接到非易失性存储器、易失性存储器和相机，并被配置为控制电子设备。通过执行至少一个指令，处理器被配置为基于电子设备的操作模式，将具有与操作模式对应的层级结构的层级对象识别模型加载到易失性存储器，该层级对象识别模型包括多个对象识别模型中的对象识别模型，通过将通过相机获得的对象图像输入到层级对象识别模型来获得关于对象的信息，并基于关于对象的信息确定电子设备的操作。备的操作。备的操作。


技术研发人员：金正旭 金在德 宋胄容 林俊昊 申宰旭 林爱兰
受保护的技术使用者：三星电子株式会社
技术研发日：2020.10.08
技术公布日：2022/6/4