一种基于人工智能的摄像头监护场景实现方法及系统与流程

摘要: 本发明涉及计算机视觉,尤其涉及一种基于人工智能的摄像头监护场景实现方法及系统。背景技术:1、现有技术无法支持用户以自然语言灵活描述监护场景并关联设备标识存储,未...
一种基于人工智能的摄像头监护场景实现方法及系统与流程

本发明涉及计算机视觉,尤其涉及一种基于人工智能的摄像头监护场景实现方法及系统。

背景技术:

1、现有技术无法支持用户以自然语言灵活描述监护场景并关联设备标识存储,未针对不同语言类型生成结构化场景判断提示词,导致人工智能处理引擎接收的指令模糊,难以精准完成图像与场景描述的匹配分析,场景识别的适配性与灵活性不足。

2、现有技术在摄像头监护场景确认环节缺陷突出,未对人工智能处理引擎返回的初步判断结果进行二次验证,缺乏核心关键词与视觉对象标签的匹配一致性校验机制;未建立通知分级配置与对应渠道触发逻辑,无法根据场景重要性精准推送通知,导致监护场景实现准确率低、通知传递缺乏针对性,难以满足用户多样化监护需求。

技术实现思路

1、本发明提供一种基于人工智能的摄像头监护场景实现方法及系统,以解决上述背景技术中提出的问题。

2、为实现上述目的,本发明提供的一种基于人工智能的摄像头监护场景实现方法,包括:

3、s1、获取用户在摄像头应用程序端输入的自然语言句子,将所述自然语言句子作为监护场景描述信息并关联设备标识存储;

4、s2、获取当前摄像头采集的图像数据,识别所述监护场景描述信息的语言类型,并根据所述语言类型将所述监护场景描述信息填充至对应的提示词模板,生成所述监护场景描述信息的结构化场景判断提示词;

5、s3、将所述结构化场景判断提示词与当前采集的图像数据发送至人工智能处理引擎,并接收所述人工智能处理引擎返回的包含场景存在结论的初步判断结果;

6、s4、对所述初步判断结果进行二次确认,验证所述初步判断结果与所述图像数据的内容特征匹配一致性,当匹配一致性满足预设条件时确认监护场景触发,生成所述结构化场景判断提示词的目标确认结果;

7、s5、响应所述目标确认结果,查询与所述监护场景描述信息关联存储的通知分级配置信息;

8、s6、根据所述通知分级配置信息中的通知级别,触发对应的通知渠道,向用户发送监护场景触发通知。

9、在一个优选的实施方式中,所述获取用户在摄像头应用程序端输入的自然语言句子,将所述自然语言句子作为监护场景描述信息并关联设备标识存储,包括:

10、响应于用户在摄像头应用程序端的场景设置页面提交自然语言句子;

11、对所述自然语言句子进行格式校验,当校验通过时将所述自然语言句子确认为监护场景描述信息;

12、获取当前摄像头应用程序所绑定的设备唯一标识,将所述监护场景描述信息与所述设备唯一标识建立关联关系,并生成所述关联关系的场景配置记录;

13、将所述场景配置记录通过加密信道传输至服务端中与用户账户对应的配置数据库中,同时返回存储成功的确认信息至摄像头应用程序端。

14、在一个优选的实施方式中,所述获取当前摄像头采集的图像数据,识别所述监护场景描述信息的语言类型,并根据所述语言类型将所述监护场景描述信息填充至对应的提示词模板,生成所述监护场景描述信息的结构化场景判断提示词,包括:

15、响应于摄像头采集的图像数据,获取所述监护场景描述信息的文本内容,并根据所述文本内容中的字符所属的字符编码范围,以判断所述监护场景描述信息的语言类型;

16、根据所述语言类型,从预设的提示词模板库中提取与所述语言类型对应的提示词模板,所述提示词模板包含用于指示人工智能处理引擎执行场景存在性判断的指令语句部分以及用于填充所述监护场景描述信息的占位符部分;

17、将所述监护场景描述信息的文本内容填充至提取的所述占位符部分,并将填充后的提示词模板整体作为所述监护场景描述信息的结构化场景判断提示词。

18、在一个优选的实施方式中,所述将所述结构化场景判断提示词与当前采集的图像数据发送至人工智能处理引擎,并接收所述人工智能处理引擎返回的包含场景存在结论的初步判断结果,包括:

19、将所述结构化场景判断提示词与所述图像数据组合封装为请求数据包;

20、将所述请求数据包发送至人工智能处理引擎,所述人工智能处理引擎配置为接收图像数据与文本提示词并输出基于图像内容对文本提示词的判断结论以及产生所述判断结论的依据描述文本;

21、接收所述人工智能处理引擎返回的原始响应数据,所述原始响应数据包含所述人工智能处理引擎对所述图像数据进行分析后生成的场景存在结论;

22、将所述依据描述文本与所述场景存在结论共同作为初步判断结果。

23、在一个优选的实施方式中,所述对所述初步判断结果进行二次确认,验证所述初步判断结果与所述图像数据的内容特征匹配一致性,当匹配一致性满足预设条件时确认监护场景触发,生成所述结构化场景判断提示词的目标确认结果,包括:

24、对所述依据描述文本进行关键词抽取,得到所述依据描述文本的核心关键词,所述核心关键词用于表征所述初步判断结果所认定的图像内容特征;

25、对当前采集的图像数据进行图像内容识别,提取所述图像数据中的视觉对象标签;

26、计算所述核心关键词与所述视觉对象标签间的匹配一致性分值;

27、将所述匹配一致性分值与预设阈值进行比较,当所述匹配一致性分值不小于所述预设阈值时,以确认所述监护场景触发;

28、将确认触发的监护场景所对应的结构化场景判断提示词标记为已验证通过的目标确认结果。

29、在一个优选的实施方式中,所述匹配一致性分值的计算公式为:

30、;

31、式中,为所述匹配一致性分值,为第个核心关键词的权重系数,为所述视觉对象标签的集合,为第个核心关键词,为指示函数,为所述核心关键词集合中核心关键词的总个数。

32、在一个优选的实施方式中,所述将所述匹配一致性分值与预设阈值进行比较,当所述匹配一致性分值不小于所述预设阈值时,以确认所述监护场景触发,包括:

33、将所述匹配一致性分值与所述预设阈值进行数值比较;

34、当所述匹配一致性分值大于所述预设阈值时,确认所述匹配一致性满足预设条件;

35、当所述匹配一致性分值等于所述预设阈值时,确认所述匹配一致性满足所述预设条件;

36、当所述匹配一致性分值小于所述预设阈值时,确认所述匹配一致性不满足所述预设条件,并终止当前监护场景的触发确认流程。

37、在一个优选的实施方式中,所述响应所述目标确认结果,查询与所述监护场景描述信息关联存储的通知分级配置信息,包括:

38、响应所述目标确认结果,获取所述目标确认结果所对应的监护场景描述信息以及所述监护场景描述信息所关联的设备标识;

39、以所述监护场景描述信息和所述设备标识作为联合查询键,访问预先存储的通知分级配置数据库;

40、在所述通知分级配置数据库中,查找与所述联合查询键精确匹配的配置记录;

41、提取所述配置记录中的通知级别字段和通知渠道标识,将提取到的所述通知级别字段和所述通知渠道标识共同作为通知分级配置信息。

42、在一个优选的实施方式中,所述根据所述通知分级配置信息中的通知级别,触发对应的通知渠道,向用户发送监护场景触发通知,包括:

43、从所述通知分级配置信息中读取通知级别字段,并根据所述通知级别字段确定所述监护场景对应的通知优先级等级;

44、根据所述通知优先级等级,从所述通知分级配置信息中提取与所述通知优先级等级关联存储的通知渠道标识;

45、调用与所述通知渠道标识对应的通知发送接口,生成包含所述监护场景描述信息和触发时间的通知内容;

46、将所述通知内容由对应的通知渠道发送至用户预先绑定的接收端点。

47、为了解决上述问题,本发明还提供一种基于人工智能的摄像头监护场景实现系统,所述系统包括:

48、描述录入模块,用于获取用户在摄像头应用程序端输入的自然语言句子,将所述自然语言句子作为监护场景描述信息并关联设备标识存储;

49、提示生成模块,用于获取当前摄像头采集的图像数据,识别所述监护场景描述信息的语言类型,并根据所述语言类型将所述监护场景描述信息填充至对应的提示词模板,生成所述监护场景描述信息的结构化场景判断提示词;

50、推理调用模块,用于将所述结构化场景判断提示词与当前采集的图像数据发送至人工智能处理引擎,并接收所述人工智能处理引擎返回的包含场景存在结论的初步判断结果;

51、结果验证模块,用于对所述初步判断结果进行二次确认,验证所述初步判断结果与所述图像数据的内容特征匹配一致性,当匹配一致性满足预设条件时确认监护场景触发,生成所述结构化场景判断提示词的目标确认结果;

52、配置查询模块,用于响应所述目标确认结果,查询与所述监护场景描述信息关联存储的通知分级配置信息;

53、通知发送模块,用于根据所述通知分级配置信息中的通知级别,触发对应的通知渠道,向用户发送监护场景触发通知。

54、与现有技术相比,本发明具有以下有益效果:

55、1.本发明支持用户以自然语言输入监护场景描述并关联设备标识存储,通过识别语言类型生成结构化场景判断提示词,将提示词与摄像头采集图像协同输入人工智能处理引擎,高效获取包含场景存在结论的初步判断结果,提升监护场景识别的灵活性与适配性。

56、2.本发明通过关键词抽取与视觉对象标签匹配对初步判断结果进行二次验证,精准确认监护场景触发状态,结合通知分级配置信息触发对应渠道发送通知,显著提高摄像头监护场景实现的准确率、可靠性与响应针对性,保障监护信息传递的及时高效。