一种基于原产地溯源数据挖掘的农产品直播营销机器人的制作方法

摘要: 本发明属于农产品溯源数据处理及智能机器人控制,具体涉及一种基于原产地溯源数据挖掘的农产品直播营销机器人。背景技术:1、随着农产品直播营销由演播室带货逐渐延伸至种...
一种基于原产地溯源数据挖掘的农产品直播营销机器人的制作方法

本发明属于农产品溯源数据处理及智能机器人控制,具体涉及一种基于原产地溯源数据挖掘的农产品直播营销机器人。

背景技术:

1、随着农产品直播营销由演播室带货逐渐延伸至种植基地、加工车间、检测区域和包装区域,观看用户不仅关注农产品价格及外观,还需要核实农产品批次、生产工序、检测结果和原产地证据,因而需要直播机器人在原产地作业现场自主移动,并将溯源记录、作业工位、农产品实物及证据载体同步展示。

2、现有农产品溯源技术主要通过二维码及中心化数据库保存生产、加工、检测和物流记录,直播过程中仍由主播人工查询溯源记录并按照预先设置的脚本进行讲解,溯源记录未与现场作业工位、农产品实物、证据载体及机器人可拍摄观察位建立可执行关联,导致直播机器人无法根据溯源事实自主确定移动位置、拍摄对象和播报内容,容易出现播报内容与现场展示对象不对应的问题。

3、现有直播机器人主要分别执行路径移动、摄像跟踪、机械指向和语音播报,缺少针对原产地溯源展示过程的协同控制及现场复核机制,机器人在工位切换、人员遮挡、农产品批次更换及直播互动中断后,无法同步校验当前工位、当前农产品批次和当前证据载体,也无法根据任务断点恢复原有展示过程,容易造成错误批次被继续播报及直播证据链断裂的问题。

技术实现思路

1、本发明旨在提供一种基于原产地溯源数据挖掘的农产品直播营销机器人,解决现有直播机器人按照固定脚本进行播报,溯源记录无法与原产地现场工位、农产品实物及证据载体形成对应关系,以及机器人移动、取景、指向和语音播报不同步的问题。

2、为实现上述目的,本发明提供一种基于原产地溯源数据挖掘的农产品直播营销机器人,包括原产地作业空间注册模块、溯源事实单元编译模块、机器人展示动作规划模块、多模态直播同步控制模块、播报实物一致性校验模块和交互中断恢复与记录模块。

3、原产地作业空间注册模块对原产地作业现场中的生产工位、加工工位、检测工位、包装工位、农产品批次、证据载体及机器人可拍摄观察位进行空间注册,根据机器人定位结果与工位基准点之间的偏差计算工位空间注册误差,生成原产地作业空间注册数据包。

4、溯源事实单元编译模块接收原产地作业空间注册数据包和原产地溯源记录,将原产地溯源记录中的农产品批次标识、作业类型、作业时间、作业工位、证据摘要及证据载体标识,与对应的现场工位、农产品实物及证据载体进行绑定,根据证据载体可读取状态、作业工位可到达状态、溯源记录有效状态及农产品批次一致状态计算事实可执行度,生成可执行溯源事实单元集合。

5、机器人展示动作规划模块接收原产地作业空间注册数据包和可执行溯源事实单元集合,根据工位间路径长度、障碍物间距、机器人转向次数及展示准备时间计算工位间通行代价,按照可执行溯源事实单元之间的作业时间顺序和工艺衔接关系确定展示顺序,为每个可执行溯源事实单元配置移动动作、取景动作、证据读取动作、机械指向动作和语音播报动作,生成溯源事实展示任务序列。

6、多模态直播同步控制模块接收溯源事实展示任务序列,控制移动基座、升降云台、主摄像机、局部摄像机、补光灯、近场标签读取器、机械指向臂和扬声器执行对应的展示动作,根据农产品实物画面占比、证据载体清晰度、目标遮挡程度及运动模糊程度计算画面可视质量,根据画面稳定时间、机械指向到位时间和语音播报起始时间计算多模态同步偏差,生成多模态展示执行数据包。

7、播报实物一致性校验模块接收多模态展示执行数据包和可执行溯源事实单元集合,提取直播画面中的农产品实物特征,重新读取现场证据载体,并取得机器人当前所在工位,将实际取得的农产品批次标识、证据载体标识、当前工位及展示时间与当前可执行溯源事实单元进行比较,计算现场一致性偏差,生成一致性校验结果和展示校正指令,并将展示校正指令反馈至机器人展示动作规划模块和多模态直播同步控制模块。

8、交互中断恢复与记录模块接收直播互动问题、溯源事实展示任务序列、一致性校验结果和多模态展示执行数据包,根据直播互动问题与当前可执行溯源事实单元的关联程度、问题重复次数、问题时效性及当前动作安全状态计算用户问题中断处理优先级,在执行问题响应任务前保存任务断点,并在问题响应结束后重新执行工位定位、证据载体读取和播报实物一致性校验,根据校验结果恢复溯源事实展示任务序列,生成直播营销执行记录。

9、进一步地,一致性校验结果包括一致状态、可校正偏差状态和禁止继续播报状态,现场一致性偏差未达到第一校正阈值时确定为一致状态,现场一致性偏差达到第一校正阈值但未达到第二中止阈值时确定为可校正偏差状态,现场一致性偏差达到第二中止阈值或者农产品批次标识不一致时确定为禁止继续播报状态。

10、本发明围绕原产地现场中的农产品实物、作业工位、证据载体和溯源记录建立机器人可执行展示链,使直播过程中播报的产地事实能够由当前工位、当前实物和当前证据载体共同验证。

11、本发明有益效果如下:

12、(1)利用原产地作业空间注册和溯源事实单元编译原理,将原产地溯源记录中的农产品批次标识、作业时间、作业工位及证据载体标识,与现场作业工位、农产品实物、证据载体位置及机器人可拍摄观察位进行绑定,实现了溯源记录向机器人可执行展示任务的转换,解决了固定直播脚本无法与原产地现场实物及证据载体准确对应的问题。

13、(2)利用工位间通行代价、画面可视质量及多模态同步偏差协同控制原理,对移动动作、取景动作、证据读取动作、机械指向动作和语音播报动作进行统一编排,根据画面稳定时间、机械指向到位时间及语音播报起始时间校正执行顺序,实现了机器人移动、现场取景、实物指向和事实播报的同步执行,解决了不同直播执行机构独立运行造成画面、指向对象与播报内容错位的问题。

14、(3)利用播报实物一致性校验和任务断点恢复原理,将直播现场取得的农产品批次标识、证据载体标识、当前工位及展示时间与当前可执行溯源事实单元进行比较,并在直播互动结束后重新执行工位定位、证据载体读取和一致性校验,实现了错误展示的及时中止及中断任务的连续恢复,解决了农产品批次更换、工位切换及互动中断后错误溯源事实被继续播报和直播证据链断裂的问题。

1.一种基于原产地溯源数据挖掘的农产品直播营销机器人,其特征在于,包括原产地作业空间注册模块、溯源事实单元编译模块、机器人展示动作规划模块、多模态直播同步控制模块、播报实物一致性校验模块和交互中断恢复与记录模块;

2.根据权利要求1所述的一种基于原产地溯源数据挖掘的农产品直播营销机器人,其特征在于,溯源事实单元编译模块包括事实证据读取单元、时空窗口绑定单元、现场载体绑定单元、事实可执行度计算单元和事实单元输出单元;事实证据读取单元从原产地溯源记录中读取农产品批次标识、作业类型、作业时间、作业工位、证据摘要和证据载体标识;时空窗口绑定单元根据作业时间和作业工位确定对应的现场展示时间窗口;现场载体绑定单元根据原产地作业空间注册数据包,将证据载体标识与证据载体位置及机器人可拍摄观察位绑定;事实可执行度计算单元根据证据载体可读取状态、作业工位可到达状态、原产地溯源记录有效状态和农产品批次一致状态计算事实可执行度;事实单元输出单元保留事实可执行度达到执行阈值的原产地溯源记录,生成可执行溯源事实单元集合。

3.根据权利要求2所述的一种基于原产地溯源数据挖掘的农产品直播营销机器人,其特征在于,机器人展示动作规划模块包括任务约束提取单元、通行代价计算单元、展示动作配置单元、动作冲突消解单元和任务序列输出单元;任务约束提取单元从可执行溯源事实单元集合中提取作业时间顺序、工艺衔接关系、作业工位和现场展示时间窗口;通行代价计算单元根据工位间路径长度、障碍物间距、机器人转向次数和展示准备时间计算工位间通行代价;展示动作配置单元为每个可执行溯源事实单元配置由目标工位、机器人可拍摄观察位、摄像机姿态、机械指向位置、证据读取时刻及语音播报时段构成的展示动作段;动作冲突消解单元消除相邻展示动作段之间的工位占用冲突和执行时间冲突;任务序列输出单元按照工位间通行代价和作业时间顺序排列展示动作段,生成溯源事实展示任务序列。

4.根据权利要求3所述的一种基于原产地溯源数据挖掘的农产品直播营销机器人,其特征在于,多模态直播同步控制模块包括移动基座控制单元、升降云台控制单元、直播取景控制单元、机械指向控制单元、语音播报控制单元和同步偏差校正单元;移动基座控制单元和升降云台控制单元按照展示动作段到达机器人可拍摄观察位并调整摄像机姿态;直播取景控制单元根据农产品实物画面占比、证据载体清晰度、目标遮挡程度和运动模糊程度计算画面可视质量;机械指向控制单元控制机械指向臂指向当前可执行溯源事实单元对应的农产品实物或者证据载体;同步偏差校正单元根据画面稳定时间、机械指向到位时间和语音播报起始时间计算多模态同步偏差,并通过延后语音播报起始时间、调整机械指向到位时间或者重新执行直播取景降低多模态同步偏差。

5.根据权利要求4所述的一种基于原产地溯源数据挖掘的农产品直播营销机器人,其特征在于,播报实物一致性校验模块包括现场目标提取单元、证据载体复读单元、当前工位验证单元、事实字段比较单元和校正指令输出单元;现场目标提取单元从多模态展示执行数据包对应的直播画面中提取农产品实物特征;证据载体复读单元读取当前证据载体标识和当前农产品批次标识;当前工位验证单元根据机器人定位基准和工位坐标确定当前工位;事实字段比较单元将当前证据载体标识、当前农产品批次标识、当前工位及展示时间与当前可执行溯源事实单元进行比较,计算现场一致性偏差;校正指令输出单元根据现场一致性偏差生成包含目标工位、机器人可拍摄观察位、证据读取动作和语音播报状态的展示校正指令。

6.根据权利要求5所述的一种基于原产地溯源数据挖掘的农产品直播营销机器人,其特征在于,交互中断恢复与记录模块包括问题关联计算单元、中断优先级计算单元、任务断点保存单元、问题响应任务插入单元、任务恢复校验单元和执行记录生成单元;问题关联计算单元确定直播互动问题与当前可执行溯源事实单元的关联程度;中断优先级计算单元根据关联程度、问题重复次数、问题时效性和当前动作安全状态计算用户问题中断处理优先级;任务断点保存单元保存当前展示动作段、当前工位、当前农产品批次标识、当前证据载体标识及已完成语音播报位置;问题响应任务插入单元将达到中断处理阈值的直播互动问题转换成问题响应任务并插入溯源事实展示任务序列;任务恢复校验单元在问题响应任务结束后重新取得当前工位、当前农产品批次标识和当前证据载体标识,并调用播报实物一致性校验模块恢复任务断点。

7.根据权利要求6所述的一种基于原产地溯源数据挖掘的农产品直播营销机器人,其特征在于,一致性校验结果包括一致状态、可校正偏差状态和禁止继续播报状态;现场一致性偏差未达到第一校正阈值时生成一致状态;现场一致性偏差达到第一校正阈值且未达到第二中止阈值时生成可校正偏差状态,并执行展示校正指令;现场一致性偏差达到第二中止阈值或者当前农产品批次标识与当前可执行溯源事实单元中的农产品批次标识不一致时生成禁止继续播报状态,停止当前语音播报并重新执行工位定位和证据载体读取。

8.根据权利要求7所述的一种基于原产地溯源数据挖掘的农产品直播营销机器人,其特征在于,执行记录生成单元将溯源事实展示任务序列的版本、可执行溯源事实单元的标识、当前工位、当前农产品批次标识、当前证据载体标识、直播画面帧索引、语音播报起始时间、机械指向到位时间、一致性校验结果、直播互动问题、任务断点和任务恢复时间写入直播营销执行记录,并按照可执行溯源事实单元的标识建立直播营销执行记录与原产地溯源记录之间的关联。