一种面向卧床照护对象的体位联动式多模态安全喂食系统及其方法

摘要: 本发明属于智能康养机器人、护理辅助装备、多模态生理信号处理及机器人安全控制,具体涉及一种面向卧床照护对象的体位联动式多模态安全喂食系统及其方法。背景技术:1、现...
一种面向卧床照护对象的体位联动式多模态安全喂食系统及其方法

本发明属于智能康养机器人、护理辅助装备、多模态生理信号处理及机器人安全控制,具体涉及一种面向卧床照护对象的体位联动式多模态安全喂食系统及其方法。

背景技术:

1、现有辅助进食机器人主要面向坐姿或半坐姿对象,通常利用机械臂、视觉定位和餐具夹持装置完成食物拾取及口部递送。对于长期卧床、侧卧或偏瘫卧床照护对象,身体支撑条件、头颈姿态和口部可达区域与坐姿对象存在明显差异,现有方案对体位滑移、头颈偏转、健侧口角递送和误吸风险的适配仍不充分。

2、卧床照护对象在进食过程中可能因床体倾角变化、肌力不足或局部支撑不稳定而发生躯干滑移和头面姿态变化。对于偏瘫卧床照护对象,患侧与健侧口角的闭合能力、感觉反馈及食物保持能力亦可能不同。若仅依据一次口部定位结果执行固定送食轨迹,容易出现口部目标与机械臂末端相对位置发生变化而系统未及时停止的情况。

3、现有电动护理床、翻身床、床面压力传感器矩阵和视觉体姿识别装置能够完成床头抬高、侧倾、翻身及体位监测,但上述装置通常以姿态辅助、压力监测或护理提示为主要目的,尚未将体位是否达到并稳定于可进食状态作为机械臂送食的前置许可。护理床、压力感知装置和机械臂分别运行时,也难以在体位许可失效后及时撤销正在进行的送食动作。

4、现有吞咽监测可采用rgb-d图像、颈部运动、呼吸、声学或其他生理信号识别吞咽事件,但多数方案侧重于事件检测、离线筛查或护理辅助评估,与机械臂送食时序、单口量、送入口时刻及下一口许可缺少实时联动。仅检测到喉部运动并不能充分说明下一口已经具备放行条件,还需要结合吞咽后的呼吸恢复、卧床照护对象反馈和信号质量进行综合判断。

5、现有机器人安全策略多依赖本体碰撞检测或统一力阈值,未充分区分取食、空中移动、近面接近、唇部含接、等待咽下和安全退出等阶段。不同阶段的接触对象、允许运动力和异常处置方式不同,采用单一阈值可能导致取食阶段过于敏感,或者近面阶段保护不足。

6、机械臂在盘中取食后是否实际携带食物,是进入口部接近阶段的重要条件。叉取失败时,如缺少叉上食物判定,仍可能发生空叉接近口部、卧床照护对象误张口或护理员误认为食物已送达的情况。因此,需要在视觉和力觉层面确认叉勺上存在可递送食物,并在判定失败时限制后续动作。

7、此外,床体控制、机械臂控制、吞咽监测、语音交互和护理员终端如采用相互独立的时间基准、坐标关系或安全状态,可能造成传感信息与当前口次不匹配,难以明确异常发生时应当暂停、回撤、软停机还是触发硬线急停。

8、因此,需要一种将护理床体位调整、床面压力感知、机械臂取送食、叉上食物判定、吞咽与呼吸监测、卧床照护对象表达、护理员确认及独立急停统一于逐口安全状态机的技术方案,使每一口食物均在重新获得安全许可后进行递送,并在任一关键条件失效时按照预定优先级暂停或退出。

技术实现思路

1、本发明提供一种面向卧床照护对象的体位联动式多模态安全喂食系统及其方法,旨在解决现有技术中体位调整与喂食执行相互割裂、多模态监测与机器人动作缺少逐口联动、叉取失败后仍可能继续送食以及异常处置层级不明确的问题。

2、为实现上述目的,本发明提供如下技术方案。

3、一种面向卧床照护对象的体位联动式多模态安全喂食系统,包括床体与体位感知子系统、机械臂取送食子系统、吞咽/呼吸安全子系统、语音与护理员交互子系统、边缘控制与日志子系统以及硬线急停子系统;

4、上述各子系统并非相互独立地完成监测或执行,而是围绕单口进食过程形成连续的许可链。床体与体位感知子系统首先确认卧床照护对象5处于可进食且相对稳定的体位;机械臂取送食子系统在获得体位许可后完成取食和送食;吞咽/呼吸安全子系统在食物送入后判断是否具备下一口条件;语音与护理员交互子系统及硬线急停子系统用于对自动许可结果进行补充、否决或中断;

5、所述床体与体位感知子系统包括可侧倾或可翻身的智能护理床6、床面压力监测区域7和下位控制器,用于驱动卧床照护对象5进入侧卧进食体位,并采集床面压力分布以计算区域压力、压力峰值、压力中心和左右压力比,输出体位许可或禁止信号;

6、所述体位许可不是护理床完成预定角度动作后的单一到位信号,而是根据床体角度、床面载荷分布、压力中心稳定性、头颈姿态和口部可达性共同形成。体位许可在喂食过程中持续更新;当卧床照护对象5发生明显滑移、局部高压持续、头颈偏离安全范围或口部离开可达区域时,系统撤销体位许可并中止当前推进动作。

7、所述机械臂取送食子系统包括床旁协作机械臂1、串接于机械臂法兰与自研喂食末端执行器4之间的六维力/力矩传感器3以及腕部深度相机2,所述自研喂食末端执行器4,用于执行取食、送食、口边悬停、离口回撤和安全退出;

8、所述机械臂在餐盘区域、空中转移区域和近口区域采用不同的运动约束。餐盘区域以完成稳定取食为主要目标,近口区域以低速、低力和可回撤为主要目标;腕部深度相机提供近距离几何修正,六维力/力矩传感器经重力补偿后提供外部接触信息,使视觉定位和接触安全共同参与送食过程。

9、所述吞咽/呼吸安全子系统包括外部rgb-d相机8和rppg呼吸处理模块。外部rgb-d相机8用于获取面部、头颈和喉部运动信息;rppg呼吸处理模块用于从面部rgb信号估计呼吸波形、呼吸率及呼吸相位。两类信息在逐口时间窗口内融合,形成吞咽/呼吸安全门;

10、所述吞咽/呼吸安全门不以单一吞咽事件作为下一口的充分条件。系统同时判断喉部上抬与复位过程、吞咽后的呼吸节律恢复、图像和rppg信号质量以及卧床照护对象5或护理员的否决信息,并输出放行、等待、中断或无法判定状态。

11、所述语音与护理员交互子系统包括麦克风、扬声器及护理员终端,用于向卧床照护对象5发出提示,采集停止、拒绝、未咽下或继续等关键词应答,并接收护理员的开始、暂停、单口放行、回撤、终止和接管指令。

12、所述边缘控制与日志子系统用于统一接收床体、压力、视觉、力觉、吞咽、呼吸和人在环信息,执行逐口安全状态机,并以单口为最小单位记录体位、食物、口部位姿、机械臂状态、接触力、吞咽、呼吸、确认信息和异常处置。所述硬线急停子系统独立于边缘控制器运行,在人工急停、关键通信失效或运动安全条件不满足时切断或禁止运动执行。

13、所述逐口安全状态机按照“每一口重新许可”的原则运行。体位许可构成取食与送食的前置条件;叉上食物判定构成口部接近的前置条件;吞咽/呼吸安全门构成下一口放行的前置条件;卧床照护对象5喊停、护理员暂停或接管以及硬线急停能够在任意状态中断当前动作。

14、所述逐口安全状态机至少包括准备与自检、体位达成、取食许可、取食、叉上食物判定、口部定位、力控送食、咽下确认、下一口或结束以及异常中断与回撤状态。安全事件的处置优先级依次包括硬线急停与看门狗、护理员暂停或接管、卧床照护对象5喊停或拒绝、吞咽/呼吸安全门中断、末端力超限或碰撞、叉上食物判定失败、口部定位失效、体位许可失效以及路径规划失败。

15、体位许可门控由turning_node基于压力分布、压力中心、床体角度和稳定持续时间输出,是送食启动的前置条件;

16、叉上食物门控由feeding_node基于腕部深度相机2的点云差分和六维力传感器的力觉峰值输出,禁止空叉接近口部;

17、吞咽/呼吸融合安全门控由swallow_node将rgb-d喉部位移事件与rppg呼吸相位在时间窗口内对齐融合后输出,用于决定下一口是否放行;

18、人在环门控由voice_node采集卧床照护对象5关键词应答及护理员终端命令输出;

19、所述硬线急停子系统独立于边缘工控机运行,具有最高安全优先级,在通信异常、力超限或人工急停时独立切断运动执行。

20、状态机仅在当前状态的进入条件和持续条件均满足时向下一状态转换。对于可恢复异常,系统保持或返回离口安全位,待护理员确认后重新检查体位许可和其他门控;对于关键传感器失效、控制链路异常或硬线急停触发,系统不自动恢复送食。

21、本发明还提供一种利用上述系统实施的安全喂食方法,包括以下步骤:

22、步骤1,读取卧床照护对象5的患侧或健侧信息、食物性状和单口量,并检查各感知、执行、交互及急停装置的运行状态;

23、步骤2,根据目标侧卧方向和床头角调整护理床,依据床面压力、体姿、头颈状态及口部可达性形成体位许可;

24、步骤3,在体位许可、口部可见、机械臂可达且护理员确认的条件下启动取食;

25、步骤4,根据食物三维位置和餐具姿态执行取食,并监测取食阶段的接触力;

26、步骤5,利用腕部深度相机和六维力/力矩传感器进行叉上食物判定,判定失败时重试或提示护理员,禁止空叉接近口部;

27、步骤6,根据面部粗定位和口部近距离定位,以分阶段速度和力限值执行送食;

28、步骤7,送入后退至观察位,融合rgb-d喉部运动、rppg呼吸信息及卧床照护对象5应答,输出放行、等待、中断或无法判定状态;

29、步骤8,发生体位、力觉、视觉、吞咽、呼吸或人在环异常时,停止当前推进动作,并根据运动条件执行离口回撤、软停机或硬线急停;

30、步骤9,异常解除后由护理员确认继续或结束进食,并完成逐口日志记录。

31、与现有技术相比,本发明具有以下有益效果。

32、下述效果来源于各子系统之间的门控与联动关系,而非依赖单一传感器或单一算法:

33、其一,将护理床体位调整和床面压力感知设置为机械臂喂食的前置许可,使体位未达成、发生滑移或出现持续局部高压时不进入送食阶段。

34、其二,通过机械臂、腕部深度相机、六维力/力矩传感器和自研喂食末端的协同,实现取食、口部定位、分阶段力控和异常回撤。

35、其三,通过叉上食物判定形成取食失败、重试、提示或跳过的闭环,减少空叉接近口部的情况。

36、其四,将rgb-d喉部运动与rppg呼吸信息进行逐口融合,使吞咽完成和呼吸恢复共同参与下一口许可。

37、其五,通过卧床照护对象5语音、护理员确认、软件安全门和独立硬线急停形成分层人在环安全机制。

38、其六,通过逐口日志记录各门控结果和异常处置,为参数标定、安全追溯和后续优化提供数据基础。