老年癌症患者数字化记忆采集展示系统

本发明涉及人工智能，具体涉及一种老年癌症患者数字化记忆采集展示系统。

背景技术：

1、随着人口老龄化进程加速及肿瘤诊疗技术的进步，带癌生存的老年患者群体规模持续扩大。该群体除承受生理病痛外，普遍面临死亡焦虑加剧、自我价值感丧失及社会角色断裂等严重心理社会问题。临床心理学研究表明，基于尊严疗法的人生回顾干预能有效提升患者生命意义感、缓解临终心理痛苦。

2、近年来，数字化记忆干预技术逐渐兴起，部分系统尝试通过采集、存储患者的文字及影像资料生成电子回忆录用于回忆治疗。然而，现有技术在面向老年癌症患者这一特殊群体时，仍存在显著缺陷：适用人群适配性差，未针对癌症晚期患者进行交互适配，也未考虑患者因化疗虚弱、外貌变化而不愿主动配合采集的障碍，操作门槛过高；交互内容泛化，情感回复多为通用性安慰话术。

技术实现思路

1、本发明提供一种老年癌症患者数字化记忆采集展示系统，以解决相关技术中交互内容泛化，缺乏记忆数据的价值量化和个性化记忆展示，无法在患者情绪低落时主动进行情绪安抚的技术问题。

2、本发明提供的一种老年癌症患者数字化记忆采集展示系统，所述系统包括：记忆采集模块、记忆价值计算模块，记忆展示模块和记忆管理模块；所述记忆采集模块，用于采集患者的多源记忆数据，所述多源记忆数据至少包括患者语音数据和原始图像数据，对所述多源记忆数据进行特征提取，得到记忆图像特征和患者语义特征，并根据所述记忆图像特征和所述患者语义特征之间的匹配关联度，建立所述原始图像数据与所述患者语音数据之间的对应关系，以生成原始记忆片段；所述记忆价值计算模块，用于将所述患者语义特征根据预设的三类维度词库进行比对，得到所述患者语义特征与所述三类维度词库对应的维度匹配分数，所述三类维度词库至少包括职业成就维度词库，家庭情感维度词库和社会贡献维度词库，将所述三类维度词对应的维度匹配分数基于预设维度权重进行加权求和得到所述原始记忆片段的尊严价值分数；所述记忆展示模块，用于根据所述尊严价值分数从高到低对所述原始记忆片段进行动态排序，得到所述患者的原始记忆序列，并根据所述原始记忆序列进行展示；以及，检测所述患者的情绪分数，若所述患者的情绪分数小于预设分数阈值，则从所述原始记忆片段中筛选出高光记忆片段，并将所述高光记忆片段进行定向推送；所述记忆管理模块，用于对所述原始记忆片段进行分级权限管理操作，以及执行数据销毁操作或权限继承操作。

3、于本发明一实施例中，所述记忆采集模块包括前端处理单元、语音识别单元、智能引导单元；所述前端处理单元，用于采集所述患者的语音信号，并对所述语音信号进行声强检测，当检测到所述语音信号的声强低于或等于预设声强阈值，则对所述语音信号进行语音增益补偿，将所述语音信号的增益提升至预设增益范围，并抑制环境噪音，以得到增强后的语音信号；所述语音识别单元，用于对所述增强后的语音信号进行语音识别并提取关键词，得到语音关键词，将所述语音关键词与预设的语义树中的节点关键词进行匹配，若所述语音关键词与所述节点关键词成功匹配次数达到预设次数阈值，则激活所述智能引导单元；所述智能引导单元，用于将所述成功匹配的节点关键词对应的语义树节点作为目标节点，根据所述目标节点的预设问题链生成引导问题，并基于所述引导问题向所述患者依次进行语音提问，采集所述患者回答所述引导问题的语音数据作为所述患者语音数据。

4、于本发明一实施例中，所述记忆采集模块包括用于：对所述患者语音数据进行语义识别以转换为语音文本数据，基于自然语言处理算法对所述语音文本数据进行分词操作和实体识别，以提取所述语音文本数据中的时间实体和文本关键词，并识别所述语音文本中的情感倾向词，基于所述时间实体、所述文本关键词以及所述情感倾向词生成所述患者语义特征；采用计算机视觉算法对所述原始图像数据进行特征提取和图像识别，得到所述原始图像数据的图像特征点和描述关键词，并将所述图像特征点和描述关键词作为所述记忆图像特征；根据所述文本关键词和所述描述关键词之间的语义相似度，计算所述记忆图像特征和所述患者语义特征之间的匹配关联度，当所述匹配关联度达到预设关联阈值时，建立所述原始图像数据与所述患者语音数据之间的对应关系，以生成所述原始记忆片段。

5、于本发明一实施例中，所述记忆价值计算模块还用于对所述原始图像数据进行修复处理，包括：建立生成对抗网络，所述生成对抗网络的生成器为6层卷积网络，所述生成对抗网络的判别器为3层全连接网络；基于所述生成器对所述原始图像数据进行所述修复处理，所述修复处理至少包括画质增强，超分辨率修复、划痕修复以及色彩重建；基于所述判别器对进行所述修复处理前后的原始图像数据进行真实性校验，若所述真实性校验未通过，则调整所述生成器的网络参数，以对所述生成器的修复精度进行约束。

6、于本发明一实施例中，所述记忆价值计算模块还用于对所述原始记忆片段进行增强处理，包括：提取所述原始记忆片段中患者语音数据的梅尔频率倒谱系数特征，根据所述梅尔频率倒谱系数特征识别所述患者语音数据的情感类型，所述情感类型至少包括喜悦、平静或怀念；根据所述情感类型从预设音乐库中匹配对应的背景音乐，并基于所述情感类型从预设文案库中匹配对应的背景文案；将所述背景音乐和所述背景文案与对应的原始记忆片段进行关联存储，生成增强记忆片段，以供所述记忆展示模块进行调用展示。

7、于本发明一实施例中，所述记忆采集模块包括家属协同采集接口，所述家属协同采集接口用于采集家属的家属语音数据包括：所述家属协同采集接口响应于所述患者或所述家属的协同采集请求，建立所述患者与所述家属之间的加密视频通信链路，通过所述加密视频通信链路获取家属语音数据；获取所述家属语音数据的时间戳和所述原始记忆片段中所述患者语音数据的时间戳，基于时间戳同步技术将所述家属语音数据和所述原始记忆片段进行关联，生成共同记忆片段，以供所述记忆展示模块进行调用展示。

8、于本发明一实施例中，所述记忆展示模块检测所述患者的情绪分数，若所述患者的情绪分数小于预设分数阈值，则从所述原始记忆片段中筛选出高光记忆片段，并将所述高光记忆片段进行定向推送，包括：获取所述预设时间范围内的患者语音数据、文本关键词以及交互操作记录，根据所述患者语音数据的语速、音调以及响度确定语音情感分数，根据所述文本关键词中预设负面关键词的占比确定文本语义分数，根据所述交互操作记录中的登录频次以及查看时长确定交互频率分数；将所述语音情感分数、所述文本语义分数和所述交互频率分数基于预设分数权重进行加权计算，得到所述情绪分数；若所述情绪分数小于所述预设分数阈值，则获取各个原始记忆片段的正向情感分数、家属互动分数、成就感识别分数，将所述正向情感分数、所述家属互动分数、所述成就感识别分数基于预设得分权重进行加权计算，得到所述各个原始记忆片段的记忆高光分数；将所述记忆高光分数高于预设高光阈值的原始记忆片段作为高光记忆片段，并将所述高光记忆片段进行展示；将所述高光记忆片段进行展示后，等待预设复测时间间隔后，所述记忆展示模块重新计算所述患者的情绪分数，得到复测情绪分数，将所述复测情绪分数与所述高光记忆片段进行展示前的情绪分数进行比较，得到分数差值；若所述分数差值大于或等于预设差值阈值，则继续展示所述高光记忆片段；若所述分数差值小于所述预设差值阈值，则按照预设比例展示所述共同记忆片段和所述高光记忆片段。

9、于本发明一实施例中，所述记忆展示模块包括情感分数计算单元、互动分数计算单元以及成就感识别分数计算单元：所述情感分数计算单元，用于将所述原始记忆片段的患者语义特征与预设的正向情感词典进行关键词层级匹配，根据所述关键词层级匹配结果得到文本情感分数；提取所述患者语音数据的语速特征和音调特征，根据所述语速特征和所述音调特征得到声学情感分数；将所述文本情感分数和所述声学情感分数进行求和后，得到所述正向情感分数；所述互动分数计算单元，用于获取所述原始记忆片段的家属互动记录，所述家属互动记录至少包括家属点赞数量、家属留言数量以及家属留言内容；根据所述家属点赞数量和所述家属留言数量确定基础互动分数，对所述家属留言内容进行情感分析，并根据所述情感分析结果对所述基础互动分数进行修正，得到所述家属互动分数；所述成就感识别分数计算单元，用于将所述原始记忆片段的患者语义特征与预设的成就感关键词库进行匹配，根据匹配到的成就感关键词所属层级及所述成就感关键词在所述患者语义特征中的上下文语境匹配度进行加权累加，对所述加权累加的结果进行归一化处理，得到所述成就感识别分数。

10、于本发明一实施例中，所述记忆管理模块对所述原始记忆片段进行分级权限管理操作包括：所述记忆管理模块响应于所述患者的配置操作，为各个原始记忆片段设置对应的权限等级，所述权限等级包括第一权限等级、第二权限等级和第三权限等级，所述第一权限等级包括对所述原始记忆片段的查看权限、修改权限、删除权限以及授权权限，所述第二权限等级包括所述查看权限，所述第三权限等级包括将所述原始记忆片段进行脱敏处理后的公共浏览权限；所述记忆管理模块响应于所述患者的权限变更请求，基于人脸识别采集所述患者的面部信息进行第一重身份验证，基于语音识别采集所述患者的语音信息进行第二重身份验证，若所述第一重身份验证和所述第二重身份验证都通过，则执行权限变更操作，并保存权限变更记录。

11、于本发明一实施例中，所述记忆管理模块执行数据销毁操作或权限继承操作包括：若连续预设时长未检测到所述患者的生命体征数据，所述记忆管理模块查询所述患者设置的数字资产处置方案；若所述数字资产处置方案为数据销毁，则所述记忆管理模块将本地存储的所有所述原始记忆片段进行不可逆删除，并向云端发送数据擦除指令，以使所述云端对所有所述原始记忆片段进行物理擦除；若所述数字资产处置方案为权限继承，则所述记忆管理模块查询所述患者设置的继承人账号，将所述继承人账号与所述患者的原始记忆片段进行关联，向所述继承人账号开放所述原始记忆片段的查看权限、修改权限、删除权限以及授权权限。

12、本发明的有益效果：

13、1.通过建立图像数据与语音数据之间的关联关系，使语音叙述和图像内容在语义层面实现对齐，从而形成声图并茂的原始记忆片段，在进行记忆展示时，提高了患者观看的代入感，减少了记忆展示的碎片化；

14、2.通过对原始记忆片段从多个维度进行价值评估，得到量化的尊严价值分数，实现了对记忆内容价值的客观、多维度评价，并根据尊严价值分数对原始记忆片段进行排序展示，提高了记忆展示的个性化；

15、3.通过对患者情绪状态的实时感知，并在患者情绪分数较低时主动筛选并推送对患者干预价值较高的高光记忆片段，能够对患者心理低谷期及时提供有效支持；

16、4.通过对记忆数据进行分级权限管理，以及数据销毁操作或权限继承操作，为患者离世后的数据提供了合法、合规以及更人性化的处理方式，提高了系统对数据管理的安全性，保护了患者的数据隐私。

17、应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本发明。