心血管疾病风险控制方法、系统及存储介质与流程

技术特征：
1.一种心血管疾病风险控制方法，其特征在于，方法包括：获取待检测者的行为数据，所述行为数据为某一时间下个体的状态数据；将所述行为数据输入预训练的心血管疾病风险预测模型，获得待检测者的心血管疾病风险值；筛选所述心血管疾病风险值大于设定风险阈值的待检测者的行为数据作为心血管疾病高风险者的状态数据；将所述状态数据输入预先训练好的心血管疾病风险控制智能体，得到心血管疾病风险控制方案；其中，所述心血管疾病风险控制智能体是基于强化学习训练获得；将待检测者执行心血管疾病风险控制方案后的状态数据输入心血管疾病风险控制智能体，实时获得待测者的心血管疾病风险评估值；所述心血管疾病风险控制智能体基于所述心血管疾病风险评估值确定进一步的心血管疾病风险控制方案。2.如权利要求1所述的心血管疾病风险控制方法，其特征在于，所述心血管疾病风险预测模型为：f(xv)＝f(x
dv
，x
uv
，x
iv
)＝f(x
dv
，x
uv
，d(x
dv
，x
uv
))其中，xv为测试样本，f(xv)是心血管疾病风险预测模型f对xv的期望预测输出；d是一个回归模型，回归模型d的输入为dv数据和uv数据，输出为iv数据；dv为可直接改变的特征，包括每日吸烟量、每日饮酒量以及每日运动量；uv为不可改变的特征，包括年龄、性别和地域；iv为可间接改变的特征，包括bmi指数、血糖浓度、血压、体脂率和腰围。3.如权利要求2所述的心血管疾病风险控制方法，其特征在于，所述基于强化学习的心血管疾病风险控制智能体的训练方法包括：搭建用于心血管疾病风险控制的智能体环境以及用于心血管疾病风险控制的强化学习模型；其中，智能体环境为其中，s为包括心血管疾病特征的状态空间；所述心血管疾病特征作包括可直接改变的特征、不可改变的特征和可间接改变的特征；a为包括可直接改变的特征的动作空间，r是奖励函数，为状态转移概率函数，γ∈(0，1]是奖励衰减因子；利用所述智能体环境对所述用于心血管疾病风险控制的强化学习模型输出的序列行动进行评估，并给予所述序列行动对应的奖励以及下一个时刻的序列行动，以累积奖励最大化为目标集中训练，以获得智能体π
*
(a|s)；其中，所述智能体π
*
(a|s)的输入为环境的状态，输出为所述环境的状态下选择执行的序列行动；通过广义优势函数和策略迭代至所述智能体模型收敛，获得训练好的基于强化学习的心血管疾病风险控制智能体。4.如权利要求3所述的心血管疾病风险控制方法，其特征在于，所述心血管疾病风险预测模型通过最优特征变量集训练获得；所述最优特征变量集的获取方法为：将包含心血管疾病行为特征的数据集作为训练集输入行为特征重要性评价模型；通过所述行为特征重要性评价模型对所述训练集中的心血管疾病的行为特征进行重要性评价，输出重要性评价符合设定阈值的心血管疾病的行为特征作为影响因素集合；将所述影像因素集合作为最优特征变量集。
5.如权利要求3所述的心血管疾病风险控制方法，其特征在于，所述累积奖励通过以下公式获取：其中，b(s
t
，a
t
)为背景分，b(s
t
，a
t
)＝α(c-f(s
t
a
t
))，α为奖励缩放系数，c代表对行动的宽容程度系数，c∈(0，1]，f(s
t
a
t
)为状态为s
t
、动作为a
t
时，心血管疾病风险预测模型的输出值；-p为惩罚分参数，为终局分参数，且当智能体获胜则智能体失败则智能体处于非终局状态下，则6.如权利要求3所述的心血管疾病风险控制方法，其特征在于，所述通过广义优势函数和策略迭代使所述智能体模型收敛的方法包括：用优势函数估计且其中，是优势函数在时间步t的估计，q
π
为策略提升函数，v
π
为策略评估函数；为策略评估函数；计算策略更新并经过k个时间步长，用小批量sgd执行策略更新；其中，θ表示智能体策略的参数；为累积奖励；π(a|s)为策略函数；为状态转移概率；γ为奖励衰减因子；为损失函数；不断迭代上述步骤至智能体模型收敛。7.如权利要求6所述的心血管疾病风险控制方法，其特征在于，损失函数通过以下公式获得，其中，e表示期望；为新旧策略比例，其中θ为策略神经网络的参数，π
θ
(a
t
|s
t
)代表t时刻的策略，是上一轮迭代的策略；clip(r
t
(θ)，1-ε，1 ε)表示将新旧策略比例控制在1附近；表示是在策略函数π的第k个策略时，优势函数在时间步t的估计；ε表示超参数。8.一种心血管疾病风险控制系统，其特征在于，所述系统包括：行为数据获取单元，用于获取待检测者的行为数据，所述行为数据为某一时间下个体的状态数据；心血管疾病高风险者的状态数据筛选单元，用于将所述行为数据输入预训练的心血管
疾病风险预测模型，获得待检测者的心血管疾病风险值；筛选所述心血管疾病风险值大于设定风险阈值的待检测者的行为数据作为心血管疾病高风险者的状态数据；心血管疾病风险控制方案获取单元，用于将所述状态数据输入预先训练好的心血管疾病风险控制智能体，得到心血管疾病风险控制方案；其中，所述心血管疾病风险控制智能体是基于强化学习训练获得；心血管疾病风险控制方案调整单元，用于将待检测者执行心血管疾病风险控制方案后的状态数据输入心血管疾病风险控制智能体，实时获得待测者的心血管疾病风险评估值；所述心血管疾病风险控制智能体基于所述心血管疾病风险评估值确定进一步的心血管疾病风险控制方案。9.一种电子设备，其特征在于，所述电子设备包括：至少一个处理器；以及，与所述至少一个处理器通信连接的存储器；其中，所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行如权利要求1至7中任一所述的心血管疾病风险控制方法中的步骤。10.一种计算机可读存储介质，存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1至7中任一所述的心血管疾病风险控制方法。

技术总结
本发明涉及智能医疗领域，提供一种心血管疾病风险控制方法、系统及存储介质，能够对待检测者的心血管疾病风险进行预警，并且能够帮助心血管疾病发病风险高的检测者通过给出心血管疾病风险控制方案来不断调整其生活习惯，进而达到降低其未来罹患心血管病的风险的技术效果。术效果。术效果。


技术研发人员：张学工 卞海洋 江瑞 郝敏升 闾海荣
受保护的技术使用者：清华大学
技术研发日：2021.11.12
技术公布日：2022/1/18