一种药品真实世界数据的标准化清洗与质量控制方法与流程

摘要: 本申请涉及数据处理,特别涉及一种药品真实世界数据的标准化清洗与质量控制方法。背景技术:1、现有药品真实世界数据清洗多由通用数据清洗工具按字段独立执行格式与值域校...
一种药品真实世界数据的标准化清洗与质量控制方法与流程

本申请涉及数据处理,特别涉及一种药品真实世界数据的标准化清洗与质量控制方法。

背景技术:

1、现有药品真实世界数据清洗多由通用数据清洗工具按字段独立执行格式与值域校验,清洗规则以固定流程单向运行;质量控制作为独立环节在清洗完成后对成品数据统一执行。

2、药品数据的错误形态具有跨字段关联性:用药事件时间链是否自洽、剂量与给药途径及剂型的量纲是否相容、暴露期与医嘱及结算记录覆盖是否一致,此类冲突无法在按字段校验中识别;清洗动作与质量观测分离,观测粒度止于流程级统计量,清洗偏差无法定位到具体规则与记录,只能在下游分析阶段被察觉。

3、即便引入依据统计指标的参数反馈,阈值附近的信号波动会引起规则行为反转,偶发的个体冲突会牵引规则参数漂移,以整体指标改善为目标的修正还可能在人群分层上引入偏倚,修正过程缺少可复现依据;清洗后数据的准确性、一致性、代表性与可重复性难以满足真实世界证据生成对数据质量的监管要求。

技术实现思路

1、本申请实施例提供了一种药品真实世界数据的标准化清洗与质量控制方法,技术方案如下:

2、一方面,提供了一种药品真实世界数据的标准化清洗与质量控制方法,所述方法包括:

3、将多源药品原始数据的字段归属到暴露维度,按所述暴露维度统计质量基线指标,得到数据质量基线,所述暴露维度包括药品名称、给药剂量、给药途径、用药时间与用药人群维度;

4、依据所述数据质量基线配置清洗规则与执行参数初值,得到清洗规则任务清单;

5、按所述清洗规则任务清单执行记录级清洗动作并同步生成质量指纹,并在清洗流水线的衔接环节对清洗后记录执行药品逻辑一致性校验,依据所述质量指纹生成包含冲突类型与所关联清洗规则标识的冲突标识,将存在冲突的记录连同所述冲突标识反馈至所关联的清洗规则重新执行;

6、对所述冲突标识按时序聚类,在聚类结果表明系统性失配的情况下,在修正幅度受限与人群分层偏倚受限的条件下修正相应清洗规则的执行参数,并生成质量证据包。

1.一种药品真实世界数据的标准化清洗与质量控制方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述按所述清洗规则任务清单执行记录级清洗动作并同步生成质量指纹,包括:

3.根据权利要求2所述的方法,其特征在于,所述在执行所述记录级清洗动作的同时生成所述记录级清洗动作的质量指纹,包括:

4.根据权利要求1所述的方法,其特征在于,所述将存在冲突的记录连同所述冲突标识反馈至所关联的清洗规则重新执行,包括:

5.根据权利要求1所述的方法,其特征在于,所述在修正幅度受限与人群分层偏倚受限的条件下修正相应清洗规则的执行参数,包括:

6.根据权利要求5所述的方法,其特征在于,所述限制单个批次内任一执行参数的修正幅度不超过所述执行参数当前值的规定比例,包括:

7.根据权利要求5所述的方法,其特征在于,所述在所述分层偏离度超过偏倚阈值的情况下,回滚所述分层内的记录级清洗动作,包括:

8.根据权利要求5所述的方法,其特征在于,所述按所述触发反馈比率所处区间以及所述动作触达率所处区间对清洗规则的执行参数进行修正,包括:

9.根据权利要求1所述的方法,其特征在于,所述方法还包括:

10.根据权利要求9所述的方法,其特征在于,所述方法还包括: