一种用于研究者发起的临床研究全数据平台综合评价系统的制作方法

1.本发明涉及一种评价系统，尤其是涉及一种用于研究者发起的临床研究全数据平台综合评价系统。


背景技术：

2.目前部分市级医院内已设有专门的临床研究机构，而临床研究机构的建设能够起到支撑研究者开展临床研究的作用。临床研究机构建设的过程中，建立评价指标既能引导医疗机构建立适应其开展临床研究的体系，又能根据指标体系开发工具，动态评价医疗机构临床研究能力，起到进一步驱动和激励医疗机构高质量开展临床研究工作及建设临床研究支撑平台，提高医药研发和临床转化效率。
3.由于研究者发起的临床研究的特殊性，如研究者水平的差异，各研究机构基础建设、制度政策落地实施的不同，亟需建立一种符合现阶段促进研究者发起的临床研究高质量发展的评价体系，为临床研究政策提供参考，促进临床研究高质量、高标准、高效率发展。


技术实现要素：

4.技术目的：针对上述技术问题，本发明公开了一种用于研究者发起的临床研究全数据平台综合评价系统，能够全面、客观、准确地了解各家医院临床研究在不同层面的特点，帮助各家医院发现在临床研究方面的问题。
5.技术方案：为实现上述技术目的，本发明采用了如下技术方案：
6.一种用于研究者发起的临床研究全数据平台综合评价系统，其特征在于，包括数据库、数据收集子系统、数据清洗与预处理子系统、数据子系统和可视化展示评价子系统；其中，
7.数据收集子系统，用于采集研究者发起的临床研究投入、研究者发起的临床研究活动和研究者发起的临床研究产出等数据；
8.数据清洗与预处理子系统，用于对所述数据收集子系统采集的数据进行数据清洗与预处理，包括数据质量控制模块和数据预处理模块；
9.数据分析子系统，包括指标筛选与权重分配模块、指标运算模块和统计评价算法模块，用于对经过清洗和预处理的数据依次进行指标筛选与权重分配、指标运算和综合评价运算，并将输出的综合评价结果和单项指标结果发送给可视化展示子系统；
10.可视化展示子系统，包括结果展示模块和结果反馈模块，结果显示模块用于显示所述数据分析子系统输出的综合评价结果和单项指标结果；结果反馈模块用于展示每家医院的综合得分和单类评价指标得分以及排名反馈给各家医院；
11.数据库用于数据收集子系统、数据清洗与预处理子系统、数据子系统和可视化展示评价子系统对数据、评价指标的储存、查询和计算。
12.优选地，所述数据收集子系统中，研究者发起的临床研究投入模块用于收集医院临床研究中心设置与运行管理、研究病房建设、临床研究信息系统建设情况、临床研究人才
培养、经费投入、伦理审批效率与质量、制度建设等数据，用户自行填写到该系统的数据库中；
13.研究者发起的临床研究活动模块用于收集开展临床研究的数量和开展临床研究的质量等数据，用户自行填写到该系统的数据库中；
14.研究者发起的临床研究产出模块用于收集临床研究论文、论文引用、专利转化、学术影响等数据，用户自行填写到该系统的数据库中。
15.优选地，所述数据质量控制模块用于查看收集数据的完整性和可靠性，数据预处理模块用于对指标数据进行去体量化处理、偏态处理、无量纲化处理、缺失值处理和异常值处理。
16.优选地，所述去体量化处理，用于处理部分与医院体量密切相关的指标，明确去体量化分母以及处理指标与体量间的非线性关系；
17.无量纲化处理用于消除指标间由于计量单位和数量级的差异；
18.缺失值处理用于处理指标在某些医院无法获得，并对其进行针对性的处理，无信息缺失采用回归插补法，有信息缺失采用最小填补法。
19.优选地，所述偏态处理包括弱偏态指标处理和强偏态指标处理，弱偏态指标采用直线型无量纲化，强偏态指标采用秩型无量纲化。
20.优选地，所述异常值处理基于数据分布检测到的异常值进行处理，先发送数据质疑由数据来源部门进行复核，复核无误，使用缩尾法进行异常值处理。
21.优选地，所述指标筛选与权重分配模块对根据可行性评价以及结构效度评价筛选指标对经过清洗和预处理的数据进行指标筛选和权重分配；
22.所述指标运算模块用于对所述数据收集子系统中的数据进行指标运算，每个指标以0-100分的标准化分值体现，并将指标运算结果发送给所述统计评价算法模块；
23.所述统计评价算法模块依据模型算法，按指标分类进行综合评价及分类统计运算，最后将综合评价及单项评价结果发送给可视化展示评价子系统。
24.优选地，所述结果展示模块使用dashboard、热图、雷达图、柱状图中的任意一种或一种以上的组合进行结果展示。
25.一种用于研究者发起的临床研究全数据平台综合评价方法，其特征在于，包括以下步骤：
26.s1、数据收集子系统收集系统授权用户填写的数据并上传到数据库中；
27.s2、数据收集子系统服务端收集到的数据送入数据清洗与预处理子系统，由数据质量控制模块查看收集数据的完整性和可靠性，由数据预处理模块对指标数据进行去体量化处理、偏态处理、无量纲化处理、缺失值处理和异常值处理；
28.s3、统计分析子系统接收到数据清洗与预处理子系统处理后的数据后，由指标筛选与权重分配模块对根据可行性评价以及结构效度评价筛选指标数据进行指标筛选和权重分配；由指标运算模块对数据进行指标运算，每个指标以0-100分的标准化分值体现，并将指标运算结果发送给所述统计评价算法模块；由统计评价算法模块依据模型算法按指标分类进行综合评价及分类统计运算，最后将综合评价及单项评价结果发送给可视化展示评价子系统；
29.s4、通过可视化展示评价子系统展示处理结果。
30.优选地，在步骤s1数据收集子系统根据预设的指标体系进行数据采集，指标体系中包括定量统计指标和定性调查指标，所有定量统计指标和定性调查指标分类成一级指标、二级指标和三级指标。
31.有益效果：由于采用了上述技术方案，本发明具有如下技术效果：
32.本发明通过文献回顾、专业领域专家咨询，综合运用德尔菲法、层次分析法、实证研究，构建统一的临床研究创新指数指标框架，通过评价实践，形成标准化的创新指数指标体系、规范的指标定义、指标计算方法及分析框架，力求全面、客观、准确地反映市级医院临床研究在不同层面的特点，为临床研究政策的制定提供参考，促进市级医院临床研究高标准、高质量、高效率发展。
附图说明
33.图1为本发明的一种用于研究者发起的临床研究全数据平台综合评价系统架构图；
34.图2是一种用于研究者发起的临床研究全数据平台综合评价系统的流程图；
35.图3所示为19个三级指标的数据分布情况的实例图；
36.图4所示12个指标去体量化分母处理的实例图；
37.图5所示为图4中相关性分析结果的示意图。
具体实施方式
38.以下将结合附图所示的具体实施方式对本发明进行详细描述，但这些实施不限制本发明，本领域的普通技术人员应当理解，根据这些实施方式所做出的结构或功能上的变换均包含在本发明的权利要求范围内。
39.本发明公开了一种用于研究者发起的临床研究全数据平台综合评价系统，其系统架构图如图1所示，包括数据库、分别连接数据库的数据收集子系统、数据清洗与预处理子系统、数据分析子系统和可视化展示评价子系统。
40.一、数据采集子系统
41.数据收集子系统根据预设的指标体系统进行数据采集，采用定性和定量的数据采集方式，定量统计指标为主，定性调查指标为辅的方式。指标数据来源主要包括医院填报、调查问卷、绩效系统、绩效简报、临促管理数据等。定性调查指标主要涉及到医院信息化建设、伦理时效、cru建设以及成果转化方面的激励政策等。pi问卷的数据与研究收集的定量数据使用相关性分析来验证数据的可靠性结果。上传到系统中的数据来源于各家医院填写自报的数据，通过正规渠道定期搜集，确保基本数据的准确性、权威性、持续性和及时性。
42.研究者发起的临床研究投入模块采集包括采集医院临床研究中心设置与运行管理、研究病房建设、临床研究信息系统建设情况、临床研究人才培养、经费投入、伦理审批效率与质量、制度建设等数据，其中，医院临床研究中心建设主要采集各家医院是否设置临床研究中心、职能明确、统筹管理、临床研究专业人员数；研究病房建设主要采集非i期研究病床占核定总床位数比例、非i期研究护士配置率、非i期研究病床使用率；信息系统建设主要采集各家医院是否有临床研究项目管理平台、院级层面生物样本库建设、临床研究数据整合情况、院级edc平台建设情况；临床研究人才培训主要采集临床研究人员接受临床研究培
训并经过考核的分数；经费投入主要采集医院投入临床研究项目的经费投入占医疗收入的比重；伦理审批效率与质量主要采集伦理审批时效和伦理审批周期；制度建设主要采集临床研究经费的执行进度和比例、临床研究成果转化的收益中研究团队的奖励比例情况；
43.研究者发起的临床研究活动模块用于采集开展临床研究的数量和开展临床研究的质量等数据。其中，开展临床研究的数量主要包括纳入临床试验的患者占总患者比例、纳入专病数据库患者占总患者比例、五新项目数、高质量临床前研究项目、牵头及参与国际/国内多中心iit项目数。
44.研究者发起的临床研究产出模块用于采集临床研究论文、指南引用、成果转化、科学影响力等数据，临床研究论文主要包括临床研究论文被引次数、临床研究论文数、临床研究论文质量；指南引用主要包括临床研究论文被指南引用；成果转化主要包括新获专利授权数和科研成果转化金额；科学影响力主要包括科技成果奖项。
45.数据采集子系统，其首先给各家医院分配特定账号，然后通过账号登陆数据采集子系统，根据模块进行数据的填写。
46.二、数据清洗与预处理子系统
47.数据清洗与预处理子系统包括数据质量控制模块和数据预处理模块。
48.数据质量控制模块用于查看收集数据的完整性和可靠性；数据完整度及可信度是指根据指标体系收集相应的数据，统计数据收集的完整度，以及对每个指标数据来源的可信度进行统计。数据预处理模块对指标数据进行去体量化处理、偏态处理、无量纲化处理、缺失值处理、异常值处理等。
49.1、去体量化
50.创新指数中部分指标与医院体量密切相关，为增强不同体量医院间可比性，对指标进行去体量化处理。去体量化处理用于处理部分与医院体量密切相关的指标，如五新项目数、高质量临床前研究项目、牵头及参与国际/国内多中心iit项目数、临床研究论文被引次数、临床研究论文数、临床研究论文质量、临床研究论文被指南引用、新获专利授权数、科研成果转化金额、科技成果奖项，明确去体量化分母以及处理指标与体量间的非线性关系。采用spearman进行相关性分析，如图4所示实例，分析12个指标与体量的相关性，其采用基于经验判断的去体量化分母。如图5可知，从数据角度看，“医疗收入”与多数指标的相关性最高，其最合适的去体量化分母。
51.3、偏态处理和无量纲化处理
52.无量纲化是为了消除多指标综合评价中，计量单位上的差异和指标数值的数量级、相对数形式的差别，解决指标的可综合性问题。如图3中的19个三级指标可采用两种无量纲化方法。
53.弱偏态指标采用直线型无量纲化：
[0054][0055]
强偏态指标采用秩型无量纲化，其为了保证数据的均匀分布。
[0056][0057]
其中，d
ij
表示处理后的值，s
ij
表示数据值，minjs
ij
表示数据值的最小值，maxjs
ij
表示数据值的最大值,n表示参与计算的单位个数。
[0058]
4、缺失值处理
[0059]
缺失值处理用于处理指标在某些医院无法获得，并对其进行针对性的处理，无信息缺失采用回归插补法，有信息缺失采用最小填补法。
[0060]
若指标在某些医学无法获得，标记为缺失值。根据缺失值产生的原因，分类进行缺失值处理。当存在无信息缺失时，即数据缺失与相应医院的临床研究开展情况无关，由其它外部原因导致(例如经费执行情况)，采用回归插补法的方法，根据相关指标建立回归模型，将缺失值插补为回归模型的预测估计值。当存在有信息缺失时，即数据缺失本身反应了医院临床研究基础设施、管理水平、开展情况相关缺陷(如缺乏相关信息系统)。未按要求完成数据采集的也暂时按此类处理。采用最小值填补法，在无量纲化后的指标中，将缺失值填补为最小值(0)。
[0061]
5、异常值处理
[0062]
异常值处理基于数据分布检测到的异常值通常提示数据采集错误，也可能导致后续数据处理中模型失效，因此要特别处理。使用箱线图法进行异常值检测，检测界值为：q1-1.5*iqr，q3 1.5*iqr。当检测出的异常值先发送数据质疑，由数据来源部门进行复核。复核无误的，使用缩尾法(winsorize)进行异常值处理：
[0063]d′
＝min{max{d
outlier
，q1-1.5*iqr}，q3 1.5*iqr}
[0064]
其中，d
′
异常值处理后的结果，d
outlier
表示异常值，q1表示第一四分位数，q3表示第三四分位数，iqrj表示第三四分位数和第一四分位数的差值。
[0065]
三、数据分析子系统
[0066]
根据指标体系收集相应的数据经过数据清洗和预处理后，得到的数据具备完整度和可信度计，可进一步进行数据筛选和权重分配。
[0067]
数据分析子系统包括指标筛选与权重分配模块、指标运算模块和统计分析模块。指标筛选与权重分配模块对所述数据采集子系统中的数据进行预处理后，根据可行性评价以及结构效度评价筛选指标以及权重分配，完善评价指标体系。
[0068]
权重分配时，基于数据分析结果和创新指数核心小组讨论确定了指标初始权重，并进行分析，可使用结构效度评价或者德尔菲咨询法，最终权重将根据专家德尔菲法以及权重敏感性分析综合确定。结构效度分析是基于结构方程模型，分析指标体系与设计预期是否相符，同时结构方程中的载荷系数可以作为权重设置的参考，指标形式、载荷系数在数据统计时可以用不同颜色加以区别，以区分结构效度较好的数据、需要进一步完善数据采集和处理的数据、以及未通过指标筛选的不纳入创新指数综合指标的计算的数据。
[0069]
指标运算模块，对所述数据收集子系统中的数据进行指标运算，每个指标以0-100分的标准化分值体现，同时，将指标运算结果发送给所述统计评价算法模块。
[0070]
统计分析模块，其依据模型算法，按指标分类进行综合评价及分类统计运算，最后将综合评价及单项评价结果发送给可视化展示评价子系统。
[0071]
四、可视化展示评价子系统
[0072]
可视化展示评价子系统包括结果展示模块、结果反馈模块。
[0073]
结果展示模块用于读取并展示研究者发起的临床研究评价数据分析子系统计算出的各家医院评价综合得分、单类评价指标得分。主要使用dashboard、热图、雷达图、柱状图等进行展示，如dashboard图中的展示方式用不同颜色展示医院的排名，热图用不同颜色展示医院在指标上的分值排名，柱状图展示各家医院在单类评价指标上的分布，雷达图主要展示四个单类评价指标在排名前1/3名、排名中1/3名和排名后1/3名医院中的分布情况等。
[0074]
结果反馈模块用于展示每家医院的综合得分和单类评价指标得分以及排名，通过系统反馈给各家医院。
[0075]
如图2所示，上述的用于研究者发起的临床研究评价系统可实现如下的工作过程如下：
[0076]
建立并分发账号给各家医院，医院通过网页浏览器登陆网址，推荐使用谷歌浏览器或360极速浏览器。输入账号和密码后，点击“登录”按钮，校验无误后，进入主界面，分为3个模块，研究者发起的临床研究投入模块、研究者发起的临床研究活动模块研究者发起的临床研究产出模块。
[0077]
用户登陆网址进入系统页面后，分别进入三大模块进行数据的填写。根据要求的时间节点完成数据的填报，数据填报完成后，会初步对数据进行质量控制，主要包括数据的完整度和可信度进行整理，对有缺失和差异过大的数据进行系统提质疑，确认无误后，进行数据的导出，对数据进行预处理，主要包括与体量相关的指标进行去体量化处理、异常值处理、缺失值处理、无量纲化处理等。
[0078]
对处理完的数据进行结构效度分析和可行性分析，对其进行指标筛选与权重分配，确定好最终的指标体系后，并对其进行运算，主要根据数据计算指标综合得分和单类评价指标得分。
[0079]
最后采用dashboard、热图、雷达图、柱状图等进行展示。
[0080]
采用本发明的评价系统及评价方法，能够快速分析出医院的各级指标之间存在的相关性，还能够快速分析出多家医院的创新要素之间的差异和排名情况。
[0081]
以上所述仅是本发明的优选实施方式，应当指出：对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本发明的保护范围。