一种半导体样品数据的处理方法、管理系统及服务器与流程
本发明涉及半导体,具体涉及一种半导体样品数据的处理方法、管理系统及服务器。
背景技术:
1、在半导体技术领域,良率管理系统是半导体样品,如晶圆生产的良率管控、工艺优化、缺陷溯源的核心数据分析平台,需要对各种量检测机台生成的半导体样品数据进行解析以及存储,以便后续进一步展示分析和修改数据。但是,由于晶圆的三维形貌、关键尺寸、表面缺陷等精细化量检测数据属于高密度时序、结构化数据,单批次、单台设备产出的数据量可能会达到千万条级别,且多个产线多机台、不间断生产的模式,会让半导体样品数据的数据量持续高速累积;而且,这类核心生产数据的实际留存周期需要长达5年,因此,长期累积下的整体数据池规模十分庞大。这就导致良率管理系统面临着数据体量庞大、存储周期长、现有架构性能不足等问题。因此,亟需一种能够减少数据占用空间的半导体样品数据的处理方法。
技术实现思路
1、针对现有技术存在的问题,本申请提供了一种半导体样品数据的处理方法、管理系统及服务器,能够减少存储空间的占用,并降低数据修改耗时。所述技术方案如下:
2、一方面,提供了一种半导体样品数据的处理方法,所述方法包括:
3、获取初始数据,将所述初始数据进行自定义封装,得到初始数据文件,并将所述初始数据文件存储至相应的存储路径;
4、确定所述初始数据的索引信息,并将所述初始数据的索引信息和存储路径记录至数据库主表;
5、响应于对所述初始数据的修改指令,生成目标修改文件并将其与所述初始数据文件关联存储;
6、响应于对所述初始数据的读取指令,基于所述目标修改文件与所述初始数据文件,输出相应的读取数据。
7、可选地,所述将所述初始数据进行自定义封装,得到初始数据文件,包括:
8、将所述初始数据按列结构进行重组,构建二进制数据流;
9、在所述二进制数据流的起始区域写入第一序列,所述第一序列包括所述列结构的列总数、各列的标记以及对应的类型信息;
10、在所述第一序列之后写入所述初始数据的个数信息、各列对应的数据信息,得到目标数据流;
11、对所述目标数据流进行压缩处理,生成所述初始数据文件。
12、可选地,所述在所述二进制数据流的起始区域写入第一序列,包括:
13、在所述二进制数据流的首个字节写入所述列总数;
14、在所述列总数之后,依次交替写入各列的标记与对应的类型信息,直至所有列结构中的列写入完成,生成所述第一序列;
15、所述在所述第一序列之后写入所述初始数据的个数信息、各列对应的数据信息,得到目标数据流,包括:
16、在所述第一序列之后写入所述初始数据的个数信息;
17、在所述初始数据的个数信息之后,按照所述第一序列对应的各列的顺序,依次写入各列对应的数据信息,得到目标数据流。
18、可选地,所述对所述目标数据流进行压缩处理,生成所述初始数据文件,包括:
19、采用轻量级无损压缩算法对所述目标数据流进行压缩处理,生成所述初始数据文件。
20、可选地,所述响应于对所述初始数据的修改指令,生成目标修改文件并将其与所述初始数据文件关联存储,包括:
21、根据所述修改指令,确定发生数据修改的目标列以及修改后的数据信息;
22、生成包括所述修改后的数据信息以及所述目标列的标识的目标修改文件;
23、将所述目标修改文件与所述初始数据文件关联存储于所述目标存储路径下。
24、可选地,所述基于所述目标修改文件与所述初始数据文件,输出相应的读取数据,包括:
25、对于所述目标列,按照所述目标修改文件中的数据信息对所述初始数据文件中所述目标列对应的数据信息进行替代,得到第一数据信息;
26、对于非目标列,获取所述初始数据文件中各个非目标列对应的数据信息,得到第二数据信息;
27、将所述第一数据信息和所述第二数据信息进行合并,以生成并输出所述读取数据。
28、可选地,所述将所述目标修改文件与所述初始数据文件关联存储于所述目标存储路径下之后,所述方法还包括:
29、若再次接收到对于所述目标列的修改指令,根据再次接收到的修改指令生成更新修改文件,并覆盖所述目标修改文件。
30、可选地,所述方法还包括:
31、响应于检索指令,按照所述检索指令中指示的索引信息在所述数据库主表中进行检索,确定检索数据。
32、可选地,所述按照所述检索指令中指示的索引信息在所述数据库主表中进行检索,确定检索数据之后,所述方法还包括:
33、响应于对所述检索数据的分析指令,按照所述数据库主表指示的所述检索数据对应的存储路径对所述初始数据文件进行下载。
34、另一方面,本申请提供了一种服务器,包括:
35、存储器,用于存储程序;
36、处理器,用于通过执行所述程序以实现上述所述的半导体样品数据的处理方法的步骤。
37、另一方面,本申请提供了一种半导体样品数据的管理系统,包括至少一个上述所述的服务器,以及包括客户端,所述客户端用于产生指令信息并与所述服务器进行信息交互。
38、另一方面,本申请提供了一种计算机可读存储介质,所述存储介质内存储有计算机程序,所述计算机程序被处理器执行时实现上述所述的半导体样品数据的处理方法的步骤。
39、另一方面,本申请提供了一种包含指令的计算机程序产品,当所述指令在计算机上运行时,使得计算机执行上述所述的半导体样品数据的处理方法的步骤。
40、本申请提供的技术方案至少可以带来以下有益效果:
41、本申请通过对初始数据进行自定义封装,得到初始数据文件,并将该初始数据文件存储至相应的存储路径,能够减少对存储空间的占用;而且,在数据库主表中仅记录了初始数据的索引信息和存储路径,能够在进一步减少存储空间占用的同时,提高检索效率;此外,还能够响应于对初始数据的修改指令,生成目标修改文件,并将其与初始数据文件关联存储,由此,通过增量修改,不覆盖原文件的方式,能够在降低修改耗时与输出/输入的开销的同时,提升数据的加载速率,并且保证后续读取数据的准确性。
1.一种半导体样品数据的处理方法,其特征在于,所述方法包括:
2.如权利要求1所述的方法,其特征在于,所述将所述初始数据进行自定义封装,得到初始数据文件,包括:
3.如权利要求2所述的方法,其特征在于,所述在所述二进制数据流的起始区域写入第一序列,包括:
4.如权利要求3所述的方法,其特征在于,所述对所述目标数据流进行压缩处理,生成所述初始数据文件,包括:
5.如权利要求3所述的方法,其特征在于,所述响应于对所述初始数据的修改指令,生成目标修改文件并将其与所述初始数据文件关联存储,包括:
6.如权利要求5所述的方法,其特征在于,所述基于所述目标修改文件与所述初始数据文件,输出相应的读取数据,包括:
7.如权利要求6所述的方法,其特征在于,所述将所述目标修改文件与所述初始数据文件关联存储于所述目标存储路径下之后,所述方法还包括:
8.如权利要求1所述的方法,其特征在于,所述方法还包括:
9.如权利要求8所述的方法,其特征在于,所述按照所述检索指令中指示的索引信息在所述数据库主表中进行检索,确定检索数据之后,所述方法还包括:
10.一种服务器,其特征在于,包括:
11.一种半导体样品数据的管理系统,其特征在于,包括至少一个如权利要求10所述的服务器,以及包括客户端,所述客户端用于产生指令信息并与所述服务器进行信息交互。
版权声明:本站专利文献数据主要来源于国家知识产权局等公开渠道,由 技术新讯 进行整理汇编。页面设计及数据汇编的著作权归本站所有。全部内容仅供个人学习、科研评估与技术交流参考,严禁用于任何商业用途(包括但不限于直接生产制造、技术转让、倒卖数据等)。
免责条款:专利技术具有时效性,本站不对资料的绝对准确性、完整性和可实施性提供任何明示或暗示的担保。因参考本站内容造成的直接或间接损失,本站不承担相关法律责任。若您认为本站内容有侵权问题,请及时提供权属证明与我们联系,本站将在核实后依法处理。反馈意见:yyfuon@163.com