1.本技术涉及数据处理
技术领域：
：，尤其涉及一种基于公共语义字段的数据处理方法及装置。
背景技术：
：：2.近年来，以互联网、大数据、视频智能分析为依托的综合安防平台技术发展迅速，该平台可以将视频监控系统、出入口控制系统、入侵与紧急报警系统、电子巡查系统、消防预警系统等各个安防子系统的功能集成在一起，从而提供统一接处警、统筹管理、统计分析功能。由于涉及众多安防子系统，综合安防平台存储的数据存在多源异构的特点，从而导致数据的检索统计成为难题。3.相关技术中，如公开号cn101388036a公开了一种数据表的汇总方法和装置。其中，所述方法包括：根据预先在参与汇总的子数据表中设置的项目段标识，识别出与所述项目段标识相对应的子项目段；提取所述识别出的子项目段，对所述提取出的子项目段进行汇总处理。4.相关技术综合安防平台的数据检索统计逻辑通常需要使用数据库总表，以用来存储各个安防子系统上传来的各类相关数据。现有的这种数据记录传输存储的方式存在一定的弊端。一方面由于众多安防子系统的来源可能涉及不同的厂家、不同的品牌，或者涉及不同的业务场景，因此其含有的数据信息种类不尽相同，而受到数据库总表既定格式的限制，当数据库总表中没有某种数据信息的通用语义字段时，安防子系统的该种数据信息将无法上传至综合安防平台，进而存在数据信息丢失的问题，因此，数据库总表存在一定的使用局限性。另一方面，同样由于众多安防子系统的来源可能涉及不同的厂家、不同的品牌，或者涉及不同的业务场景，不同安防子系统的所产出的用于记录同一属性类别的信息表的名称可能不同，其内部的用于描述含义相同的数据信息的语义字段可能也不同，因此利用这些混杂在一起的信息表进行某一类数据检索统计工作不便捷。技术实现要素：5.本技术实施例提供了一种基于公共语义字段的数据处理方法及装置，用以解决现有的数据处理方案存在的数据丢失、检索统计不便捷的问题。6.第一方面，本技术提供了一种基于公共语义字段的数据处理方法，所述方法包括：获取待检索数据，通过数据匹配确定语义数据公共字段表中，与所述待检索数据对应的目标公共语义字段标识信息；其中，所述语义数据公共字段表中，同一含义的不同数据所对应的公共语义字段标识信息相同；根据所述目标公共语义字段标识信息，确定语义数据公共字段关系表中，与所述待检索数据对应的各个数据表标识字段信息及各个语义字段信息；根据所述各个数据表标识字段信息及各个语义字段信息，对所述待检索数据进行检索。7.第二方面，本技术提供了一种基于公共语义字段的数据处理装置，所述装置包括：第一确定模块，用于获取待检索数据，通过数据匹配确定语义数据公共字段表中，与所述待检索数据对应的目标公共语义字段标识信息；其中，所述语义数据公共字段表中，同一含义的不同数据所对应的公共语义字段标识信息相同；第二确定模块，用于根据所述目标公共语义字段标识信息，确定语义数据公共字段关系表中，与所述待检索数据对应的各个数据表标识字段信息及各个语义字段信息；检索模块，用于根据所述各个数据表标识字段信息及各个语义字段信息，对所述待检索数据进行检索。8.第三方面，本技术提供了一种电子设备，包括处理器、通信接口、存储器和通信总线，其中，处理器，通信接口，存储器通过通信总线完成相互间的通信；存储器，用于存放计算机程序；处理器，用于执行存储器上所存放的程序时，实现上述任一项所述的方法步骤。9.第四方面，本技术提供了一种计算机可读存储介质，所述计算机可读存储介质内存储有计算机程序，所述计算机程序被处理器执行时实现上述任一项所述的方法步骤。10.本技术提供了一种基于公共语义字段的数据处理方法及装置，具有如下优点或有益效果：本技术构建语义数据公共字段表和语义数据公共字段关系表，获取到待检索数据后，基于语义数据公共字段表进行数据匹配，然后根据匹配结果确定出对应的语义数据公共字段关系表中的各个数据表标识字段信息及各个语义字段信息，最终根据各个数据表标识字段信息及各个语义字段信息实现对待检索数据进行检索。本技术不用将各个子系统的同类数据上传到数据库总表，避免了数据丢失的问题。通过语义数据公共字段表和语义数据公共字段关系表，这两张信息表通过公共语义字段关联，因此，通过两张信息表的配合使用，有效避免了数据检索统计中因数据分散而导致的查询难题，使得检索统计更加便捷。附图说明11.为了更清楚地说明本技术实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简要介绍，显而易见地，下面描述中的附图仅仅是本技术的一些实施例，对于本领域的普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。12.图1为本技术提供的视频监控设备信息表示意图；图2为本技术提供的x光机设备信息表示意图；图3为本技术提供的构建语义数据公共字段表的过程示意图；图4为本技术提供的语义数据公共字段表示意图；图5为本技术提供的构建语义数据公共字段关系表的过程示意图；图6为本技术提供的语义数据公共字段关系表示意图；图7为本技术提供的另一语义数据公共字段关系表示意图；图8为本技术提供的基于公共语义字段的数据处理过程示意图；图9为本技术提供的基于公共语义字段的数据处理装置结构示意图；图10为本技术提供的电子设备结构示意图。具体实施方式13.为使本技术的目的和实施方式更加清楚，下面将结合本技术示例性实施例中的附图，对本技术示例性实施方式进行清楚、完整地描述，显然，描述的示例性实施例仅是本技术一部分实施例，而不是全部的实施例。14.需要说明的是，本技术中对于术语的简要说明，仅是为了方便理解接下来描述的实施方式，而不是意图限定本技术的实施方式。除非另有说明，这些术语应当按照其普通和通常的含义理解。15.本技术中说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”等是用于区别类似或同类的对象或实体，而不必然意味着限定特定的顺序或先后次序，除非另外注明。应该理解这样使用的用语在适当情况下可以互换。16.术语“包括”和“具有”以及他们的任何变形，意图在于覆盖但不排他的包含，例如，包含了一系列组件的产品或设备不必限于清楚地列出的所有组件，而是可包括没有清楚地列出的或对于这些产品或设备固有的其它组件。17.术语“模块”是指任何已知或后来开发的硬件、软件、固件、人工智能、模糊逻辑或硬件或/和软件代码的组合，能够执行与该元件相关的功能。18.最后应说明的是：以上各实施例仅用以说明本技术的技术方案，而非对其限制；尽管参照前述各实施例对本技术进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分或者全部技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本技术各实施例技术方案的范围。19.为了方便解释，已经结合具体的实施方式进行了上述说明。但是，上述示例性的讨论不是意图穷尽或者将实施方式限定到上述公开的具体形式。根据上述的教导，可以得到多种修改和变形。上述实施方式的选择和描述是为了更好的解释原理以及实际的应用，从而使得本领域技术人员更好的使用所述实施方式以及适于具体使用考虑的各种不同的变形的实施方式。20.通过举例对现有技术的数据处理方案存在的技术问题进行说明。21.例如，视频监控系统和出入口控制系统这两个综合安防平台的安防子系统的设备信息表分别为：“视频监控设备信息表（tb_video_surveillance_info）”和“x光机设备信息表（tb_x_ray_device_info）”。图1为本技术提供的视频监控设备信息表示意图，图2为本技术提供的x光机设备信息表示意图。如图1和图2所示，“视频监控设备信息表（tb_video_surveillance_info）”中记录有“监控责任人monitor_user”这一语义字段，“x光机设备信息表（tb_x_ray_device_info）”记录有“设备负责人device_user”这一语义字段，当要统计综合安防平台的全部设备管理人所管理的设备信息时，必须要知道两个设备信息表的表名以及相应的人员的语义字段才能进行检索统计，十分不便捷。22.基于上述考虑，本技术提供了一种基于公共语义字段的数据处理方法及装置，用以解决现有的数据处理方案存在的数据丢失、检索统计不便捷的问题。其中，本技术是通过语义数据公共字段表和语义数据公共字段关系表，来解决上述技术问题的。因此，首先对构建语义数据公共字段表和语义数据公共字段关系表的过程进行说明。23.图3为本技术提供的构建语义数据公共字段表的过程示意图，该过程包括以下步骤：s101：构建语义数据公共字段表，所述语义数据公共字段表包括公共语义标识字段和公共语义描述字段。24.s102：获取各个子系统各自的子数据表，对各个子数据表中的数据按照含义划分；为不同含义的数据分配唯一对应的公共语义字段标识信息，将各个公共语义字段标识信息写入所述公共语义标识字段，将各个子数据表中的数据按照与所述公共语义字段标识信息的对应关系写入所述公共语义描述字段。25.本技术在电子设备中构建语义数据公共字段表，该电子设备可以是pc、平板电脑等设备，也可以是服务器。26.如图3所示，电子设备首先构建语义数据公共字段表的结构，其包括公共语义标识字段和公共语义描述字段。将各个子系统的数据表称为子数据表，获取各个子系统各自的子数据表，然后将各个子数据表中的数据按照含义划分。例如，报警类型、警报类型、事件类型属于同一含义的数据；警报触发时间、警报时间、消防报警时间属于同一含义的数据等等。为不同含义的数据分配唯一对应的公共语义字段标识信息，也就是说，不同含义的数据对应的公共语义字段标识信息不同，相同含义的数据对应的公共语义字段标识信息相同。例如，为报警类型、警报类型、事件类型分配的公共语义字段标识信息为a，警报触发时间、警报时间、消防报警时间为分配的公共语义字段标识信息为b。27.将各个公共语义字段标识信息写入公共语义标识字段，将各个子数据表中的数据按照与公共语义字段标识信息的对应关系写入公共语义描述字段。还以上述举例说明，例如将a、b写入公共语义标识字段，将报警类型、警报类型、事件类型写入与a对应的公共语义描述字段，将警报触发时间、警报时间、消防报警时间写入与b对应的公共语义描述字段。若语义数据公共字段表中，同一行的公共语义字段标识信息和子数据表中的数据是对应的，则将a与报警类型、警报类型、事件类型写入同一行，将b与警报触发时间、警报时间、消防报警时间写入同一行。28.需要说明的是，语义数据公共字段表还可以包括创建时间字段、创建人字段、更新时间字段和更新人字段。并且，不限于公共语义标识字段、公共语义描述字段、创建时间字段、创建人字段、更新时间字段和更新人字段。根据不同的子系统的实际数据，可以扩展语义数据公共字段表的字段信息。29.另外，所述公共语义标识字段包括公共语义序号标识字段和公共语义名称标识字段中的至少一个。公共语义序号标识字段中写入的是唯一序号，例如1、2、3、4等，可以将唯一序号作为公共语义字段标识信息。公共语义名称标识字段中写入的是为不同含义的数据分配唯一对应的公共语义名称信息，例如alarm_a、alarm_b等。或者可以同时将公共语义序号标识字段和公共语义名称标识字段作为公共语义标识字段。30.图4为本技术提供的语义数据公共字段表示意图，如图4所示，public_id为公共语义序号标识字段，public_name为公共语义名称标识字段，public_id字段和public_name字段都属于公共语义标识字段。public_description为公共语义描述字段，creat_time为创建时间字段，creat_user为创建人字段，update_time为更新时间字段，update_user为更新人字段。31.如图4所示的语义数据公共字段表，每一行数据为存在对应关系的数据。具体的，公共语义序号标识1、公共语义名称标识alarm_a对应报警类型/警报类型/事件类型；公共语义序号标识2、公共语义名称标识alarm_b对应警报触发时间/警报时间/消防报警时间；公共语义序号标识3、公共语义名称标识alarm_c对应报警等级/报警级别/报警分级；公共语义序号标识4、公共语义名称标识alarm_d对应处理记录/处理结果/分析结果；公共语义序号标识5、公共语义名称标识device_a对应设备名称/装置名称/设备命名/装置命名；公共语义序号标识6、公共语义名称标识device_b对应安装位置/装配位置/安装地址/装配地点；公共语义序号标识7、公共语义名称标识device_c对应设备ip地址/x光机ip地址/安装点位ip/安装位置ip；公共语义序号标识8、公共语义名称标识device_d对应监控责任人/设备负责人/设备责任人/装置负责人。32.本技术中，所述方法还包括：当接收到语义数据公共字段表更新指令，获取指令中携带的更新数据和更新位置，更新数据包括新增数据、删除数据和更改数据中的至少一种；根据更新数据和更新位置，对所述语义数据公共字段表进行更新。33.还以图4为例举例说明如下，例如接收到的语义数据公共字段表更新指令中携带的信息包括：更新位置为“第七行第三列”，更新数据为删除“装配地点”，获取并根据指令中携带的更新数据和更新位置，删除图4中第七行第三列的装配地点。再例如接收到的语义数据公共字段表更新指令中携带的信息包括：更新位置为“第七行第三列”，更新数据为增加“装配地址”，获取并根据指令中携带的更新数据和更新位置，在图4中第七行第三列的位置增加装配地址。再例如接收到的语义数据公共字段表更新指令中携带的信息包括：更新位置为“第七行第三列”，更新数据为将“装配地点”修改为“装配地址”，获取并根据指令中携带的更新数据和更新位置，将图4中第七行第三列的位置中的“装配地点”修改为“装配地址”。34.下面对构建语义数据公共字段关系表的过程进行说明。35.图5为本技术提供的构建语义数据公共字段关系表的过程示意图，该过程包括以下步骤：s201：针对各个含义的数据，构建所述含义对应的语义数据公共字段关系表，所述语义数据公共字段关系表中包括子数据表标识字段、语义数据字段和公共语义标识字段。36.s202：将分配的所述含义的数据对应的公共语义字段标识信息写入所述公共语义标识字段；将所述含义的各个数据的子数据表标识信息对应写入所述子数据表标识字段，将所述含义的各个数据对应写入所述语义数据字段。37.本技术构建语义数据公共字段关系表的电子设备与构建语义数据公共字段表的电子设备可以是同一个设备，也可以是不同的设备。38.如图5所示，电子设备首先构建语义数据公共字段关系表的结构，需要说明的是，针对各个含义的数据，构建该含义对应的语义数据公共字段关系表。例如有10种含义的数据，则构建10个语义数据公共字段关系表。每个语义数据公共字段关系表包括子数据表标识字段、语义数据字段和公共语义标识字段。语义数据公共字段关系表与语义数据公共字段表通过公共语义标识字段建立联系。39.将分配的公共语义字段标识信息写入公共语义标识字段，将子数据表标识信息对应写入子数据表标识字段，子数据表标识信息可以是子数据表的名称，将各个数据对应写入语义数据字段。40.图6为本技术提供的与公共语义序号标识2、公共语义名称标识alarm_b对应的语义数据公共字段关系表，图7为本技术提供的与公共语义序号标识8、公共语义名称标识device_d对应的语义数据公共字段关系表。图6和图7中，table_name为子数据表标识字段，field_name为语义数据字段，public_name为公共语义名称标识字段，public_id为公共语义序号标识字段。41.所述方法还包括：确定更新数据对应的公共语义字段标识信息，根据所述公共语义字段标识信息确定对应的语义数据公共字段关系表，根据所述更新数据，对所述语义数据公共字段关系表进行更新。42.本技术中，当接收到语义数据公共字段表更新指令，对语义数据公共字段表进行更新，并且对相应的语义数据公共字段关系表进行更新。具体的，根据语义数据公共字段表更新指令，可以确定出更新数据对应的公共语义字段标识信息，根据更新数据对应的公共语义字段标识信息可以确定出待更新的语义数据公共字段关系表。然后根据更新数据，对语义数据公共字段关系表进行更新。43.例如，语义数据公共字段表更新内容为，删除了设备负责人，那么根据语义数据公共字段表更新内容，可以确定出待更新的语义数据公共字段关系表为图7所示的语义数据公共字段关系表，将图7所示的语义数据公共字段关系表中的设备负责人这一行的数据进行删除。例如，语义数据公共字段表更新内容为，增加了装置责任人，那么根据语义数据公共字段表更新内容，可以确定出待更新的语义数据公共字段关系表为图7所示的语义数据公共字段关系表，将图7所示的语义数据公共字段关系表中增加装置责任人，以及装置责任人对应的子数据表标识信息。44.下面对本技术提供的基于公共语义字段的数据处理过程进行详细说明。45.图8为本技术提供的基于公共语义字段的数据处理过程示意图，该过程包括以下步骤：s301：获取待检索数据，通过数据匹配确定语义数据公共字段表中，与所述待检索数据对应的目标公共语义字段标识信息；其中，所述语义数据公共字段表中，同一含义的不同数据所对应的公共语义字段标识信息相同。46.s302：根据所述目标公共语义字段标识信息，确定语义数据公共字段关系表中，与所述待检索数据对应的各个数据表标识字段信息及各个语义字段信息。47.s303：根据所述各个数据表标识字段信息及各个语义字段信息，对所述待检索数据进行检索。48.本技术提供的基于公共语义字段的数据处理方法应用于电子设备，该电子设备可以是pc、平板电脑等设备，也可以是服务器。基于公共语义字段的数据处理的电子设备与构建语义数据公共字段表的电子设备，或者与构建语义数据公共字段关系表的电子设备可以相同或不同。49.电子设备接收到待检索数据之后，将待检索数据与语义数据公共字段表中的数据进行匹配，将匹配成功的数据对应的公共语义字段标识信息，作为目标公共语义字段标识信息。需要说明的是，语义数据公共字段表中，同一含义的不同数据所对应的公共语义字段和“8”，利用得到的“公共语义字段名称（public_name）”和/或“公共语义字段标识（public_id）在“语义数据公共字段关系表”中得到与待检索数据匹配的全部安防子系统的报警信息表的名称以及其对应的语义字段名称，如图7所示。57.根据上述得到的图6或图7所示的语义数据公共字段关系表所含有的数据信息集合进行遍历，将获取的语义字段进行sql语句拼接，从而实现代码层面代码逻辑是固定的，不随着业务需求的变化而改动，只需要维护语义数据公共字段表和语义数据公共字段关系表即可。58.在代码逻辑层面，通过遍历数据信息集合进行拼接unionsql语句，为：“select@field_namefrom@table_name”ꢀ语句中的@field_name以及@table_name均是变量，根据获得的具体的语义数据公共字段关系表而改变，在代码中将从数据信息集合查询出来的语义字段替换，例如，针对图6为“selectalarm_b,trigger_timefromtb_invade_alarm_infounionalarm_b,alarm_timefromtb_patrol_alarm_infounionalarm_b,fire_timefromtb_fire_protect_alarm_info”，从而便能够在综合安防平台的数据中检索统计获取需求的安防子系统的报警信息表。同理，针对图7为“selectalarm_d,monitor_userfromtb_video_surveillance_infounionalarm_d,device_userfromtb_x_ray_device_infounionalarm_d,device_monitorfromtb_door_device_infounionalarm_d,device_personfromtb_vehicle_gate_device_info”，从而便能够在综合安防平台的数据中检索统计获取需求的安防子系统的设备信息表。由此可见，将逻辑代码固定在代码中，提高代码的通用性及鲁棒性。59.本技术同时将具备报警功能的各安防子系统的报警记录表的语义字段与语义数据公共字段表中的语义数据公共字段进行关联配置，通过将需求检索的信息与“公共语义字段解释（public_description）”中的信息匹配，根据匹配结果关联到对应的语义数据公共字段关系表，进一步得到获取对应的“公共语义字段名称（public_name）”以及“公共语义字段标识（public_id），进而得到需求的“语义数据公共字段关系表”，根据与需求检索的信息匹配的全部安防子系统的报警信息表的名称以及其对应的语义字段名称而便捷地得到检索逻辑代码，而不用每次将查询逻辑固定在逻辑代码里，一旦遇到新增的安防子系统，只需要更新语义数据公共字段表和语义数据公共字段关系表即可。60.图9为本技术提供的基于公共语义字段的数据处理装置结构示意图，包括：第一确定模块91，用于获取待检索数据，通过数据匹配确定语义数据公共字段表中，与所述待检索数据对应的目标公共语义字段标识信息；其中，所述语义数据公共字段表中，同一含义的不同数据所对应的公共语义字段标识信息相同；第二确定模块92，用于根据所述目标公共语义字段标识信息，确定语义数据公共字段关系表中，与所述待检索数据对应的各个数据表标识字段信息及各个语义字段信息；检索模块93，用于根据所述各个数据表标识字段信息及各个语义字段信息，对所述待检索数据进行检索。61.第一确定模块91，具体用于获取所述待检索数据的目标类型信息，将所述待检索数据与所述语义数据公共字段表中所述目标类型信息对应字段的各个数据进行匹配，确定与所述待检索数据匹配的目标数据，将所述目标数据对应的公共语义字段标识信息，确定为目标公共语义字段标识信息。62.检索模块93，具体用于将所述各个数据表标识字段信息及各个语义字段信息进行语句拼接，根据拼接得到的检索语句确定所述各个数据表标识字段信息各自对应的数据表中对应的语义字段信息指示的数据。63.所述装置还包括：构建模块94，用于构建语义数据公共字段表，所述语义数据公共字段表包括公共语义标识字段和公共语义描述字段；获取各个子系统各自的子数据表，对各个子数据表中的数据按照含义划分；为不同含义的数据分配唯一对应的公共语义字段标识信息，将各个公共语义字段标识信息写入所述公共语义标识字段，将各个子数据表中的数据按照与所述公共语义字段标识信息的对应关系写入所述公共语义描述字段。64.构建模块94，还用于针对各个含义的数据，构建所述含义对应的语义数据公共字段关系表，所述语义数据公共字段关系表中包括子数据表标识字段、语义数据字段和公共语义标识字段；将分配的所述含义的数据对应的公共语义字段标识信息写入所述公共语义标识字段；将所述含义的各个数据的子数据表标识信息对应写入所述子数据表标识字段，将所述含义的各个数据对应写入所述语义数据字段。65.构建模块94，还用于当接收到语义数据公共字段表更新指令，获取所述指令中携带的更新数据和更新位置，所述更新数据包括新增数据、删除数据和更改数据中的至少一种；根据所述更新数据和更新位置，对所述语义数据公共字段表进行更新。66.构建模块94，还用于确定更新数据对应的公共语义字段标识信息，根据所述公共语义字段标识信息确定对应的语义数据公共字段关系表，根据所述更新数据，对所述语义数据公共字段关系表进行更新。67.本技术还提供了一种电子设备，如图10所示，包括：处理器401、通信接口402、存储器403和通信总线404，其中，处理器401，通信接口402，存储器403通过通信总线404完成相互间的通信；所述存储器403中存储有计算机程序，当所述程序被所述处理器401执行时，使得所述处理器401执行以上任一方法步骤。68.上述电子设备提到的通信总线可以是外设部件互连标准（peripheralcomponentinterconnect，pci）总线或扩展工业标准结构（extendedindustrystandardarchitecture，eisa）总线等。该通信总线可以分为地址总线、数据总线、控制总线等。为便于表示，图中仅用一条粗线表示，但并不表示仅有一根总线或一种类型的总线。69.通信接口402用于上述电子设备与其他设备之间的通信。70.存储器可以包括随机存取存储器（randomaccessmemory，ram），也可以包括非易失性存储器（non-volatilememory，nvm），例如至少一个磁盘存储器。可选地，存储器还可以是至少一个位于远离前述处理器的存储装置。71.上述处理器可以是通用处理器，包括中央处理器、网络处理器（networkprocessor，np）等；还可以是数字信号处理器（digitalsignalprocessing，dsp）、专用集成电路、现场可编程门陈列或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。72.本技术还提供了一种计算机存储可读存储介质，所述计算机可读存储介质内存储有可由电子设备执行的计算机程序，当所述程序在所述电子设备上运行时，使得所述电子设备执行时实现以上任一方法步骤。73.尽管已描述了本技术的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例作出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本技术范围的所有变更和修改。74.显然，本领域的技术人员可以对本技术进行各种改动和变型而不脱离本技术的精神和范围。这样，倘若本技术的这些修改和变型属于本技术权利要求及其等同技术的范围之内，则本技术也意图包含这些改动和变型在内。当前第1页12当前第1页12
技术领域：
：，尤其涉及一种基于公共语义字段的数据处理方法及装置。
背景技术：
：：2.近年来，以互联网、大数据、视频智能分析为依托的综合安防平台技术发展迅速，该平台可以将视频监控系统、出入口控制系统、入侵与紧急报警系统、电子巡查系统、消防预警系统等各个安防子系统的功能集成在一起，从而提供统一接处警、统筹管理、统计分析功能。由于涉及众多安防子系统，综合安防平台存储的数据存在多源异构的特点，从而导致数据的检索统计成为难题。3.相关技术中，如公开号cn101388036a公开了一种数据表的汇总方法和装置。其中，所述方法包括：根据预先在参与汇总的子数据表中设置的项目段标识，识别出与所述项目段标识相对应的子项目段；提取所述识别出的子项目段，对所述提取出的子项目段进行汇总处理。4.相关技术综合安防平台的数据检索统计逻辑通常需要使用数据库总表，以用来存储各个安防子系统上传来的各类相关数据。现有的这种数据记录传输存储的方式存在一定的弊端。一方面由于众多安防子系统的来源可能涉及不同的厂家、不同的品牌，或者涉及不同的业务场景，因此其含有的数据信息种类不尽相同，而受到数据库总表既定格式的限制，当数据库总表中没有某种数据信息的通用语义字段时，安防子系统的该种数据信息将无法上传至综合安防平台，进而存在数据信息丢失的问题，因此，数据库总表存在一定的使用局限性。另一方面，同样由于众多安防子系统的来源可能涉及不同的厂家、不同的品牌，或者涉及不同的业务场景，不同安防子系统的所产出的用于记录同一属性类别的信息表的名称可能不同，其内部的用于描述含义相同的数据信息的语义字段可能也不同，因此利用这些混杂在一起的信息表进行某一类数据检索统计工作不便捷。技术实现要素：5.本技术实施例提供了一种基于公共语义字段的数据处理方法及装置，用以解决现有的数据处理方案存在的数据丢失、检索统计不便捷的问题。6.第一方面，本技术提供了一种基于公共语义字段的数据处理方法，所述方法包括：获取待检索数据，通过数据匹配确定语义数据公共字段表中，与所述待检索数据对应的目标公共语义字段标识信息；其中，所述语义数据公共字段表中，同一含义的不同数据所对应的公共语义字段标识信息相同；根据所述目标公共语义字段标识信息，确定语义数据公共字段关系表中，与所述待检索数据对应的各个数据表标识字段信息及各个语义字段信息；根据所述各个数据表标识字段信息及各个语义字段信息，对所述待检索数据进行检索。7.第二方面，本技术提供了一种基于公共语义字段的数据处理装置，所述装置包括：第一确定模块，用于获取待检索数据，通过数据匹配确定语义数据公共字段表中，与所述待检索数据对应的目标公共语义字段标识信息；其中，所述语义数据公共字段表中，同一含义的不同数据所对应的公共语义字段标识信息相同；第二确定模块，用于根据所述目标公共语义字段标识信息，确定语义数据公共字段关系表中，与所述待检索数据对应的各个数据表标识字段信息及各个语义字段信息；检索模块，用于根据所述各个数据表标识字段信息及各个语义字段信息，对所述待检索数据进行检索。8.第三方面，本技术提供了一种电子设备，包括处理器、通信接口、存储器和通信总线，其中，处理器，通信接口，存储器通过通信总线完成相互间的通信；存储器，用于存放计算机程序；处理器，用于执行存储器上所存放的程序时，实现上述任一项所述的方法步骤。9.第四方面，本技术提供了一种计算机可读存储介质，所述计算机可读存储介质内存储有计算机程序，所述计算机程序被处理器执行时实现上述任一项所述的方法步骤。10.本技术提供了一种基于公共语义字段的数据处理方法及装置，具有如下优点或有益效果：本技术构建语义数据公共字段表和语义数据公共字段关系表，获取到待检索数据后，基于语义数据公共字段表进行数据匹配，然后根据匹配结果确定出对应的语义数据公共字段关系表中的各个数据表标识字段信息及各个语义字段信息，最终根据各个数据表标识字段信息及各个语义字段信息实现对待检索数据进行检索。本技术不用将各个子系统的同类数据上传到数据库总表，避免了数据丢失的问题。通过语义数据公共字段表和语义数据公共字段关系表，这两张信息表通过公共语义字段关联，因此，通过两张信息表的配合使用，有效避免了数据检索统计中因数据分散而导致的查询难题，使得检索统计更加便捷。附图说明11.为了更清楚地说明本技术实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简要介绍，显而易见地，下面描述中的附图仅仅是本技术的一些实施例，对于本领域的普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。12.图1为本技术提供的视频监控设备信息表示意图；图2为本技术提供的x光机设备信息表示意图；图3为本技术提供的构建语义数据公共字段表的过程示意图；图4为本技术提供的语义数据公共字段表示意图；图5为本技术提供的构建语义数据公共字段关系表的过程示意图；图6为本技术提供的语义数据公共字段关系表示意图；图7为本技术提供的另一语义数据公共字段关系表示意图；图8为本技术提供的基于公共语义字段的数据处理过程示意图；图9为本技术提供的基于公共语义字段的数据处理装置结构示意图；图10为本技术提供的电子设备结构示意图。具体实施方式13.为使本技术的目的和实施方式更加清楚，下面将结合本技术示例性实施例中的附图，对本技术示例性实施方式进行清楚、完整地描述，显然，描述的示例性实施例仅是本技术一部分实施例，而不是全部的实施例。14.需要说明的是，本技术中对于术语的简要说明，仅是为了方便理解接下来描述的实施方式，而不是意图限定本技术的实施方式。除非另有说明，这些术语应当按照其普通和通常的含义理解。15.本技术中说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”等是用于区别类似或同类的对象或实体，而不必然意味着限定特定的顺序或先后次序，除非另外注明。应该理解这样使用的用语在适当情况下可以互换。16.术语“包括”和“具有”以及他们的任何变形，意图在于覆盖但不排他的包含，例如，包含了一系列组件的产品或设备不必限于清楚地列出的所有组件，而是可包括没有清楚地列出的或对于这些产品或设备固有的其它组件。17.术语“模块”是指任何已知或后来开发的硬件、软件、固件、人工智能、模糊逻辑或硬件或/和软件代码的组合，能够执行与该元件相关的功能。18.最后应说明的是：以上各实施例仅用以说明本技术的技术方案，而非对其限制；尽管参照前述各实施例对本技术进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分或者全部技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本技术各实施例技术方案的范围。19.为了方便解释，已经结合具体的实施方式进行了上述说明。但是，上述示例性的讨论不是意图穷尽或者将实施方式限定到上述公开的具体形式。根据上述的教导，可以得到多种修改和变形。上述实施方式的选择和描述是为了更好的解释原理以及实际的应用，从而使得本领域技术人员更好的使用所述实施方式以及适于具体使用考虑的各种不同的变形的实施方式。20.通过举例对现有技术的数据处理方案存在的技术问题进行说明。21.例如，视频监控系统和出入口控制系统这两个综合安防平台的安防子系统的设备信息表分别为：“视频监控设备信息表（tb_video_surveillance_info）”和“x光机设备信息表（tb_x_ray_device_info）”。图1为本技术提供的视频监控设备信息表示意图，图2为本技术提供的x光机设备信息表示意图。如图1和图2所示，“视频监控设备信息表（tb_video_surveillance_info）”中记录有“监控责任人monitor_user”这一语义字段，“x光机设备信息表（tb_x_ray_device_info）”记录有“设备负责人device_user”这一语义字段，当要统计综合安防平台的全部设备管理人所管理的设备信息时，必须要知道两个设备信息表的表名以及相应的人员的语义字段才能进行检索统计，十分不便捷。22.基于上述考虑，本技术提供了一种基于公共语义字段的数据处理方法及装置，用以解决现有的数据处理方案存在的数据丢失、检索统计不便捷的问题。其中，本技术是通过语义数据公共字段表和语义数据公共字段关系表，来解决上述技术问题的。因此，首先对构建语义数据公共字段表和语义数据公共字段关系表的过程进行说明。23.图3为本技术提供的构建语义数据公共字段表的过程示意图，该过程包括以下步骤：s101：构建语义数据公共字段表，所述语义数据公共字段表包括公共语义标识字段和公共语义描述字段。24.s102：获取各个子系统各自的子数据表，对各个子数据表中的数据按照含义划分；为不同含义的数据分配唯一对应的公共语义字段标识信息，将各个公共语义字段标识信息写入所述公共语义标识字段，将各个子数据表中的数据按照与所述公共语义字段标识信息的对应关系写入所述公共语义描述字段。25.本技术在电子设备中构建语义数据公共字段表，该电子设备可以是pc、平板电脑等设备，也可以是服务器。26.如图3所示，电子设备首先构建语义数据公共字段表的结构，其包括公共语义标识字段和公共语义描述字段。将各个子系统的数据表称为子数据表，获取各个子系统各自的子数据表，然后将各个子数据表中的数据按照含义划分。例如，报警类型、警报类型、事件类型属于同一含义的数据；警报触发时间、警报时间、消防报警时间属于同一含义的数据等等。为不同含义的数据分配唯一对应的公共语义字段标识信息，也就是说，不同含义的数据对应的公共语义字段标识信息不同，相同含义的数据对应的公共语义字段标识信息相同。例如，为报警类型、警报类型、事件类型分配的公共语义字段标识信息为a，警报触发时间、警报时间、消防报警时间为分配的公共语义字段标识信息为b。27.将各个公共语义字段标识信息写入公共语义标识字段，将各个子数据表中的数据按照与公共语义字段标识信息的对应关系写入公共语义描述字段。还以上述举例说明，例如将a、b写入公共语义标识字段，将报警类型、警报类型、事件类型写入与a对应的公共语义描述字段，将警报触发时间、警报时间、消防报警时间写入与b对应的公共语义描述字段。若语义数据公共字段表中，同一行的公共语义字段标识信息和子数据表中的数据是对应的，则将a与报警类型、警报类型、事件类型写入同一行，将b与警报触发时间、警报时间、消防报警时间写入同一行。28.需要说明的是，语义数据公共字段表还可以包括创建时间字段、创建人字段、更新时间字段和更新人字段。并且，不限于公共语义标识字段、公共语义描述字段、创建时间字段、创建人字段、更新时间字段和更新人字段。根据不同的子系统的实际数据，可以扩展语义数据公共字段表的字段信息。29.另外，所述公共语义标识字段包括公共语义序号标识字段和公共语义名称标识字段中的至少一个。公共语义序号标识字段中写入的是唯一序号，例如1、2、3、4等，可以将唯一序号作为公共语义字段标识信息。公共语义名称标识字段中写入的是为不同含义的数据分配唯一对应的公共语义名称信息，例如alarm_a、alarm_b等。或者可以同时将公共语义序号标识字段和公共语义名称标识字段作为公共语义标识字段。30.图4为本技术提供的语义数据公共字段表示意图，如图4所示，public_id为公共语义序号标识字段，public_name为公共语义名称标识字段，public_id字段和public_name字段都属于公共语义标识字段。public_description为公共语义描述字段，creat_time为创建时间字段，creat_user为创建人字段，update_time为更新时间字段，update_user为更新人字段。31.如图4所示的语义数据公共字段表，每一行数据为存在对应关系的数据。具体的，公共语义序号标识1、公共语义名称标识alarm_a对应报警类型/警报类型/事件类型；公共语义序号标识2、公共语义名称标识alarm_b对应警报触发时间/警报时间/消防报警时间；公共语义序号标识3、公共语义名称标识alarm_c对应报警等级/报警级别/报警分级；公共语义序号标识4、公共语义名称标识alarm_d对应处理记录/处理结果/分析结果；公共语义序号标识5、公共语义名称标识device_a对应设备名称/装置名称/设备命名/装置命名；公共语义序号标识6、公共语义名称标识device_b对应安装位置/装配位置/安装地址/装配地点；公共语义序号标识7、公共语义名称标识device_c对应设备ip地址/x光机ip地址/安装点位ip/安装位置ip；公共语义序号标识8、公共语义名称标识device_d对应监控责任人/设备负责人/设备责任人/装置负责人。32.本技术中，所述方法还包括：当接收到语义数据公共字段表更新指令，获取指令中携带的更新数据和更新位置，更新数据包括新增数据、删除数据和更改数据中的至少一种；根据更新数据和更新位置，对所述语义数据公共字段表进行更新。33.还以图4为例举例说明如下，例如接收到的语义数据公共字段表更新指令中携带的信息包括：更新位置为“第七行第三列”，更新数据为删除“装配地点”，获取并根据指令中携带的更新数据和更新位置，删除图4中第七行第三列的装配地点。再例如接收到的语义数据公共字段表更新指令中携带的信息包括：更新位置为“第七行第三列”，更新数据为增加“装配地址”，获取并根据指令中携带的更新数据和更新位置，在图4中第七行第三列的位置增加装配地址。再例如接收到的语义数据公共字段表更新指令中携带的信息包括：更新位置为“第七行第三列”，更新数据为将“装配地点”修改为“装配地址”，获取并根据指令中携带的更新数据和更新位置，将图4中第七行第三列的位置中的“装配地点”修改为“装配地址”。34.下面对构建语义数据公共字段关系表的过程进行说明。35.图5为本技术提供的构建语义数据公共字段关系表的过程示意图，该过程包括以下步骤：s201：针对各个含义的数据，构建所述含义对应的语义数据公共字段关系表，所述语义数据公共字段关系表中包括子数据表标识字段、语义数据字段和公共语义标识字段。36.s202：将分配的所述含义的数据对应的公共语义字段标识信息写入所述公共语义标识字段；将所述含义的各个数据的子数据表标识信息对应写入所述子数据表标识字段，将所述含义的各个数据对应写入所述语义数据字段。37.本技术构建语义数据公共字段关系表的电子设备与构建语义数据公共字段表的电子设备可以是同一个设备，也可以是不同的设备。38.如图5所示，电子设备首先构建语义数据公共字段关系表的结构，需要说明的是，针对各个含义的数据，构建该含义对应的语义数据公共字段关系表。例如有10种含义的数据，则构建10个语义数据公共字段关系表。每个语义数据公共字段关系表包括子数据表标识字段、语义数据字段和公共语义标识字段。语义数据公共字段关系表与语义数据公共字段表通过公共语义标识字段建立联系。39.将分配的公共语义字段标识信息写入公共语义标识字段，将子数据表标识信息对应写入子数据表标识字段，子数据表标识信息可以是子数据表的名称，将各个数据对应写入语义数据字段。40.图6为本技术提供的与公共语义序号标识2、公共语义名称标识alarm_b对应的语义数据公共字段关系表，图7为本技术提供的与公共语义序号标识8、公共语义名称标识device_d对应的语义数据公共字段关系表。图6和图7中，table_name为子数据表标识字段，field_name为语义数据字段，public_name为公共语义名称标识字段，public_id为公共语义序号标识字段。41.所述方法还包括：确定更新数据对应的公共语义字段标识信息，根据所述公共语义字段标识信息确定对应的语义数据公共字段关系表，根据所述更新数据，对所述语义数据公共字段关系表进行更新。42.本技术中，当接收到语义数据公共字段表更新指令，对语义数据公共字段表进行更新，并且对相应的语义数据公共字段关系表进行更新。具体的，根据语义数据公共字段表更新指令，可以确定出更新数据对应的公共语义字段标识信息，根据更新数据对应的公共语义字段标识信息可以确定出待更新的语义数据公共字段关系表。然后根据更新数据，对语义数据公共字段关系表进行更新。43.例如，语义数据公共字段表更新内容为，删除了设备负责人，那么根据语义数据公共字段表更新内容，可以确定出待更新的语义数据公共字段关系表为图7所示的语义数据公共字段关系表，将图7所示的语义数据公共字段关系表中的设备负责人这一行的数据进行删除。例如，语义数据公共字段表更新内容为，增加了装置责任人，那么根据语义数据公共字段表更新内容，可以确定出待更新的语义数据公共字段关系表为图7所示的语义数据公共字段关系表，将图7所示的语义数据公共字段关系表中增加装置责任人，以及装置责任人对应的子数据表标识信息。44.下面对本技术提供的基于公共语义字段的数据处理过程进行详细说明。45.图8为本技术提供的基于公共语义字段的数据处理过程示意图，该过程包括以下步骤：s301：获取待检索数据，通过数据匹配确定语义数据公共字段表中，与所述待检索数据对应的目标公共语义字段标识信息；其中，所述语义数据公共字段表中，同一含义的不同数据所对应的公共语义字段标识信息相同。46.s302：根据所述目标公共语义字段标识信息，确定语义数据公共字段关系表中，与所述待检索数据对应的各个数据表标识字段信息及各个语义字段信息。47.s303：根据所述各个数据表标识字段信息及各个语义字段信息，对所述待检索数据进行检索。48.本技术提供的基于公共语义字段的数据处理方法应用于电子设备，该电子设备可以是pc、平板电脑等设备，也可以是服务器。基于公共语义字段的数据处理的电子设备与构建语义数据公共字段表的电子设备，或者与构建语义数据公共字段关系表的电子设备可以相同或不同。49.电子设备接收到待检索数据之后，将待检索数据与语义数据公共字段表中的数据进行匹配，将匹配成功的数据对应的公共语义字段标识信息，作为目标公共语义字段标识信息。需要说明的是，语义数据公共字段表中，同一含义的不同数据所对应的公共语义字段和“8”，利用得到的“公共语义字段名称（public_name）”和/或“公共语义字段标识（public_id）在“语义数据公共字段关系表”中得到与待检索数据匹配的全部安防子系统的报警信息表的名称以及其对应的语义字段名称，如图7所示。57.根据上述得到的图6或图7所示的语义数据公共字段关系表所含有的数据信息集合进行遍历，将获取的语义字段进行sql语句拼接，从而实现代码层面代码逻辑是固定的，不随着业务需求的变化而改动，只需要维护语义数据公共字段表和语义数据公共字段关系表即可。58.在代码逻辑层面，通过遍历数据信息集合进行拼接unionsql语句，为：“select@field_namefrom@table_name”ꢀ语句中的@field_name以及@table_name均是变量，根据获得的具体的语义数据公共字段关系表而改变，在代码中将从数据信息集合查询出来的语义字段替换，例如，针对图6为“selectalarm_b,trigger_timefromtb_invade_alarm_infounionalarm_b,alarm_timefromtb_patrol_alarm_infounionalarm_b,fire_timefromtb_fire_protect_alarm_info”，从而便能够在综合安防平台的数据中检索统计获取需求的安防子系统的报警信息表。同理，针对图7为“selectalarm_d,monitor_userfromtb_video_surveillance_infounionalarm_d,device_userfromtb_x_ray_device_infounionalarm_d,device_monitorfromtb_door_device_infounionalarm_d,device_personfromtb_vehicle_gate_device_info”，从而便能够在综合安防平台的数据中检索统计获取需求的安防子系统的设备信息表。由此可见，将逻辑代码固定在代码中，提高代码的通用性及鲁棒性。59.本技术同时将具备报警功能的各安防子系统的报警记录表的语义字段与语义数据公共字段表中的语义数据公共字段进行关联配置，通过将需求检索的信息与“公共语义字段解释（public_description）”中的信息匹配，根据匹配结果关联到对应的语义数据公共字段关系表，进一步得到获取对应的“公共语义字段名称（public_name）”以及“公共语义字段标识（public_id），进而得到需求的“语义数据公共字段关系表”，根据与需求检索的信息匹配的全部安防子系统的报警信息表的名称以及其对应的语义字段名称而便捷地得到检索逻辑代码，而不用每次将查询逻辑固定在逻辑代码里，一旦遇到新增的安防子系统，只需要更新语义数据公共字段表和语义数据公共字段关系表即可。60.图9为本技术提供的基于公共语义字段的数据处理装置结构示意图，包括：第一确定模块91，用于获取待检索数据，通过数据匹配确定语义数据公共字段表中，与所述待检索数据对应的目标公共语义字段标识信息；其中，所述语义数据公共字段表中，同一含义的不同数据所对应的公共语义字段标识信息相同；第二确定模块92，用于根据所述目标公共语义字段标识信息，确定语义数据公共字段关系表中，与所述待检索数据对应的各个数据表标识字段信息及各个语义字段信息；检索模块93，用于根据所述各个数据表标识字段信息及各个语义字段信息，对所述待检索数据进行检索。61.第一确定模块91，具体用于获取所述待检索数据的目标类型信息，将所述待检索数据与所述语义数据公共字段表中所述目标类型信息对应字段的各个数据进行匹配，确定与所述待检索数据匹配的目标数据，将所述目标数据对应的公共语义字段标识信息，确定为目标公共语义字段标识信息。62.检索模块93，具体用于将所述各个数据表标识字段信息及各个语义字段信息进行语句拼接，根据拼接得到的检索语句确定所述各个数据表标识字段信息各自对应的数据表中对应的语义字段信息指示的数据。63.所述装置还包括：构建模块94，用于构建语义数据公共字段表，所述语义数据公共字段表包括公共语义标识字段和公共语义描述字段；获取各个子系统各自的子数据表，对各个子数据表中的数据按照含义划分；为不同含义的数据分配唯一对应的公共语义字段标识信息，将各个公共语义字段标识信息写入所述公共语义标识字段，将各个子数据表中的数据按照与所述公共语义字段标识信息的对应关系写入所述公共语义描述字段。64.构建模块94，还用于针对各个含义的数据，构建所述含义对应的语义数据公共字段关系表，所述语义数据公共字段关系表中包括子数据表标识字段、语义数据字段和公共语义标识字段；将分配的所述含义的数据对应的公共语义字段标识信息写入所述公共语义标识字段；将所述含义的各个数据的子数据表标识信息对应写入所述子数据表标识字段，将所述含义的各个数据对应写入所述语义数据字段。65.构建模块94，还用于当接收到语义数据公共字段表更新指令，获取所述指令中携带的更新数据和更新位置，所述更新数据包括新增数据、删除数据和更改数据中的至少一种；根据所述更新数据和更新位置，对所述语义数据公共字段表进行更新。66.构建模块94，还用于确定更新数据对应的公共语义字段标识信息，根据所述公共语义字段标识信息确定对应的语义数据公共字段关系表，根据所述更新数据，对所述语义数据公共字段关系表进行更新。67.本技术还提供了一种电子设备，如图10所示，包括：处理器401、通信接口402、存储器403和通信总线404，其中，处理器401，通信接口402，存储器403通过通信总线404完成相互间的通信；所述存储器403中存储有计算机程序，当所述程序被所述处理器401执行时，使得所述处理器401执行以上任一方法步骤。68.上述电子设备提到的通信总线可以是外设部件互连标准（peripheralcomponentinterconnect，pci）总线或扩展工业标准结构（extendedindustrystandardarchitecture，eisa）总线等。该通信总线可以分为地址总线、数据总线、控制总线等。为便于表示，图中仅用一条粗线表示，但并不表示仅有一根总线或一种类型的总线。69.通信接口402用于上述电子设备与其他设备之间的通信。70.存储器可以包括随机存取存储器（randomaccessmemory，ram），也可以包括非易失性存储器（non-volatilememory，nvm），例如至少一个磁盘存储器。可选地，存储器还可以是至少一个位于远离前述处理器的存储装置。71.上述处理器可以是通用处理器，包括中央处理器、网络处理器（networkprocessor，np）等；还可以是数字信号处理器（digitalsignalprocessing，dsp）、专用集成电路、现场可编程门陈列或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。72.本技术还提供了一种计算机存储可读存储介质，所述计算机可读存储介质内存储有可由电子设备执行的计算机程序，当所述程序在所述电子设备上运行时，使得所述电子设备执行时实现以上任一方法步骤。73.尽管已描述了本技术的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例作出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本技术范围的所有变更和修改。74.显然，本领域的技术人员可以对本技术进行各种改动和变型而不脱离本技术的精神和范围。这样，倘若本技术的这些修改和变型属于本技术权利要求及其等同技术的范围之内，则本技术也意图包含这些改动和变型在内。当前第1页12当前第1页12
再多了解一些
本文用于创业者技术爱好者查询，仅供学习研究，如用于商业用途，请联系技术所有人。
