一种基于互联网的数据处理方法和数据云平台与流程

1.本发明涉及数据处理技术领域，具体而言，涉及一种基于互联网的数据处理方法和数据云平台。


背景技术：

2.随着数据处理技术的不断发展，使得数据处理技术的应用领域不断扩展，特别是大数据处理技术的出现，使得数据处理的精度得到了不断的提高，如挖掘出精度更高的数据特征等，同样地，也使得其应用场景得到了进一步的扩展。然而，在现有技术中，在采集得到数据之后，一般仅对重复数据进行筛除，使得存在数据筛选的效果不佳的问题。


技术实现要素：

3.有鉴于此，本发明的目的在于提供一种基于互联网的数据处理方法和数据云平台，以改善现有技术中数据筛选的效果不佳的问题。
4.为实现上述目的，本发明实施例采用如下技术方案：
5.一种基于互联网的数据处理方法，应用于数据云平台，所述数据云平台通信连接有多个互联网终端设备，所述数据处理方法包括：
6.针对所述多个互联网终端设备中的每一个目标互联网终端设备，获取该目标互联网终端设备发送的待处理图像，得到该目标互联网终端设备对应的图像数据集合，其中，每一个所述图像数据集合包括至少一帧待处理图像，所述图像数据集合基于对应的所述目标互联网终端设备响应对应的设备用户进行的图像分享操作发送给所述数据云平台；
7.针对所述多个互联网终端设备中的每一个目标互联网终端设备，对该目标互联网终端设备对应的图像数据集合包括的待处理图像进行去重筛选处理，得到该目标互联网终端设备对应的图像数据去重集合；
8.针对所述多个互联网终端设备中的每一个目标互联网终端设备，基于该目标互联网终端设备对应的图像数据去重集合包括的待处理图像的图像内容有效性，得到该目标互联网终端设备对应的目标图像数据集合，其中，所述目标图像数据集合包括的每一帧目标图像为对应的图像数据去重集合中图像内容有效性满足预先配置的有效性条件的待处理图像。
9.在一些优选的实施例中，在上述基于互联网的数据处理方法中，所述针对所述多个互联网终端设备中的每一个目标互联网终端设备，获取该目标互联网终端设备发送的待处理图像，得到该目标互联网终端设备对应的图像数据集合的步骤，包括：
10.针对所述多个互联网终端设备中的每一个互联网终端设备，确定该互联网终端设备是否有响应对应的设备用户进行的图像分享操作向所述数据云平台发送待处理图像，并在该互联网终端设备有响应对应的设备用户进行的图像分享操作向所述数据云平台发送待处理图像时，将该互联网终端设备确定为第一互联网终端设备；
11.针对每一个所述第一互联网终端设备，对该第一互联网终端设备进行目标设备确
定处理，以确定该第一互联网终端设备是否属于目标互联网终端设备，并在该第一互联网终端设备属于目标互联网终端设备时，基于该目标互联网终端设备发送的每一帧待处理图像，构建得到该目标互联网终端设备对应的图像数据集合。
12.在一些优选的实施例中，在上述基于互联网的数据处理方法中，所述针对每一个所述第一互联网终端设备，对该第一互联网终端设备进行目标设备确定处理，以确定该第一互联网终端设备是否属于目标互联网终端设备，并在该第一互联网终端设备属于目标互联网终端设备时，基于该目标互联网终端设备发送的每一帧待处理图像，构建得到该目标互联网终端设备对应的图像数据集合的步骤，包括：
13.针对每一个所述第一互联网终端设备，向该第一互联网终端设备发送设备确认信息，并判断是否接收到该第一互联网终端设备基于该设备确认信息反馈对应的第一设备确认应答信息，其中，所述第一设备确认应答信息基于对应的第一互联网终端设备响应对应的设备用户在同意进行图像数据采集时进行的确认操作生成；
14.针对每一个所述第一互联网终端设备，若接收到该第一互联网终端设备基于该设备确认信息反馈对应的第一设备确认应答信息，则将该第一互联网终端设备确定为目标互联网终端设备，若未接收到该第一互联网终端设备基于该设备确认信息反馈对应的第一设备确认应答信息，则不将该第一互联网终端设备确定为目标互联网终端设备；
15.针对每一个所述第一互联网终端设备，若该第一互联网终端设备属于目标互联网终端设备，则基于该目标互联网终端设备发送的每一帧待处理图像，构建得到该目标互联网终端设备对应的图像数据集合。
16.在一些优选的实施例中，在上述基于互联网的数据处理方法中，所述针对所述多个互联网终端设备中的每一个目标互联网终端设备，对该目标互联网终端设备对应的图像数据集合包括的待处理图像进行去重筛选处理，得到该目标互联网终端设备对应的图像数据去重集合的步骤，包括：
17.针对所述多个互联网终端设备中的每一个目标互联网终端设备，确定该目标互联网终端设备对应的图像数据集合包括的每两帧待处理图像是否相同，并基于相同的待处理图像构建形成该目标互联网终端设备对应的待筛选图像集合，其中，任意一个所述待筛选图像集合中的任意两帧待处理图像相同，任意两个所述待筛选图像集合之间包括的待处理图像不同；
18.针对所述多个互联网终端设备中的每一个目标互联网终端设备，分别对该目标互联网终端设备对应的每一个待筛选图像集合进行去重筛选，并基于该目标互联网终端设备对应的图像数据集合包括的未被筛除的每一帧待处理图像，得到该目标互联网终端设备对应的图像数据去重集合。
19.在一些优选的实施例中，在上述基于互联网的数据处理方法中，所述针对所述多个互联网终端设备中的每一个目标互联网终端设备，对该目标互联网终端设备对应的每一个待筛选图像集合进行去重筛选，并基于该目标互联网终端设备对应的图像数据集合包括的未被筛除的每一帧待处理图像，得到该目标互联网终端设备对应的图像数据去重集合的步骤，包括：
20.针对所述多个互联网终端设备中的每一个目标互联网终端设备，分别确定该目标互联网终端设备对应的图像数据集合包括的每一帧待处理图像的图像采集时间，得到每一
帧待处理图像对应的图像采集时间信息；
21.针对所述多个互联网终端设备中的每一个目标互联网终端设备，分别在该目标互联网终端设备对应的每一个待筛选图像集合中将图像采集时间不属于最晚的每一帧待处理图像筛除，并基于该目标互联网终端设备对应的图像数据集合包括的未被筛除的每一帧待处理图像，构建形成该目标互联网终端设备对应的图像数据去重集合。
22.在一些优选的实施例中，在上述基于互联网的数据处理方法中，所述针对所述多个互联网终端设备中的每一个目标互联网终端设备，基于该目标互联网终端设备对应的图像数据去重集合包括的待处理图像的图像内容有效性，得到该目标互联网终端设备对应的目标图像数据集合的步骤，包括：
23.针对所述多个互联网终端设备中的每一个目标互联网终端设备，获取该目标互联网终端设备对应的目标用户图像，并对该目标用户图像进行用户区域识别，得到该目标互联网终端设备对应的目标用户区域图像，其中，所述目标用户图像为对应的目标互联网终端设备对应的设备用户的图像；
24.针对所述多个互联网终端设备中的每一个目标互联网终端设备对应的图像数据去重集合包括的每一帧待处理图像，基于该目标互联网终端设备对应的目标用户区域图像，对该待处理图像进行用户区域识别，得到该待处理图像对应的非目标用户区域图像，其中，所述非目标用户区域图像中不包括对应的目标互联网终端设备对应的设备用户的用户图像信息；
25.针对所述多个互联网终端设备中的每一个目标互联网终端设备对应的图像数据去重集合包括的每一帧待处理图像，计算该待处理图像对应的非目标用户区域图像的图像面积信息，并基于该图像面积信息和该待处理图像的图像面积信息，确定出该待处理图像对应的第一内容丰富度系数，其中，所述第一内容丰富度系数与所述非目标用户区域图像的图像面积信息之间具有正相关关系，且所述第一内容丰富度系数与所述待处理图像的图像面积信息之间具有负相关关系；
26.针对所述多个互联网终端设备中的每一个目标互联网终端设备对应的图像数据去重集合包括的每一帧待处理图像，对该待处理图像对应的非目标用户区域图像进行线段识别处理，得到该待处理图像对应的线段集合，并基于该线段集合确定出该待处理图像对应的第二内容丰富度系数；
27.针对所述多个互联网终端设备中的每一个目标互联网终端设备对应的图像数据去重集合包括的每一帧待处理图像，基于该待处理图像对应的第一内容丰富度系数和第二内容丰富度系数，确定该待处理图像对应的内容丰富度系数，并基于该内容丰富度系数确定该待处理图像的图像内容有效性是否满足预先配置的有效性条件，以及，在满足预先配置的有效性条件时，将该待处理图像确定为目标图像。
28.在一些优选的实施例中，在上述基于互联网的数据处理方法中，所述针对所述多个互联网终端设备中的每一个目标互联网终端设备对应的图像数据去重集合包括的每一帧待处理图像，基于该待处理图像对应的第一内容丰富度系数和第二内容丰富度系数，确定该待处理图像对应的内容丰富度系数，并基于该内容丰富度系数确定该待处理图像的图像内容有效性是否满足预先配置的有效性条件，以及，在满足预先配置的有效性条件时，将该待处理图像确定为目标图像的步骤，包括：
29.针对所述多个互联网终端设备中的每一个目标互联网终端设备对应的图像数据去重集合包括的每一帧待处理图像，基于该待处理图像对应的第一内容丰富度系数和对应的第二内容丰富度系数进行加权求和计算，得到该待处理图像对应的内容丰富度系数，其中，所述第一内容丰富度系数对应的加权系数小于所述第二内容丰富度系数对应的加权系数；
30.针对所述多个互联网终端设备中的每一个目标互联网终端设备对应的图像数据去重集合包括的每一帧待处理图像，确定该待处理图像对应的内容丰富度系数与预先配置的丰富度系数阈值之间的相对大小关系，并在该内容丰富度系数大于或等于所述丰富度系数阈值时，确定该待处理图像的图像内容有效性满足预先配置的有效性条件，并将该待处理图像确定为目标图像，以得到所述目标互联网终端设备对应的目标图像数据集合。
31.本发明实施例还提供一种数据云平台，所述数据云平台通信连接有多个互联网终端设备，所述数据云平台用于执行存储的计算机程度，以实现数据处理方法，其中，所述数据处理方法包括：
32.针对所述多个互联网终端设备中的每一个目标互联网终端设备，获取该目标互联网终端设备发送的待处理图像，得到该目标互联网终端设备对应的图像数据集合，其中，每一个所述图像数据集合包括至少一帧待处理图像，所述图像数据集合基于对应的所述目标互联网终端设备响应对应的设备用户进行的图像分享操作发送给所述数据云平台；
33.针对所述多个互联网终端设备中的每一个目标互联网终端设备，对该目标互联网终端设备对应的图像数据集合包括的待处理图像进行去重筛选处理，得到该目标互联网终端设备对应的图像数据去重集合；
34.针对所述多个互联网终端设备中的每一个目标互联网终端设备，基于该目标互联网终端设备对应的图像数据去重集合包括的待处理图像的图像内容有效性，得到该目标互联网终端设备对应的目标图像数据集合，其中，所述目标图像数据集合包括的每一帧目标图像为对应的图像数据去重集合中图像内容有效性满足预先配置的有效性条件的待处理图像。
35.在一些优选的实施例中，在上述数据云平台中，所述针对所述多个互联网终端设备中的每一个目标互联网终端设备，对该目标互联网终端设备对应的图像数据集合包括的待处理图像进行去重筛选处理，得到该目标互联网终端设备对应的图像数据去重集合的步骤，包括：
36.针对所述多个互联网终端设备中的每一个目标互联网终端设备，确定该目标互联网终端设备对应的图像数据集合包括的每两帧待处理图像是否相同，并基于相同的待处理图像构建形成该目标互联网终端设备对应的待筛选图像集合，其中，任意一个所述待筛选图像集合中的任意两帧待处理图像相同，任意两个所述待筛选图像集合之间包括的待处理图像不同；
37.针对所述多个互联网终端设备中的每一个目标互联网终端设备，分别对该目标互联网终端设备对应的每一个待筛选图像集合进行去重筛选，并基于该目标互联网终端设备对应的图像数据集合包括的未被筛除的每一帧待处理图像，得到该目标互联网终端设备对应的图像数据去重集合。
38.在一些优选的实施例中，在上述数据云平台中，所述针对所述多个互联网终端设
备中的每一个目标互联网终端设备，基于该目标互联网终端设备对应的图像数据去重集合包括的待处理图像的图像内容有效性，得到该目标互联网终端设备对应的目标图像数据集合的步骤，包括：
39.针对所述多个互联网终端设备中的每一个目标互联网终端设备，获取该目标互联网终端设备对应的目标用户图像，并对该目标用户图像进行用户区域识别，得到该目标互联网终端设备对应的目标用户区域图像，其中，所述目标用户图像为对应的目标互联网终端设备对应的设备用户的图像；
40.针对所述多个互联网终端设备中的每一个目标互联网终端设备对应的图像数据去重集合包括的每一帧待处理图像，基于该目标互联网终端设备对应的目标用户区域图像，对该待处理图像进行用户区域识别，得到该待处理图像对应的非目标用户区域图像，其中，所述非目标用户区域图像中不包括对应的目标互联网终端设备对应的设备用户的用户图像信息；
41.针对所述多个互联网终端设备中的每一个目标互联网终端设备对应的图像数据去重集合包括的每一帧待处理图像，计算该待处理图像对应的非目标用户区域图像的图像面积信息，并基于该图像面积信息和该待处理图像的图像面积信息，确定出该待处理图像对应的第一内容丰富度系数，其中，所述第一内容丰富度系数与所述非目标用户区域图像的图像面积信息之间具有正相关关系，且所述第一内容丰富度系数与所述待处理图像的图像面积信息之间具有负相关关系；
42.针对所述多个互联网终端设备中的每一个目标互联网终端设备对应的图像数据去重集合包括的每一帧待处理图像，对该待处理图像对应的非目标用户区域图像进行线段识别处理，得到该待处理图像对应的线段集合，并基于该线段集合确定出该待处理图像对应的第二内容丰富度系数；
43.针对所述多个互联网终端设备中的每一个目标互联网终端设备对应的图像数据去重集合包括的每一帧待处理图像，基于该待处理图像对应的第一内容丰富度系数和第二内容丰富度系数，确定该待处理图像对应的内容丰富度系数，并基于该内容丰富度系数确定该待处理图像的图像内容有效性是否满足预先配置的有效性条件，以及，在满足预先配置的有效性条件时，将该待处理图像确定为目标图像。
44.本发明实施例提供的一种基于互联网的数据处理方法和数据云平台，可以先针对每一个目标互联网终端设备，获取该目标互联网终端设备发送的待处理图像，得到该目标互联网终端设备对应的图像数据集合，然后，可以针对每一个目标互联网终端设备，对该目标互联网终端设备对应的图像数据集合包括的待处理图像进行去重筛选处理，得到该目标互联网终端设备对应的图像数据去重集合，使得可以针对每一个目标互联网终端设备，基于该目标互联网终端设备对应的图像数据去重集合包括的待处理图像的图像内容有效性，得到该目标互联网终端设备对应的目标图像数据集合。通过在进行去重筛选处理的基础上，进一步基于图像内容有效性进行筛选，可以提供筛选效果，从而改善现有技术中数据筛选的效果不佳的问题。
45.为使本发明的上述目的、特征和优点能更明显易懂，下文特举较佳实施例，并配合所附附图，作详细说明如下。
附图说明
46.图1为本发明实施例提供的数据云平台的结构框图。
47.图2为本发明实施例提供的基于互联网的数据处理方法包括的各步骤的流程示意图。
48.图3为本发明实施例提供的基于互联网的数据处理系统包括的各模块的示意图。
具体实施方式
49.为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例只是本发明的一部分实施例，而不是全部的实施例。通常在此处附图中描述和示出的本发明实施例的组件可以以各种不同的配置来布置和设计。
50.因此，以下对在附图中提供的本发明的实施例的详细描述并非旨在限制要求保护的本发明的范围，而是仅仅表示本发明的选定实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
51.如图1所示，本发明实施例提供了一种数据云平台。其中，所述数据云平台可以包括存储器和处理器。
52.详细地，所述存储器和处理器之间直接或间接地电性连接，以实现数据的传输或交互。例如，相互之间可通过一条或多条通讯总线或信号线实现电性连接。所述存储器中可以存储有至少一个可以以软件或固件(firmware)的形式，存在的软件功能模块(计算机程序)。所述处理器可以用于执行所述存储器中存储的可执行的计算机程序，从而实现本发明实施例(如后文所述)提供的基于互联网的数据处理方法。
53.示例性地，在一些可能实现的实施方式中，所述存储器可以是，但不限于，随机存取存储器(random access memory，ram)，只读存储器(read only memory，rom)，可编程只读存储器(programmable read-only memory，prom)，可擦除只读存储器(erasable programmable read-only memory，eprom)，电可擦除只读存储器(electric erasable programmable read-only memory，eeprom)等。
54.示例性地，在一些可能实现的实施方式中，所述处理器可以是一种通用处理器，包括中央处理器(central processing unit，cpu)、网络处理器(network processor，np)、片上系统(system on chip，soc)等；还可以是数字信号处理器(dsp)、专用集成电路(asic)、现场可编程门阵列(fpga)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
55.并且，图1所示的结构仅为示意，所述数据云平台还可包括比图1中所示更多或者更少的组件，或具有与图1所示不同的配置，例如，可以包括用于与其它设备进行信息交互的通信单元。
56.示例性地，在一些可能实现的实施方式中，所述数据云平台可以是一种具备数据处理能力的服务器。
57.结合图2，本发明实施例还提供一种基于互联网的数据处理方法，可应用于上述数据云平台。其中，所述基于互联网的数据处理方法有关的流程所定义的方法步骤，可以由所
述数据云平台实现。并且，所述数据云平台通信连接有多个互联网终端设备。下面将对图2所示的流程，进行说明。
58.步骤s110，针对所述多个互联网终端设备中的每一个目标互联网终端设备，获取该目标互联网终端设备发送的待处理图像，得到该目标互联网终端设备对应的图像数据集合。
59.在本发明实施例中，所述数据云平台可以针对所述多个互联网终端设备中的每一个目标互联网终端设备，获取该目标互联网终端设备发送的待处理图像，得到该目标互联网终端设备对应的图像数据集合。其中，每一个所述图像数据集合包括至少一帧待处理图像，所述图像数据集合基于对应的所述目标互联网终端设备响应对应的设备用户进行的图像分享操作发送给所述数据云平台。
60.步骤s120，针对所述多个互联网终端设备中的每一个目标互联网终端设备，对该目标互联网终端设备对应的图像数据集合包括的待处理图像进行去重筛选处理，得到该目标互联网终端设备对应的图像数据去重集合。
61.在本发明实施例中，所述数据云平台可以针对所述多个互联网终端设备中的每一个目标互联网终端设备，对该目标互联网终端设备对应的图像数据集合包括的待处理图像进行去重筛选处理，得到该目标互联网终端设备对应的图像数据去重集合。
62.步骤s130，针对所述多个互联网终端设备中的每一个目标互联网终端设备，基于该目标互联网终端设备对应的图像数据去重集合包括的待处理图像的图像内容有效性，得到该目标互联网终端设备对应的目标图像数据集合。
63.在本发明实施例中，所述数据云平台可以针对所述多个互联网终端设备中的每一个目标互联网终端设备，基于该目标互联网终端设备对应的图像数据去重集合包括的待处理图像的图像内容有效性，得到该目标互联网终端设备对应的目标图像数据集合。其中，所述目标图像数据集合包括的每一帧目标图像为对应的图像数据去重集合中图像内容有效性满足预先配置的有效性条件的待处理图像。
64.基于上述数据处理方法包括的各步骤，可以先针对每一个目标互联网终端设备，获取该目标互联网终端设备发送的待处理图像，得到该目标互联网终端设备对应的图像数据集合，然后，可以针对每一个目标互联网终端设备，对该目标互联网终端设备对应的图像数据集合包括的待处理图像进行去重筛选处理，得到该目标互联网终端设备对应的图像数据去重集合，使得可以针对每一个目标互联网终端设备，基于该目标互联网终端设备对应的图像数据去重集合包括的待处理图像的图像内容有效性，得到该目标互联网终端设备对应的目标图像数据集合。通过在进行去重筛选处理的基础上，进一步基于图像内容有效性进行筛选，可以提供筛选效果，从而改善现有技术中数据筛选的效果不佳的问题。
65.示例性地，在一些可能实现的实施方式中，上述内容中的步骤s110可以进一步包括以下内容：
66.首先，针对所述多个互联网终端设备中的每一个互联网终端设备，确定该互联网终端设备是否有响应对应的设备用户进行的图像分享操作向所述数据云平台发送待处理图像，并在该互联网终端设备有响应对应的设备用户进行的图像分享操作向所述数据云平台发送待处理图像时，将该互联网终端设备确定为第一互联网终端设备；
67.其次，针对每一个所述第一互联网终端设备，对该第一互联网终端设备进行目标
设备确定处理，以确定该第一互联网终端设备是否属于目标互联网终端设备，并在该第一互联网终端设备属于目标互联网终端设备时，基于该目标互联网终端设备发送的每一帧待处理图像，构建得到该目标互联网终端设备对应的图像数据集合。
68.示例性地，在一些可能实现的实施方式中，上述内容中的所述针对每一个所述第一互联网终端设备，对该第一互联网终端设备进行目标设备确定处理，以确定该第一互联网终端设备是否属于目标互联网终端设备，并在该第一互联网终端设备属于目标互联网终端设备时，基于该目标互联网终端设备发送的每一帧待处理图像，构建得到该目标互联网终端设备对应的图像数据集合的步骤，可以进一步包括以下内容：
69.首先，针对每一个所述第一互联网终端设备，向该第一互联网终端设备发送设备确认信息，并判断是否接收到该第一互联网终端设备基于该设备确认信息反馈对应的第一设备确认应答信息，其中，所述第一设备确认应答信息基于对应的第一互联网终端设备响应对应的设备用户在同意进行图像数据采集时进行的确认操作生成；
70.其次，针对每一个所述第一互联网终端设备，若接收到该第一互联网终端设备基于该设备确认信息反馈对应的第一设备确认应答信息，则将该第一互联网终端设备确定为目标互联网终端设备，若未接收到该第一互联网终端设备基于该设备确认信息反馈对应的第一设备确认应答信息，则不将该第一互联网终端设备确定为目标互联网终端设备；
71.然后，针对每一个所述第一互联网终端设备，若该第一互联网终端设备属于目标互联网终端设备，则基于该目标互联网终端设备发送的每一帧待处理图像，构建得到该目标互联网终端设备对应的图像数据集合。
72.示例性地，在一些可能实现的实施方式中，上述内容中的步骤s120可以进一步包括以下内容：
73.首先，针对所述多个互联网终端设备中的每一个目标互联网终端设备，确定该目标互联网终端设备对应的图像数据集合包括的每两帧待处理图像是否相同，并基于相同的待处理图像构建形成该目标互联网终端设备对应的待筛选图像集合，其中，任意一个所述待筛选图像集合中的任意两帧待处理图像相同，任意两个所述待筛选图像集合之间包括的待处理图像不同；
74.其次，针对所述多个互联网终端设备中的每一个目标互联网终端设备，分别对该目标互联网终端设备对应的每一个待筛选图像集合进行去重筛选，并基于该目标互联网终端设备对应的图像数据集合包括的未被筛除的每一帧待处理图像，得到该目标互联网终端设备对应的图像数据去重集合。
75.示例性地，在一些可能实现的实施方式中，上述内容中的所述针对所述多个互联网终端设备中的每一个目标互联网终端设备，对该目标互联网终端设备对应的每一个待筛选图像集合进行去重筛选，并基于该目标互联网终端设备对应的图像数据集合包括的未被筛除的每一帧待处理图像，得到该目标互联网终端设备对应的图像数据去重集合的步骤，包括以下内容：
76.首先，针对所述多个互联网终端设备中的每一个目标互联网终端设备，分别确定该目标互联网终端设备对应的图像数据集合包括的每一帧待处理图像的图像采集时间，得到每一帧待处理图像对应的图像采集时间信息；
77.其次，针对所述多个互联网终端设备中的每一个目标互联网终端设备，分别在该
目标互联网终端设备对应的每一个待筛选图像集合中将图像采集时间不属于最晚的每一帧待处理图像筛除，并基于该目标互联网终端设备对应的图像数据集合包括的未被筛除的每一帧待处理图像，构建形成该目标互联网终端设备对应的图像数据去重集合。
78.示例性地，在一些可能实现的实施方式中，上述内容中的步骤s130可以进一步包括以下内容：
79.首先，针对所述多个互联网终端设备中的每一个目标互联网终端设备，获取该目标互联网终端设备对应的目标用户图像，并对该目标用户图像进行用户区域识别，得到该目标互联网终端设备对应的目标用户区域图像，其中，所述目标用户图像为对应的目标互联网终端设备对应的设备用户的图像；
80.其次，针对所述多个互联网终端设备中的每一个目标互联网终端设备对应的图像数据去重集合包括的每一帧待处理图像，基于该目标互联网终端设备对应的目标用户区域图像，对该待处理图像进行用户区域识别，得到该待处理图像对应的非目标用户区域图像，其中，非目标用户区域图像中不包括对应的目标互联网终端设备对应的设备用户的用户图像信息；
81.然后，针对所述多个互联网终端设备中的每一个目标互联网终端设备对应的图像数据去重集合包括的每一帧待处理图像，计算该待处理图像对应的非目标用户区域图像的图像面积信息，并基于该图像面积信息和该待处理图像的图像面积信息，确定出该待处理图像对应的第一内容丰富度系数，其中，所述第一内容丰富度系数与所述非目标用户区域图像的图像面积信息之间具有正相关关系，且所述第一内容丰富度系数与所述待处理图像的图像面积信息之间具有负相关关系；
82.之后，针对所述多个互联网终端设备中的每一个目标互联网终端设备对应的图像数据去重集合包括的每一帧待处理图像，对该待处理图像对应的非目标用户区域图像进行线段识别处理，得到该待处理图像对应的线段集合，并基于该线段集合确定出该待处理图像对应的第二内容丰富度系数；
83.最后，针对所述多个互联网终端设备中的每一个目标互联网终端设备对应的图像数据去重集合包括的每一帧待处理图像，基于该待处理图像对应的第一内容丰富度系数和第二内容丰富度系数，确定该待处理图像对应的内容丰富度系数，并基于该内容丰富度系数确定该待处理图像的图像内容有效性是否满足预先配置的有效性条件，以及，在满足预先配置的有效性条件时，将该待处理图像确定为目标图像。
84.示例性地，在一些可能实现的实施方式中，上述内容中的所述针对所述多个互联网终端设备中的每一个目标互联网终端设备对应的图像数据去重集合包括的每一帧待处理图像，基于该待处理图像对应的第一内容丰富度系数和第二内容丰富度系数，确定该待处理图像对应的内容丰富度系数，并基于该内容丰富度系数确定该待处理图像的图像内容有效性是否满足预先配置的有效性条件，以及，在满足预先配置的有效性条件时，将该待处理图像确定为目标图像的步骤，可以进一步包括以下内容：
85.首先，针对所述多个互联网终端设备中的每一个目标互联网终端设备对应的图像数据去重集合包括的每一帧待处理图像，基于该待处理图像对应的第一内容丰富度系数和对应的第二内容丰富度系数进行加权求和计算，得到该待处理图像对应的内容丰富度系数，其中，所述第一内容丰富度系数对应的加权系数小于所述第二内容丰富度系数对应的
加权系数；
86.其次，针对所述多个互联网终端设备中的每一个目标互联网终端设备对应的图像数据去重集合包括的每一帧待处理图像，确定该待处理图像对应的内容丰富度系数与预先配置的丰富度系数阈值之间的相对大小关系，并在该内容丰富度系数大于或等于所述丰富度系数阈值时，确定该待处理图像的图像内容有效性满足预先配置的有效性条件，并将该待处理图像确定为目标图像，以得到所述目标互联网终端设备对应的目标图像数据集合。
87.示例性地，在一些可能实现的实施方式中，上述内容中的所述针对所述多个互联网终端设备中的每一个目标互联网终端设备对应的图像数据去重集合包括的每一帧待处理图像，对该待处理图像对应的非目标用户区域图像进行线段识别处理，得到该待处理图像对应的线段集合，并基于该线段集合确定出该待处理图像对应的第二内容丰富度系数的步骤，可以进一步包括以下内容：
88.首先，针对所述多个互联网终端设备中的每一个目标互联网终端设备对应的图像数据去重集合包括的每一帧待处理图像，对该待处理图像对应的非目标用户区域图像进行线段识别处理，得到该待处理图像对应的线段集合，其中，每一个所述线段集合包括的任意一条图像线段属于直线线段或曲线线段；
89.其次，针对所述多个互联网终端设备中的每一个目标互联网终端设备对应的图像数据去重集合包括的每一帧待处理图像，基于该待处理图像对应的线段集合执行预先配置的内容丰富度计算操作，得到该待处理图像对应的第二内容丰富度系数。
90.示例性地，在一些可能实现的实施方式中，上述内容中的所述内容丰富度计算操作，可以进一步包括以下内容：
91.首先，针对所述线段集合包括的每一条图像线段，确定该图像线段的中心位置点的像素坐标，并将该像素坐标确定为该图像线段的线段位置代表坐标，以及，基于所述线段集合包括的每一条图像线段对应的线段位置代表坐标，对所述线段集合包括的图像线段进行聚类处理(即基于聚类远近进行聚类)，得到所述线段集合对应的至少一个线段聚类集合；
92.其次，统计所述至少一个线段聚类集合的数量，得到对应的集合统计数量，并确定该集合统计数量与预先配置的统计数量阈值之间的相对大小关系，以及，在该集合统计数量小于或等于所述统计数量阈值时，基于该集合统计数量确定出对应的第二内容丰富度系数，或者，在该集合统计数量大于所述统计数量阈值时，针对每一个所述线段聚类集合，对该线段聚类集合包括的图像线段进行去重处理，得到该线段聚类集合对应的线段聚类子集合，其中，所述统计数量阈值大于或等于1，且所述第二内容丰富度系数与所述集合统计数量之间正相关；
93.然后，针对每一个所述线段聚类子集合，分别统计该线段聚类子集合包括的每一条图像线段在该线段聚类子集合对应的线段聚类集合中的相同线段的数量，得到每一条图像线段对应的相同线段数量，并分别基于每一条图像线段对应的相同线段数量，确定出每一条图像线段对应的第一重要程度值，其中，所述第一重要程度值与相同线段数量之间具有正相关关系；
94.之后，针对每一个所述线段聚类子集合，分别计算该线段聚类子集合中每两条图像线段之间的线段轨迹相似度，并分别计算该线段聚类子集合中每一条图像线段与每一条
其它图像线段之间的线段轨迹相似度的平均值，得到每一条图像线段对应的相似度均值，以及，分别基于每一条图像线段对应的相似度均值，确定出每一条图像线段对应的第二重要程度值，其中，所述第二重要程度值与所述相似度均值之间具有正相关关系；
95.进一步，针对每一个所述线段聚类子集合，分别对该线段聚类子集合中的每一条图像线段对应的第一重要程度值和对应的第二重要程度值进行加权求和计算，得到每一条图像线段对应的重要程度值，并基于该线段聚类子集合中的每一条图像线段对应的重要程度值，在该线段聚类子集合中确定出多条图像线段，并基于该多条图像线段按照预先配置的先后顺序(如对应的重要程度值之间的大小关系或对应的线段长度大小关系)，构建形成该线段聚类子集合对应的线段有序集合；
96.再进一步，针对每两个所述线段聚类子集合，计算该两个所述线段聚类子集合对应的线段有序集合之间的集合相似度(如在两个线段有序集合包括的图像线段的数量相同时，可以分别计算每一个集合位置对应的两条图像线段之间的线段轨迹相似度，再基于每一个集合位置对应的线段轨迹相似度的均值，以得到集合相似度，或者，在两个线段有序集合包括的图像线段的数量不相同时，基于较小的数量对数量较多的一个线段有序集合进行滑窗处理，得到对应的多个有序子集合，然后，分别计算较小的数量的线段有序集合与每一个有序子集合之间的相似度，可以参照前述的相同数量的有序集合之间的集合相似度计算方式，得到对应的多个子集合相似度，然后，再计算多个子集合相似度的均值，以得到得到对应的集合相似度)，并计算每两个所述线段聚类子集合对应的集合相似度的平均值，得到对应的集合相似度均值，以及，基于所述集合相似度均值确定出负相关的内容丰富度表征值；
97.最后，基于所述内容丰富度表征值和所述集合统计数量(如进行加权求和计算等)，确定出对应的第二内容丰富度系数，其中，所述第二内容丰富度系数与所述内容丰富度表征值之间具有正相关关系，所述第二内容丰富度系数与所述集合统计数量之间具有正相关关系。
98.结合图3，本发明实施例还提供一种基于互联网的数据处理系统，可应用于上述数据云平台。其中，所述基于互联网的数据处理系统可以包括：
99.图像获取模块，用于针对所述多个互联网终端设备中的每一个目标互联网终端设备，获取该目标互联网终端设备发送的待处理图像，得到该目标互联网终端设备对应的图像数据集合，其中，每一个图像数据集合包括至少一帧待处理图像，所述图像数据集合基于对应的所述目标互联网终端设备响应对应的设备用户进行的图像分享操作发送给所述数据云平台；
100.图像去重模块，用于针对所述多个互联网终端设备中的每一个目标互联网终端设备，对该目标互联网终端设备对应的图像数据集合包括的待处理图像进行去重筛选处理，得到该目标互联网终端设备对应的图像数据去重集合；
101.图像筛选模块，用于针对所述多个互联网终端设备中的每一个目标互联网终端设备，基于该目标互联网终端设备对应的图像数据去重集合包括的待处理图像的图像内容有效性，得到该目标互联网终端设备对应的目标图像数据集合，其中，所述目标图像数据集合包括的每一帧目标图像为对应的图像数据去重集合中图像内容有效性满足预先配置的有效性条件的待处理图像。
102.综上所述，本发明提供的一种基于互联网的数据处理方法和数据云平台，可以先针对每一个目标互联网终端设备，获取该目标互联网终端设备发送的待处理图像，得到该目标互联网终端设备对应的图像数据集合，然后，可以针对每一个目标互联网终端设备，对该目标互联网终端设备对应的图像数据集合包括的待处理图像进行去重筛选处理，得到该目标互联网终端设备对应的图像数据去重集合，使得可以针对每一个目标互联网终端设备，基于该目标互联网终端设备对应的图像数据去重集合包括的待处理图像的图像内容有效性，得到该目标互联网终端设备对应的目标图像数据集合。通过在去重筛选处理的基础上，进一步基于图像内容有效性进行筛选，可以提供筛选效果，从而改善现有技术中数据筛选的效果不佳的问题。
103.以上所述仅为本发明的优选实施例而已，并不用于限制本发明，对于本领域的技术人员来说，本发明可以有各种更改和变化。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。