一种数据可视化方法及装置与流程

1.本发明涉及计算机技术领域，尤其涉及一种数据可视化方法及装置。


背景技术：

2.随着互联网金融的冲击，企业自身业务需求呈现井喷式增长。
3.在业务需求量不断增多的情况下，满足客户需求的产品数量也在日益增多。如何保证在高速迭代下的产品质量，以及对现有产品质量的质量管控加以改进，对于提升企业核心竞争力至关重要。


技术实现要素：

4.本技术提供一种数据可视化方法及装置，解决了现有的产品的质量管控效率较低的技术问题。
5.为达到上述目的，本技术采用如下技术方案：
6.第一方面，提供一种数据可视化方法，包括：获取目标产品的原始数据，其中，原始数据包括目标产品的全生命周期的产品数据；将原始数据输入到预先训练好的数据分类模型中，以得到原始数据的数据分类结果，其中，数据分类模型为用于对数据进行分类的神经网络模型；根据数据分类结果，显示目标产品的分析结果。
7.由上可知，在获取目标产品的原始数据后，可以将原始数据输入到预先训练好的数据分类模型中，以得到原始数据的数据分类结果。后续，根据数据分类结果，显示目标产品的分析结果。由于原始数据包括目标产品的全生命周期的产品数据、且数据分类模型为用于对数据进行分类的神经网络模型，因此，目标产品的分析结果可以清晰、高效的反应目标产品的全生命周期的产品数据，以使得管理人员可以直观的从不同的数据分类结果看到目标产品的产品质量，提高了产品的质量管控效率。
8.第二方面，提供一种数据可视化装置，该数据可视化装置包括：获取单元、处理单元和显示单元；获取单元，用于获取目标产品的原始数据，其中，原始数据包括目标产品的全生命周期的产品数据；处理单元，用于将原始数据输入到预先训练好的数据分类模型中，以得到原始数据的数据分类结果，其中，数据分类模型为用于对数据进行分类的神经网络模型；显示单元，用于根据数据分类结果，显示目标产品的分析结果。
9.第三方面，提供一种数据可视化装置，包括存储器和处理器。存储器用于存储计算机执行指令，处理器与存储器通过总线连接。当数据可视化装置运行时，处理器执行存储器存储的计算机执行指令，以使数据可视化装置执行第一方面所述的数据可视化方法。
10.该数据可视化装置可以是网络设备，也可以是网络设备中的一部分装置，例如网络设备中的芯片系统。该芯片系统用于支持网络设备实现第一方面及其任意一种可能的实现方式中所涉及的功能，例如，接收、确定、分流上述数据可视化方法中所涉及的数据和/或信息。该芯片系统包括芯片，也可以包括其他分立器件或电路结构。
11.第四方面，提供一种计算机可读存储介质，计算机可读存储介质包括计算机执行
指令，当计算机执行指令在计算机上运行时，使得该计算机执行第一方面所述的数据可视化方法。
12.第五方面，提供一种计算机程序产品，当所述计算机程序产品在计算机上运行时，使得所述计算机执行如第一方面及其任一种可能的设计方式所述的数据可视化方法。
13.需要说明的是，上述计算机指令可以全部或者部分存储在第一计算机存储介质上。其中，第一计算机存储介质可以与数据可视化装置的处理器封装在一起的，也可以与数据可视化装置的处理器单独封装，本技术实施例对此不作限定。
14.本发明中第二方面、第三方面、第四方面以及第五方面的描述，可以参考第一方面的详细描述；并且，第二方面、第三方面、第四方面以及第五方面的有益效果，可以参考第一方面的有益效果分析，此处不再赘述。
15.在本技术实施例中，上述数据可视化装置的名字对设备或功能模块本身不构成限定，在实际实现中，这些设备或功能模块可以以其他名称出现。只要各个设备或功能模块的功能和本发明类似，属于本发明权利要求及其等同技术的范围之内。
16.本发明的这些方面或其他方面在以下的描述中会更加简明易懂。
附图说明
17.图1为本技术实施例提供的一种数据可视化装置的硬件结构示意图；
18.图2为本技术实施例提供的又一种数据可视化装置的硬件结构示意图；
19.图3为本技术实施例提供的一种数据可视化方法的流程示意图；
20.图4为本技术实施例提供的又一种数据可视化方法的流程示意图；
21.图5为本技术实施例提供的又一种数据可视化方法的流程示意图；
22.图6为本技术实施例提供的又一种数据可视化方法的流程示意图；
23.图7为本技术实施例提供的一种装置的结构示意图。
具体实施方式
24.下面将结合本技术实施例中的附图，对本技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
25.需要说明的是，本技术实施例中，“示例性的”或者“例如”等词用于表示作例子、例证或说明。本技术实施例中被描述为“示例性的”或者“例如”的任何实施例或设计方案不应被解释为比其它实施例或设计方案更优选或更具优势。确切而言，使用“示例性的”或者“例如”等词旨在以具体方式呈现相关概念。
26.为了便于清楚描述本技术实施例的技术方案，在本技术实施例中，采用了“第一”、“第二”等字样对功能和作用基本相同的相同项或相似项进行区分，本领域技术人员可以理解“第一”、“第二”等字样并不是在对数量和执行次序进行限定。
27.如背景技术所描述，在业务需求量不断增多的情况下，满足客户需求的产品数量也在日益增多。如何保证在高速迭代下的产品质量，以及对现有产品质量的质量管控加以改进，对于提升企业核心竞争力至关重要。
28.针对上述问题，本技术实施例提供了一种数据可视化方法，在获取目标产品的原始数据后，可以将原始数据输入到预先训练好的数据分类模型中，以得到原始数据的数据分类结果。后续，根据数据分类结果，显示目标产品的分析结果。由于原始数据包括目标产品的全生命周期的产品数据、且数据分类模型为用于对数据进行分类的神经网络模型，因此，目标产品的分析结果可以清晰、高效的反应目标产品的全生命周期的产品数据，以使得管理人员可以直观的从不同的数据分类结果看到目标产品的产品质量，提高了产品的质量管控效率。
29.上述数据可视化装置可以为用于对待测试系统执行数据可视化的设备，也可以为该设备中的芯片，还可以为该设备中的片上系统。
30.可选的，该设备可以是物理机，例如：台式电脑，又称台式机或桌面机(desktop computer)、手机、平板电脑、笔记本电脑、超级移动个人计算机(ultra
‑
mobile personal computer，umpc)、上网本、个人数字助理(personal digital assistant，pda)等终端设备。
31.可选的，上述数据可视化装置也可以通过部署在物理机上的虚拟机(virtual machine，vm)，实现上述数据可视化装置所要实现的功能。
32.为了便于理解，下面对本技术实施例中的数据可视化装置的结构进行描述。
33.图1示出了本技术实施例提供的数据可视化装置的一种硬件结构示意图。如图1所示，该数据可视化装置包括处理器11，存储器12、通信接口13、总线14。处理器11，存储器12以及通信接口13之间可以通过总线14连接。
34.处理器11是数据可视化装置的控制中心，可以是一个处理器，也可以是多个处理元件的统称。例如，处理器11可以是一个通用中央处理单元(central processing unit，cpu)，也可以是其他通用处理器等。其中，通用处理器可以是微处理器或者是任何常规的处理器等。
35.作为一种实施例，处理器11可以包括一个或多个cpu，例如图1中所示的cpu 0和cpu 1。
36.存储器12可以是只读存储器(read
‑
only memory，rom)或可存储静态信息和指令的其他类型的静态存储设备，随机存取存储器(random access memory，ram)或者可存储信息和指令的其他类型的动态存储设备，也可以是电可擦可编程只读存储器(electrically erasable programmable read
‑
only memory，eeprom)、磁盘存储介质或者其他磁存储设备、或者能够用于携带或存储具有指令或数据结构形式的期望的程序代码并能够由计算机存取的任何其他介质，但不限于此。
37.一种可能的实现方式中，存储器12可以独立于处理器11存在，存储器12可以通过总线14与处理器11相连接，用于存储指令或者程序代码。处理器11调用并执行存储器12中存储的指令或程序代码时，能够实现本发明实施例提供的数据可视化方法。
38.另一种可能的实现方式中，存储器12也可以和处理器11集成在一起。
39.通信接口13，用于与其他设备通过通信网络连接。所述通信网络可以是以太网，无线接入网，无线局域网(wireless local area networks，wlan)等。通信接口13可以包括用于接收数据的接收单元，以及用于发送数据的发送单元。
40.总线14，可以是工业标准体系结构(industry standard architecture，isa)总线、外部设备互连(peripheral component interconnect，pci)总线或扩展工业标准体系
结构(extended industry standard architecture，eisa)总线等。该总线可以分为地址总线、数据总线、控制总线等。为便于表示，图1中仅用一条粗线表示，但并不表示仅有一根总线或一种类型的总线。
41.需要指出的是，图1示出的结构并不构成对该数据可视化装置的限定。除图1所示部件之外，该数据可视化装置可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。
42.图2示出了本技术实施例中数据可视化装置的另一种硬件结构。如图2所示，通信装置可以包括处理器21以及通信接口22。处理器21与通信接口22耦合。
43.处理器21的功能可以参考上述处理器11的描述。此外，处理器21还具备存储功能，可以参考上述存储器12的功能。
44.通信接口22用于为处理器21提供数据。该通信接口22可以是通信装置的内部接口，也可以是数据可视化装置对外的接口(相当于通信接口13)。
45.需要指出的是，图1(或图2)中示出的结构并不构成对数据可视化装置的限定，除图1(或图2)所示部件之外，该数据可视化装置可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。
46.下面结合附图对本技术实施例提供的数据可视化方法进行详细介绍。
47.图3为本技术实施例提供的一种数据可视化方法的流程示意图。如图3所示，该数据可视化方法包括下述s301
‑
s303。
48.s301、数据可视化装置获取目标产品的原始数据。
49.具体的，在对目标产品进行分析时，需要获取目标产品的原始数据。其中，原始数据包括目标产品的全生命周期的产品数据。
50.在系统或产品全生命周期中，数据主要有两种采集方式：一种是基于目标产品的运行日志，通过部署flume节点，实现高可用、高可靠、分布式的海量日志采集、聚合和传输。通过增量式采集策略，提升采集性能与时效性。
51.另一种是基于目标产品的表结构数据，通过搭建datax数据同步框架，将不同的产品的任意数据源类型的数据周期性进行镜像同步。
52.可选的，数据可视化装置还可以通过其他方式获取目标产品的原始数据，本技术对此不作限定。
53.示例性的，数据可视化装置可以获取产品a全生命周期内各阶段的生产缺陷相关数据。该数据包括：涉及产品名称、所属组织部门、缺陷注入批次及时间、缺陷来源、缺陷严重程度、缺陷等级等信息。
54.s302、数据可视化装置将原始数据输入到预先训练好的数据分类模型中，以得到原始数据的数据分类结果。
55.其中，数据分类模型为用于对数据进行分类的神经网络模型。
56.具体的，在获取目标产品的原始数据后，数据可视化装置可以将原始数据输入到预先训练好的数据分类模型中，以得到原始数据的数据分类结果。
57.在数据分析过程中，数据可视化装置并不知道获取到的原始数据中，哪些数据属于什么类型。因此，在获取目标产品的原始数据后，数据可视化装置可以将原始数据输入到预先训练好的数据分类模型中，以得到原始数据的数据分类结果。这样一来，数据可视化装
置便可以根据分类结果，确定数据的数据类型。后续，电子设备可以根据确定好的数据类型，分类展示数据。
58.示例性的，原始数据包括：目标产品的沟通时间数据和上线开发数据。将上述原始数据输入到预先训练好的数据分类模型中，以得到原始数据的数据分类结果为：一种是目标产品生产前的数据，另一种是目标产品生产中的数据。
59.可选的，数据可视化装置还可以根据不同维度、层次、分类等定制化解析策略，对原始数据进行整合统计分析，如近三年所有产品的生产缺陷总数波动纵向比较、当年度各部门产品生产缺陷按严重等级分类统计分布纵向比较等。
60.s303、数据可视化装置根据数据分类结果，显示目标产品的分析结果。
61.具体的，在将原始数据输入到预先训练好的数据分类模型中，以得到原始数据的数据分类结果后，数据可视化装置根据数据分类结果，显示目标产品的分析结果。
62.可选的，数据可视化装置可以将分析结果以柱状图、线性图、明细数据查询等多种方式展示在前端。
63.可选的，如图4所示，该数据可视化方法还包括下述s401
‑
s404。
64.s401、数据可视化装置采集多个其他产品的分析结果以及每个其他产品的全生命周期的产品数据。
65.具体的，在对目标产品进行数据分析时，数据可视化装置可以采集多个其他产品的分析结果以及每个其他产品的全生命周期的产品数据。
66.示例性的，当目标产品为在2021年1月完成的情况下，数据可视化装置可以采集2021年1月内，多个其他产品的分析结果以及每个其他产品的全生命周期的产品数据。
67.s402、数据可视化装置将每个其他产品的全生命周期的产品数据作为训练集。
68.具体的，在采集多个其他产品的分析结果以及每个其他产品的全生命周期的产品数据后，数据可视化装置可以将每个其他产品的全生命周期的产品数据作为训练集。
69.s403、数据可视化装置将多个其他产品的分析结果作为验证集。
70.具体的，在采集多个其他产品的分析结果以及每个其他产品的全生命周期的产品数据后，数据可视化装置可以将多个其他产品的分析结果作为验证集。
71.s404、数据可视化装置在训练集上对初始的双通道神经网络模型进行监督训练，直到双通道神经网络模型符合预设的收敛条件时，生成数据分类模型。
72.具体的，在将每个其他产品的全生命周期的产品数据作为训练集，以及将多个其他产品的分析结果作为验证集后，数据可视化装置在训练集上对初始的双通道神经网络模型进行监督训练，直到双通道神经网络模型符合预设的收敛条件时，生成数据分类模型。
73.其中，收敛条件可以是模型训练的次数达到预设阈值，也可以是模型输出的结果的变化程度较小，还可以是其他收敛条件，本技术对此不作限定。
74.可选的，如图5所示，上述根据数据分类结果，显示目标产品的分析结果之后，还包括：
75.s501、数据可视化装置接收账户发送的分析结果显示请求。
76.其中，分析结果显示请求包括账户标识。
77.具体的，在显示目标产品的分析结果之后，数据可视化装置还可以根据不同的账户，显示不同的分析结果内容。
78.s502、数据可视化装置根据账户标识，确定与账户标识对应的目标产品的分析结果的目标内容。
79.具体的，在接收账户发送的分析结果显示请求后，数据可视化装置可以根据账户标识，确定与账户标识对应的目标产品的分析结果的目标内容。
80.示例性的，对于权限较高的账户，数据可视化装置可以根据账户标识，确定与账户标识对应的目标产品的分析结果的全部内容。对于权限较低的账户，数据可视化装置可以根据账户标识，确定与账户标识对应的目标产品的分析结果的部分内容。
81.s503、数据可视化装置响应于分析结果显示请求，显示目标内容。
82.示例性的，对于权限较高的账户，数据可视化装置可以响应于分析结果显示请求，显示分析结果的全部内容。对于权限较低的账户，数据可视化装置可以响应于分析结果显示请求，显示分析结果的部分内容。
83.数据可视化装置响应于分析结果显示请求，显示目标内容的过程中，可以设置用户权限管理机制，根据系统设置的安全规则或者授权功能来实现访问权限检测控制，让经过授权的用户可以正常合法的使用已授权功能，最基本要实现的就是不同职责的人员，对于系统操作的权限应该是不同的，通过对用户设置不同的功能权限和资源权限，明确职责划分，不同等级、角色的用户能看到和操作的数据是不同的，提高应用系统的安全性、数据隔离性和职责明确性。
84.可选的，结合,3，如图6所示，该数据可视化方法还包括下述s601。
85.s601、数据可视化装置周期性的生成目标产品的质量分析报告。
86.具体的，数据可视化装置可以周期性的生成目标产品的质量分析报告。
87.数据可视化装置可以将目标产品的生产全过程的质量和产品质量的度量指标情况及分析结果周期性的自动生成pdf或word形式报告，供质量分析人员评估整体质量情况、提出改进措施并评价改进效果。
88.质量分析报告与显示的分析结果是不同的。显示的分析结果中的各个图表是构成质量分析报告的元素，在显示的分析结果的过程中，数据可视化装置会根据业务情况对各类型产品或产品实现全生命周期的各个阶段质量相关数据进行不同层次、类别、维度统计，会生成几十个图表，涵盖产品所有质量评估指标。在每张图表中，支持单个图表编辑，图形展示模式切换，明细数据下载，维度、历史对比分析配置等，用户可以在线准实时的查阅各个质量指标情况。质量分析报告生成周期设置了相关触发机制，按照设置规则定期自动生成pdf或word形式报告，用户可根据业务需要，对报告中所要涵盖的质量指标进行勾选配置，实现报告的参数化定制。
89.本技术实施例提供了一种数据可视化方法，在获取目标产品的原始数据后，可以将原始数据输入到预先训练好的数据分类模型中，以得到原始数据的数据分类结果。后续，根据数据分类结果，显示目标产品的分析结果。由于原始数据包括目标产品的全生命周期的产品数据、且数据分类模型为用于对数据进行分类的神经网络模型，因此，目标产品的分析结果可以清晰、高效的反应目标产品的全生命周期的产品数据，以使得管理人员可以直观的从不同的数据分类结果看到目标产品的产品质量，提高了产品的质量管控效率。
90.上述主要从方法的角度对本技术实施例提供的方案进行了介绍。为了实现上述功能，其包含了执行各个功能相应的硬件结构和/或软件模块。本领域技术人员应该很容易意
识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，本技术能够以硬件或硬件和计算机软件的结合形式来实现。某个功能究竟以硬件还是计算机软件驱动硬件的方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本技术的范围。
91.本技术实施例可以根据上述方法示例对数据可视化装置进行功能模块的划分，例如，可以对应各个功能划分各个功能模块，也可以将两个或两个以上的功能集成在一个处理模块中。上述集成的模块既可以采用硬件的形式实现，也可以采用软件功能模块的形式实现。可选的，本技术实施例中对模块的划分是示意性的，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式。
92.图7示出了一种数据可视化装置的组成示意图，包括：获取单元701、处理单元702和显示单元703。
93.获取单元701，用于获取目标产品的原始数据，其中，原始数据包括目标产品的全生命周期的产品数据。例如，结合图3，获取单元701用于执行s301。
94.处理单元702，用于将原始数据输入到预先训练好的数据分类模型中，以得到原始数据的数据分类结果，其中，数据分类模型为用于对数据进行分类的神经网络模型。例如，结合图3，处理单元702用于执行s302。
95.显示单元703，用于根据数据分类结果，显示目标产品的分析结果。例如，结合图3，显示单元703用于执行s303。
96.可选地，处理单元702，还用于：
97.采集多个其他产品的分析结果以及每个其他产品的全生命周期的产品数据。例如，结合图4，处理单元702用于执行s401。
98.将每个其他产品的全生命周期的产品数据作为训练集。例如，结合图4，处理单元702用于执行s402。
99.将多个其他产品的分析结果作为验证集。例如，结合图4，处理单元702用于执行s403。
100.在训练集上对初始的双通道神经网络模型进行监督训练，直到双通道神经网络模型符合预设的收敛条件时，生成数据分类模型。例如，结合图4，处理单元702用于执行s404。
101.可选地，还包括：接收单元704；
102.接收单元704，用于接收账户发送的分析结果显示请求；分析结果显示请求包括账户标识。例如，结合图5，接收单元704用于执行s501。
103.处理单元702，用于根据账户标识，确定与账户标识对应的目标产品的分析结果的目标内容。例如，结合图5，处理单元702用于执行s502。
104.显示单元703，还用于响应于分析结果显示请求，显示目标内容。例如，结合图5，显示单元703用于执行s503。
105.可选地，还包括：生成单元705；
106.生成单元705，用于周期性的生成目标产品的质量分析报告。例如，结合图6，生成单元705用于执行s601。
107.本技术实施例还提供一种计算机可读存储介质，计算机可读存储介质包括计算机执行指令。当计算机执行指令在计算机上运行时，使得计算机执行如上述实施例提供的数
据可视化方法中，装置执行的各个步骤。
108.本技术实施例还提供一种计算机程序产品，该计算机程序产品可直接加载到存储器中，并含有软件代码，该计算机程序产品经由计算机载入并执行后能够实现上述实施例提供的数据可视化方法中，装置执行的各个步骤。
109.在上述实施例中，可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件程序实现时，可以全部或部分地以计算机程序产品的形式来实现。该计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行计算机执行指令时，全部或部分地产生按照本技术实施例的流程或功能。计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。计算机指令可以存储在计算机可读存储介质中，或者从一个计算机可读存储介质向另一个计算机可读存储介质传输，例如，计算机指令可以从一个网站站点、计算机、服务器或者数据中心通过有线(例如同轴电缆、光纤、数字用户线(digital subscriber line，dsl))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可以用介质集成的服务器、数据中心等数据存储设备。可用介质可以是磁性介质(例如，软盘、硬盘、磁带)，光介质(例如，dvd)、或者半导体介质(例如固态硬盘(solid state disk，ssd))等。
110.通过以上的实施方式的描述，所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，仅以上述各功能模块的划分进行举例说明，实际应用中，可以根据需要而将上述功能分配由不同的功能模块完成，即将装置的内部结构划分成不同的功能模块，以完成以上描述的全部或者部分功能。
111.在本发明所提供的几个实施例中，应该理解到，所揭露的装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述模块或单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式。例如多个单元或组件可以结合或者可以集成到另一个装置，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是一个物理单元或多个物理单元，即可以位于一个地方，或者也可以分布到多个不同地方。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
112.另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个可读取的存储介质中。基于这样的理解，本技术实施例的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该软件产品存储在一个存储介质中，包括若干指令用以使得一个设备(可以是单片机，芯片等)或处理器(processor)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：u盘、移动硬盘、rom、ram、磁碟或者光盘等各种可以存储程序代码的介质。
113.以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何
熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到的变化或替换，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应以权利要求的保护范围为准。