一种残膜回收机防缠绕挑膜装置的制 一种秧草收获机用电力驱动行走机构

舆情数据处理系统及方法、计算机存储介质、电子设备与流程

2022-03-13 21:17:29 来源:中国专利 TAG:


1.本公开涉及大数据技术领域,特别涉及一种舆情数据处理系统、舆情数据处理方法、计算机存储介质及电子设备。


背景技术:

2.新媒体时代媒介技术的不断发展和网络技术的不断创新推动了新媒体的发展,加速了网络舆情发展的繁荣。与传统媒体相比,新媒介影响力更大,凝聚力更强,传播更便捷,已成为不同利益群体表达诉求的重要平台与载体。在这个平台上,公众深度搜索欲望强烈,关注问题广泛,参与社会事件监督热情高,很多信息极易被无限放大引发突发公共事件。所以对企业来说,如何对舆情进行有效的监控和处理就显得尤为重要。
3.目前,相关舆情数据处理系统中一般只部署一分布式关联型数据库,数据的并发处理能力较弱,并且,无法为不同账户等级的用户展示不同敏感等级的数据。
4.鉴于此,本领域亟需开发一种新的舆情处理系统。
5.需要说明的是,上述背景技术部分公开的信息仅用于加强对本公开的背景的理解。


技术实现要素:

6.本公开的目的在于提供一种舆情数据处理系统、舆情数据处理方法、计算机存储介质及电子设备,进而至少在一定程度上避免了相关技术中并发处理能力较弱、无法为不同账户等级的用户展示不同敏感度等级的数据的缺陷。
7.本公开的其他特性和优点将通过下面的详细描述变得显然,或部分地通过本公开的实践而习得。
8.根据本公开的第一方面,提供一种舆情数据处理系统,包括:网络数据整合平台、大数据集群、业务数据整合平台、数据库服务器和数据展示平台;其中,网络数据整合平台,用于对采集到的网络舆情数据进行审计分析,以获得所述网络舆情数据的敏感度等级,将所述网络舆情数据及其敏感度等级发送至大数据集群;大数据集群,用于过滤所述网络舆情数据中的无效数据,并将过滤后的网络舆情数据发送至业务数据整合平台;业务数据整合平台,用于从所述过滤后的网络舆情数据中筛选企业舆情数据,并将所述企业舆情数据、获取到用户的账户等级与所述企业舆情数据的敏感度等级之间的关联关系存储至数据库服务器;数据展示平台,用于根据认证通过用户的账户等级请求所述数据库服务器以获得目标敏感度等级的企业舆情数据,并将所述目标敏感度等级的企业舆情数据展示给所述认证通过用户。
9.在本公开的示例性实施例中,所述网络数据整合平台还用于:对预先设置的数据资源库中的数据进行采集和/或调用网络爬虫对目标网站中的数据进行周期性采集;对采集的数据进行去重和归一化处理,得到所述网络舆情数据。
10.在本公开的示例性实施例中,所述网络数据整合平台还用于:调用语义识别算法
对所述网络舆情数据进行语义识别,得到语义识别结果;根据预先存储的敏感关键字确定所述网络舆情数据中的目标关键字;对所述语义识别结果和所述目标关键字进行汇总整合,得到所述网络舆情数据中包含的敏感数据;根据所述敏感数据的数目,确定所述网络舆情数据的敏感度等级。
11.在本公开的示例性实施例中,所述业务数据整合平台还用于:提供一审计操作界面;根据审计员在所述审计操作界面上输入的第一交互操作信息,确定用户的账户等级与所述企业舆情数据的敏感度等级之间的关联关系。
12.在本公开的示例性实施例中,所述数据展示平台还用于:提供一身份认证界面;获取待认证用户在所述身份认证界面中输入的身份信息;将所述身份信息发送至第三方认证平台,以使所述第三方认证平台对所述身份信息进行合法性认证;在接收到所述第三方认证平台返回的认证通过消息时,确定所述待认证用户为所述认证通过用户。
13.在本公开的示例性实施例中,所述数据展示平台还用于:提供一信息展示界面,并在所述信息展示界面中展示所述目标敏感度等级的企业舆情数据;获取所述认证通过用户在所述信息展示界面中输入的对所述目标敏感度等级的企业舆情数据的反馈意见;将所述反馈意见写入所述数据库服务器。
14.在本公开的示例性实施例中,所述业务数据整合平台还用于:当检测到所述反馈意见中包含指定关键字时,向所述审计员发送提示消息;提供一审计操作界面;根据所述审计员在所述审计操作界面上输入的第二交互操作信息,撤销对所述目标敏感度等级的企业舆情数据的展示。
15.根据本公开的第二方面,提供一种舆情数据处理方法,包括:通过网络数据整合平台对采集到的网络舆情数据进行审计分析,以获得所述网络舆情数据的敏感度等级,将所述网络舆情数据及其敏感度等级发送至大数据集群;通过大数据集群过滤所述网络舆情数据中的无效数据,并将过滤后的网络舆情数据发送至业务数据整合平台;通过业务数据整合平台从所述过滤后的网络舆情数据中筛选企业舆情数据,并将所述企业舆情数据、获取到用户的账户等级与所述企业舆情数据的敏感度等级之间的关联关系存储至数据库服务器;通过数据展示平台根据认证通过用户的账户等级请求所述数据库服务器以获得目标敏感度等级的企业舆情数据,并将所述目标敏感度等级的企业舆情数据展示给所述认证通过用户。
16.根据本公开的第三方面,提供一种计算机存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现上述第二方面所述的舆情数据处理方法。
17.根据本公开的第四方面,提供一种电子设备,包括:处理器;以及存储器,用于存储所述处理器的可执行指令;其中,所述处理器配置为经由执行所述可执行指令来执行上述第二方面所述的舆情数据处理方法。
18.由上述技术方案可知,本公开示例性实施例中的舆情数据处理系统、舆情数据处理方法、计算机存储介质及电子设备至少具备以下优点和积极效果:
19.在本公开的一些实施例所提供的技术方案中,一方面,网络数据整合平台对采集到的网络舆情数据进行审计分析,以获得网络舆情数据的敏感度等级,将网络舆情数据及其敏感度等级发送至大数据集群,以使大数据集群过滤其中的无效数据,并将过滤后的数据发送至业务数据整合平台,从而,不仅能够解决相关中人工审核数据所导致的效率较低
的问题,提高数据的审计效率,而且能够减小需要处理的数据量,避免无效数据对后续数据处理过程的影响,提高后续的数据处理效率。进一步的,业务数据整合平台从过滤后的网络舆情数据中筛选企业舆情数据,并将企业舆情数据、获取到用户的账户等级与企业舆情数据的敏感度等级之间的关联关系存储至数据库服务器,能够解决相关技术中仅部署一分布式大数据集群所导致的并发能力弱的技术问题,提高系统的并发处理能力。另一方面,数据展示平台根据认证通过用户的账户等级请求数据库服务器以获得目标敏感度等级的企业舆情数据,并将目标敏感度等级的企业舆情数据展示给认证通过用户,能够根据用户账户等级的不同为其展示不同敏感度等级的企业舆情数据,提供智能化的信息安全管控机制,使得展示数据更加贴近用户需求,提高用户的信息获取效率。
20.本公开应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本公开。
附图说明
21.此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本公开的实施例,并与说明书一起用于解释本公开的原理。显而易见地,下面描述中的附图仅仅是本公开的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
22.图1示出本公开一示例性实施例中舆情数据处理系统的结构示意图;
23.图2示出本公开一示例性实施例中舆情数据处理系统的子流程示意图;
24.图3示出本公开一示例性实施例中舆情数据处理系统的子流程示意图;
25.图4示出本公开一示例性实施例中舆情数据处理系统的子流程示意图;
26.图5示出本公开一示例性实施例中舆情数据处理系统的子流程示意图;
27.图6示出本公开一示例性实施例中舆情数据处理系统的整体交互流程图;
28.图7示出本公开示例性实施例中舆情数据处理方法的流程示意图;
29.图8示出本公开示例性实施例中计算机存储介质的结构示意图;
30.图9示出本公开示例性实施例中电子设备的结构示意图。
具体实施方式
31.现在将参考附图更全面地描述示例实施方式。然而,示例实施方式能够以多种形式实施,且不应被理解为限于在此阐述的范例;相反,提供这些实施方式使得本公开将更加全面和完整,并将示例实施方式的构思全面地传达给本领域的技术人员。所描述的特征、结构或特性可以以任何合适的方式结合在一个或更多实施方式中。在下面的描述中,提供许多具体细节从而给出对本公开的实施方式的充分理解。然而,本领域技术人员将意识到,可以实践本公开的技术方案而省略所述特定细节中的一个或更多,或者可以采用其它的方法、组元、装置、步骤等。在其它情况下,不详细示出或描述公知技术方案以避免喧宾夺主而使得本公开的各方面变得模糊。
32.本说明书中使用用语“一个”、“一”、“该”和“所述”用以表示存在一个或多个要素/组成部分/等;用语“包括”和“具有”用以表示开放式的包括在内的意思并且是指除了列出的要素/组成部分/等之外还可存在另外的要素/组成部分/等;用语“第一”和“第二”等仅作
为标记使用,不是对其对象的数量限制。
33.此外,附图仅为本公开的示意性图解,并非一定是按比例绘制。图中相同的附图标记表示相同或类似的部分,因而将省略对它们的重复描述。附图中所示的一些方框图是功能实体,不一定必须与物理或逻辑上独立的实体相对应。
34.目前,相关技术中一般只部署一分布式关联型数据库,数据的并发处理能力较弱,且相关数据均需要人工进行审计,数据处理的效率较差;另外,无法为不同账户等级的用户展示不同敏感度等级的数据,无法避免敏感信息流入信息展示平台。
35.在本公开的实施例中,首先提供了一种舆情数据处理系统,至少在一定程度上克服相关技术中并发能力弱、无法为不同账户等级的用户展示不同敏感度等级的数据的缺陷。
36.图1示出本公开示例性实施例中舆情数据处理系统的结构示意图;该舆情数据处理系统的执行主体可以是对舆情数据进行处理的服务器。
37.如图1所示,根据本公开的一个实施例的舆情数据处理系统100可以包括网络数据整合平台101、大数据集群102、业务数据整合平台103、数据库服务器104和数据展示平台105。其中:
38.网络数据整合平台、大数据集群、业务数据整合平台、数据库服务器和数据展示平台;其中,
39.网络数据整合平台,用于对采集到的网络舆情数据进行审计分析,以获得网络舆情数据的敏感度等级,将网络舆情数据及其敏感度等级发送至大数据集群;
40.大数据集群,用于过滤网络舆情数据中的无效数据,并将过滤后的网络舆情数据发送至业务数据整合平台;
41.业务数据整合平台,用于从过滤后的网络舆情数据中筛选企业舆情数据,并将企业舆情数据、获取到用户的账户等级与企业舆情数据的敏感度等级之间的关联关系存储至数据库服务器;
42.数据展示平台,用于根据认证通过用户的账户等级请求数据库服务器以获得目标敏感度等级的企业舆情数据,并将目标敏感度等级的企业舆情数据展示给认证通过用户。
43.在图1所示实施例所提供的技术方案中,一方面,网络数据整合平台对采集到的网络舆情数据进行审计分析,以获得网络舆情数据的敏感度等级,将网络舆情数据及其敏感度等级发送至大数据集群,以使大数据集群过滤其中的无效数据,并将过滤后的数据发送至业务数据整合平台,从而,不仅能够解决相关中人工审核数据所导致的效率较低的问题,提高数据的审计效率,而且能够减小需要处理的数据量,避免无效数据对后续数据处理过程的影响,提高后续的数据处理效率。进一步的,业务数据整合平台从过滤后的网络舆情数据中筛选企业舆情数据,并将企业舆情数据、获取到用户的账户等级与企业舆情数据的敏感度等级之间的关联关系存储至数据库服务器,能够解决相关技术中仅部署一分布式大数据集群所导致的并发能力弱的技术问题,提高系统的并发处理能力。另一方面,数据展示平台根据认证通过用户的账户等级请求数据库服务器以获得目标敏感度等级的企业舆情数据,并将目标敏感度等级的企业舆情数据展示给认证通过用户,能够根据用户账户等级的不同为其展示不同敏感度等级的企业舆情数据,提供智能化的信息安全管控机制,使得展示数据更加贴近用户需求,提高用户的信息获取效率。
44.以下对图1中的各个部分的具体实现过程进行详细阐述:
45.网络数据整合平台101,用于对采集到的网络舆情数据进行审计分析,以获得网络舆情数据的敏感度等级,将网络舆情数据及其敏感度等级发送至大数据集群。
46.示例性的,可以参考图2,图2本公开一示例性实施例中舆情数据处理系统的子流程示意图,具体示出网络数据整合平台采集网络舆情数据的子流程示意图,包含步骤s201-步骤s202,以下结合图2对具体的实施方式进行解释。
47.在步骤s201中,对预先设置的数据资源库中的数据进行采集和/或调用网络爬虫对目标网站中的数据进行周期性采集。
48.示例性的,可以预先设置一数据资源库,该数据资源库中的数据可以是通过舆情专员采集到的舆情数据、相关数据提供厂商提供的舆情数据等,进而,网络数据整合平台可以采集该数据资源库中的数据,鉴于该数据资源库中的数据一般具有不易变换的固定数据格式,并且,具有稳定的数据来源,从而,能够避免大量的开发与运维成本。
49.示例性的,还可以调用网络爬虫对目标网站中的数据进行周期性采集,该目标网站可以是国内外的相关搜索引擎(百度、搜狗、360)、微博、微信公众号、论坛、贴吧、博客等网站平台,可以根据实际情况自行设定,属于本公开的保护范围。示例性的,可以设定一定时程序(例如:定时时长为10分钟),进而,每间隔10分钟采集一次目标网站上的数据,并将采集到的数据转换为统一的格式。从而,能够采集到海量的数据,并且,无需采购经费,降低数据采集成本。
50.在步骤s202中,对采集的数据进行去重和归一化处理,得到网络舆情数据。
51.在采集到数据之后,可以对采集到的数据进行去重,以去除其中的冗余数据,避免大量冗余数据进入后续的处理流程中,保证数据的精简性,节省处理器的处理线程,保证数据处理效率。
52.在去重之后,可以对数据进行归一化处理,从而能够得到规范化的网络舆情数据,方便后续对数据进行处理。采集到的网络舆情数据可以是海量的、包含多个行业的舆情数据,示例性的,可以包含计算机行业、保险行业、汽车行业、食品安全行业、电子电路行业等的舆情数据。
53.示例性的,在得到网络舆情数据之后可以以json格式(java script object notation,js对象简谱,是一种轻量级的数据交换格式)进行存储,json格式的数据不但能够提高可读性,而且可以减少复杂性,便于数据交换和数据处理。
54.在采集到网络舆情数据之后,网络数据整合平台还可以调用相关自动化审计模块对数据进行审计分析,以获得网络舆情数据的敏感度等级。此过程可以涉及模式匹配算法、文本语义分析、热点话题发现、不良图像内容识别等关键技术,以加强对数据的安全管理,进一步保证数据的合法性、健康性和安全性。示例性的,可以参考图3,图3本公开一示例性实施例中舆情数据处理系统的子流程示意图,具体示出网络数据整合平台对采集到的网络舆情数据进行审计分析,以获得网络舆情数据的敏感度等级的子流程示意图,包含步骤s301-s304,以下结合图3对具体的实施方式进行解释。
55.在步骤s301中,调用语义识别算法对网络舆情数据进行语义识别,得到语义识别结果。
56.示例性的,网络数据整合平台可以调用语义识别算法对网络舆情数据进行语义识
别,得到语义识别结果。示例性的,还可以训练深度卷积神经网络,得到一语义识别模型,并将网络舆情数据输入该语义识别模型中,得到其语义识别结果。
57.在步骤s302中,根据预先存储的敏感关键字确定网络舆情数据中的目标关键字。
58.示例性的,大数据分析师(是指基于各种分析手段对大数据进行科学分析、挖掘、展现并用于决策支持的从业人员)还可以预先存储一些敏感关键字,示例性的,敏感关键字可以是暴力、损坏企业形象、负面语义词汇等关键字,进而,可以将网络舆情数据与这些敏感关键字进行对照匹配,以确定出目标关键字。
59.在步骤s303中,对语义识别结果和目标关键字进行汇总整合,得到网络舆情数据中包含的敏感数据。
60.在得到语义识别结果,以及,识别出上述目标关键字之后,可以对语义识别结果和目标关键字进行汇总整合,得到网络舆情数据中包含的敏感数据,并对敏感数据进行标记。
61.在步骤s304中,根据敏感数据的数目,确定网络舆情数据的敏感度等级。
62.示例性的,当网络舆情数据a中包含的敏感数据的数目为8个时,则可以将网络舆情数据a的敏感度等级确定为i级(高级别);当网络舆情数据b中包含的敏感数据的数目为4个时,则可以将网络舆情数据b的敏感度等级确定为ii级(中等级别);当网络舆情数据c中包含的敏感数据的数目为0个时,则可以将网络舆情数据c的敏感度等级确定为iii级(低级别)。
63.进而,网络数据整合平台可以将网络舆情数据及其敏感度等级发送至大数据集群。大数据集群是允许开发者们或是将写好的程序放在“云”里运行,或是使用“云”里提供的服务,或二者皆是。大数据集群是一个集数据接入、数据处理、数据存储、查询检索、分析挖掘等、应用接口等为一体的平台。
64.继续参考图1,大数据集群102,用于过滤网络舆情数据中的无效数据,并将过滤后的网络舆情数据发送至业务数据整合平台。
65.示例性的,大数据集群可以过滤网络舆情数据中包含的无效数据,并将过滤处理之后的网络舆情数据发送至业务数据整合平台。需要说明的是,本公开中的大数据集群可以是分布型关联式数据库,例如:greenplum,从而,一方面,能够提供较大的数据存储空间,达到数据备份功能,避免应用数据库数据丢失所造成的损失,另一方面,还能够提高对海量数据的运算能力和查询速度。
66.示例性的,无效数据可以是一些小道消息、传闻、谣言等无法确定数据真实性的舆情消息,示例性的,可以预先设置一些无效关键字(例如:一些小道消息的标题、传闻的标题、谣言的标题等关键字),进而,可以将网络舆情数据与这些无效关键字进行对照匹配,以确定出其中的无效数据,进而,大数据集群可以对确定出来的无效数据进行过滤处理,并将过滤处理后的网络舆情数据发送至业务数据整合平台。
67.需要说明的是,大数据集群还可以对网络舆情数据进行分析处理,以对其进行分类汇总,举例而言,可以将其分为突发自然灾害事件、生产安全事故、群体性事件、公共卫生事件、企业形象、司法事件、经济民生事件、境外突发事件等类别,从而,在后续的处理过程中,可以对不同类别的网络舆情数据进行分类处理,从而提高数据有序性以及数据处理的针对性。继续参考图1,业务数据整合平台103,用于从过滤后的网络舆情数据中筛选企业舆情数据,并将企业舆情数据、获取到用户的账户等级与企业舆情数据的敏感度等级之间的
关联关系存储至数据库服务器104。
68.进而,业务数据整合平台103可以从过滤后的网络舆情数据中筛选出企业舆情数据,示例性的,可以是目标企业的企业舆情数据,也可以是与目标企业所关联行业内所有企业的舆情数据,从而,便于该目标企业了解行业发展动向,提高在同行中的竞争力。
69.业务数据整合平台还可以提供一审计操作界面,从而,审计员可以登陆系统并输入第一交互操作信息(例如:手动将不同敏感度等级的企业舆情数据与对应的账户等级绑定),以实现将不同敏感度等级的企业舆情数据与不同的账户等级相互关联起来。示例性的,参照上述步骤s304的相关解释,可以将敏感度等级为i级的企业舆情数据与账户等级(高阶用户,例如:企业内部的高层管理者)关联起来,即为高阶用户展示上述敏感度等级为i级的企业舆情数据;可以将敏感度等级为ii级的企业舆情数据与账户等级(中高阶用户,例如:企业内部的中层管理者)关联起来,即为中高阶用户展示上述敏感度等级为ii级的企业舆情数据;可以将敏感度等级为iii级的企业舆情数据与账户等级(低阶用户,例如:企业外部的社会人员、企业内部的基层人员)关联起来,即为低阶用户展示上述敏感度等级为iii级的企业舆情数据。
70.示例性的,还可以将敏感度等级为i、ii、iii级的企业舆情数据与账户等级(高阶用户)关联起来,即为高阶用户展示上述敏感度等级为i、ii、iii级的企业舆情数据;可以将敏感度等级为ii、iii级的企业舆情数据与账户等级(中高阶用户)关联起来,即为中高阶用户展示上述敏感度等级为ii、iii级的企业舆情数据;可以将敏感度等级为iii级的企业舆情数据与账户等级(低阶用户)关联起来,即为低阶用户展示上述敏感度等级为iii级的企业舆情数据。
71.示例性的,还可以通过上述审计操作界面设定大数据分析师的权限为:调整系统的处理参数,修改系统相关的算法程序。
72.设定主审计员的账户权限为:审计系统内所有的数据、具有设置所有数据的展示、查询、撤回展示、撤回查询等权限。群审计员的账户权限为:审计某一类别的数据,具有设置该类别数据的展示、查询、撤回展示、撤回查询等权限。
73.设定高阶用户的账户权限为:提供“敏感度等级为i、ii、iii级的企业舆情数据”的分类展示,具备“敏感度等级为i、ii、iii级的企业舆情数据”的阅读和查询权限。设定中高阶用户的账户权限为:具备“敏感度等级为ii、iii级的企业舆情数据”的分类展示,具备“敏感度等级为ii、iii级的企业舆情数据”的阅读和查询权限。设定低阶用户的账户权限为:具备“敏感度等级为iii级的企业舆情数据”的阅读和查询权限。
74.其中,不同的账户等级可以通过用户名来进行区分,举例而言,可以设置高阶用户的用户名以固定字符“superior-user”开头、中高阶用户的用户名以固定字符“junior-user”开头、低阶用户的用户名以固定字符“user”开头。需要说明的是,以上字符均可以根据实际情况自行设定,属于本公开的保护范围。
75.示例性的,审计员还可以评估上述企业舆情数据对应的风险值,从而,能够根据该风险值预先制定相关舆情防控措施,及时制止相关舆情危机,避免危机造成的企业损失。
76.示例性的,业务数据整合平台还可以对企业舆情数据进行分析处理,以对其进行分类汇总,举例而言,可以将其分为正面舆情数据(即对企业形象宣传有利的数据)、中立舆情数据(即对企业形象没有利害影响的数据)、负面舆情数据(即对企业形象宣传不利的数
据),或者,将其分为与核心技术相关的企业舆情数据、与企业形象相关的企业舆情数据等类别,从而,在后续的处理过程中,可以对不同类别的企业舆情数据进行分类处理,从而提高数据有序性以及数据展示的针对性。
77.在获取到用户的账户等级与企业舆情数据的敏感度等级之间的关联关系之后,业务数据整合平台可以将企业舆情数据、获取到的用户的账户等级与企业舆情数据的敏感度等级之间的关联关系存储至单机部署的数据库服务器中,以进一步提高数据的可靠性。需要说明的是,本公开中的数据库服务器可以是postgresql(一种开源关系型数据库,特点是功能强大,支持面向对象等很多高级特性),从而,能够降低设备成本,保证较强的并发处理能力。
78.同时,鉴于数据库服务器为单机部署的形式,数据展示平台可以直接向数据库服务器请求数据,从而能够解决相关技术中仅部署一分布式大数据集群所导致的并发能力弱的技术问题,提高系统的并发处理能力。
79.继续参考图1,数据展示平台105,用于根据认证通过用户的账户等级请求数据库服务器以获得目标敏感度等级的企业舆情数据,并将目标敏感度等级的企业舆情数据展示给认证通过用户。
80.本公开中的数据展示平台可以是inews新闻平台,具体的,可以参考图4,图4本公开一示例性实施例中舆情数据处理系统的子流程示意图,具体示出数据展示平台提供身份认证界面以确定认证通过用户的子流程示意图,包含步骤s401-步骤s404,以下结合图4对具体的实施方式进行解释。
81.在步骤s401中,提供一身份认证界面。
82.示例性的,数据展示平台可以提供一身份认证界面,示例性的,该身份认证界面可以显示一用户名及其登陆密码,示例性的,还可以包括图片验证码、数字验证码等,可以根据实际情况自行设定,属于本公开的保护范围。
83.在步骤s402中,获取待认证用户在身份认证界面中输入的身份信息。
84.进而,待认证用户可以在上述身份认证界面中输入其身份信息。
85.在步骤s403中,将身份信息发送至第三方认证平台,以使第三方认证平台对身份信息进行合法性认证。
86.数据展示平台可以将上述身份信息发送至第三方认证平台,以使第三方认证平台对上述身份信息进行合法性认证。示例性的,第三方认证平台可以是指:除了环球商讯网之外的第三方认证机构。第三方认证是为了验证商讯通申请者的真实合法身份,最大程度上的杜绝虚假信息,保证商讯通的利益。具体的,第三方认证平台可以对身份信息进行ldap认证(lightweight directory access protocol,轻量目录访问协议,简称:ldap),ldap认证是通过wss3.0加上轻量目录ldap协议搭建的一种认证方式,即把身份信息放在ldap服务器上,通过ldap服务器上的数据对待认证用户进行认证处理,在认证通过之后,第三方认证平台可以向数据展示平台发送一认证通过消息。
87.在步骤s404中,在接收到第三方认证平台返回的认证通过消息时,确定待认证用户为认证通过用户。
88.在接收到第三方认证平台返回的认证通过消息时,数据展示平台可以确定待认证用户为认证通过用户。
89.进而,数据展示平台可以根据认证通过用户的账户等级请求数据库服务器,并将请求到的企业舆情数据展示给认证通过用户。示例性的,可以根据认证通过用户的用户名确定其对应的账户权限,举例而言,当认证通过用户的用户名为以固定字符“superior-user”开头时,则可以确定该用户的账户等级为高阶用户,从而,请求到的目标敏感度等级的企业舆情数据可以是:敏感度等级为i、ii、iii级的企业舆情数据。从而,能够为不同账户等级的用户展示不同敏感度级别的企业舆情数据,使得展示数据更加贴近用户需求,提高用户的信息获取效率。
90.示例性的,可以参考图5,图5本公开一示例性实施例中舆情数据处理系统的子流程示意图,具体示出数据展示平台自动化聆听用户反馈意见的流程示意图,包含步骤s501-s503,以下结合图5对具体的实施方式进行解释。
91.在步骤s501中,提供一信息展示界面,并在信息展示界面中展示目标敏感度等级的企业舆情数据。
92.示例性的,数据展示平台可以提供一信息展示界面,并在信息展示界面中展示上述(根据认证通过用户的账户等级从数据库服务器中)请求到的目标敏感度等级的企业舆情数据。
93.在步骤s502中,获取所述认证通过用户在所述信息展示界面中输入的对所述目标敏感度等级的企业舆情数据的反馈意见。
94.进而,认证通过用户可以浏览上述目标敏感度等级的企业舆情数据,在浏览完成之后,可以在上述信息展示界面中输入对每条企业舆情数据的反馈意见,例如:x数据的展示有助于提升企业形象,y数据的展示可能有损企业形象等。
95.在步骤s503中,将反馈意见写入数据库服务器。
96.进而,数据展示平台可以将上述反馈意见写入数据库服务器。
97.从而,当检测到反馈意见中包含指定关键字时,可以向审计员发送提示消息(例如:在相关审计操作界面显示一消息弹窗等方式),从而,在审计员接收到上述消息之后,可以通过审计操作界面输入第二交互操作信息(例如:手动删除数据等),以撤销对相关企业舆情数据的展示。示例性的,该指定关键字可以是“有损企业形象、泄露企业核心技术机密”等可能对企业造成损失的关键字。举例而言,当反馈意见为“y数据的展示可能有损企业形象”时,则可以撤销数据展示平台对y数据的展示,即数据展示平台无法请求到该y数据。
98.示例性的,可以参考图6,图6示出本公开一示例性实施例中舆情数据处理系统的整体交互流程图,以下结合图6对具体的实施方式进行解释。
99.网络数据整合平台101,用于对预先设置的数据资源库中的数据进行采集和/或调用网络爬虫对目标网站中的数据进行周期性采集,以获取到网络舆情数据;根据语义识别算法、预先存储的敏感关键字对采集到的网络舆情数据进行审计分析(自动化审计作业),以获得网络舆情数据的敏感度等级,将网络舆情数据及其敏感度等级发送至大数据集群;
100.大数据集群102,用于过滤无效数据,并将过滤后的网络舆情数据发送至业务数据整合平台;
101.业务数据整合平台103,用于从过滤后的网络舆情数据中筛选企业舆情数据;提供一审计操作界面,将企业舆情数据、审计员设置的用户的账户等级与企业舆情数据的敏感度等级之间的关联关系存储至数据库服务器104;以及,提供一信息展示界面,以供用户阅
读、查询数据。
102.数据展示平台105,用于提供一身份认证界面,并将待认证用户的身份信息发送至第三方认证平台106,通过第三方认证平台的ldap服务对用户身份进行合法性认证;根据认证通过用户的账户等级请求数据库服务器,以获得目标敏感度等级的企业舆情数据,并将目标敏感度等级的企业舆情数据展示给认证通过用户;
103.以及,提供一信息展示界面,获取认证通过用户的反馈意见,将反馈意见写入数据库服务器104,当目标舆情数据对应的反馈意见中包含指定关键字时,撤销数据展示平台对目标舆情数据的展示。
104.本公开还提供了一种舆情数据处理方法,示例性的,可以参考图7,图7示出本公开一示例性实施例中舆情数据处理方法的流程示意图,该舆情数据处理方法的执行主体可以是对舆情数据进行处理的服务器。
105.参考图7,根据本公开的一个实施例的舆情数据处理方法包括以下步骤:
106.步骤s710,通过网络数据整合平台对采集到的网络舆情数据进行审计分析,以获得网络舆情数据的敏感度等级,将网络舆情数据及其敏感度等级发送至大数据集群;
107.步骤s720,通过大数据集群过滤网络舆情数据中的无效数据,并将过滤后的网络舆情数据发送至业务数据整合平台;
108.步骤s730,通过业务数据整合平台从过滤后的网络舆情数据中筛选企业舆情数据,并将企业舆情数据、获取到用户的账户等级与企业舆情数据的敏感度等级之间的关联关系存储至数据库服务器;
109.步骤s740,通过数据展示平台根据认证通过用户的账户等级请求数据库服务器以获得目标敏感度等级的企业舆情数据,并将目标敏感度等级的企业舆情数据展示给认证通过用户。
110.在本公开的示例性实施例中,通过网络数据整合平台对预先设置的数据资源库中的数据进行采集和/或调用网络爬虫对目标网站中的数据进行周期性采集;对采集的数据进行去重和归一化处理,得到网络舆情数据。
111.在本公开的示例性实施例中,通过网络数据整合平台调用语义识别算法对网络舆情数据进行语义识别,得到语义识别结果;根据预先存储的敏感关键字确定网络舆情数据中的目标关键字;对语义识别结果和目标关键字进行汇总整合,得到网络舆情数据中包含的敏感数据;根据敏感数据的数目,确定网络舆情数据的敏感度等级。
112.在本公开的示例性实施例中,通过业务数据整合平台提供一审计操作界面;根据审计员在审计操作界面上输入的第一交互操作信息,确定用户的账户等级与企业舆情数据的敏感度等级之间的关联关系。
113.在本公开的示例性实施例中,通过数据展示平台提供一身份认证界面;获取待认证用户在身份认证界面中输入的身份信息;将身份信息发送至第三方认证平台,以使第三方认证平台对身份信息进行合法性认证;在接收到第三方认证平台返回的认证通过消息时,确定待认证用户为认证通过用户。
114.在本公开的示例性实施例中,通过数据展示平台提供一信息展示界面,并在信息展示界面中展示目标敏感度等级的企业舆情数据;获取认证通过用户在信息展示界面中输入的对目标敏感度等级的企业舆情数据的反馈意见;将反馈意见写入数据库服务器。
115.在本公开的示例性实施例中,通过业务数据整合平台当检测到反馈意见中包含指定关键字时,向审计员发送提示消息;提供一审计操作界面;根据审计员在审计操作界面上输入的第二交互操作信息,撤销对目标敏感度等级的企业舆情数据的展示。
116.上述舆情数据处理方法中各模块的具体细节已经在对应的舆情数据处理系统中进行了详细的描述,因此此处不再赘述。
117.基于上述技术方案,一方面,本公开能够解决相关中人工审核数据所导致的效率较低的问题,提高数据的审计效率,而且能够减小需要处理的数据量,避免无效数据对后续数据处理过程的影响,提高后续的数据处理效率。进一步的,能够解决相关技术中仅部署一分布式大数据集群所导致的并发能力弱的技术问题,提高系统的并发处理能力。另一方面,能够根据用户账户等级的不同为其展示不同敏感度等级的企业舆情数据,提供智能化的信息安全管控机制,使得展示数据更加贴近用户需求,提高用户的信息获取效率。
118.应当注意,尽管在上文详细描述中提及了用于动作执行的设备的若干模块或者单元,但是这种划分并非强制性的。实际上,根据本公开的实施方式,上文描述的两个或更多模块或者单元的特征和功能可以在一个模块或者单元中具体化。反之,上文描述的一个模块或者单元的特征和功能可以进一步划分为由多个模块或者单元来具体化。
119.此外,尽管在附图中以特定顺序描述了本公开中方法的各个步骤,但是,这并非要求或者暗示必须按照该特定顺序来执行这些步骤,或是必须执行全部所示的步骤才能实现期望的结果。附加的或备选的,可以省略某些步骤,将多个步骤合并为一个步骤执行,以及/或者将一个步骤分解为多个步骤执行等。
120.通过以上的实施方式的描述,本领域的技术人员易于理解,这里描述的示例实施方式可以通过软件实现,也可以通过软件结合必要的硬件的方式来实现。因此,根据本公开实施方式的技术方案可以以软件产品的形式体现出来,该软件产品可以存储在一个非易失性存储介质(可以是cd-rom,u盘,移动硬盘等)中或网络上,包括若干指令以使得一台计算设备(可以是个人计算机、服务器、移动终端、或者网络设备等)执行根据本公开实施方式的方法。
121.在本公开示例性实施方式中,还提供了一种能够实现上述方法的计算机存储介质。其上存储有能够实现本说明书上述方法的程序产品。在一些可能的实施例中,本公开的各个方面还可以实现为一种程序产品的形式,其包括程序代码,当所述程序产品在终端设备上运行时,所述程序代码用于使所述终端设备执行本说明书上述“示例性方法”部分中描述的根据本公开各种示例性实施方式的步骤。
122.参考图8所示,描述了根据本公开的实施方式的用于实现上述方法的程序产品800,其可以采用便携式紧凑盘只读存储器(cd-rom)并包括程序代码,并可以在终端设备,例如个人电脑上运行。然而,本公开的程序产品不限于此,在本文件中,可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。
123.所述程序产品可以采用一个或多个可读介质的任意组合。可读介质可以是可读信号介质或者可读存储介质。可读存储介质例如可以为但不限于电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。可读存储介质的更具体的例子(非穷举的列表)包括:具有一个或多个导线的电连接、便携式盘、硬盘、随机存取存储器(ram)、只读
存储器(rom)、可擦式可编程只读存储器(eprom或闪存)、光纤、便携式紧凑盘只读存储器(cd-rom)、光存储器件、磁存储器件、或者上述的任意合适的组合。
124.计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了可读程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。可读信号介质还可以是可读存储介质以外的任何可读介质,该可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。
125.可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于无线、有线、光缆、rf等等,或者上述的任意合适的组合。
126.可以以一种或多种程序设计语言的任意组合来编写用于执行本公开操作的程序代码,所述程序设计语言包括面向对象的程序设计语言—诸如java、c 等,还包括常规的过程式程序设计语言—诸如“c”语言或类似的程序设计语言。程序代码可以完全地在用户计算设备上执行、部分地在用户设备上执行、作为一个独立的软件包执行、部分在用户计算设备上部分在远程计算设备上执行、或者完全在远程计算设备或服务器上执行。在涉及远程计算设备的情形中,远程计算设备可以通过任意种类的网络,包括局域网(lan)或广域网(wan),连接到用户计算设备,或者,可以连接到外部计算设备(例如利用因特网服务提供商来通过因特网连接)。
127.此外,在本公开的示例性实施例中,还提供了一种能够实现上述方法的电子设备。
128.所属技术领域的技术人员能够理解,本公开的各个方面可以实现为系统、方法或程序产品。因此,本公开的各个方面可以具体实现为以下形式,即:完全的硬件实施方式、完全的软件实施方式(包括固件、微代码等),或硬件和软件方面结合的实施方式,这里可以统称为“电路”、“模块”或“系统”。
129.下面参照图9来描述根据本公开的这种实施方式的电子设备900。图9显示的电子设备900仅仅是一个示例,不应对本公开实施例的功能和使用范围带来任何限制。
130.如图9所示,电子设备900以通用计算设备的形式表现。电子设备900的组件可以包括但不限于:上述至少一个处理单元910、上述至少一个存储单元920、连接不同系统组件(包括存储单元920和处理单元910)的总线930以及显示单元940。
131.其中,所述存储单元存储有程序代码,所述程序代码可以被所述处理单元910执行,使得所述处理单元910执行本说明书上述“示例性方法”部分中描述的根据本公开各种示例性实施方式的步骤。例如,所述处理单元910可以执行如图7中所示的:步骤s710,通过网络数据整合平台对采集到的网络舆情数据进行审计分析,以获得网络舆情数据的敏感度等级,将网络舆情数据及其敏感度等级发送至大数据集群;步骤s720,通过大数据集群过滤网络舆情数据中的无效数据,并将过滤后的网络舆情数据发送至业务数据整合平台;步骤s730,通过业务数据整合平台从过滤后的网络舆情数据中筛选企业舆情数据,并将企业舆情数据、获取到用户的账户等级与企业舆情数据的敏感度等级之间的关联关系存储至数据库服务器;步骤s740,通过数据展示平台根据认证通过用户的账户等级请求数据库服务器以获得目标敏感度等级的企业舆情数据,并将目标敏感度等级的企业舆情数据展示给认证通过用户。
132.存储单元920可以包括易失性存储单元形式的可读介质,例如随机存取存储单元
(ram)9201和/或高速缓存存储单元9202,还可以进一步包括只读存储单元(rom)9203。
133.存储单元920还可以包括具有一组(至少一个)程序模块9205的程序/实用工具9204,这样的程序模块9205包括但不限于:操作系统、一个或者多个应用程序、其它程序模块以及程序数据,这些示例中的每一个或某种组合中可能包括网络环境的实现。
134.总线930可以为表示几类总线结构中的一种或多种,包括存储单元总线或者存储单元控制器、外围总线、图形加速端口、处理单元或者使用多种总线结构中的任意总线结构的局域总线。
135.电子设备900也可以与一个或多个外部设备1000(例如键盘、指向设备、蓝牙设备等)通信,还可与一个或者多个使得用户能与该电子设备900交互的设备通信,和/或与使得该电子设备900能与一个或多个其它计算设备进行通信的任何设备(例如路由器、调制解调器等等)通信。这种通信可以通过输入/输出(i/o)接口950进行。并且,电子设备900还可以通过网络适配器960与一个或者多个网络(例如局域网(lan),广域网(wan)和/或公共网络,例如因特网)通信。如图所示,网络适配器960通过总线930与电子设备900的其它模块通信。应当明白,尽管图中未示出,可以结合电子设备900使用其它硬件和/或软件模块,包括但不限于:微代码、设备驱动器、冗余处理单元、外部磁盘驱动阵列、raid系统、磁带驱动器以及数据备份存储系统等。
136.通过以上的实施方式的描述,本领域的技术人员易于理解,这里描述的示例实施方式可以通过软件实现,也可以通过软件结合必要的硬件的方式来实现。因此,根据本公开实施方式的技术方案可以以软件产品的形式体现出来,该软件产品可以存储在一个非易失性存储介质(可以是cd-rom,u盘,移动硬盘等)中或网络上,包括若干指令以使得一台计算设备(可以是个人计算机、服务器、终端装置、或者网络设备等)执行根据本公开实施方式的方法。
137.此外,上述附图仅是根据本公开示例性实施例的方法所包括的处理的示意性说明,而不是限制目的。易于理解,上述附图所示的处理并不表明或限制这些处理的时间顺序。另外,也易于理解,这些处理可以是例如在多个模块中同步或异步执行的。
138.本领域技术人员在考虑说明书及实践这里公开的发明后,将容易想到本公开的其他实施例。本技术旨在涵盖本公开的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本公开的真正范围和精神由权利要求指出。
再多了解一些

本文用于企业家、创业者技术爱好者查询,结果仅供参考。

发表评论 共有条评论
用户名: 密码:
验证码: 匿名发表

相关文献