一种竞争情报增量监控方法、装置、设备和介质与流程
本发明涉及竞争情报监控与分析,特别涉及一种竞争情报增量监控方法、装置、设备和介质。
背景技术:
1、随着互联网和社交媒体的快速发展,企业面临的市场竞争日益激烈,对竞争对手的动态监控已成为企业获取竞争优势的重要手段。竞争情报监控系统通常需要对目标网站、社交媒体关键词、搜索结果及第三方运营指标进行持续采集和分析,以及时发现竞品的变化动态。
2、目前,现有技术中已存在多种竞争情报监控方案。常见的竞争情报监控方案包括以下几种:
3、1、网站变更监控方案:现有网站变更监控工具通常采用定时任务对目标网站进行网页抓取,获取网页的html代码、正文文本或网页截图,并将当前抓取结果与上一次抓取结果进行差异比较,从而发现网站的变更内容。
4、2、社交媒体监听方案:现有社交媒体监听工具通过定时检索关键词、品牌词或账号动态,对社交媒体平台上提及目标品牌的帖子进行采集,并对新增帖子进行告警或摘要。
5、3、数据指标监测方案:现有seo(搜索引擎优化)、流量或品牌监测工具定期调用第三方数据接口,获取并保存本次返回的各类运营指标数据,以监控目标对象在搜索排名、网站流量、用户访问等方面的变化趋势。
6、4、报告生成与摘要方案:现有报告工具或人工智能模型对单次采集结果、某一批社交媒体帖子或某一段网页差异内容进行摘要和汇总,生成一次性分析报告供用户查阅。
7、5、综合展示方案:部分企业情报系统将网站变化信息、品牌关键词监测结果、社交媒体讨论数据、资产快照和站点情报等多类数据在同一个展示界面中并列展示,方便用户从多个维度了解竞品动态。
8、然而,上述现有方案在持续竞品监控场景下仍存在以下技术缺陷:
9、第一,仅能进行相邻两次采集结果的机械比较。现有网页差异比较(diff)技术通常仅比较"本次采集内容"和"上次采集内容",无法结合更长周期内已发生且已报告过的变化进行综合判断。当某一变化在多个采集周期内持续存在时,现有方案因缺乏跨周期变化的记忆能力,难以准确识别某一变化是否属于真正新增的情报,导致监控结果的准确性不足。
10、第二,同一变化容易跨周期重复告警。目标网站的文案调整、页面结构变化或社交媒体上的用户讨论,可能在多个采集周期内持续存在。现有方案缺少对已报告内容的标记和处理机制,对于已被分析过的历史变化内容缺乏有效的追溯和识别手段,容易在后续采集周期中反复对同一变化生成相似的分析报告,造成告警信息冗余,增加用户的信息筛选负担。
11、第三,单条分析报告与聚合摘要之间缺少可追溯关系。 现有摘要工具通常仅输出聚合后的分析结论,并未保存该结论具体引用了哪些单条变化报告、哪一次采集快照或哪一类数据来源。当用户需要对摘要结论进行核验时,无法从摘要追溯到原始证据,导致分析结果的可信度和可审计性不足。
12、第四,多源数据缺少统一的归因输入结构。网站差异分析结果、品牌关键词监测结果、社交媒体讨论内容、资产快照和站点情报等多种数据类型的数据结构各不相同,现有方案通常仅在展示层进行拼合展示,缺乏将这些异构数据统一转换为可供后续分析流程(如去重处理、智能摘要、引用建链等)直接使用的标准化输入结构的机制,导致多源数据的归因分析效率低下。
13、第五,低价值数据缺少闭环处理状态。在实际监控过程中,采集到的数据中往往存在大量未形成有价值分析结论的变化或讨论。当某一批数据未产生有效洞察时,现有方案通常不记录"已分析但无有效结论"的状态,导致后续监控任务仍会重复处理同一批低价值数据,造成计算资源的浪费。
14、第六,长期监控上下文利用不足。现有方案多以单次采集任务为单位生成告警或摘要,缺少将历史快照、近期已生成的原子报告和当前采集结果共同输入分析过程的机制。这种缺乏上下文记忆的处理方式,使得每次分析任务孤立进行,无法充分利用长期监控中积累的历史信息来辅助当前判断,影响持续监控任务的稳定性和分析准确性。
15、综上,现有竞争情报监控技术方案在跨周期变化识别、重复告警抑制、多源数据归因、证据链追溯和分析状态闭环等方面均存在明显不足,亟需一种能够解决上述问题的技术方案。
技术实现思路
1、本发明要解决的技术问题,在于提供一种竞争情报增量监控方法、装置、设备和介质,通过历史基线与近期原子报告上下文结合,实现跨周期重复识别,通过统一归因输入结构和去重筛选减少重复告警并形成可追溯证据链,提升了长期监控的稳定性和情报质量。
2、第一方面,本发明提供了一种竞争情报增量监控方法,包括:
3、获取监控对象的历史基线内容,所述历史基线内容为最近一次采集并保存的资产快照;
4、获取当前周期所述监控对象的最新内容;
5、获取所述监控对象在预设时间窗口内已生成的原子报告,并对所述原子报告进行轻量化处理,形成近期原子报告上下文;
6、将所述历史基线内容、所述最新内容和所述近期原子报告上下文共同输入语言模型,所述语言模型按照预设的结构化输出约束对输入数据进行语义分析后,生成当前原子报告,所述当前原子报告中至少包括本次报告引用的来源标识集合;
7、保存所述当前原子报告及所述最新内容对应的当前资产快照,并建立所述当前原子报告与所述当前资产快照之间的映射关系;
8、将所述当前原子报告、所述历史基线内容和所述最新内容,以及按所述监控对象、报告类型和时间范围查询获得的候选来源数据,分别转换为统一的归因输入结构,所述统一的归因输入结构至少包括来源数据标识和来源键;
9、对所述统一的归因输入结构执行基于引用关系的去重筛选,排除已被相同归因报告类型引用过的来源数据,获得去重后的归因输入;
10、将所述去重后的归因输入发送至所述语言模型,所述语言模型按照所述结构化输出约束对所述去重后的归因输入进行多源信息融合分析后,生成多源归因报告,所述多源归因报告中至少包括归因报告项及其引用的来源标识集合;
11、保存所述多源归因报告,并根据所述来源标识集合建立所述多源归因报告与所述多个来源数据之间的引用关系。
12、第二方面,本发明提供了一种竞争情报增量监控装置,包括:
13、历史基线恢复模块,获取监控对象的历史基线内容,所述历史基线内容为最近一次采集并保存的资产快照;
14、最新内容获取模块,获取当前周期所述监控对象的最新内容;
15、近期上下文获取模块,获取所述监控对象在预设时间窗口内已生成的原子报告,并对所述原子报告进行轻量化处理,形成近期原子报告上下文;
16、原子报告生成模块,将所述历史基线内容、所述最新内容和所述近期原子报告上下文共同输入语言模型,所述语言模型按照预设的结构化输出约束对输入数据进行语义分析后,生成当前原子报告,所述当前原子报告中至少包括本次报告引用的来源标识集合;
17、存储模块,保存所述当前原子报告及所述最新内容对应的当前资产快照,并建立所述当前原子报告与所述当前资产快照之间的映射关系;
18、归因输入转换模块,将所述当前原子报告、所述历史基线内容和所述最新内容,以及按所述监控对象、报告类型和时间范围查询获得的候选来源数据,分别转换为统一的归因输入结构,所述统一的归因输入结构至少包括来源数据标识和来源键;
19、去重筛选模块,对所述统一的归因输入结构执行基于引用关系的去重筛选,排除已被相同归因报告类型引用过的来源数据,获得去重后的归因输入;
20、多源归因生成模块,将所述去重后的归因输入发送至所述语言模型,所述语言模型按照所述结构化输出约束对所述去重后的归因输入进行多源信息融合分析后,生成多源归因报告,所述多源归因报告中至少包括归因报告项及其引用的来源标识集合;
21、引用关系建立模块,保存所述多源归因报告,并根据所述来源标识集合建立所述多源归因报告与所述多个来源数据之间的引用关系。
22、第三方面,本发明提供了一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时实现第一方面所述的方法。
23、第四方面,本发明提供了一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现第一方面所述的方法。
24、本发明提供的一个或多个技术方案,至少具有如下技术效果或优点:
25、1、实现跨周期变化识别,提升监控准确性。本发明通过获取监控对象的历史基线内容、当前周期最新内容以及预设时间窗口内已生成的原子报告,将三者共同输入语言模型进行分析,使分析过程不仅能够获知当前周期与上一周期之间的差异,还能够参考近期已报告过的变化历史,从而准确判断某一变化是否属于真正新增的情报,避免了现有方案仅依靠相邻两次采集结果机械比较所带来的误判。
26、2、有效抑制重复告警,降低信息冗余。本发明通过基于引用关系的去重筛选机制,在生成多源归因报告之前,查询引用关系存储库中已被同类型且非丢弃状态的多源归因报告引用的来源键集合,排除已被同类型归因报告引用过的来源数据,确保同一来源数据不会重复进入同类归因分析任务,从而有效避免了同一变化在不同采集周期中被反复告警的问题。
27、3、形成完整可追溯的证据链,提升分析结果的可信度。本发明在原子报告生成阶段建立原子报告与当前资产快照之间的映射关系,在多源归因报告生成阶段建立多源归因报告与各来源数据之间的引用关系,使得从多源归因报告可以追溯到其所依据的原子报告,从原子报告可以追溯到采集内容对应的资产快照,实现了分析结论与原始证据之间的双向追溯,便于用户核验和审计。
28、4、统一多源异构数据结构,降低归因分析适配成本。本发明将网站差异原子报告、品牌关键词原子报告、社区分析报告、公司基本面报告、资产快照和站点情报数据等多种来源数据统一转换为包含来源数据标识和来源键的归因输入结构,使得不同类型、不同结构的数据能够以统一格式进入后续的去重筛选、归因分析和引用建链流程,避免了针对每种数据类型单独开发适配逻辑的繁琐工作。
29、5、实现低价值数据的闭环处理,避免计算资源浪费。本发明通过丢弃型归因记录机制,当某一批来源数据未形成有效分析结论时,生成不作为用户可见报告的丢弃型归因记录,并与该批来源数据建立引用关系,标记“已被扫描但未形成有效分析结论”的状态,使后续监控任务能够识别并跳过已被标记的来源数据,避免了低价值数据的重复处理,节省了系统计算资源。
30、6、提升持续监控的稳定性和上下文连续性。本发明在原子报告确定性校验最终不通过时,仍然保存当前资产快照以更新历史基线内容,确保后续监控周期的基线连续性不受单次分析失败的影响;同时通过引用关系存储库记录所有来源数据的处理状态,使长期运行的监控任务能够在各周期之间保持处理状态的一致性,避免了因单次任务失败导致的后续任务不可用。
31、7、保障分析输出的可靠性和数据来源的真实性。本发明通过确定性校验和来源标识校验双重保障机制,一方面对原子报告进行字段完整性、报告类型、无变化标记等方面的校验,确保输出格式符合预期;另一方面对原子报告和多源归因报告中引用的来源标识进行强制校验,确保报告中声称的来源标识均对应于本次输入的真实来源数据,阻止引用了不存在来源数据的报告结果入库,从机制上防止了分析结果“凭空捏造”来源的风险。
32、上述说明仅是本发明技术方案的概述,为了能够更清楚了解本发明的技术手段,而可依照说明书的内容予以实施,并且为了让本发明的上述和其它目的、特征和优点能够更明显易懂,以下特举本发明的具体实施方式。
版权声明:本站专利文献数据主要来源于国家知识产权局等公开渠道,由 技术新讯 进行整理汇编。页面设计及数据汇编的著作权归本站所有。全部内容仅供个人学习、科研评估与技术交流参考,严禁用于任何商业用途(包括但不限于直接生产制造、技术转让、倒卖数据等)。
免责条款:专利技术具有时效性,本站不对资料的绝对准确性、完整性和可实施性提供任何明示或暗示的担保。因参考本站内容造成的直接或间接损失,本站不承担相关法律责任。若您认为本站内容有侵权问题,请及时提供权属证明与我们联系,本站将在核实后依法处理。反馈意见:yyfuon@163.com