面向高并发的IEC104规约处理方法及系统与流程
本技术涉及计算机,尤其涉及面向高并发的iec104规约处理方法及系统。
背景技术:
1、iec60870-5-104(iec104)是电力调度、厂站自动化及工业监控领域中基于传输控制协议/互联网协议(transmission control protocol/internet protocol,tcp/ip)的远动通信标准规约,广泛用于主站与远程终端设备单元(remote terminal unit,rtu)、智能电子设备(intelligent electronic device,ied)、数据传输单元(data transfer unit,dtu)等设备之间实现遥测、遥信、遥控、遥调、事件顺序记录(sequence of event,soe)上传及总召唤等关键业务交互。随着智能电网、分布式新能源、配网自动化的快速发展,主站需要同时接入成百上千个厂站节点,处理海量测点数据的高频上报、突发故障信息以及并发控制指令,形成典型的高并发、高实时、高可靠通信场景。
2、传统iec104主站普遍采用阻塞输入输出(input output,io)接口、单连接单线程模式,在高并发接入下易出现线程资源耗尽、上下文切换频繁、协议处理效率低、滑动窗口响应迟缓、心跳与重传机制不稳定等问题,导致连接抖动、数据延迟、丢包重传风暴、系统吞吐量下降,难以满足大规模接入、低时延传输和稳定运行的工程要求,因此亟需在高并发架构、协议栈优化、任务调度与链路自愈等方面进行改进。
技术实现思路
1、有鉴于此,本技术的目的在于提出一种面向高并发的iec104规约处理方法及系统,解决了iec104规约在面向高并发架构时通信不稳定且时延过长的问题。
2、为了实现上述目的之一,本技术提供了一种面向高并发的iec104规约处理方法,所述方法包括:
3、建立iec104主站端和iec104子站端的通信连接;其中,所述iec104主站端包括iec104报文读线程池和iec104数据解析线程池;
4、基于操作系统选取io多路复用的类型,初始化被选取的所述io多路复用,并初始化所述iec104报文读线程池的配置和所述iec104数据解析线程池的配置;其中,所述配置包括核心线程数和任务队列;
5、利用所述io多路复用监听所述iec104子站端中的报文事件,当监听到报文到达时,封装读取任务,将封装后的读取任务提交至iec104报文读线程池的任务队列;
6、利用所述iec104报文读线程池中的空闲读取线程从任务队列中获取任务并读取所述报文,待处理完成后,线程回归iec104报文读线程池以复用;
7、利用所述iec104数据解析线程池中的空闲解析线程解析读取后的所述报文,待处理完成后,线程回归iec104数据解析线程池以复用;
8、如解析成功,则将所述报文转换为标准化数据,将所述标准化数据输出至业务层。
9、作为本技术一实施方式的进一步改进,所述初始化被选取的所述io多路复用,包括:
10、初始化所述操作系统中的连接管理列表,所述连接管理列表用于记录当前有效连接信息;
11、创建io多路复用实例并配置事件缓冲区;
12、所述利用所述io多路复用监听所述iec104子站端中的报文事件,当监听到报文到达时,封装读取任务,包括:
13、启动单个核心事件循环线程,利用所述io多路复用线程持续监听所述实例中的io事件;
14、当检测到io事件时,遍历被检测的io事件的文件描述符;
15、响应于所述io事件为读事件,则判定为报文到达,至少将所述io事件的文件描述符和连接上下文封装为读取任务,并将所述读取任务提交至所述iec104报文读线程池的所述任务队列。
16、作为本技术一实施方式的进一步改进,所述当检测到io事件时,遍历被检测io事件的文件描述符之后,还包括:
17、响应于所述io事件为异常事件,则判定为连接异常,将所述异常事件的文件描述符从io多路复用线程中删除,释放连接资源。
18、作为本技术一实施方式的进一步改进,初始化所述iec104报文读线程池的配置,包括:
19、基于cpu核心数和预设倍率确定线程池的线程数;
20、将所述任务队列配置为有界阻塞队列。
21、作为本技术一实施方式的进一步改进,所述利用所述iec104报文读线程池中的空闲读取线程从所述任务队列中获取任务并读取所述报文,包括:
22、从所述任务队列中获取读取任务,校验所述读取任务中的文件描述符的连接状态;
23、响应于连接正常,从所述文件描述符中读取报文数据,并记录读取时间;
24、响应于读取时间未超过预设超时时间,根据所述报文的标识信息,拼接所述报文的分片,生成完整报文;
25、至少将所述完整报文和上下文信息封装为解析任务,将所述解析任务提交至所述iec104数据解析线程池。
26、作为本技术一实施方式的进一步改进,所述初始化所述iec104数据解析线程池的配置,包括:
27、根据所述报文的解析复杂度,预测解析吞吐量,基于cpu核心数和预设倍率确定所述iec104数据解析线程池的线程数;
28、将所述任务队列配置为优先级阻塞队列;其中所述优先级阻塞队列包括各类型报文的优先级顺序。
29、作为本技术一实施方式的进一步改进,所述利用所述iec104数据解析线程池中的空闲解析线程解析读取后的所述报文,包括:
30、接收所述iec104报文读线程池的解析任务,根据所述报文的头部控制域识别所述报文的类型;
31、根据各类型报文的优先级顺序,将所述报文排序;
32、按照排序解析所述报文。
33、作为本技术一实施方式的进一步改进,所述根据各类型报文的优先级顺序,将所述报文排序,包括:
34、根据iec104协议的帧格式将所述报文的类型划分为i帧、s帧和u帧,u帧具有最高处理权限;
35、所述按照排序解析所述报文包括:
36、针对u帧的所述报文,解析所述报文的控制域中的控制信息,并验证报文的合法性,生成链路控制响应;
37、针对s帧的所述报文,解析所述报文的接收序列号,校验其连续性与合法性,更新链路发送窗口状态,完成报文传输确认;
38、针对i帧的所述报文,校验所述报文的完整性,解析所述报文中的应用服务数据单元,提取业务参数并封装解析结果。
39、作为本技术一实施方式的进一步改进,所述利用所述iec104数据解析线程池中的空闲解析线程解析读取后的所述报文,包括:
40、在解析过程中,解析到所述报文的格式错误、数据不完整和校验失败至少一种情况,标记为无效报文,并释放所述无效报文对应的线程;
41、为每个解析任务设置超时时间,响应于所述解析任务的处理时间超过所述超时时间,则解析终止,并释放超时的线程;
42、响应于用于解析的线程运行异常,则销毁异常的线程并在所述iec104数据解析线程池中创建新线程。
43、基于相同的发明构思,本技术还提供了一种面向高并发的iec104规约处理系统,包括:
44、建立模块,用于建立iec104主站端和iec104子站端的通信连接;其中,所述iec104主站端包括iec104报文读线程池和iec104数据解析线程池;
45、初始化模块,用于基于操作系统选取io多路复用的类型,初始化被选取的所述io多路复用,并初始化所述iec104报文读线程池的配置和所述iec104数据解析线程池的配置;其中,所述配置包括核心线程数和任务队列;
46、监听模块,用于利用所述io多路复用监听所述iec104子站端中的报文事件,当监听到报文到达时,封装读取任务,将封装后的读取任务提交至iec104报文读线程池的任务队列;
47、读取模块,利用所述iec104报文读线程池中的空闲读取线程从任务队列中获取任务并读取所述报文,待处理完成后,线程回归iec104报文读线程池以复用;
48、解析模块,用于利用所述iec104数据解析线程池中的空闲解析线程解析读取后的所述报文,待处理完成后,线程回归iec104数据解析线程池以复用;
49、输出模块,如解析成功,则用于将所述报文转换为标准化数据,将所述标准化数据输出至业务层。
50、相对于现有技术,本技术的技术效果在于:通过采用io多路复用技术主站统一监听多路iec104链路网络事件,实现海量连接并发管理,大幅减少线程资源消耗,显著提升主站接入容量与实时响应能力。还通过采用iec104报文读线程池,异步完成网络数据读取与缓存处理,避免io阻塞,确保高并发场景下报文稳定接收、不丢包、不延迟。采用iec104数据解析线程池独立完成协议解析与逻辑处理,提高数据处理吞吐量,保证高并发下数据时序正确、传输时延更低。
版权声明:本站专利文献数据主要来源于国家知识产权局等公开渠道,由 技术新讯 进行整理汇编。页面设计及数据汇编的著作权归本站所有。全部内容仅供个人学习、科研评估与技术交流参考,严禁用于任何商业用途(包括但不限于直接生产制造、技术转让、倒卖数据等)。
免责条款:专利技术具有时效性,本站不对资料的绝对准确性、完整性和可实施性提供任何明示或暗示的担保。因参考本站内容造成的直接或间接损失,本站不承担相关法律责任。若您认为本站内容有侵权问题,请及时提供权属证明与我们联系,本站将在核实后依法处理。反馈意见:yyfuon@163.com