基于FPGA的多相机级联时间同步与远程配置固件管理系统及方法与流程
本发明涉及高速成像与fpga数字系统设计,更具体地,涉及一种基于fpga的多相机级联时间同步与远程配置固件管理系统及方法。
背景技术:
1、在piv粒子图像测速、弹道轨迹跟踪、爆炸冲击波物理等高速成像领域,单台四分幅相机(四通道)往往不足以覆盖大视场或获取多角度观测数据。实际工程中通常需要部署多台分幅相机组成相机阵列,例如风洞piv测量中常使用4至8台甚至更多的相机同步采集不同区域的图像数据,弹道靶场中沿弹道线布置多台相机捕获不同位置的高速事件。这些应用场景对多相机之间的时间同步精度提出了极高的要求,通常需要达到纳秒级别以确保各相机采集到的帧在时域上精确对齐。
2、同时,大规模相机阵列的部署和维护带来了一系列新的工程问题。第一,多台相机在部署时的固件版本可能不同(出厂批次差异、功能升级不同步),版本不一致可能导致各相机的同步协议行为存在细微差异,影响整体同步精度。第二,相机阵列长时间运行后可能需要对同步协议或通信协议进行升级优化,现场拆卸每台相机进行固件刷写的成本极高。第三,大规模阵列中有数十个可配置参数(同步模式、延时补偿、触发模式、帧率、传输路径等),手动逐台配置效率低下且容易出现人为错误。
3、现有技术在单个相机的时间同步和参数管理方面已经取得了一定进展。在单台分幅相机方面,已有技术涉及基于fpga的四通道时间对齐和纳秒级曝光控制。在远程配置方面,已有技术涉及基于网络的设备参数远程配置方法。然而,现有技术存在以下不足:
4、第一,多相机级联场景下的传输延迟自动补偿机制未被专门研究,多数方案依赖固定延迟预设值而无法适应不同连接距离和不同线缆长度导致的延迟差异;
5、第二,固件版本一致性管理在多相机同步场景中未被重视,缺乏在级联同步协议中嵌入固件版本检测和远程同步更新的机制;
6、第三,配置参数的批量同步和广播机制在多相机阵列场景中未被公开,缺乏从主相机到各从相机的一键式配置分发方案。
7、因此,如何解决大规模相机阵列部署中的同步一致性、固件版本一致性和配置一致性问题,是当前亟需解决的问题。
技术实现思路
1、针对现有技术的缺陷,本发明的目的在于,提供一种基于fpga的多相机级联时间同步与远程配置固件管理系统及方法,能解决大规模相机阵列部署中的同步一致性、固件版本一致性和配置一致性问题。
2、为实现上述目的,第一方面,本发明提供了一种基于fpga的多相机级联时间同步与远程配置固件管理系统,包括一台作为时钟源和配置中心的主相机与至少一台从相机,主相机与从相机通过lvds差分线或光纤链路构成链式级联拓扑,主相机用于生成全局参考时钟和同步触发信号并分发至从相机;
3、主相机和从相机均设置有传输延迟自动测量与补偿模块,用于通过发送回环测试脉冲测量与前级相机的实际传输延迟,对到达的同步信号进行延时补偿;
4、主相机在同步触发信号中嵌入由计数器生成的全局帧序号并分发至各从相机,各从相机在采集的每帧图像数据中附加包含全局帧序号和本地时间戳的帧元数据,使得上位机以全局帧序号为主键实现多相机帧关联;
5、主相机和从相机均设置有运行镜像区和备份镜像区,主相机通过级联链路检测各从相机固件版本,确认主相机和从相机的固件版本不一致,通过级联链路分片传输新的固件数据至目标从相机,确认新的固件数据被从相机写入备份镜像区,触发从相机软复位并从新的固件数据启动,确认新的固件数据启动失败,利用看门狗定时器触发自动回滚至运行镜像区;
6、主相机还用于维护全局配置参数表,包括:确认主相机的配置参数被修改,生成配置同步帧并广播至各从相机,各从相机接收到配置同步帧后更新本地配置并返回确认应答,主相机在超时未收到应答时执行重发操作。
7、作为进一步优选的,链式级联拓扑中每级从相机的传输延迟测量通过发送已知宽度的回环测试脉冲实现。
8、作为进一步优选的,新固件启动后设置为在看门狗定时器的超时时间内完成启动握手,确认超时时间内未完成启动握手则自动回滚至运行镜像区。
9、作为进一步优选的,全局帧序号为16bit计数器,每帧递增1;本地时间戳为48bit,以本地恢复的同步时钟计数值表示,分辨率1ns;帧元数据还包括8bit从相机编号和8bit通道编号。
10、作为进一步优选的,固件版本采用x.y.z三字段格式存储于主相机与从相机的fpga内部一次可编程寄存器中;远程固件更新时固件数据分片大小为4kb,每片带32bitcrc校验;备份镜像区写入完成后启动指针的切换为原子操作。
11、作为进一步优选的,全局配置参数表包含同步模式、触发延时、帧率、曝光时间、数据输出路径、触发源选择和配置版本号字段;配置同步帧包含128字节头部、256字节参数数据和4字节crc-32校验。
12、作为进一步优选的,主相机收集各从相机配置确认应答的超时时间为100ms,未收到确认的最大重试次数为3次,连续3次未响应的从相机被标记为离线。
13、作为进一步优选的,各从相机的本地同步时钟通过从主相机分发的参考时钟经混合模式时钟管理器或锁相环恢复获得。
14、第二方面,本发明提供了一种用于上述系统的基于fpga的多相机级联时间同步与远程配置固件管理方法,包括以下步骤:
15、步骤s1:确认主相机和从相机上电,主相机通过级联链路广播固件版本查询命令,各从相机返回当前固件版本号,主相机比对当前固件版本号并标记不一致的从相机;
16、步骤s2:主相机逐级发送回环测试脉冲,各从相机测量与前级相机的实际传输延迟并计算补偿值,将补偿值写入本地寄存器;
17、步骤s3:主相机生成全局参考时钟和帧同步触发信号,经延迟补偿后分发至各从相机,触发各相机同步曝光采集;
18、步骤s4:主相机在每帧触发时刻递增全局帧序号并嵌入同步信号,各从相机在帧数据中附加全局帧序号和本地时间戳;
19、步骤s5:确认存在标记不一致的从相机为目标从相机,主相机接收上位机下发的新的固件数据,将固件数据转发至目标从相机,目标从相机将固件数据写入本地的备份镜像区并原子切换启动;
20、步骤s6:确认配置参数被修改,主相机将完整参数表封装为配置同步帧广播至所有从相机,各从相机根据配置同步帧更新本地配置后返回确认。
21、作为进一步优选的,步骤s5中新固件启动失败时看门狗定时器5秒超时触发自动回滚至运行镜像区;步骤s6中主相机等待各从相机确认的超时时间为100ms,最大重试次数为3次。
22、实施本发明提供的基于fpga的多相机级联时间同步与远程配置固件管理系统及方法,具有以下有益效果:
23、本发明针对现有技术中多相机级联同步传输延迟补偿不足、固件版本管理缺失和配置参数批量同步困难等技术问题,提出一种基于fpga的多相机级联时间同步与远程配置固件管理系统及方法。
24、首先,本发明设计了级联式多相机时间同步拓扑与逐级延迟自动补偿机制:构建主从链式级联同步拓扑,主相机fpga生成全局参考时钟和帧同步触发信号,经低压差分信号(low-voltage differential signaling, lvds)传输线或光纤链路逐级分发至各从相机;每级从相机fpga内置传输延迟测量模块,通过发送回环测试脉冲自动测量与前级相机之间的实际传输延迟(包括线缆延迟、电平转换延迟和pcb走线延迟),并将延迟值写入对应补偿寄存器;利用fpga内部的iodelay或selectio原语对到达的同步信号进行精确延时补偿,补偿后的各相机触发时刻偏差不大于1ns;链式中继的累积误差由每级的独立补偿消除,理论上n级级联的同步精度仍可保持在1ns以内;
25、其次,本发明设计了全局帧序号与分布式时间戳关联机制:主相机在每帧同步触发信号中嵌入由16bit计数器生成的全局帧序号,经同步信号链路分发至各从相机;各从相机在本地采集的每帧图像数据中附加一个48bit的时间戳(以本地同步时钟计数值记,分辨率1ns),以及由主相机广播的全局帧序号;上位机接收各相机的图像数据后,通过全局帧序号可以精确关联同一拍摄时刻不同相机采集的图像帧,通过48bit时间戳可以检测各相机之间残留的微细偏差用于后处理校正;
26、再次,本发明设计了基于级联链路的固件版本检测与远程双镜像更新机制:主相机上电后通过级联链路向各从相机广播固件版本查询命令,各从相机返回当前固件版本号。主相机将各从相机版本号与自身版本号比对,若不一致则触发远程固件更新流程;fpga固件存储区划分为运行镜像区和备份镜像区,当前运行的固件位于运行镜像区;远程更新时,固件数据经pcie或千兆以太网分片传输至主相机,主相机将固件数据打包为更新帧并通过级联链路逐级转发至目标从相机;从相机接收完所有固件分片后进行crc校验,校验通过后将新固件写入备份镜像区,写入完成后原子切换启动指针指向备份镜像区,下次上电从新固件启动;若新固件启动失败,看门狗定时器触发自动回滚至原运行镜像区;
27、最后,本发明设计了级联配置参数主从同步与一键批量分发机制:主相机内部维护一份全局配置参数表,包含同步模式(内触发/外触发/级联触发)、触发延时、帧率、曝光时间、数据输出路径等参数;当用户通过上位机修改主相机配置参数后,主相机自动生成配置同步帧,经级联链路广播至各从相机;各从相机接收到配置同步帧后,解析并写入本地配置寄存器,同时向主相机返回配置确认应答;主相机收集所有从相机的确认应答后,若存在超时未应答的从相机则重发配置同步帧;配置参数可在系统运行过程中动态修改并立即生效,无需停机重启。
28、本发明适用于粒子图像测速(particle image velocimetry,piv)、弹道测试、爆炸物理、高速流场诊断等需要大规模多相机阵列同步高速成像的应用场景,本发明将多相机级联时间同步与远程固件配置更新两项功能在fpga架构中统一实现,解决了大规模相机阵列部署时的同步一致性、版本一致性和配置一致性问题。
版权声明:本站专利文献数据主要来源于国家知识产权局等公开渠道,由 技术新讯 进行整理汇编。页面设计及数据汇编的著作权归本站所有。全部内容仅供个人学习、科研评估与技术交流参考,严禁用于任何商业用途(包括但不限于直接生产制造、技术转让、倒卖数据等)。
免责条款:专利技术具有时效性,本站不对资料的绝对准确性、完整性和可实施性提供任何明示或暗示的担保。因参考本站内容造成的直接或间接损失,本站不承担相关法律责任。若您认为本站内容有侵权问题,请及时提供权属证明与我们联系,本站将在核实后依法处理。反馈意见:yyfuon@163.com