一种基于介质参数与质量反馈修正的事件相机标定方法
本发明一般涉及事件相机标定,具体涉及一种基于介质参数与质量反馈修正的事件相机标定方法。
背景技术:
1、事件相机具有高动态范围、微秒级时间分辨率和低数据冗余等优势,在高速视觉测量与自主导航等领域应用前景广阔。
2、现有事件相机标定过程中,仍然采用具有常规图形的标定板,一次性地完成对事件相机的标定。由于事件相机输出异步二值事件流而非灰度图像,传统基于帧图像的标定方法难以直接适用。
3、当事件相机与被拍摄物体之间存在多种不同的介质时,事件相机拍摄所得的事件流会受不同介质之间的折射作用而发生畸变;而且若被拍摄物体的图形的形状中,存在与事件相机移动方向平行的边缘时,事件相机则无法识别到该边缘,导致利用所得的事件流完成标定的标定质量较差。
技术实现思路
1、鉴于现有技术中的上述缺陷或不足,期望提供一种基于介质参数与质量反馈修正的事件相机标定方法,能够消除介质折射引起的畸变影响,避免因图形边缘与运动方向平行导致的特征丢失,提高事件相机在复杂介质环境下的标定精度与可靠性。
2、本发明提供一种基于介质参数与质量反馈修正的事件相机标定方法,包括:
3、s1:获取事件相机拍摄环境中的介质参数;并根据所述介质参数确定标定板上图形的目标设计参数;
4、s2:获取事件相机在具有所述介质参数的拍摄环境下拍摄具有目标设计参数图形的标定板所得的事件流;
5、s3:将所述事件流转化为多个事件表示图;
6、s4:利用所述事件表示图对所述事件相机进行初步标定;
7、s5:检测初步标定后事件相机的标定质量;
8、s6:若所述标定质量不满足设定标准,则对事件相机进行标定修正。
9、根据本发明提供的技术方案,对事件相机进行标定修正,包括:
10、a1:剔除多个事件表示图中,满足图像异常标准的事件表示图,得到多个第一事件表示图;
11、a2:剔除第一事件表示图中满足图形异常标准的图形,得到第二事件表示图;
12、a3:以标定质量满足所述设定标准为约束的条件,以第二事件表示图中所有的图形的加权鲁棒重投影误差最小为优化目标,优化事件相机的相机内参、畸变参数、第二事件表示图中的外参,得到第一相机内参、第一畸变参数、第一外参;
13、a4:利用所述第一相机内参、第一畸变参数、第一外参对所述事件相机进行再次标定。
14、根据本发明提供的技术方案,对事件相机进行标定修正,包括:
15、b1:根据多个事件表示图确定事件相机的第二相机内参、第二畸变参数、第二外参;
16、b2:根据所述第二相机内参、第二畸变参数、第二外参拟合二维残差补偿场;
17、b3:利用残差补偿场修正所述事件表示图中的图形在像素坐标系下的坐标,得到第三事件表示图;
18、b4:根据所述第三事件表示图,得到事件相机的第三相机内参、第三畸变参数、第三外参;
19、b5:利用所述第三相机内参、第三畸变参数、第三外参对所述事件相机进行再次标定。
20、根据本发明提供的技术方案,对事件相机进行标定修正,包括:
21、c1:生成自事件相机的像素点出发且朝向所述标定板的虚拟空间光线;
22、c2:基于所述介质参数,计算所述虚拟空间光线经介质折射后与标定板所在平面之间的交点;
23、c3:计算所述交点在标定板所在平面内的投影残差;
24、c4:根据所述投影残差,优化事件相机的相机内参、畸变参数、事件表示图中的外参,得到第四相机内参、第四畸变参数、第四外参;
25、c5:利用所述第四相机内参、第四畸变参数、第四外参对所述事件相机进行再次标定。
26、根据本发明提供的技术方案,根据所述介质参数确定标定板上图形的目标设计参数,包括:
27、s1-1:获取标定板的打印精度,事件相机与标定板之间的拍摄距离、介质参数,事件相机的分辨率、视场范围;
28、s1-2:基于标定板的打印精度,事件相机与标定板之间的拍摄距离、介质参数,事件相机的分辨率、视场范围,利用预测模型与优化算法搜索得到所述目标设计参数;所述预测模型用于根据设计参数和标定板的打印精度,事件相机与标定板之间的拍摄距离、介质参数,事件相机的分辨率、视场范围预测标定质量。
29、根据本发明提供的技术方案,基于标定板的打印精度,事件相机与标定板之间的拍摄距离、介质参数,事件相机的分辨率、视场范围,利用预测模型与优化算法搜索得到所述目标设计参数,包括:
30、s1-2-1:利用优化算法进行多次迭代,以搜索设计参数,每次迭代得到迭代设计参数;
31、s1-2-2:将迭代设计参数和标定板的打印精度,事件相机与标定板之间的拍摄距离、介质参数,事件相机的分辨率、视场范围共同输入所述预测模型,得到迭代标定质量;
32、s1-2-3:当所述优化算法达到结束条件时,将多次迭代过程中所得的最大的迭代标定质量对应的迭代设计参数作为目标设计参数。
33、根据本发明提供的技术方案,将所述事件流转化为多个事件表示图,包括:
34、s3-1:根据所述事件流,构建落在每个像素位置的事件帧,并记录每个像素最后一次事件的第一时刻;所述事件帧包含亮度增加事件和亮度降低事件;
35、s3-2:统计每个所述事件帧包含的亮度增加事件和亮度降低事件,得到多个事件帧对应的极性累积图;
36、s3-3:根据所述第一时刻构建每个像素最后一次事件的时刻表面;
37、s3-4:根据所有的事件帧、所有的极性累积图和所有的时刻表面分别计算得到多个事件表示图。
38、根据本发明提供的技术方案,利用所述事件表示图对所述事件相机进行初步标定,包括:
39、s4-1:提取所述事件表示图的候选边界;
40、s4-2:识别所述候选边界中具有目标设计参数的图形;
41、s4-3:利用具有目标设计参数的图形完成对事件相机的初步标定。
42、根据本发明提供的技术方案,提取所述事件表示图的候选边界,包括:
43、s4-1-1:计算事件表示图中的局部事件密度;
44、s4-1-2:根据所述局部事件密度提取连通域;
45、s4-1-3:根据所述连通域提取得到候选边界。
46、根据本发明提供的技术方案,识别所述候选边界中具有目标设计参数的图形,包括:
47、s4-2-1:利用所述候选边界拟合候选形状的图形参数;
48、s4-2-2:基于所述候选形状的图形参数,与所述目标设计参数进行匹配,以识别得到具有目标设计参数的图形。
49、本发明的有益效果在于:
50、本发明提供的一种基于介质参数与质量反馈修正的事件相机标定方法,旨在解决现有技术中当事件相机与标定板之间存在多种介质时,事件流因折射作用发生畸变,以及标定板图形边缘与相机移动方向平行时导致边缘无法识别,进而造成标定质量差的技术问题。
51、为此,本发明根据事件相机与标定板之间的介质参数确定标定板上图形的目标设计参数,使标定质量最大化;在此基础上,带动事件相机以拍摄方向垂直于标定板的状态为起始相对标定板运动并拍摄事件流,将事件流转化为多个事件表示图后对事件相机进行初步标定,并检测初步标定后的标定质量;若标定质量不满足设定标准,则对事件相机进行标定修正。
52、由此,本发明能够根据实际介质参数优化标定板图形设计,从源头提升标定适应性,再通过多事件表示图的转化与初步标定,以及标定质量检测与修正机制,有效消除介质折射引起的畸变影响,避免因图形边缘与运动方向平行导致的特征丢失,显著提高事件相机在复杂介质环境下的标定精度与可靠性。
版权声明:本站专利文献数据主要来源于国家知识产权局等公开渠道,由 技术新讯 进行整理汇编。页面设计及数据汇编的著作权归本站所有。全部内容仅供个人学习、科研评估与技术交流参考,严禁用于任何商业用途(包括但不限于直接生产制造、技术转让、倒卖数据等)。
免责条款:专利技术具有时效性,本站不对资料的绝对准确性、完整性和可实施性提供任何明示或暗示的担保。因参考本站内容造成的直接或间接损失,本站不承担相关法律责任。若您认为本站内容有侵权问题,请及时提供权属证明与我们联系,本站将在核实后依法处理。反馈意见:yyfuon@163.com