一种可透视化A柱及周边区域的显示系统及方法与流程

技术特征：
1.一种可透视化a柱及周边区域的显示系统，其特征在于，该系统包括设置在车辆上相互连接的：图像数据采集单元、数据处理单元、投影组件、投影矫正单元；车辆上还设置有dms模块；其中：图像数据采集单元，采用广角测距摄像头，通过广角测距摄像头采集汽车外部各个方向的视频图像数据以及各个数据点的空间坐标；dms模块，用于获取驾驶员的眼睛位置、头部角度参数；数据处理单元，包括电源模块、图像处理器，用于将广角测距摄像头采集到的数据、dms模块反馈的眼睛位置、角度参数经过图像处理器进行图像的拼接、融合，再分发给不同的投影组件进行投影显示，投影到车辆两侧a柱上的可透视区域上；投影组件，包括投影光源和塑形边框，投影光源分别设置在车辆后视镜的两侧，塑形边框罩在投影光源上；且塑形边框的形状即塑形边框的出光轮廓面，根据可透视区域的形状而决定，使得投影光源发出的光线通过塑形边框塑形后照射在可透视区域上；投影矫正单元，通过车辆的dms模块获取的驾驶员眼睛位置、角度参数来矫正投影画面对应的角度参数，来校准投影画面，实现投影画面的角度随驾驶员的眼睛位置、角度变化的动态变化。2.根据权利要求1所述的可透视化a柱及周边区域的显示系统，其特征在于，所述塑形边框内壁为光滑平面，无任何阻挡光线抵达投影边框的出光轮廓面的凸台或结构。3.根据权利要求1所述的可透视化a柱及周边区域的显示系统，其特征在于，所述塑形边框的出光轮廓面距离投影光源的距离l1，由投影光源与显示平面距离l2与可透视化区域面积s2来决定；其尺寸的关系式为：其中，s1为塑形边框的出光轮廓面的面积，s2为可透视化区域面积。4.根据权利要求1所述的可透视化a柱及周边区域的显示系统，其特征在于，驾驶过程中，所述投影光源、塑形边框、投影的可透视区域的位置均是固定的，只有驾驶员的视角位置发生变化。5.根据权利要求1所述的可透视化a柱及周边区域的显示系统，其特征在于，所述投影组件还能安装在车辆上的位置包括：b柱、c柱、后备箱、车顶、车底等被车辆任意一处遮挡位置的投影显示。6.一种可透视化a柱及周边区域的显示方法，其特征在于，该方法包括以下步骤：s1、在车辆的后视镜的侧面设置投影光源和塑形边框，并根据可透视区域的形状设置塑形边框的形状，在车辆外侧设置多个图像数据采集单元；s2、车辆行进中，通过图像数据采集单元实时采集车辆外的视频图像，并获取视频中外部物体的空间坐标；s3、通过车辆内设置的dms模块实时采集驾驶员的眼睛位置、角度参数；s4、通过数据处理单元对车辆外部的图像进行拼接、融合，并通过投影矫正单元来校准投影画面，生成驾驶员视角在a柱及周边区域看到的图像；s5、根据驾驶员的眼睛和投影光源的位置关系，将驾驶员看到的视角图像转换为投影光源进行显示的视角图像；
s6、根据投影光源进行显示的视角图像，投影光源在可透视区域上进行投影显示。7.根据权利要求6所述的可透视化a柱及周边区域的显示方法，其特征在于，所述步骤s4中生成驾驶员视角在a柱及周边区域看到的图像的方法为：由于投影光源、塑形边框、投影区域位置是相对固定的，只有驾驶员的视角位置在变动；而由于汽车内a柱及周边区域的表面是一个曲面，但是对于极短暂的时间里，驾驶员看到的显示区域能认为是一个平面图像，此平面图像fn与驾驶员视线垂直，投影模块将fn处理后的平面图像ft按照一定的帧率投影到规定的a柱及周边区域，即可形成驾驶员视线内的动态显示效果；投影平面cf是从投影视角上生成的虚拟的平面，而cb平面是车身实际显示的a柱及其周边区域，cf平面经过投影视角ap’方向的投影，会最终将曲面c信息成型在cb平面上；其中，a:人眼，坐标(xa,ya,za)；b:需要投影显示的面；c:实际驾驶员看到的外界实物所在的曲面；d:投影光源，坐标(xd,yd,zd)；e:车内dms模块测距摄像头；f:车外测距摄像头；p:为人眼视线直线与面c的焦点，坐标(xp,yp,zp)；p’为人眼需要去看到的显示的点，坐标(xp’,yp’,zp’)。8.根据权利要求7所述的可透视化a柱及周边区域的显示方法，其特征在于，所述步骤s4中生成驾驶员视角在a柱及周边区域看到的图像的方法具体包括以下步骤：步骤1、获取实际曲面c的信息：通过测距摄像头f，基准坐标为(xf,yf,zf)，获取车外的真实图像及像素点的点集ff(x0,y0,z0)，将数据转换为基于整车坐标原点o构建的三维空间曲面ff(x,y,z)＝ff(x0 xf,y0 yf,z0 zf)；步骤2、获取投影的a柱及周边区域基于整车坐标o的曲面集fs(x,y,z)，fs为可透视区域；步骤3、将曲面ff(x,y,z)、fs(x,y,z)重合在一起，以眼球a点为中心，眼睛视线相交a柱表面于p’点，以ap’方向为正方向，垂直于视线ap’方向构建平面cb，cb平面经过p’点并垂直于ap’直线，将ff曲面缩放投影到cb平面上，通过分别获得ap’视角的二维投影轮廓面ffap’、fsap’，最终需要投影生成的图片fn等于fsap’与ffap’的交集，fn图片即为最终需要投影生成的以ap’视角去看的一帧图片。9.根据权利要求8所述的可透视化a柱及周边区域的显示方法，其特征在于，所述步骤s5中将驾驶员看到的视角图像转换为投影光源进行显示的视角图像的方法为：在一个极短的时间里，认定人眼a的位置固定，同时，p’与d’本身相对于整车也是固定的，其三个点对应的坐标分别为a(xa,ya,za),p’(xp’,yp’,zp’),d(xd,yd,zd)；将面bc离散成m个矩形区域，以点p’为中心，往m个单位正反方向分别向外延伸一个单元，分别取点b、c，则bc线段是面cb上任意一条经过p’点的线段，cf是投影平面cf上的一段线段，且f点从dp’视角看，投影到cb平面上的点为点b，b、c点距离点p’距离均为m，bc与ap’垂直，同时，以投影dp’视角投影的直线cf，在b面上的显示为cb直线，因此，通过cf与cb的关系，求得投影图片fn与ft之间的关系。10.根据权利要求9所述的可透视化a柱及周边区域的显示方法，其特征在于，所述步骤s5中将驾驶员看到的视角图像转换为投影光源进行显示的视角图像的具体计算方法为：假设dp’距离为l，cb＝2cp’＝2p’b＝2m，cf与dp’垂直相交于点v，ap’垂直于cb，ap’与dp’间的夹角为α，角度α根据点a、p’、d三点的坐标，计算得到：
dp’的距离ap’的距离da的距离da的距离cf与cb间的关系为：cb＝2m其中m值的大小代表图像fn转化为图像ft的精度，m越小则精度越高。

技术总结
本发明公开了一种可透视化A柱及周边区域的显示系统及方法，该系统中：图像数据采集单元，通过广角测距摄像头采集汽车外部各个方向的视频图像数据以及各个数据点的空间坐标；数据处理单元，用于将广角测距摄像头采集到的数据、DMS模块反馈的眼睛位置、角度参数经过图像处理器进行图像的拼接、融合，再分发给不同的投影组件进行投影显示；投影组件，包括投影光源和塑形边框，投影光源分别设置在车辆后视镜的两侧，塑形边框罩在投影光源上；投影矫正单元，用于校准投影画面，实现投影画面的角度随驾驶员的眼睛位置、角度变化的动态变化。本发明解决了汽车不透明A柱及周边区域形成的驾驶员盲区的显示问题，且适用于任意车型。且适用于任意车型。且适用于任意车型。


技术研发人员：张洋 徐昊 李灿 张鑫浩 宋军伟
受保护的技术使用者：东风汽车集团股份有限公司
技术研发日：2021.08.25
技术公布日：2021/11/5