主对焦与沙姆调节联合的无损自动对焦方法及投影仪与流程
本发明涉及投影仪对焦,尤其涉及一种主对焦与沙姆调节联合的无损自动对焦方法及投影仪。
背景技术:
1、投影仪通常通过对焦马达驱动主投影镜头或者镜组旋转,或者驱动主投影镜头或者镜组沿投影光轴移动,使显示面板形成的图像清晰地投射至幕布。以单lcd投影仪为例,当投影仪正对幕布时,投影光路的最佳焦平面与幕布平面近似平行,通过调节主投影镜头的对焦位置,通常可以兼顾投影画面的中心区域和边缘区域。
2、然而,在实际使用过程中,受安装位置和投影空间限制,投影仪可能以较大的水平角度、垂直角度或者水平和垂直复合角度进行侧投。此时,幕布平面相对于投影光轴发生倾斜,投影画面的左侧、中心和右侧或者上侧、中心和下侧至投影镜头的距离不同。主投影镜头的轴向调节主要改变投影光路的整体对焦位置,不能改变最佳焦平面的倾斜方向,因而可能出现投影画面左侧清晰而右侧模糊、中心清晰而边缘模糊或者上侧清晰而下侧模糊等问题。数字梯形校正能够改变投影画面的外形,但不能消除因幕布平面与最佳焦平面不匹配产生的真实光学离焦。
3、现有投影仪的自动对焦方式通常包括基于摄像头的清晰度搜索方式和基于单点测距的查表调焦方式。基于摄像头的清晰度搜索方式需要反复移动对焦机构、投射对焦图案并采集投影画面,通过比较不同位置下的清晰度评价值寻找清晰度峰值。当需要同时调节两个光学执行机构时,搜索维度和搜索范围进一步增大,容易导致自动对焦时间较长。同时,摄像头采集结果还可能受到幕布纹理、环境光、摄像头曝光状态和当前投影内容变化的影响,进而造成清晰度评价不稳定。
4、基于单点tof测距的查表调焦方式通常仅获取投影画面中心或者预设位置的距离,并根据测得的单点距离确定主投影镜头的位置。该方式不能完整反映幕布平面的三维姿态,也难以确定幕布左右两侧或者上下两侧的距离差及距离变化方向。因此,即使主投影镜头已经对准投影画面中心,投影画面的边缘区域仍可能偏离最佳焦平面。此外,tof深度数据还可能受到目标表面低反射、强环境光、飞点、遮挡物和多径误差的影响,如果直接采用单个深度像素、最小测量距离或者未经筛选的深度数据控制对焦机构,容易引起错误调焦。
5、为了改善侧投状态下的边缘清晰度,部分方案通过缩小投影区域、裁切边缘像素、降低边缘分辨率或者进行数字锐化来减弱离焦现象。上述处理可能损失有效像素、投影画面面积或者自然图像细节,不能从投影光路上消除幕布平面与最佳焦平面之间的不匹配。
6、此外,部分投影仪虽然设置有用于改变内部光路或者成像平面姿态的光学调节机构,但是反光镜、lcd内屏或者其他内部光学部件的机械调节量与最佳焦平面的倾斜变化之间通常不是简单的线性关系,还会受到投影距离、变焦位置、镜组倍率、内部光路结构和装配误差等因素的影响,难以仅根据投影仪的侧投角度进行简单比例换算。主投影镜头与所述光学调节机构之间还可能存在光学耦合,其中一个机构发生动作后可能改变另一个机构所需的调节位置。如果缺少联合计算、机械回差补偿、调节限位和位置反馈管理,容易出现中心焦点偏移、机构反复调节或者执行位置不准确等问题。
技术实现思路
1、有鉴于此,本发明实施例提供了一种主对焦与沙姆调节联合的无损自动对焦方法及投影仪,用以解决现有技术中投影仪侧投时画面难以全屏清晰的问题。
2、第一方面,本发明实施例提供了一种主对焦与沙姆调节联合的无损自动对焦方法,应用于设置有tof传感器、主对焦装置和沙姆调节装置的投影仪,所述方法包括:
3、获取所述tof传感器采集的深度数据,根据深度置信信息和投影区域对所述深度数据进行筛选及转换,得到所述投影区域在投影仪坐标系下的三维点云;
4、对所述三维点云进行幕布平面拟合,确定幕布中心投影距离和所述幕布平面相对于投影光轴的目标倾角;
5、根据所述幕布中心投影距离和第一标定模型,确定所述主对焦装置的第一初始调节位置,并根据所述目标倾角、所述幕布中心投影距离和第二标定模型,确定所述沙姆调节装置的第二初始调节位置;
6、根据表征所述主对焦装置与所述沙姆调节装置之间光学耦合关系的耦合补偿模型,对所述第一初始调节位置和所述第二初始调节位置进行联合修正,得到所述主对焦装置的第一目标调节位置和所述沙姆调节装置的第二目标调节位置;
7、按照所述第一目标调节位置控制所述主对焦装置调节主投影镜头的对焦位置,并按照所述第二目标调节位置控制所述沙姆调节装置调节最佳焦平面的倾斜方向,使所述最佳焦平面与幕布平面相匹配。
8、优选地,所述获取所述tof传感器采集的深度数据,根据深度置信信息和投影区域对所述深度数据进行筛选及转换,得到所述投影区域在投影仪坐标系下的三维点云,包括:
9、获取所述tof传感器连续采集的多帧深度数据、回波幅值和有效标志,并确定各深度像素的深度标准差及多帧一致性;
10、根据所述回波幅值、所述有效标志、所述深度标准差和所述多帧一致性,确定各深度像素的置信度权重,基于所述置信度权重对所述多帧深度数据进行滤波,去除无效深度像素、低置信度深度像素及孤立飞点;
11、根据所述tof传感器的内参,将保留的深度像素转换为tof坐标系下的三维点,并根据所述tof传感器与所述投影仪之间的外参,将所述三维点转换至投影仪坐标系;
12、根据所述投影区域的四个角点对应的投影射线所限定的空间范围,对转换后的三维点进行筛选,得到所述投影区域对应的三维点云。
13、优选地,所述对所述三维点云进行幕布平面拟合,确定幕布中心投影距离和所述幕布平面相对于投影光轴的目标倾角,包括:
14、采用随机采样一致性算法从所述三维点云中确定候选平面,并根据各三维点与所述候选平面之间的距离确定平面内点;
15、根据各所述平面内点对应的深度置信信息确定置信度权重,并基于所述置信度权重对所述平面内点进行加权最小二乘拟合,得到所述幕布平面的法向量和平面偏置;
16、确定投影画面中心对应的投影射线与所述幕布平面的交点,将所述交点作为幕布中心点,并根据所述幕布中心点与投影镜头出瞳中心之间的距离确定所述幕布中心投影距离;
17、根据所述幕布平面的法向量在投影仪坐标系下的方向分量,确定所述幕布平面相对于投影光轴的水平目标倾角和垂直目标倾角中的至少一种。
18、优选地,所述方法还包括:
19、将投影画面的左侧、右侧、上侧和下侧代表射线分别与所述幕布平面求交,得到对应的左侧光轴方向深度、右侧光轴方向深度、上侧光轴方向深度和下侧光轴方向深度;
20、根据所述左侧光轴方向深度与所述右侧光轴方向深度之差以及幕布上的对应空间宽度,确定水平距离梯度,并根据所述上侧光轴方向深度与所述下侧光轴方向深度之差以及幕布上的对应空间高度,确定垂直距离梯度;
21、按照预设坐标方向,根据所述水平距离梯度和所述垂直距离梯度确定对应的水平校验倾角和垂直校验倾角,将所述水平校验倾角和所述垂直校验倾角分别与同方向的目标倾角进行比较;
22、当同方向的校验倾角与目标倾角之间的差值不超过预设倾角差值阈值时,保留所述目标倾角;当所述差值超过所述预设倾角差值阈值时,判定所述幕布平面的拟合结果不满足可信度条件,并重新获取深度数据或者结束本次调节。
23、优选地,所述根据所述幕布中心投影距离和第一标定模型,确定所述主对焦装置的第一初始调节位置,并根据所述目标倾角、所述幕布中心投影距离和第二标定模型,确定所述沙姆调节装置的第二初始调节位置,包括:
24、获取所述投影仪当前的光机状态和温度,将所述幕布中心投影距离、所述光机状态和所述温度输入所述第一标定模型,得到所述主对焦装置的第一初始调节位置,其中,所述第一标定模型根据不同标准投影距离下所述主对焦装置对应的中心清晰调节位置建立;
25、将所述目标倾角、所述幕布中心投影距离和所述光机状态输入所述第二标定模型,得到所述沙姆调节装置的标定调节位置,并根据所述沙姆调节装置的机械零位偏置对所述标定调节位置进行修正,得到所述沙姆调节装置的第二初始调节位置,其中,所述第二标定模型根据不同标准投影距离和不同幕布倾角组合下所述沙姆调节装置对应的全屏清晰调节位置建立。
26、优选地,所述根据表征所述主对焦装置与所述沙姆调节装置之间光学耦合关系的耦合补偿模型,对所述第一初始调节位置和所述第二初始调节位置进行联合修正,得到所述主对焦装置的第一目标调节位置和所述沙姆调节装置的第二目标调节位置,包括:
27、获取多组耦合标定样本,每组所述耦合标定样本包括标准投影距离、幕布倾角、光机状态、温度、根据所述第一标定模型确定的第一标定初始位置、根据所述第二标定模型确定的第二标定初始位置,以及所述主对焦装置和所述沙姆调节装置联合调节至投影画面全屏清晰时的第一标定实际位置和第二标定实际位置;
28、根据所述第一标定实际位置与所述第一标定初始位置之间的差值确定第一位置修正标签,并根据所述第二标定实际位置与所述第二标定初始位置之间的差值确定第二位置修正标签;
29、以所述标准投影距离、所述幕布倾角、所述光机状态、所述温度、所述第一标定初始位置和所述第二标定初始位置为模型输入,以所述第一位置修正标签和所述第二位置修正标签为模型输出,建立所述耦合补偿模型;
30、将所述幕布中心投影距离、所述目标倾角、当前的光机状态、当前温度、所述第一初始调节位置和所述第二初始调节位置输入所述耦合补偿模型,得到所述主对焦装置的第一位置修正量和所述沙姆调节装置的第二位置修正量;
31、利用所述第一位置修正量修正所述第一初始调节位置,得到所述第一目标调节位置,并利用所述第二位置修正量修正所述第二初始调节位置,得到所述第二目标调节位置。
32、优选地,所述按照所述第一目标调节位置控制所述主对焦装置调节主投影镜头的对焦位置,并按照所述第二目标调节位置控制所述沙姆调节装置调节最佳焦平面的倾斜方向,使所述最佳焦平面与幕布平面相匹配,包括:
33、按照所述第二初始调节位置控制所述沙姆调节装置驱动可动光学部件,使所述最佳焦平面的倾斜方向接近所述幕布平面的倾斜方向;
34、在所述沙姆调节装置停止并经过预设稳定时间后,按照所述第一目标调节位置控制所述主对焦装置沿预设方向调节所述主投影镜头;
35、在所述主对焦装置到达所述第一目标调节位置后,按照所述第二目标调节位置控制所述沙姆调节装置由所述第二初始调节位置调节至所述第二目标调节位置;
36、获取所述主对焦装置和所述沙姆调节装置的实际位置,将所述实际位置分别与所述第一目标调节位置和所述第二目标调节位置进行比较,在位置偏差大于预设位置偏差阈值时进行补偿调节或者重新调节,直至所述位置偏差不大于所述预设位置偏差阈值。
37、优选地,所述方法还包括:
38、当所述三维点云相对于所述幕布平面的拟合残差大于预设平面残差阈值,且幕布弯曲程度未超出所述沙姆调节装置的补偿范围时,将所述三维点云划分为多个区域,并分别对各区域的三维点进行局部平面拟合;
39、根据各局部平面的几何参数以及所述第一标定模型和所述第二标定模型,确定所述主对焦装置和所述沙姆调节装置处于不同候选调节位置组合时各区域对应的预测离焦量;
40、在所述主对焦装置和所述沙姆调节装置的允许调节范围内,根据各区域预测离焦量的加权平方和与最大预测离焦量,从不同候选调节位置组合中确定目标调节位置组合,并根据所述目标调节位置组合更新所述第一目标调节位置和所述第二目标调节位置。
41、优选地,所述方法还包括:
42、在投影仪运行过程中连续获取所述幕布中心投影距离和所述幕布平面的法向量,当连续预设帧数内所述幕布中心投影距离的变化量或者所述法向量对应的目标倾角变化量超过对应的变化阈值时,重新确定所述第一目标调节位置和所述第二目标调节位置;
43、当重新确定的第一目标调节位置与所述主对焦装置的当前调节位置之间的差值,以及重新确定的第二目标调节位置与所述沙姆调节装置的当前调节位置之间的差值均小于对应的预设位置死区时,保持所述主对焦装置和所述沙姆调节装置的当前调节位置;
44、当所述幕布平面的内点比例低于预设比例、所述幕布平面的拟合残差超过预设平面残差阈值、任一目标调节位置超出对应装置的允许调节范围或者任一调节装置发生故障时,停止执行本次调节,并保持最近一次有效调节位置或者控制所述主对焦装置和所述沙姆调节装置返回预设安全位置。
45、第二方面,本发明实施例提供了一种投影仪,包括tof传感器、主对焦装置、沙姆调节装置和控制模块;
46、所述tof传感器用于采集深度数据;
47、所述主对焦装置包括第一马达和与所述第一马达传动连接的主投影镜头,所述第一马达用于调节所述主投影镜头的对焦位置;
48、所述沙姆调节装置包括第二马达和与所述第二马达传动连接的可动光学部件,所述可动光学部件为反光镜、lcd内屏或者用于形成中继像面的光学组件,所述第二马达用于驱动所述可动光学部件,以调节最佳焦平面的倾斜方向;
49、所述控制模块分别与所述tof传感器、所述主对焦装置和所述沙姆调节装置连接,并被配置为并被配置为执行如第一方面任一项所述的方法。
50、综上所述,本发明的有益效果如下:
51、本发明实施例提供的主对焦与沙姆调节联合的无损自动对焦方法及投影仪,通过tof传感器采集投影区域的深度数据,并结合深度置信信息筛除无效深度像素、低置信度深度像素及孤立飞点,能够减小低反射、强环境光、遮挡物和多径误差对自动对焦结果的影响;通过将筛选后的深度数据转换为投影仪坐标系下的三维点云并进行幕布平面拟合,可以同时确定幕布中心投影距离和幕布平面相对于投影光轴的目标倾角,使主对焦装置调节投影光路的整体对焦位置,并使沙姆调节装置调节最佳焦平面的倾斜方向,从光学上改善大角度侧投时投影画面中心与边缘不能同时清晰的问题;通过第一标定模型、第二标定模型以及两个装置之间的耦合补偿模型确定两个装置的目标调节位置,可以吸收投影距离、镜组倍率、光机状态、温度、机械零位和装配误差产生的影响,避免对两个装置进行大范围二维遍历,从而缩短自动对焦时间;进一步的,通过距离梯度校验、拟合残差判断、软限位、位置反馈及异常回退等等处理,可以提高幕布倾角判断和机械执行的可靠性。本发明无需依赖摄像头反复投射对焦图案和搜索清晰度峰值,也不通过缩小画面、裁切边缘、降低分辨率或者数字锐化代替真实光学对焦,能够保留投影画面的有效像素和画面范围,实现投影仪大侧投全屏无损自动对焦。
版权声明:本站专利文献数据主要来源于国家知识产权局等公开渠道,由 技术新讯 进行整理汇编。页面设计及数据汇编的著作权归本站所有。全部内容仅供个人学习、科研评估与技术交流参考,严禁用于任何商业用途(包括但不限于直接生产制造、技术转让、倒卖数据等)。
免责条款:专利技术具有时效性,本站不对资料的绝对准确性、完整性和可实施性提供任何明示或暗示的担保。因参考本站内容造成的直接或间接损失,本站不承担相关法律责任。若您认为本站内容有侵权问题,请及时提供权属证明与我们联系,本站将在核实后依法处理。反馈意见:yyfuon@163.com