一种光场相机的光场重建方法及系统与流程

技术特征：
1.一种光场相机的光场重建方法，其特征在于，包括：获取光场信号和光强分布；对一条线的值的参数空间进行采样，该线的第一侧的第一对端点，与该线的第一侧不同的该线的第二侧的第二对端点，以及用于的相应调色板索引深度图像的像素块的每个像素；获取光场的稀疏表示模型，以及所述光强分布的傅里叶转换公式；基于采样和通过一个或多个计算机处理器的操作来确定线路的值、第一对端点、第二对端点以及用于最小化误差的每个像素的相应调色板索引，其中确定的值对于每个像素的各个调色板索引与所确定的第一对端点或第二对端点相关联；获取光场图像的碎片化观测值和最大似然估计值；存储线路的确定值、第一对端点、第二对端点和每个像素的各个调色板索引。2.如权利要求1所述的方法，其特征在于，还包括：获取光场的字典训练与稀疏编码模型；通过使用该行的所述像素块的深度数据来压缩所述像素块的功能、所述第一对端点和所述第二对终点。3.如权利要求2所述的方法，其特征在于，对于所述像素块的每个像素，所述方法还包括：获取落在微透镜阵列前表面的第一波阵面坐标；基于像素相对于线所在的半空间来选择第一对端点或第二端点对中的一个；像素的深度数据中的深度值被捕捉到与所选第一对端点或第二对端点相关联的最近调色板索引。4.如权利要求2所述的方法，其特征在于，还包括：获取虚拟角度图像相机阵列获取的光场各角度图像的残差；至少部分地基于深度图像与一个或多个先前深度图像之间的差异，来确定深度图像的掩模。5.如权利要求4所述的方法，其特征在于，还包括：获取相位变化；生成四叉树数据结构，该四叉树数据结构包括与被确定的掩模掩蔽的深度图像的像素相关联的节点，其中所生成的四叉树数据结构的每个节点指示多个函数的相应函数和与相应函数相关联的系数值，并且其中多个函数包括该功能。6.如权利要求5所述的方法，其特征在于，还包括:获取虚拟角度图像；通过以下方式生成四叉树数据结构的运行时打包形式：自顶向下和深度优先遍历四叉树数据结构；将四叉树数据结构的节点复制到生成的运行时打包形式，这些节点被配置为在误差范围内逼近深度图像的对应部分。7.如权利要求6所述的方法，其特征在于，还包括:获取第二波阵面的坐标；将生成的运行时打包表单和与光场探测器相关的其他运行时打包表单组装成视频流。
8.如权利要求7所述的方法，其特征在于，还包括：对于要显示给用户的视频帧，选择光场探测器的面部的一个或多个可见部分；确定要更新的一个或多个可见部分；构建索引，以索引组装视频流；至少部分地基于索引和要更新的可见部分中的一个或多个部分来确定要解压缩的视频流的一个或多个部分；为所确定的视频流的一个或多个部分产生一个或多个线程组，其中一个或多个线程组中的每一个对视频流的所确定的一个或多个部分中的相应像素块进行解压缩。9.一种光场相机的光场重建系统，其特征在于，所述系统包括：第一获取模块，用于获取光场信号和光强分布；采样模块，用于对一条线的值的参数空间进行采样，该线的第一侧的第一对端点，与该线的第一侧不同的该线的第二侧的第二对端点，以及用于的相应调色板索引深度图像的像素块的每个像素；第二获取模块，用于获取光场的稀疏表示模型，以及所述光强分布的傅里叶转换公式；确定模块，用于基于采样和通过一个或多个计算机处理器的操作来确定线路的值、第一对端点、第二对端点以及用于最小化误差的每个像素的相应调色板索引，其中确定的值对于每个像素的各个调色板索引与所确定的第一对端点或第二对端点相关联；第三获取模块，用于获取光场图像的碎片化观测值和最大似然估计值；存储模块，用于存储线路的确定值、第一对端点、第二对端点和每个像素的各个调色板索引。10.一种光场相机的光场重建装置，其特征在于，包括：处理器，所述处理器用于执行如权利要求1～8中任一项所述的方法。

技术总结
本申请提供的一种光场相机的光场重建方法及系统，涉及光场相机技术领域，该方法包括：获取光场信号和光强分布；对一条线的值的参数空间进行采样，该线的第一侧的第一对端点，与该线的第一侧不同的该线的第二侧的第二对端点，以及用于的相应调色板索引深度图像的像素块的每个像素；获取光场的稀疏表示模型，以及光强分布的傅里叶转换公式；基于采样和通过一个或多个计算机处理器的操作来确定线路的值、第一对端点、第二对端点以及用于最小化误差的每个像素的相应调色板索引；获取光场图像的碎片化观测值和最大似然估计值；存储线路的确定值、第一对端点、第二对端点和每个像素的各个调色板索引。调色板索引。调色板索引。


技术研发人员：ꢀ(74)专利代理机构
受保护的技术使用者：北京拙河科技有限公司
技术研发日：2022.04.07
技术公布日：2022/8/16