一种虚拟宠物三维场景渲染系统的制作方法
本发明涉及三维建模,更具体地,本发明涉及一种虚拟宠物三维场景渲染系统。
背景技术:
1、虚拟宠物在室内三维场景中的实时渲染显示,用于辅助构建三维数字交互环境,现有三维场景渲染技术通常采用网格模型与骨骼动画绑定的方式,并配合预设的图形渲染流程生成画面,当虚拟宠物处于包含家具、墙体和地面等复杂几何体的室内空间时,渲染过程中需要实时处理高密度毛发网格顶点的形变、复杂骨骼链的姿态切换,以及宠物网格与室内几何体之间的动态物理碰撞和空间遮挡关系,在处理由跨模态指令驱动的动态行为时,现有图形渲染管线通常将骨骼蒙皮变形、毛发物理碰撞和几何遮挡分别放在独立的渲染批次和计算通道中处理,当虚拟宠物频繁进行站立、进食、行走等姿态切换时,不同计算环节之间需要反复传递和更新顶点数据,使图形处理器的顶点缓冲区被频繁重写,同时还会带来渲染状态的频繁切换,此外,传统线性蒙皮加权算法在处理骨骼关节的大角度弯曲时,容易使关节附近的网格发生明显的体积变化,出现网格坍塌和挤压变形。
2、除了传统基于物理或几何形变的网格处理局限外,借助数据驱动与机器学习的实时模拟算法在解决此类高自由度形变与碰撞时同样存在不足,例如,授权公告号为cn111192367b的中国发明专利公开了一种可变形对象碰撞变形实时模拟方法及装置,通过提取图像状态特征并利用主成分分析降维,结合神经网络模型预测可变形对象的子空间状态以模拟碰撞效果,然而,该类方案高度依赖全局线性子空间降维,在面对虚拟宠物高密度毛发与复杂室内空间拓扑交互时,子空间投影极易丢失高频局部细节,造成高维毛发几何形变失真;且神经网络输出的子空间预测状态在解压恢复至三维空间后,由于缺少显式的空间连续距离场与动态阻尼平滑约束,在碰撞等值面边界处容易产生位置修正量跳变与频闪伪影,无法同时维持渲染帧率与几何拓扑的稳定性。
3、因此,现有三维场景渲染技术仍需要解决蒙皮变形与物理碰撞分开处理带来的数据重复更新问题,并在保持关节网格体积稳定和毛发碰撞连续平滑的同时,降低缓冲区重写及显存状态切换带来的开销。
技术实现思路
1、为解决背景技术中的问题,本发明提供了一种虚拟宠物三维场景渲染系统,包括:
2、真实宠物数据采集与网格重构模块,用于基于获取的虚拟宠物网格顶点与骨骼节点构建主导骨骼及其蒙皮权重矩阵,各主导骨骼的变换由对偶四元数表征;
3、跨模态交互指令解析与姿态时序合成模块,用于根据接收的交互指令生成旋转四元数时序张量,并利用四元数插值导出连续骨骼运动轨迹;
4、室内场景空间拓扑与动态碰撞代理构建模块,用于提取室内场景几何体表面的三维有向距离场标量数据,并构建包裹毛发生长点的物理代理网格;
5、实时图形渲染管线与光影材质计算模块,设于图形处理器的计算着色通道,用于利用蒙皮权重矩阵与旋转四元数时序张量算得归一化混合对偶四元数,施加于网格顶点坐标以计算变形顶点坐标;并在采样的三维有向距离场标量值小于预设的毛发碰撞截面半径时,基于中心差分计算当前采样点处的梯度向量,将毛发碰撞截面半径与三维有向距离场标量值的差值作为侵入深度,利用侵入深度、预设阻尼系数与梯度向量的单位向量的乘积算得位置修正量,将位置修正量叠加至变形顶点坐标,以更新动态顶点缓冲区。
6、优选的,在真实宠物数据采集与网格重构模块中,每个网格顶点绑定有4个主导骨骼,且各主导骨骼对应的蒙皮权重之和为1;蒙皮权重矩阵中,主导骨骼在当前时刻的变换由包含旋转四元数与平移四元数的对偶四元数表征,对偶四元数的对偶单位二次方为0;实时图形渲染管线与光影材质计算模块,用于按照各主导骨骼的对偶四元数与其对应的蒙皮权重的乘积加权和归一化,算出作用于网格顶点的混合对偶四元数。
7、优选的,在跨模态交互指令解析与姿态时序合成模块中,设有时序注意力解算器与时序解码网络;时序注意力解算器,用于将接收到的包含文本、语音或姿态标记的交互指令映射为潜空间特征向量;时序解码网络,用于基于潜空间特征向量解算并输出目标旋转四元数时序张量;姿态切换时,通过对当前骨骼姿态四元数与目标旋转四元数时序张量做四元数球面线性插值算子计算,导出随帧时间间隔平滑过渡的旋转四元数,其中帧时间间隔为0.016s至0.033s,姿态过渡平滑衰减系数取值为12.0。
8、优选的,室内场景空间拓扑与动态碰撞代理构建模块,提取的三维有向距离场为覆盖室内物理空间的三维纹理标量场,标量场中的数值表征空间采样点到室内最近几何体表面的带符号欧氏距离;其中,采样点位于几何体外部时标量值为正,位于几何体内部时标量值为负;物理代理网格,为包裹毛发生长点的低多边形网格结构;毛发生长点延伸出的各毛发发丝节点的世界空间坐标,由混合对偶四元数计算导出的变形顶点坐标驱动。
9、优选的,实时图形渲染管线与光影材质计算模块,设有碰撞偏转计算单元;在图形处理器的计算着色阶段,碰撞偏转计算单元用于采样三维有向距离场,获取发丝节点处的距离标量值,并在距离标量值小于预设的毛发碰撞截面半径时,利用中心差分法采样邻近体素算出三维有向距离场在发丝节点处的梯度向量,并计算发丝节点的位置修正量,满足位置修正量等于预设过冲阻尼系数、侵入深度,与梯度向量的归一化方向向量,三者的连乘积,其中毛发碰撞截面半径取值为0.002m至0.005m,过冲阻尼系数取值为0.85至0.95;碰撞偏转计算单元,用于将位置修正量叠加至发丝节点的预测坐标,并将修正后的发丝节点坐标与更新法线写入图形处理器的动态顶点缓冲区。
10、优选的,实时图形渲染管线与光影材质计算模块,还设有时序动量平滑单元;时序动量平滑单元,用于基于前一帧修正后坐标与当前帧预测坐标算得发丝节点的瞬时速度向量;当发丝节点跨越三维有向距离场的碰撞边界等值面时,时序动量平滑单元提取相邻帧间梯度向量的空间变化率,并生成加权动量平滑因子;碰撞偏转计算单元,用于在位置修正量上叠加加权动量平滑因子,平抑位置修正矢量的加速度阶跃,使毛发发丝沿场景几何体表面滑动时保持加速度连续,以消除发丝抖动与频闪伪影。
11、优选的,实时图形渲染管线与光影材质计算模块,采用多通道渲染架构,包括视锥体剔除通道、gpu计算着色通道、次表面散射着色通道以及阴影混合通道;视锥体剔除通道,用于基于层次包围盒树筛选落入视场区域内的场景图元与网格图元;gpu计算着色通道,用于逐顶点计算双四元数蒙皮变形与毛发发丝碰撞偏移,更新顶点缓冲区与法线缓冲区;次表面散射着色通道,用于基于缓存的屏幕空间深度贴图与法线贴图,采用高斯模糊核对毛发与皮肤网格做加权采样,生成光线穿透半透明材质的浅层散射效果;阴影混合通道,用于将次表面散射着色通道的输出图层与场景阴影图谱进行alpha混合,写入帧缓冲区。
12、优选的,实时图形渲染管线与光影材质计算模块中,gpu计算着色通道在渲染当前帧时,分配与主干毛发发丝生长点数量相等的计算线程做并行碰撞解算;次表面散射着色通道中,高斯模糊核的图像空间扩散半径设定为0.015m;阴影混合通道结合的阴影图谱,由绘制场景深度图生成且分辨率为2048×2048;系统在显示设备上的渲染输出帧率高于60fps。
13、优选的,真实宠物数据采集与网格重构模块构建的网格顶点拓扑矩阵与蒙皮权重矩阵,存储于图形处理器的着色器存储缓冲区;实时图形渲染管线与光影材质计算模块,在单个渲染帧周期内,通过计算着色通道更新动态顶点缓冲区,无需在不同计算通道间重写顶点数据或重复分配显存,以维持显存带宽开销稳定。
14、优选的,实时图形渲染管线与光影材质计算模块,将姿态时序合成模块生成的运动轨迹、室内场景空间拓扑与动态碰撞代理构建模块提取的三维有向距离场标量数据,统一输入至图形处理器的同一个计算着色流水线,在显存数据层面完成姿态插值、蒙皮变形、毛发碰撞修正与次表面散射光影着色的闭环解算,输出渲染画面。
15、根据本发明的上述实施例至少具有以下有益效果:
16、1、在虚拟宠物三维场景渲染中,通过采用对偶四元数统一表示骨骼节点的旋转和平移,并结合多个主导骨骼的蒙皮权重计算混合对偶四元数,可以在骨骼链发生大角度弯曲或频繁切换姿态时,使网格顶点的变形过程更加稳定,与传统线性混合蒙皮相比,该方式能够更好地保持关节附近的网格体积和几何形态,减少关节弯曲过程中出现的网格坍塌、挤压和穿模,使虚拟宠物的骨骼与肌肉区域在运动时保持自然、连续的三维几何形态。
17、2、通过物理代理网格与三维有向距离场配合处理毛发碰撞,可以将高密度毛发与室内几何体之间复杂的面片求交计算转化为空间距离和梯度方向的查询,从而降低毛发碰撞计算的处理开销,在发丝节点进入几何体边界区域时,根据侵入深度和梯度方向对其位置进行连续修正,能够减少碰撞过程中突发的位置跳变,使毛发沿家具、墙体等几何表面运动时更加平滑,降低穿模、抖动和频闪现象,同时减轻频繁碰撞计算带来的显存带宽压力和渲染状态切换开销。
18、3、通过在统一的图形渲染管线中完成双四元数蒙皮变形、三维有向距离场碰撞偏转以及次表面散射着色,可以减少骨骼动画、物理碰撞和材质渲染分别处理时产生的数据重复传递,在单个渲染帧内直接更新顶点位置和法线缓冲区,能够减少顶点缓冲区的重复写入以及不同计算通道之间的状态切换,降低显存数据传输和渲染延迟,因此,虚拟宠物在复杂室内三维场景中运动时,可以在保持几何形态和材质光影表现的同时维持较为稳定的渲染效率。
版权声明:本站专利文献数据主要来源于国家知识产权局等公开渠道,由 技术新讯 进行整理汇编。页面设计及数据汇编的著作权归本站所有。全部内容仅供个人学习、科研评估与技术交流参考,严禁用于任何商业用途(包括但不限于直接生产制造、技术转让、倒卖数据等)。
免责条款:专利技术具有时效性,本站不对资料的绝对准确性、完整性和可实施性提供任何明示或暗示的担保。因参考本站内容造成的直接或间接损失,本站不承担相关法律责任。若您认为本站内容有侵权问题,请及时提供权属证明与我们联系,本站将在核实后依法处理。反馈意见:yyfuon@163.com