面向情绪调节的情感可编辑三维场景生成方法和装置
本公开的实施例涉及计算机,具体涉及面向情绪调节的情感可编辑三维场景生成方法和装置。
背景技术:
1、随着虚拟现实、增强现实、数字娱乐及心理治疗等领域的快速发展,对能够主动诱发特定情绪状态的三维数字场景的需求日益迫切。例如,在虚拟现实暴露疗法中,需要生成能诱发“安全感”或“可控焦虑感”的环境;在沉浸式叙事游戏中,需要动态调整场景以匹配剧情所需的“紧张”、“悲伤”或“欢快”氛围;在数字艺术创作中,创作者希望直接以“情绪”作为输入来驱动场景生成。目前,在进行情感关联三维场景生成时,通常采用的方式为:基于手工规则与参数调整的方法:预先定义一系列情绪标签(如“宁静”、“欢快”)与场景视觉参数(如色调、亮度、物体类型)之间的映射规则。生成场景时,系统根据选定的情绪标签,调用对应的规则集来调整预置场景模板的参数。基于情感标签驱动的端到端生成方法:输入目标情绪标签(如“令人放松的客厅”),模型直接生成对应的二维图像或三维场景表示。
2、然而,当采用上述方式进行情感关联三维场景生成时,经常会存在如下技术问题:
3、系统生成的编辑指令与目标情绪之间的因果逻辑弱,导致一次编辑后场景情绪状态的改变方向不可预测,常常需要多次盲目尝试,显著增加了达到目标所需的平均迭代次数,消耗了不必要的计算资源(cpu/gpu周期)。
4、现有三维场景情感属性编辑方法由于缺乏对待编辑场景当前情绪状态与目标情绪状态的量化差距分析和对待编辑场景视觉线索状态与目标情绪差距的系统性分析,以及缺乏结构化的反事实假设生成与评估机制,导致无法准确预测每次调整对情绪状态的影响方向,必须依赖人工反复试错调整参数,造成后续二维编辑和三维重建的迭代次数过多,gpu和cpu资源占用过高。
5、该背景技术部分中所公开的以上信息仅用于增强对本公开构思的背景的理解,并因此,其可包含并不形成本国的本领域普通技术人员已知的现有技术的信息。
技术实现思路
1、本公开的内容部分用于以简要的形式介绍构思,这些构思将在后面的具体实施方式部分被详细描述。本公开的内容部分并不旨在标识要求保护的技术方案的关键特征或必要特征,也不旨在用于限制所要求的保护的技术方案的范围。
2、本公开的一些实施例提出了面向情绪调节的情感可编辑三维场景生成方法和装置,来解决以上背景技术部分提到的技术问题。
3、第一方面,本公开的一些实施例提供了一种面向情绪调节的情感可编辑三维场景生成方法,该方法包括:接收原始三维场景和目标情绪需求;基于上述原始三维场景和上述目标情绪需求,通过混合反事实推理生成统一场景编辑指令;基于上述统一场景编辑指令,对上述原始三维场景进行编辑,生成候选三维场景;对上述候选三维场景进行多视角渲染与情绪需求分析,得到分析结果;响应于上述分析结果满足上述目标情绪需求,将上述候选三维场景确定为情感诱发三维场景。
4、第二方面,本公开的一些实施例提供了一种面向情绪调节的情感可编辑三维场景生成装置,装置包括:接收单元,被配置成接收原始三维场景和目标情绪需求;生成单元,被配置成基于上述原始三维场景和上述目标情绪需求,通过混合反事实推理生成统一场景编辑指令;编辑单元,被配置成基于上述统一场景编辑指令,对上述原始三维场景进行编辑,生成候选三维场景;分析单元,被配置成对上述候选三维场景进行多视角渲染与情绪需求分析,得到分析结果;确定单元,被配置成响应于上述分析结果满足上述目标情绪需求,将上述候选三维场景确定为情感诱发三维场景。
5、第三方面,本公开的一些实施例提供了一种电子设备,包括:一个或多个处理器;存储装置,其上存储有一个或多个程序,当一个或多个程序被一个或多个处理器执行,使得一个或多个处理器实现上述第一方面任一实现方式所描述的方法。
6、第四方面,本公开的一些实施例提供了一种计算机可读介质,其上存储有计算机程序,其中,程序被处理器执行时实现上述第一方面任一实现方式所描述的方法。
7、本公开的上述各个实施例具有如下有益效果:通过本公开的一些实施例的面向情绪调节的情感可编辑三维场景生成方法,通过基于情绪状态量化模型与心理中介因子映射的确定性因果推理,并结合双流指令协同与闭环迭代优化的手段,实现减少二维编辑模型调用次数、三维重建次数、多视角渲染次数以及对应图形处理器和中央处理器计算资源占用的技术效果。具体来说,造成计算资源浪费的原因在于:系统生成的编辑指令与目标情绪之间的因果逻辑弱,导致一次编辑后场景情绪状态的改变方向不可预测,常常需要多次盲目尝试,显著增加了达到目标所需的平均迭代次数,消耗了不必要的计算资源(cpu/gpu周期)。基于此,本公开的一些实施例的面向情绪调节的情感可编辑三维场景生成方法,首先,接收原始三维场景和目标情绪需求。由此,可以为后续基于量化情绪目标的自动化编辑流程提供了明确的输入条件。其次,基于上述原始三维场景和上述目标情绪需求,通过混合反事实推理生成统一场景编辑指令。由此,可以通过情绪状态向量到心理中介因子的确定性映射与反事实推理,生成高准确率的初步编辑指令,从源头上减少因指令不准确导致的无效迭代。然后,基于上述统一场景编辑指令,对上述原始三维场景进行编辑,生成候选三维场景。由此,可以通过解耦的风格与内容编辑模型高效执行上述高准确率指令,并将二维编辑结果通过世界模型准确映射为三维高斯溅射表示。再然后,对上述候选三维场景进行多视角渲染与情绪需求分析,得到分析结果。由此,可以通过多视角的量化情绪评估与定性分析,生成精准的、与生成模块语义对齐的优化反馈,指导后续迭代的精确方向,避免盲目搜索。最后,响应于上述分析结果满足上述目标情绪需求,将上述候选三维场景确定为情感诱发三维场景。由此,可以通过客观的、基于情绪状态距离阈值的判断,自动终止优化循环,直接输出达标结果,避免不必要的后续计算。该实施方式实现减少二维编辑模型调用次数、三维重建次数、多视角渲染次数以及对应图形处理器和中央处理器计算资源占用的技术效果。
1.一种面向情绪调节的情感可编辑三维场景生成方法,其特征在于,包括:
2.根据权利要求1所述的方法,其中,所述基于所述统一场景编辑指令,对所述原始三维场景进行编辑,生成候选三维场景,包括:
3.根据权利要求2所述的方法,其中,所述全局美学属性包括:光照、色温、饱和度中的至少一种,所述局部语义内容包括物体增删、物体替换、材质修改中的至少一种。
4.根据权利要求2所述的方法,其中,所述风格编辑模型和所述内容编辑模型均基于文生图架构构建,并利用情感场景数据集进行细粒度调优,所述情感场景数据集中的情感场景数据为包括源场景、目标场景和对应的自然语言编辑指令的三元组。
5.根据权利要求1所述的方法,其特征在于,所述方法还包括:
6.根据权利要求1所述的方法,其特征在于,所述对所述候选三维场景进行多视角渲染与情绪需求分析,得到分析结果,包括:
7.一种面向情绪调节的情感可编辑三维场景生成方法装置,包括:
8.一种电子设备,包括:
9.一种计算机可读介质,其上存储有计算机程序,其中,所述程序被处理器执行时实现如权利要求1至6中任一所述的方法。
版权声明:本站专利文献数据主要来源于国家知识产权局等公开渠道,由 技术新讯 进行整理汇编。页面设计及数据汇编的著作权归本站所有。全部内容仅供个人学习、科研评估与技术交流参考,严禁用于任何商业用途(包括但不限于直接生产制造、技术转让、倒卖数据等)。
免责条款:专利技术具有时效性,本站不对资料的绝对准确性、完整性和可实施性提供任何明示或暗示的担保。因参考本站内容造成的直接或间接损失,本站不承担相关法律责任。若您认为本站内容有侵权问题,请及时提供权属证明与我们联系,本站将在核实后依法处理。反馈意见:yyfuon@163.com