一种基于原生系统与嵌入式渲染引擎融合的智能家居可视化监控方法及系统与流程
本发明涉及智能家居及三维可视化,特别涉及一种基于原生系统与嵌入式渲染引擎融合的智能家居可视化监控方法及系统。
背景技术:
1、目前,在智能中控屏或移动端展示家庭户型及设备状态,主要有以下两种技术流派:
2、1)基于web端(webgl/h5)的渲染方案。该方案通过浏览器内核加载3d模型,利用javascript进行交互逻辑开发;
3、2)基于游戏引擎的独立原生应用方案。该方案直接使用3d渲染引擎(或三维图形渲染库)或unreal等3d引擎开发,将3d场景、业务逻辑、ui界面全部打包成一个独立的移动终端操作系统(或宿主操作系统)应用程序包(apk)进行安装和运行。
4、尽管上述方案可以在部分场景下应用,但在“好房子全屋体检(设备状态监测与异常可视化诊断)”这一高性能、深融合的业务场景中,存在显著的技术缺陷:
5、1)上述web方案中,存在渲染性能与硬件的矛盾。智能家居中控屏通常采用低成本、低功耗的移动终端操作系统(或宿主操作系统)芯片,gpu算力有限。web方案依赖浏览器内核(webview)进行图形转换,资源开销大,在低配设备上极易出现帧率低、卡顿现象,且难以实现高品质的光影渲染效果,无法满足高端样板间的展示需求。
6、2)上述的独立原生应用方案中,存在系统架构割裂与开发成本高昂的问题,这是目前行业面临的最大痛点。智能家居中控系统的核心业务(如账号体系、复杂的设备控制协议栈、语音交互服务等)通常由移动终端操作系统(或宿主操作系统)原生代码(java/kotlin)构建和维护;
7、若采用现有的独立3d渲染引擎(或三维图形渲染库)apk方案,3d应用作为一个完全独立的进程和程序实体,无法直接复用移动终端操作系统(或宿主操作系统)原生层已有的核心业务逻辑。这导致开发团队被迫在3d引擎内部(通常使用c#或c++)重新开发一套完整的登录、设备连接、协议解析等逻辑。
8、这种架构不仅导致巨大的重复开发工作量,造成代码冗余,而且让3d应用与移动终端操作系统(或宿主操作系统)系统层处于割裂状态,难以保证双边业务逻辑的一致性和稳定性,维护成本极高。
9、3)资源管理僵化,无法满足“大货”交付要求。
10、传统3d方案通常将户型模型硬编码在安装包内。面对房地产项目成千上万种不同的户型,传统方式需要为每个户型打包一个独立的apk,或者预置海量资源导致包体过大,无法通过单一应用适配所有户型,不具备动态扩展能力。
11、4)低配设备下的进程保活难题。
12、在低内存的移动终端操作系统(或宿主操作系统)中控屏上,高负载的3d进程极易被系统内核杀除。传统方案缺乏移动终端操作系统(或宿主操作系统)原生层与3d渲染层之间的深度协同保活机制,导致用户在切换界面时3d场景频繁崩溃或重启,体验中断。
技术实现思路
1、本公开提供了一种基于原生系统与嵌入式渲染引擎融合的智能家居可视化监控方法及系统,在移动终端操作系统(或宿主操作系统)中控屏上通过3d渲染引擎(或三维图形渲染库)实现bim模型轻量化渲染及全屋设备状态实时交互。
2、该方法包括:宿主应用基于用户账号获取房屋标识符,并校验本地是否存在对应的轻量化bim资源包,若不存在则从云端动态加载;宿主应用启动嵌入式3d渲染引擎,并将资源包路径传递给引擎,进行运行时加载及场景构建;宿主应用通过物联网协议栈,实时获取物理设备状态数据,并通过跨语言接口将状态数据同步至3d渲染引擎;3d渲染引擎根据状态数据更新虚拟设备模型的渲染表现。
3、具体的,包括以下步骤:
4、s1,将bim模型轻量化与资源标准化处理,打包成引擎资源包上传至云端服务器;
5、s2,构建嵌入式3d渲染引擎sdk:将3d渲染引擎或三维图形渲染库作为监控终端操作系统的库文件,通过约定接口与监控终端操作系统进行调用和通信;
6、s3,监控终端动态加载户型对应的引擎资源包,构建3d显示场景;
7、s4,监控终端操作系统实时获取房屋内物理设备状态,并同步到3d显示场景;用户通过对3d显示场景中虚拟设备模型的控制,实现对物理设备的控制。
8、进一步的,所述步骤s1具体包括:
9、原始的建筑bim模型导入dcc数字内容创作工具,剔除不可视的面与非必要结构数据;
10、模型轻量化处理,包括:对模型网格进行减面优化,对贴图进行压缩;
11、引擎资源包打包,包括:将不同户型的模型、材质、光照贴图分别打包成独立的3d渲染引擎或三维图形渲染库引擎资源包,并上传至云端服务器,每个户型对应唯一的houseid。
12、进一步的,所述步骤s2具体包括:
13、将3d渲染引擎或三维图形渲染库导出为监控终端操作系统的archive库文件;
14、约定3d渲染引擎或三维图形渲染库端与监控终端操作系统端的通信接口,包括双方调用和通信协议,用于传输设备id、状态值、控制指令。
15、进一步的,所述步骤s3具体包括:
16、当用户在监控终端操作系统中控屏登录后,监控终端操作系统根据用户账号获取当前房屋的houseid;
17、监控终端操作系统原生层检查本地是否有该标识符对应的最新引擎资源包,若没有或版本老旧,则从云端下载至本地沙盒路径;
18、监控终端操作系统应用在一个sub-activity或fragment中启动3d渲染引擎或三维图形渲染库,并通过通信接口将本地资源路径传递给3d渲染引擎或三维图形渲染库;
19、3d渲染引擎或三维图形渲染库接收到路径后,在运行时动态加载路径对应的引擎资源包,实例化户型模型、家具及关联的iot设备模型。
20、进一步的,所述步骤s4具体包括:
21、s41,设备状态同步:
22、1)监控终端操作系统原生层通过iot协议栈实时获取房屋内物理设备状态;
23、2)监控终端操作系统通过接口,将获取的状态数据发送给3d渲染引擎或三维图形渲染库;
24、3)3d渲染引擎或三维图形渲染库解析数据,实时改变3d显示场景中对应模型的状态;
25、s42,可视化控制:
26、1)用户在3d显示场景中点击虚拟设备模型;
27、2)3d渲染引擎或三维图形渲染库通过接口回调,将用户的控制动作通知监控终端操作系统原生层;
28、3)监控终端操作系统原生层接收指令,下发至物理硬件,完成控制。
29、进一步的,所述方法还包括以下步骤:
30、s5,系统检测到设备异常时,在3d显示场景中进行预警提示。
31、进一步的,所述步骤s5具体包括:
32、当监控终端操作系统检测到设备离线、故障或能耗异常时,监控终端操作系统原生层发送报警指令;
33、3d渲染引擎或三维图形渲染库在对应的3d模型位置生成高亮提示框或浮动ui标签,展示故障位置。
34、进一步的,所述方法还包括以下步骤:
35、s6,低性能设备的进程优化与保活,具体包括:
36、将3d渲染引擎或三维图形渲染库模块放入独立的监控终端操作系统进程,与主业务进程分离,防止渲染崩溃影响主控功能;
37、在监控终端操作系统原生层监听3d渲染引擎或三维图形渲染库进程状态;
38、当检测到非用户主动退出的进程死亡,守护服务记录当前上下文,并在资源允许时自动重启3d渲染引擎或三维图形渲染库进程,并恢复之前的场景状态;
39、当用户切换到其他非3d页面时,通过指令暂停3d渲染引擎或三维图形渲染库的渲染循环。
40、应用上述方法的一种基于原生系统与嵌入式渲染引擎融合的智能家居可视化监控系统,主要包括:
41、位于可视化监控终端的原生宿主层、3d渲染引擎层、调用通信接口层、以及位于云端的资源层,其中:
42、原生宿主层:作为系统的核心控制中心,用于承载用户账号体系、iot设备协议栈、网络连接及后台守护服务;
43、3d渲染引擎层:以监控终端操作系统library的形式嵌入宿主应用中,用于bim模型的解析与渲染;
44、调用通信接口层:作为连接原生业务与渲染表现的桥梁,用于在监控终端操作系统虚拟机与3d引擎运行时两者之间进行双向消息传递,确保数据的一致;
45、云端资源层:用于存储轻量化处理后的bim 引擎资源包,并根据终端请求进行按需分发。
46、与现有技术相比,本公开的有益效果是:①通过将渲染引擎作为库文件嵌入原生应用,解决了传统独立3d应用架构割裂、包体过大及无法复用原生业务逻辑的问题;②实现了高性能的bim模型轻量化渲染及全屋设备状态的实时可视化监控;③通过自定义的资源热更新机制实现“千人千面”的户型加载;④通过跨语言调用接口层建立的双向通信桥梁,实现了3d场景与物理设备状态的实时同步。
版权声明:本站专利文献数据主要来源于国家知识产权局等公开渠道,由 技术新讯 进行整理汇编。页面设计及数据汇编的著作权归本站所有。全部内容仅供个人学习、科研评估与技术交流参考,严禁用于任何商业用途(包括但不限于直接生产制造、技术转让、倒卖数据等)。
免责条款:专利技术具有时效性,本站不对资料的绝对准确性、完整性和可实施性提供任何明示或暗示的担保。因参考本站内容造成的直接或间接损失,本站不承担相关法律责任。若您认为本站内容有侵权问题,请及时提供权属证明与我们联系,本站将在核实后依法处理。反馈意见:yyfuon@163.com