实时推理地图服务方法、服务系统、存储介质和电子设备与流程

摘要: 本发明涉及遥感影像在线服务与人工智能推理,尤其涉及一种实时推理地图服务方法、服务系统、存储介质和电子设备。背景技术:1、现有遥感影像地图服务通常采用离线处理流程...
实时推理地图服务方法、服务系统、存储介质和电子设备与流程

本发明涉及遥感影像在线服务与人工智能推理,尤其涉及一种实时推理地图服务方法、服务系统、存储介质和电子设备。

背景技术:

1、现有遥感影像地图服务通常采用离线处理流程:先对整景遥感影像进行辐射校正、重投影、金字塔构建和切片,再将切片文件发布为 wmts、xyz 或 tms 服务。该方式适合稳定底图分发,但当业务需要频繁更换专题样式、叠加 ai 解译结果或响应临时监测任务时,仍需重新处理影像、重新切片和重新发布服务,整体链路较长。

2、在遥感智能解译方面,常见方案往往先批量运行模型,得到矢量或栅格结果后再入库发布。此类方案的模型输出与地图瓦片服务相互分离,前端需要分别加载影像底图、指数图层和解译图层,再在浏览器端进行叠加。对于三维场景、海量数据和弱网条件,前端叠加会增加请求数量、显存占用和渲染压力。

3、随着 cog 等云原生栅格格式成熟,遥感影像可以通过块索引和内部金字塔实现按需读取。但现有服务多将 cog 用作静态影像分发来源,并未充分利用瓦片请求的空间边界直接驱动大模型推理。另一方面,通用分割模型或遥感大模型虽具备较强语义提取能力,但若缺少与瓦片调度、显存复用、缓存策略和专题渲染的协同机制,仍难以稳定支撑在线低延迟服务。

技术实现思路

1、有鉴于此,本发明旨在提供一种实时推理地图服务方法,采用瓦片请求、云原生栅格按块读取、遥感大模型推理、光谱指数计算、解译结果栅格化和瓦片融合编码整合为统一流水线,使遥感影像服务能够按需生成具有业务语义的动态瓦片,解决了前端叠加会增加请求数量、显存占用和渲染压力,未充分利用瓦片请求的空间边界直接驱动大模型推理,难以稳定支撑在线低延迟服务等的问题。

2、为解决上述问题,本发明提供一种实时推理地图服务方法,包括:

3、s1、接收来自三维地图客户端的瓦片请求,所述瓦片请求至少包含瓦片层级z、列号x、行号y和目标空间参考信息;

4、s2、根据所述瓦片请求计算与目标瓦片对应的云优化geotiff数据读取窗口;

5、s3、由 cpu 读取原始遥感影像数据块并执行光谱指数预处理;

6、s4、由gpu 对所述数据块执行遥感大模型在线推理,获得目标地物的分割掩膜或解译矢量面;

7、s5、将原始遥感影像、光谱指数结果和所述分割掩膜或解译矢量面实时融合为单张栅格瓦片;

8、s6、将所述栅格瓦片按照 wmts 或兼容瓦片服务协议返回给所述三维地图客户端。

9、进一步的,在步骤s2中,所述云优化 geotiff 数据读取窗口由瓦片包围盒、目标分辨率、cog 内部金字塔层级和块索引共同确定,使后端仅读取目标瓦片覆盖范围所需的数据块。

10、进一步的,在步骤s3中,所述光谱指数预处理包括基于红光、近红外、短波红外或绿光波段计算 ndvi、ndwi、ndbi 或其组合,并将计算结果作为 gpu 推理输入通道、专题渲染通道或后续透明度融合权重。

11、进一步的,在步骤s4中,所述光谱指数预处理包括基于红光、近红外、短波红外或绿光波段计算 ndvi、ndwi、ndbi 或其组合,并将计算结果作为 gpu 推理输入通道、专题渲染通道或后续透明度融合权重。

12、进一步的,cpu 渲染与 gpu 推理的流水线并行调度 ,cpu 线程在读取当前瓦片数据块的同时预取相邻瓦片数据块,gpu 线程在独立推理流中执行模型推理,并通过任务标识、瓦片键、显存缓冲区句柄和完成状态进行同步。

13、进一步的,所述同步的方法采用micp任务同步协议;

14、所述micp任务同步协议至少包含tile_key、cog_window、model_profile、prompt_token、gpu_stream_id、cache_digest 和 sync_seq字段,用于在请求网关、数据读取模块、推理模块、融合模块和瓦片编码模块之间传递任务状态。

15、进一步的,在步骤s5中,所述分割掩膜或解译矢量面在返回前被实时栅格化为与目标瓦片同尺寸的透明覆盖层,并与原始遥感影像按照类别色带、置信度、光谱指数阈值或用户配置透明度进行合成。

16、进一步的,所述步骤s1中 ,所述瓦片请求还包含用户在三维地图页面输入的文字指令,后端根据所述文字指令生成专题图层参数或模型提示词,使目标瓦片按需呈现与所述文字指令对应的专题影像。

17、进一步的,所述文字指令包括地物类别、空间限定、时间限定、渲染样式或阈值条件,所述后端将所述文字指令与瓦片空间范围共同编码为多模态推理任务。

18、进一步的,所述的方法还包括:

19、s7、对已生成瓦片建立多级缓存,缓存键由瓦片层级、行列号、影像版本、模型版本、光谱指数参数、文字指令摘要和渲染样式摘要共同生成。

20、进一步的,当影像源更新、模型版本变更或用户指令变化时,系统仅使相关缓存片段失效。

21、进一步的,所述三维地图客户端包括cesium、mapboxgl、openlayers或自研三维地理信息平台。

22、进一步的,所述步骤s2中,对于瓦片边界处需要补齐的数据,采用边界扩展或透明填充方式处理。

23、一种基于瓦片请求驱动的遥感大模型实时推理地图服务系统,通过人如上任意一项所述的实时推理地图服务方法进行试试推理地图服务,所述系统包括:

24、瓦片请求网关,用于解析z/x/y坐标范围、影像源、输出格式和文字指令,生成统一tile_key;

25、cog读取器,用于依据tile_key反算读取窗口,调用http range或对象存储接口读取最小数据块;

26、cpu预处理队列,用于完成波段选择、归一化、光谱指数计算、数据类型转换和相邻瓦片预取;

27、gpu推理调度器,用于复用模型实例和显存缓冲,在独立cuda stream中执行遥感大模型推理;

28、栅格化与融合模块,用于将矢量面、类别掩膜和置信度图投影到瓦片像素网格,并与底图进行色带融合;

29、缓存管理器,用于依据影像版本、模型版本、文字指令摘要和样式参数建立可失效缓存;

30、各模块之间通过micp任务同步协议传递瓦片键、数据窗口、模型参数、显存缓冲句柄和任务状态。

31、进一步的,所述gpu推理调度器支持的模型包括remote-sam模型及其他遥感分割模型、目标检测模型或多模态视觉语言模型。

32、进一步的,所述系统部署于具备gpu推理能力的服务器或云边协同节点。

33、一种计算机可读存储介质,通过所述存储介质存储有计算机程序,所述程序被处理器执行时实现如上任一项所述的一种基于瓦片请求驱动的遥感大模型实时推理地图服务方法。

34、一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时实现如上任一项所述的一种基于瓦片请求驱动的遥感大模型实时推理地图服务方法。

35、相对于现有技术,本发明所述的一种实时推理地图服务方法,具有以下优势:

36、本技术方案优点在于不需要提前生成固定瓦片目录,减少海量影像更新时的离线处理、存储和发布成本,瓦片请求直接驱动 gpu 在线推理,前端获得的不是静态底图,而是融合了遥感语义结果的业务瓦片,原始影像、光谱指数和解译结果在服务端合成为单张瓦片,降低前端多图层叠加压力,用户文字指令可改变模型提示词和专题渲染参数,使同一影像源按需生成不同专题图层,cpu 数据读取、gpu 模型推理、矢量栅格化和瓦片编码通过micp 协议同步,提高连续浏览时的响应稳定性。