基于视频取色九基色ArtNet输出的灯控系统及方法与流程

摘要: 本发明涉及舞台灯光及智能照明控制,具体涉及一种基于视频播放画面实时提取颜色信息并通过artnet网络协议对九基色led灯具进行控制的灯控系统及其方法。背景技术:...
基于视频取色九基色ArtNet输出的灯控系统及方法与流程

本发明涉及舞台灯光及智能照明控制,具体涉及一种基于视频播放画面实时提取颜色信息并通过artnet网络协议对九基色led灯具进行控制的灯控系统及其方法。

背景技术:

1、随着舞台演出、演唱会、建筑亮化、文旅夜游等场景对沉浸式视觉体验要求的不断提高,视频画面与舞台灯光的实时同步控制成为关键技术之一。当前主流的视频灯光同步方案主要有rgb三基色直驱方案、预编程cue表方案及音频频谱触发方案。rgb三基色直驱方案通过分析视频帧提取主色调,直接将rgb值发送给rgb三基色led灯具,实现视频画面的颜色再现,然而,rgb三基色灯具只能表现红、绿、蓝三原色及其叠加色,无法精确还原色相、饱和度、光强三参数的独立调节,特别是无法表现琥珀色、品红色等过渡色,颜色表现力受限;预编程cue表方案预先编辑灯光程序并通过mtc(时间码)或smpte时间码与视频时间轴同步控制,需要提前制作cue(场景)表,无法响应视频内容的实时变化,灵活性差,且每次视频内容改变均需重新编程;音频频谱触发方案通过分析音频频谱特征触发预设灯光效果,然而该方案只能反映音频信息,无法直接同步视频画面的颜色信息。

2、此外,现有灯光控制系统还存在以下不足:

3、(1)布线复杂:传统dmx512协议需专用xlr线缆或独立rs-485总线,施工成本高、维护困难、单链路最多承载512通道,难以满足大规模led灯阵的部署需求;

4、(2)协议孤岛:artnet协议虽具备千兆网络传输、多universe扩展等优势,但缺乏与视频颜色提取算法的原生集成方案;

5、(3)九基色驱动难题:近年来含琥珀(amber)、品红(magenta/lime)等扩展色源的led灯具(即九基色led灯具,包括r、g、b、w、a、c、l、y、p)因色域更宽、混色更细腻而广泛应用,但业界普遍缺少将该类灯具的任意目标颜色精确分解为九通道亮度值的成熟算法,导致颜色还原失真、过渡生硬。

技术实现思路

1、本发明针对现有技术的不足,提供基于视频取色九基色artnet输出的灯控系统及方法,主要解决以下技术问题:rgb三基色led灯具颜色表现力不足、无法独立调节色相/饱和度/光强的问题;传统dmx512布线成本高、扩展性差,难以满足大规模九基色led灯阵部署需求的问题;九基色led灯具颜色还原失真的问题;以及视频源颜色信息与artnet灯光协议缺乏原生集成、视频画面与灯光难以实现毫秒级实时同步的问题。

2、本发明提供一种基于视频取色九基色artnet输出的灯控系统,包括:视频采集模块,用于实时捕获视频帧画面,提取当前帧的像素颜色数据;颜色处理模块,与所述视频采集模块信号连接,用于将所述像素颜色数据从rgb颜色空间转换至hsi颜色空间,得到目标颜色的色相h、饱和度s和光强i;九基色转换模块,与所述颜色处理模块信号连接,用于基于所述hsi值,将所述目标颜色分解为红r、绿g、蓝b、白w、琥珀a、青c、品红l、黄y、紫p九种基色的0-255级亮度值;artnet输出模块,与所述九基色转换模块信号连接,用于将所述九基色亮度值封装为符合artnet协议的udp数据包,并通过以太网广播发送至九基色led灯光设备;其中,所述九基色转换模块采用余弦相似度计算各基色参与度,且所述九基色包括r、g、b、w、a、c、l、y、p共九种基色,且对应色相角度分别为0°、120°、240°、-1(中心无色相)、45°、180°、90°、60°、270°。

3、作为优选地,所述视频采集模块支持本地视频文件解码、摄像头实时采集、屏幕画面截取三种视频源中的至少一种或多种组合;所述视频采集模块按预设帧率对视频流进行采样,所述预设帧率的范围为1-60fps。

4、作为优选地,所述九基色转换模块中,定义有九基色色相角度对照表,其中r的色相角度为0°,g的色相角度为120°,b的色相角度为240°,w无色相(中心位置),a的色相角度为45°,c的色相角度为180°,l的色相角度为90°,y的色相角度为60°,p的色相角度为270°。

5、作为优选地,所述九基色转换模块按以下公式计算各基色亮度等级:对于白色w:w= (1 - s/100) × 255,其中s为饱和度百分比;对于r、g、b、a、c、l、y、p有色基色:计算角度差anglediff = |h - h_base|,若anglediff > 180°则anglediff = 360° - anglediff;色相参与因子huefactor = max(0, cos(anglediff × π/180));基色亮度level = round(huefactor × (s/100) × (i/100) × 255)。

6、作为优选地,所述颜色处理模块包括平均像素颜色计算单元和rgb转hsi计算单元;所述平均像素颜色计算单元用于对待分析区域的所有像素r、g、b通道分别求算术平均值,得到平均rgb颜色值;所述rgb转hsi计算单元用于通过以下公式将所述平均rgb值转换为hsi值:设 max = max(r, g, b),min = min(r, g, b),delta = max - min;光强i =max / 255 × 100%;若delta = 0,则饱和度s = 0;否则s = delta / max × 100%;色相h根据最大通道值按预设角度公式计算并归一化至0°-360°范围。

7、作为优选地,所述颜色处理模块还提供色相h、饱和度s、光强i三参数独立调节的用户界面,使得用户能够通过所述用户界面手动设置所述hsi值。

8、作为优选地,所述artnet输出模块构造的artnet udp数据包格式包括:包头“art-net\0”(8字节定界符);opcode:0x5000(表示artdmx数据包,2字节,低字节序);protver:14(2字节,高字节序);sequence:单字节序列号;physical:单字节物理端口号;subuni、net:各1字节,分别表示子universe和net号;length:2字节,表示dmx数据区长度;dmx数据区:按r、g、b、w、a、c、l、y、p顺序填入九基色亮度值,每基色占9通道。

9、作为优选地,所述artnet输出模块支持8192个连续universe同时输出,每个universe对应512通道dmx512数据;所述artnet输出模块通过udp协议向artnet标准端口6454广播发送所述artnet udp数据包。

10、作为优选地,所述artnet输出模块还包括参数配置单元,所述参数配置单元用于配置以下参数中的至少一项:起始universe(取值范围0-8192);universe数量(取值范围1-16);输出帧率(取值范围1-60fps);每universe像素数(每个像素占9通道,根据对九基色定义,系统也可以9基色任意重复n个通道并生成灯库映射到视频颜色解析)。

11、本发明还提供一种基于视频取色九基色artnet输出的灯控方法,应用于上述基于视频取色九基色artnet输出的灯控系统中,包括以下步骤:

12、s1:通过视频采集模块实时捕获视频帧,提取像素颜色数据;

13、s2:通过颜色处理模块计算所述视频帧的平均rgb颜色值,并将其从rgb颜色空间转换至hsi颜色空间,得到目标颜色的色相h、饱和度s和光强i;

14、s3:通过九基色转换模块,基于所述hsi值,采用余弦相似度算法计算各基色参与度,将所述目标颜色分解为r、g、b、w、a、c、l、y、p九种基色的0-255级亮度值;

15、s4:通过artnet输出模块,将所述九基色亮度值按照artnet协议封装为udp数据包;

16、s5:通过以太网将所述artnet udp数据包广播发送至九基色led灯光设备。

17、作为优选地,步骤s2中,所述rgb颜色空间至hsi颜色空间的转换通过以下公式实现:设 max = max(r, g, b),min = min(r, g, b),delta = max - min;光强i = max /255 × 100%;若delta = 0,则饱和度s = 0;否则s = delta / max × 100%;色相h根据最大通道值按预设角度公式计算并归一化至0°-360°范围。

18、作为优选地,步骤s3中,对于白色w,其亮度按以下公式计算:w = (1 - s/100) ×255,其中s为饱和度百分比。

19、作为优选地,步骤s4中,按以下方式将九基色亮度值封装为artnet udp数据包:每个像素占用r、g、b、w、a、c、l、y、p共9通道dmx数据;所述artnet udp数据包支持8192个连续universe,每个universe对应512通道dmx512数据;通过udp协议向artnet标准端口6454发送。

20、作为优选地,步骤s5中,所述九基色led灯光设备是包含r、g、b、w、a、c、l、y、p九基色n通道的led光源的灯具,包括但不限于led摇头灯、led帕灯、led投光灯、led光束灯。

21、本发明相对于现有技术,具有以下有益的技术效果:

22、(1)通过将rgb颜色空间转换至hsi颜色空间,实现色相(h)、饱和度(s)、光强(i)三参数独立调节,颜色表现力大幅提升,且符合设计师直觉,便于手动调节,具有hsi独立三参数控制的有益效果;

23、(2)基于余弦相似度的九基色分解算法,能够将任意颜色(含过渡色、混合色、白光等)精确分解为r、g、b、w、a、c、l、y、p九种基色的0-255级亮度值,算法简洁高效,避免了传统查表插值法的存储开销与精度损失,实现了九基色精确分解算法;

24、(3)通过对琥珀a(45°)、品红l(90°)等非常规三基色的色相参与度独立计算,相比传统rgb三基色方案可显著扩展色域范围,实现更细腻的色彩过渡,特别是对肤色、琥珀光、彩光等场景的还原更加自然,更保真;

25、(4)基于artnet协议udp数据包输出,可通过千兆交换机实现8192个universe的扩展(每universe 512通道,满载支持512×8192=4194304通道),覆盖大规模led灯阵部署需求,且布线简化,仅需标准以太网线缆;

26、(5)从视频帧捕获到artnet数据包输出的端到端处理延迟小于50毫秒,输出帧率30-60fps,实现视频画面与灯光效果近乎零延迟同步,显著提升沉浸式视觉体验,实现毫秒级视频灯光同步的有益效果;

27、(6)支持本地视频文件、摄像头、屏幕采集等多种视频源,适用场景广,可灵活对接舞台vj、演唱会摄像、屏幕镜像等不同输入源,具有多视频源自适应的有益效果。