直播设备及其控制方法和装置与流程
本技术涉及摄影照明控制领域,尤其涉及一种直播设备及其控制方法和装置。
背景技术:
1、在摄影、直播、视频会议等场景中,多灯直播设备控制是实现高质量人像拍摄的关键技术。传统的直播设备控制方法通常依赖于固定的灯具物理布局,按照左灯调左脸、右灯调右脸的方式进行调光。
2、然而,在实际应用过程中,由于实际物理场景的不同,灯具的摆放位置可能千变万化,可能位于人物同侧、对侧或中心位置,固定的灯具物理布局无法适应灵活多变的布光需求,导致左右脸的光比不可控,不利于提升拍摄时的曝光控制精度。
技术实现思路
1、有鉴于此,本技术实施例提供了一种直播设备及其控制方法和装置,以解决现有技术中固定的灯具物理布局无法适应灵活多变的布光需求,导致左右脸的光比不可控,不利于提升拍摄时的曝光控制精度的问题。
2、本技术实施例的第一方面提供了一种直播设备控制方法,所述直播设备包括摄像头、控制终端和至少两个灯具,所述方法的执行主体为控制终端,所述方法包括:接收摄像头获取的场景图像,并识别所述场景图像中的目标人物;获取各个灯具的设备信息和输出参数,根据各个灯具对所述目标人物的人脸不同区域的曝光贡献差异,确定达到目标曝光值对应的灯具参数;根据所述灯具参数对所述至少两个进行亮度调整。
3、通过摄像头获取场景图像,识别场景图像中包括的目标人物后,基于各个灯具对场景图像中的目标人物的人脸不同区域的曝光贡献差异,确定目标曝光值对应的灯具参数,基于该灯具参数对至少两个进行亮度调整,从而能够使得在不同场景下能够自适应确定目标曝光值对应的灯具参数,有利于提升拍摄时的曝光控制精度。
4、在可能的实现方式中,根据各个灯具对所述目标人物的人脸不同区域的曝光贡献差异,确定达到目标曝光值对应的灯具参数,包括:控制各个灯具轮流点亮,通过摄像头获取各个灯具在目标人物的左脸区域和右脸区域产生的曝光值增量,并获取人脸的左脸区域和右脸区域的目标曝光值;根据所述灯具在人脸的左脸区域和右脸区域产生的曝光值增量,确定各个灯具的灯具类型;根据所述目标曝光值和所述灯具类型,确定达到目标曝光值对应的灯具参数。
5、通过控制各个灯具轮流点亮并获取其对人脸左右区域产生的曝光值增量,本技术实施例能够准确识别各灯具的实际照明作用,突破了传统按物理位置固定控制的局限。系统根据曝光值增量差异判断灯具类型,例如若某灯具对左脸区域的曝光值增量明显大于右脸区域,则判定该灯具主要照亮左脸,归类为左侧主光;若对右脸区域的曝光值增量明显大于左脸区域,则归类为右侧主光;若对左右脸区域的曝光值增量基本相当,则判定该灯具均匀照亮面部,归类为顶光或正面光。基于识别出的灯具类型和目标曝光值,系统自动计算各灯具的亮度,从而实现对任意摆放的灯具进行精准的亮度调整。
6、在可能的实现方式中,控制各个灯具轮流点亮,通过摄像头获取各个灯具在目标人物的左脸区域和右脸区域产生的曝光值增量,包括:控制各个灯具轮流点亮,获取各个灯具的点亮后亮度和点亮前的亮度基准值;确定所述点亮后亮度和所述亮度基准值的比值,根据所述比值确定所述曝光值增量。通过轮流点亮灯具,获取各个灯具点亮后亮度和点亮前的亮度基准值,确定点亮后亮度与点亮前的基准亮度的比值,基于该比值确定曝光值增量,可有效提升曝光值增量的准确度。
7、在可能的实现方式中,获取所述人脸的左脸区域和右脸区域的目标曝光值,根据所述目标曝光值和所述灯具类型,对所述灯具进行亮度调整之后,所述方法还包括:在所述灯具达到亮度极限且未达到所述目标曝光值时,触发相机参数调整;通过调节相机快门和/或感光度,使所述人脸的实际曝光值与目标曝光值匹配,或者,当灯具亮度达到极限且仅靠灯具无法使左右脸均达到各自的目标曝光值时,优先保证亮面的实际曝光值与其目标曝光值匹配,并在该条件下,将暗面的实际曝光值调整至尽可能接近其目标曝光值,其中,在人脸的左脸和右脸中,实际曝光量较高的一面为亮面,实际曝光量较低的一面为暗面。这种兜底机制可在灯具功率受限的情况下,系统仍能通过调整相机参数弥补曝光不足,实现目标曝光效果,或者基于目标曝光值实现接近目标曝光效果。
8、在可能的实现方式中,当灯具亮度达到极限且仅靠灯具无法使左右脸均达到各自的目标曝光值时,优先保证亮面的实际曝光值与其目标曝光值匹配,并在该条件下,将暗面的实际曝光值调整至尽可能接近其目标曝光值,包括:当灯具亮度达到极限且仅靠灯具无法使左右脸均达到各自的目标曝光值时,调整所述相机参数,使所述亮面的实际曝光值与其目标曝光值之间的偏差属于第一误差范围;保持所述亮面的实际曝光值与所述目标曝光值之间的偏差属于第一误差范围,调整所述相机参数,使所述暗面的实际曝光值与其目标曝光值之间的偏差属于第二误差范围,其中,所述第一误差范围小于所述第二误差范围。在灯具亮度达到极限时,通过相机参数调节,使得亮面优先匹配,使得拍摄的人脸的整体观感更佳。
9、在可能的实现方式中,在通过调节相机快门和/或感光度,使所述人脸的实际曝光值与目标曝光值匹配之前,所述方法还包括:获取所述目标曝光值中的亮面与暗面的曝光值的目标比值;在保证所述人脸的实际曝光值的实际比值与所述目标比值匹配的前提下,使亮面的实际曝光值尽可能接近亮面的目标曝光值,且小于所述目标曝光值。通过目标比值调整实际曝光值,使得实际曝光值的亮面与暗面的实际比值与目标比值匹配,从而在相机调整曝光时,能够更为可靠地达到目标曝光效果。
10、在可能的实现方式中,获取所述人脸的左脸区域和右脸区域的目标曝光值,包括:获取环境参数并识别拍摄画面中的目标人物的面部肤色特征;根据所述面部肤色特征确定肤色等级,根据所述肤色等级查找对应的曝光补偿值;根据所述环境参数和所述曝光补偿值,结合当前的拍摄模式,确定所述目标曝光值。系统可以通过获取相机的快门速度和iso参数等相机参数计算环境曝光值,实现对环境光线强度的定量评估。同时,提取人脸区域信息确定肤色等级,比如提取rgb像素值并转换为lab色彩空间坐标,采用monk肤色尺度标准进行肤色分类,可以通过ciede2000色差公式计算待测肤色与各等级标准肤色的色差,选择色差最小的等级作为肤色类型。根据预设的肤色类型与曝光补偿值映射表,确定该肤色类型对应的推荐曝光补偿值和推荐色温,从而实现针对不同肤色人群的个性化曝光调节。
11、在可能的实现方式中,在拍摄画面中包括多个目标人物,且拍摄场景中包括至少两个灯具时,所述方法还包括:获取所述至少两个灯具的位置和所述拍摄画面中的目标人物的位置;根据所述灯具的位置和所述目标人物的位置,对所述灯具进行照明分配和控制。系统通过人脸检测算法识别出多个人物目标,提取各目标人物的位置,并获取各灯具的物理位置。根据人物和灯具的位置关系,自动分配照明资源,计算每个灯具的照射角度使灯光主轴指向对应人物的面部中心位置,实现单人或多人场景下的智能照明控制。
12、在可能的实现方式中,根据所述灯具的位置和所述目标人物的位置,对所述灯具进行照明分配和控制,包括以下至少一项:根据所述灯具的位置和所述目标人物的位置,确定所述灯具和所述目标人物所处的区域,将所述灯具分配至属于同一区域的所述目标人物;在所述灯具数量少于人物数量时,根据所述目标人物的位置确定中心区域目标人物和非中心区域目标人物,控制所述中心区域目标人物单独分配灯具,控制所述非中心区域目标人物共享灯具。系统可以将画面划分为多个区域,比如按水平方向划分为左侧区域、中央区域、右侧区域,根据人物所在区域分配对应灯位的灯具。若灯具数量不足,则采用优先级策略和共享机制,优先为画面中心区域的主要人物分配灯具,次要人物共享灯具照射,最大化利用有限的灯具资源。
13、在可能的实现方式中,在识别拍摄画面中的目标人物的面部肤色特征之后,所述方法还包括:接收作用于目标人物的面部额头区域和鼻梁区域的高光效果请求,根据所述高光效果请求,增加所述目标人物的顶光和/或侧光灯具的亮度;检测到所述目标人物佩戴有眼镜时,确定所述眼镜产生反光的角度范围,根据所述角度范围调整所述灯具的照射角度,使所述灯具偏离所述角度范围。系统针对额头区域和鼻梁区域提供可选的高光控制,通过增加顶光或侧光灯具的亮度使该区域的像素亮度值提升,突出面部立体感。对于佩戴眼镜的人物,系统检测眼镜镜片的反光特征,计算可能产生反光的灯具照射角度范围,调整这些灯具的照射角度使其偏离反光角度范围,或降低这些灯具的亮度,避免镜片产生强反光影响画面效果。
14、本技术实施例的第二方面提供了一种直播设备控制装置,所述装置的应用场景包括摄像头、控制终端和至少两个灯具,所述装置的执行主体为控制终端,所述装置包括:
15、图像识别单元,用于接收摄像头获取的场景图像,并识别所述场景图像中的目标人物;
16、灯具参数确定单元,用于获取各个灯具的设备信息和输出参数,根据各个灯具对所述目标人物的人脸不同区域的曝光贡献差异,确定达到目标曝光值对应的灯具参数;
17、亮度调整单元,用于根据所述灯具参数对所述至少两个进行亮度调整。
18、在可能的实现方式中,灯具参数确定单元包括:
19、曝光值增量确定子单元,用于控制各个灯具轮流点亮,获取各个灯具在目标人物的左脸区域和右脸区域产生的曝光值增量,并获取所述人脸的左脸区域和右脸区域的目标曝光值;
20、灯具类型确定子单元,用于根据所述灯具在人脸的左脸区域和右脸区域产生的曝光值增量,确定各个灯具的灯具类型;
21、亮度调整子单元,用于获取所述人脸的左脸区域和右脸区域的目标曝光值,根据所述目标曝光值和所述灯具类型,对所述灯具进行亮度调整,直到所述人脸的实际曝光值与目标曝光值匹配。
22、在可能的实现方式中,所述亮度调整子单元包括:
23、基准值获取模块,用于控制各个灯具轮流点亮,获取各个灯具的点亮后亮度和点亮前的亮度基准值;
24、曝光值增量确定模块,用于确定所述点亮后亮度和所述亮度基准值的比值,根据所述比值确定所述曝光值增量。
25、在可能的实现方式中,所述装置还包括:
26、相机参数调整单元,用于在所述灯具达到亮度极限且未达到所述目标曝光值时,触发相机参数调整;
27、参数调整单元,用于通过调节相机快门和/或感光度,使所述人脸的实际曝光值与目标曝光值匹配,或者,当灯具亮度达到极限且仅靠灯具无法使左右脸均达到各自的目标曝光值时,优先保证亮面的实际曝光值与其目标曝光值匹配,并在该条件下,将暗面的实际曝光值调整至尽可能接近其目标曝光值,其中,在人脸的左脸和右脸中,实际曝光量较高的一面为亮面,实际曝光量较低的一面为暗面。
28、在可能的实现方式中,所述参数调整单元包括:
29、第一调整子单元,用于当灯具亮度达到极限且仅靠灯具无法使左右脸均达到各自的目标曝光值时,调整所述相机参数,使所述亮面的实际曝光值与其目标曝光值之间的偏差属于第一误差范围;
30、第二调整子单元,用于保持所述亮面的实际曝光值与所述目标曝光值之间的偏差属于第一误差范围,调整所述相机参数,使所述暗面的实际曝光值与其目标曝光值之间的偏差属于第二误差范围,其中,所述第一误差范围小于所述第二误差范围。
31、在可能的实现方式中,所述装置还包括:
32、比值获取单元,用于在所述第一调整模块或所述第二调整模块工作之前,获取所述目标曝光值中的亮面与暗面的曝光值的目标比值;
33、比值匹配单元,用于在保证所述人脸的实际曝光值的实际比值与所述目标比值匹配的前提下,使亮面的实际曝光值尽可能接近亮面的目标曝光值,且小于所述目标曝光值。
34、在可能的实现方式中,所述亮度调整单元包括:
35、特征识别子单元,用于获取环境参数并识别拍摄画面中的目标人物的面部肤色特征;
36、肤色等级确定子单元,用于根据所述面部肤色特征确定肤色等级,根据所述肤色等级查找对应的曝光补偿值;
37、目标曝光值确定子单元,用于根据所述环境参数和所述曝光补偿值,结合当前的拍摄模式,确定所述目标曝光值。
38、在可能的实现方式中,在拍摄画面中包括多个目标人物,且拍摄场景中包括至少两个灯具时,所述装置还包括:
39、位置获取子单元,用于获取所述至少两个灯具的位置和所述拍摄画面中的目标人物的位置;
40、分配控制子单元,用于并根据所述灯具的位置和所述目标人物的位置,对所述灯具进行照明分配和控制。
41、在可能的实现方式中,所述分配控制子单元包括:
42、区域分配模块,用于根据所述灯具的位置和所述目标人物的位置,确定所述灯具和所述目标人物所处的区域,将所述灯具分配至属于同一区域的所述目标人物;
43、优先级分配模块,用于在所述灯具数量少于人物数量时,根据所述目标人物的位置确定中心区域目标人物和非中心区域目标人物,控制所述中心区域目标人物单独分配灯具,控制所述非中心区域目标人物共享灯具。
44、在可能的实现方式中,所述装置还包括:
45、高光效果处理子单元,用于在所述特征识别模块识别拍摄画面中的目标人物的面部肤色特征之后,接收作用于目标人物的面部额头区域和鼻梁区域的高光效果请求,根据所述高光效果请求,增加所述目标人物的顶光和/或侧光灯具的亮度;
46、眼镜反光处理子单元,用于检测到所述目标人物佩戴有眼镜时,确定所述眼镜产生反光的角度范围,根据所述角度范围调整所述灯具的照射角度,使所述灯具偏离所述角度范围。
47、本技术实施例的第三方面提供了一种直播设备,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时,使得所述直播设备实现如第一方面任一项所述的方法。
48、本技术实施例的第四方面,提供了一种计算机程序产品,当其在计算机上运行时,使得计算机执行上述第一方面或其各实现方式中的方法。
49、本技术实施例的第五方面提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器执行时实现如第一方面任一项所述方法的步骤。
50、本技术实施例的第六方面提供了一种芯片,用于实现上述第一方面中各实现方式中的方法。具体地,上述芯片包括:处理器,用于从存储器中调用并运行计算机程序,使得安装有上述芯片的设备执行如上述第一方面或其各实现方式中的方法。
51、可以理解的是,上述第二方面至第六方面的有益效果可以参见上述第一方面的相关描述,在此不再赘述。
版权声明:本站专利文献数据主要来源于国家知识产权局等公开渠道,由 技术新讯 进行整理汇编。页面设计及数据汇编的著作权归本站所有。全部内容仅供个人学习、科研评估与技术交流参考,严禁用于任何商业用途(包括但不限于直接生产制造、技术转让、倒卖数据等)。
免责条款:专利技术具有时效性,本站不对资料的绝对准确性、完整性和可实施性提供任何明示或暗示的担保。因参考本站内容造成的直接或间接损失,本站不承担相关法律责任。若您认为本站内容有侵权问题,请及时提供权属证明与我们联系,本站将在核实后依法处理。反馈意见:yyfuon@163.com