拍摄方法、电子设备及可读存储介质与流程

摘要: 本技术涉及终端,特别涉及一种拍摄方法、电子设备及可读存储介质。背景技术:1、随着终端技术的发展,电子设备的摄像功能越来越丰富,用户对夜景拍摄尤其是月亮拍摄的需求...
拍摄方法、电子设备及可读存储介质与流程

本技术涉及终端,特别涉及一种拍摄方法、电子设备及可读存储介质。

背景技术:

1、随着终端技术的发展,电子设备的摄像功能越来越丰富,用户对夜景拍摄尤其是月亮拍摄的需求日益增长,并且对月亮的拍摄效果有着越来越高的要求。例如,用户希望在拍摄月亮的场景下,拍摄得到尺寸大且纹理清晰的月亮以及明亮清晰的地景。而目前电子设备提供的相机拍摄功能,在拍摄月亮方面表现欠佳,导致拍摄得到的月景图像,要么月亮质量较好但地景质量不佳,要么地景质量较好但月亮质量不佳,无法满足用户特殊摄影需求。

技术实现思路

1、本技术提供了一种拍摄方法、电子设备及可读存储介质,通过本技术提供的技术方案,能够拍摄到满足用户需求的月景图像,不仅包含尺寸大且纹理清晰的月亮,还包含明亮清晰的地景,综合提升了月景融合效果的自然度与美感,提升了用户摄影体验,所述技术方案如下:

2、第一方面,提供了一种拍摄方法,应用于电子设备,该方法包括:

3、启动相机应用,在相机界面显示主摄镜头以第一变焦倍率和第一曝光参数采集的主摄预览画面;在所述主摄预览画面包括月亮和地景的情况下,通过长焦镜头以第二变焦倍率和第二曝光参数采集长焦预览画面,并将所述相机界面的显示内容更新为所述长焦预览画面;其中,所述第二变焦倍率大于所述第一变焦倍率,所述第二曝光参数的曝光度小于所述第一曝光参数的曝光度;所述长焦预览画面包括月亮和地景。

4、根据所述主摄预览画面的亮度统计值和所述长焦预览画面的亮度统计值,确定所述长焦镜头的第一自动曝光出帧策略,所述第一自动曝光出帧策略包括前出帧策略和后出帧策略;控制所述长焦镜头按照所述前出帧策略输出第一帧序列;响应于用户拍摄指令,控制所述长焦镜头按照所述后出帧策略输出第二帧序列,所述第二帧序列包括不同曝光比的帧;根据所述第一帧序列和所述第二帧序列进行月亮增强处理和地景增强处理,得到月景融合图像。

5、通过本技术实施例提供的拍摄方法,在拍摄月亮的场景中,可以参考主摄预览流的亮度统计值调整长焦镜头的曝光参数,并确定长焦镜头的自动曝光出帧策略,这样可以更好地兼顾提升地景亮度和月亮亮度。长焦镜头按照出帧策略在用户点击拍摄控件之前以及之后分别输出多曝光帧序列,并基于多曝光帧序列分别进行月亮增强处理和地景增强处理,然后通过图像融合处理,得到月亮尺寸大且纹理清晰且地景明亮清晰的月景融合图像。本技术方案能够辅助用户拍摄出满意的月景融合图像效果,并且用户摄影操作简单,很好地满足用户的月景摄影需求。

6、其中,电子设备可以根据自动曝光出帧策略控制当前长焦预览画面的曝光情况,还可以在用户按下拍摄控件的情况下,控制长焦镜头的出帧序列的曝光基准值,以及长短曝光序列出帧策略。通过自动曝光控制,实时调整曝光参数,实现高光与阴影部分的均衡记录,减少数据丢失的情况,提升图像显示效果。

7、需要说明的是,在长焦预览图像中包含月亮的情况下,电子设备执行降曝光控制,在此情况下长焦镜头输出的曝光帧(例如基准曝光帧)中月亮特征既不过曝也不过暗,这样可保证图像中具有更多月亮纹理细节。

8、还需要说明的是,第二帧序列可以包括不同曝光比的帧,这样针对地景的高动态范围采用不同曝光度的图像融合处理,将地景图像的高光、阴影等区域的细节都融合到图像中,更好地增强地景图像特征。

9、本技术方案应用于针对月亮和地景共同拍摄的场景,在拍摄时能够兼顾增强地景的亮度和细节以及月亮的亮度、尺寸和细节,使得拍摄得到的月景融合图像既包含带有夜景照明的地景图像(例如建筑景观),也包含曝光和大小符合人眼观感的月亮图像,且地景与月亮构图协调,大大提升了月景融合图像整体效果。

10、需要说明的是,这里地景是相对于月亮而言的,地景还可以被称为前景。其中,地景包括但不限于地面上的拍摄对象,还可以是空中的拍摄对象。示例性地,地景可以包括建筑物、人体、植物和/或动物等。或者,地景还可以包括鸟和/或飞机等。

11、在本技术实施例中,可以通过多摄像头协同,捕捉地景细节和月亮细节。例如,主摄镜头负责捕捉地景细节(如建筑物),长焦摄像头负责捕捉月亮细节(如月面纹理)。其中,主摄镜头可以为广角镜头,可以获取更多地景细节。

12、在一些可能实现方式中,所述根据所述主摄预览画面的亮度统计值和所述长焦预览画面的亮度统计值,确定所述长焦镜头的第一自动曝光出帧策略,包括:采用月亮感知算法对所述长焦预览画面进行月亮检测,根据月亮检测结果确定降曝光控制参数;根据所述主摄预览画面的亮度统计值、所述长焦预览画面的亮度统计值,以及所述降曝光控制参数,确定所述长焦镜头的第一自动曝光出帧策略。

13、通过降曝光控制,可以使得长焦镜头输出的基准曝光帧中月亮特征既不过曝也不过暗,这样可保证图像中具有更多月亮纹理细节。

14、在一些可能实现方式中,所述根据所述主摄预览画面的亮度统计值、所述长焦预览画面的亮度统计值,以及所述降曝光控制参数,确定所述长焦镜头的第一自动曝光出帧策略,包括:获取月景模式对应的感光度参数;根据所述主摄预览画面的亮度统计值、所述长焦预览画面的亮度统计值、所述降曝光控制参数,以及所述感光度参数,确定所述长焦镜头的第一自动曝光出帧策略。

15、本技术方案应用于在光线较暗环境(如傍晚或夜晚),针对地景和月亮共同拍摄的场景。用户可以触发启动电子设备的相机应用,并将电子设备的摄像头朝向月亮进行拍摄,得到月景图像。在一些情况下,用户希望月景图像中既包含曝光和大小符合人眼观感的月亮,也包含带有夜景照明的地景。通过本技术方案,可以实现对月景图像中地景和月亮的综合增强,使得月景图像中地景清晰并且月亮尺寸大、纹理清晰,月亮与地景构图和谐且美观,很好地满足用户摄影需求。

16、在本技术实施例中,可以针对地景和月亮分别进行曝光调整,然后将曝光调整后地景和月亮进行图像融合。例如,可以基于地景亮度动态调整iso(感光度)、快门速度,实现地景曝光调整;可以基于月亮亮度动态调整光圈、快门速度,实现月亮曝光调整。然后,采用基于深度学习的图像融合算法,实现地景与月亮的无缝衔接。

17、在一些可能实现方式中,所述根据所述第一帧序列和所述第二帧序列进行月亮增强处理和地景增强处理,得到月景融合图像,包括:将所述第一帧序列以及所述第二帧序列中的第一部分进行融合,得到第一融合图像;在所述第一融合图像中检测月亮并提取月亮,得到月亮区域图像;将所述第二帧序列中的第二部分进行融合,得到第二融合图像;参考天空掩码图像,对所述第二融合图像中的地景区域进行色调提亮处理,得到地景区域图像;以及在所述第二融合图像中消除月亮及月晕,得到背景图像;根据所述月亮区域图像、所述地景区域图像以及所述背景图像进行融合,得到所述月景融合图像。

18、其中,结合天空掩码图像可以更准确地划分出地景区域,进一步可以对地景区域进行提亮处理,由此可以得到地景增强图像。

19、其中,所述第一帧序列(前出帧序列)包括基准曝光帧,所述第二帧序列(后出帧序列)包括基准曝光帧、短曝光帧和长曝光帧;其中,所述第二帧序列中的第一部分包括基准曝光帧;所述第二帧序列中的第二部分包括以特定顺序排列的短曝光帧、基准曝光帧和长曝光帧。

20、例如,第一帧序列(前出帧序列)可以包括n,…n,第二帧序列(后出帧序列)可以包括n,…n,s,n,s,l。其中,n表示基准曝光帧,s表示短曝光帧,l表示长曝光帧。

21、其中,电子设备可以将长焦镜头输出的第一帧序列和第二帧序列依次存入缓存队列中,然后,采用缓存队列中的raw帧进行月亮增强和地景增强。

22、举例来说,在用户点击拍摄控件之前,长焦模组按照ae出帧策略输出前出帧(例如n,…,n),将前出帧依次加入缓存队列中;在用户点击拍摄控件的情况下,长焦模组按照ae出帧策略输出后出帧(例如n,…,n,s,n,s,l),将后出帧依次加入缓存队列中。通过多曝光前出帧和后出帧,能够保证“能拍到月亮”、“图像高动态”以及“图像低噪声”。

23、本技术方案可以结合前出帧序列和后出帧序列进行图像处理,增加月亮清晰度并显示更多细节,达到增强月亮的目的;以及可以基于后出帧序列中曝光比不同的短曝光帧、基准曝光帧和长曝光帧进行图像处理,提亮地景亮度,达到增强地景的目的。

24、在一些可能实现方式中,所述根据所述月亮区域图像、所述地景区域图像以及所述背景图像,得到所述月景融合图像,包括:采用第一月亮放大倍率对所述月亮区域图像进行放大处理,得到放大后的月亮区域图像;参考所述天空掩码图像,将放大后的月亮区域图像融合到所述背景图像,得到第一图像;将所述地景区域图像融合到所述第一图像,得到所述月景融合图像。

25、其中,结合天空掩码图像可以更准确地划分出天空区域,在天空区域检测月亮并移除月亮以及移除月晕,由此可以得到以消除月亮及月晕的背景图像。

26、通过消除月晕,可以提升月亮显示效果。参考天空掩码图像,可以更准确地将月亮增强图像融合到背景图像的合适位置。

27、在一些可能实现方式中,所述方法还包括:基于所述第二融合图像进行提亮预处理;通过天空分割算法,对预处理后的所述第二融合图像进行处理,获取所述天空掩码图像。

28、本技术方案可以通过提亮预处理,更准确地分割图像中的天空区域和地景区域,这样基于地景区域可以更准确地针对地景区域图像进行提亮处理,以及基于天空区域可以有利于完成月亮部分融合。

29、在一些可能实现方式中,在所述采用第一月亮放大倍率对所述月亮区域图像进行放大处理之前,所述方法还包括:根据所述第二变焦倍率和第一预设关系,确定所述第一月亮放大倍率;其中,所述第一预设关系为变焦倍率与月亮放大倍率之间的一一对应关系。

30、本技术方案可以在拍摄月景的场景中结合当前变焦倍率采用合适的月亮放大倍率对月亮区域图像进行放大处理,实现月亮增强,达到月亮足够大、纹理足够多且足够清晰的目的,提升月亮显示效果。

31、在一些可能实现方式中,在所述第一预设关系中,所述月亮放大倍率与第二变焦倍率为反比例关系。

32、例如,若当前相机变焦倍率为3×,则预设算法提供的月亮放大倍率可以为2×。

33、再例如,若当前相机变焦倍率为50×,则预设算法提供的月亮放大倍率可以为1.1×。

34、电子设备可以根据当前相机变焦倍率来确定月亮放大倍率,然后采用确定的月亮放大倍率,对月亮进行放大处理,以便于得到大小合适的月亮图像,适配实际观感,提升图像显示效果。

35、在一些可能实现方式中,所述将所述地景区域图像融合到所述第一图像,得到所述月景融合图像,包括:将所述地景区域图像融合到所述第一图像,得到第二图像;对所述第二图像中的月亮区域图像进行谱残差sr处理,得到所述月景融合图像。

36、其中,谱残差sr处理可以通过分析频谱特性来增强图像细节,提升图像清晰度。

37、本技术方案可以在拍摄月景的场景中采用谱残差sr处理对月亮区域图像进一步增强,达到月景图像中月亮足够大、纹理足够多且足够清晰的目的,提升月亮显示效果。

38、在一些可能实现方式中,所述在所述主摄预览画面包括月亮和地景的情况下,通过长焦镜头以第二变焦倍率和第二曝光参数采集长焦预览画面,并将所述相机界面的显示内容更新为所述长焦预览画面,包括:在所述主摄预览画面包括月亮和地景的情况下,在所述相机界面显示月景模式标识,所述月景模式标识表示已启用月景模式;响应于用户调高变焦倍率的操作,通过所述长焦镜头以所述第二变焦倍率和所述第二曝光参数采集长焦预览画面,并将所述相机界面的显示内容更新为所述长焦预览画面;其中,所述第二变焦倍率为用户调节后的变焦倍率。

39、其中,月景模式标识可以为月亮形状图标。若月亮形状图标为点亮状态,则表示月景模式处于开启状态;若月亮形状图标为熄灭状态,则表示月景模式处于关闭状态。本技术方案通过显示月景模式标识,向用户提示在当前拍摄场景下推荐采用月景模式,使得月景拍摄更加智能化,提升用户摄影体验。

40、通过本技术方案,电子设备在月景模式下,可以同时采集主摄预览流和长焦预览流,并在相机界面显示主摄预览流和长焦预览流,主摄预览流和长焦预览流包含月亮和地景;电子设备可以结合主摄预览流的亮度统计值和长焦预览流的亮度统计值确定长焦镜头的自动曝光出帧策略,然后控制长焦镜头按照自动曝光出帧策略出帧(包括前出帧和后出帧),然后根据自动曝光出帧序列进行地景增强处理和月亮增强处理,再进行地景与月亮融合处理,得到月景融合图像,其中月亮足够大、纹理足够多且足够清晰,地景亮度高且足够清晰,由此辅助用户实现高质量的月景摄影,满足了用户特殊摄影需求。

41、在一些可能实现方式中,所述方法还包括:在所述相机界面显示所述长焦预览画面的情况下,若所述第二变焦倍率大于第一阈值且小于或等于第二阈值,则在所述相机界面显示小窗,通过所述小窗显示所述主摄镜头以第三变焦倍率和所述第一曝光参数采集的主摄预览画面;在所述小窗内显示第一取景框,所述第一取景框内的显示内容与所述长焦预览画面相同;其中,所述第三变焦倍率大于所述第一变焦倍率且小于第二变焦倍率。

42、其中,第三变焦倍率大于第一变焦倍率且小于第二变焦倍率。例如第一变焦倍率为1×,第二变焦倍率为40×,第三变焦倍率为8×。

43、通过小窗显示放大的主摄预览画面并显示长焦图像取景框,可以便于用户调整长焦镜头朝向以准确地捕获月亮图像。

44、在一些可能实现方式中,所述根据所述主摄预览画面的亮度统计值和所述长焦预览画面的亮度统计值,确定所述长焦镜头的第一自动曝光出帧策略,包括:在所述第二变焦倍率小于或等于第二阈值的情况下,根据所述主摄预览画面的亮度统计值和所述长焦预览画面的亮度统计值,确定所述长焦镜头的第一自动曝光出帧策略。

45、当变焦倍率在特定范围内时,基于长焦预览画面的亮度统计值并参考主摄预览画面的亮度统计值来确定长焦镜头的自动曝光出帧策略,可以同时兼顾月亮亮度和地景亮度,以提升月景图像质量。

46、在一些可能实现方式中,所述方法还包括:在所述第二变焦倍率大于所述第二阈值的情况下,根据所述长焦预览画面的亮度统计值确定所述长焦镜头的第二自动曝光出帧策略,并控制所述长焦镜头按照所述第二自动曝光出帧策略输出多曝光帧序列;在接收到用户拍摄指令的情况下,基于所述多曝光帧序列进行月亮增强处理,得到超高分辨率的月景融合图像;其中,所述月亮增强处理包括多曝光帧融合、月亮检测、基于第一月亮放大倍率实现的月亮放大、月亮色调调节以及谱残差sr处理。

47、通过本技术方案,可以拍摄得到超高分辨率的月景融合图像,其中月亮足够大、纹理足够多且足够清晰,满足用户摄影需求。

48、在本技术实施例中,还可以基于亮度匹配和色彩校正实现月亮适配实际观感。

49、通过本技术实施例提供的全流程优化,从拍前规划到拍后调整,实现月景融合的全方位优化,辅助用户在拍摄月亮场景拍摄得到在月亮尺寸、纹理、清晰度等及地景亮度和清晰度等方面均满意的月景图像,提升月景融合效果的自然度与美感。此外,基于用户反馈持续优化推荐算法,提升用户体验。其中,结合地理位置、时间、天气、图像数据进行多模态数据融合,实现精准推荐与优化。由此,提升用户对地景与月亮融合效果的满意度,提升用户拍摄体验。

50、第二方面,提供了一种拍摄装置,所述拍摄装置具有实现上述第一方面中拍摄方法行为的功能。所述拍摄装置包括至少一个模块,所述至少一个模块用于实现上述第一方面所提供的拍摄方法。该装置应用于电子设备。

51、第三方面,提供了一种电子设备,所述电子设备的结构中包括处理器和存储器,所述存储器用于存储支持电子设备执行上述第一方面所提供的拍摄方法的程序,以及存储用于实现上述第一方面所述的拍摄方法所涉及的数据。所述处理器被配置为用于执行所述存储器中存储的程序。所述电子设备还可以包括通信总线,所述通信总线用于在所述处理器与所述存储器之间建立连接。

52、第四方面,提供了一种计算机可读存储介质,所述计算机可读存储介质中存储有指令,当其在计算机上运行时,使得计算机执行上述第一方面所述的拍摄方法。

53、第五方面,提供了一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行上述第一方面所述的拍摄方法。

54、上述第二方面、第三方面、第四方面和第五方面所获得的技术效果与上述第一方面中对应的技术手段获得的技术效果近似,在这里不再赘述。