CN110213498B - 图像生成方法和装置、电子设备、计算机可读存储介质 - Google Patents

Abstract

本申请涉及一种图像生成方法和装置、电子设备、计算机可读存储介质，上述方法包括：获取第一摄像头采集的第一图像；当检测到第一图像中包含运动物体时，检测第一图像的模糊度；当第一图像的模糊度小于预设模糊度时，获取第一图像序列中每帧第一图像对应的第一曝光参数，第一图像序列中记录第一图像；根据每帧第一图像对应的第一曝光参数确定第二摄像头的至少两个第二曝光参数；控制第二摄像头以至少两个第二曝光参数采集第二图像，以生成高动态范围图像。采用上述方法能减少鬼影现象，进而提升高动态范围图像的质量。

Description

图像生成方法和装置、电子设备、计算机可读存储介质

技术领域

本申请涉及图像处理技术领域，特别是涉及一种图像生成方法和装置、电子设备、计算机可读存储介质。

背景技术

HDR图像(High-Dynamic Range，高动态范围)相比普通的图像，可以提供更多的动态范围和图像细节。传统的HDR图像合成方式是根据预设的多个曝光参数采集多张图像，根据多张图像合成HDR图像。然而，若场景中存在运动物体，在HDR合成时容易产生鬼影现象。

发明内容

本申请实施例提供一种图像生成方法和装置、电子设备、计算机可读存储介质，能减少鬼影现象，进而提升高动态范围图像的质量。

一种图像生成方法，包括：获取第一摄像头采集的第一图像；当检测到所述第一图像中包含运动物体时，检测所述第一图像的模糊度；当所述第一图像的模糊度小于预设模糊度时，获取第一图像序列中每帧第一图像对应的第一曝光参数，所述第一图像序列中记录所述第一图像；根据所述每帧第一图像对应的第一曝光参数确定第二摄像头的至少两个第二曝光参数；控制第二摄像头以所述至少两个第二曝光参数采集第二图像，以生成高动态范围图像。

一种图像生成装置，包括：获取模块，用于获取第一摄像头采集的第一图像；检测模块，用于当检测到所述第一图像中包含运动物体时，检测所述第一图像的模糊度；所述获取模块，还用于当所述第一图像的模糊度小于预设模糊度时，获取第一图像序列中每帧第一图像对应的第一曝光参数，所述第一图像序列中记录所述第一图像；确定模块，用于根据所述每帧第一图像对应的第一曝光参数确定第二摄像头的至少两个第二曝光参数；控制模块，用于控制第二摄像头以所述至少两个第二曝光参数采集第二图像，以生成高动态范围图像。

一种电子设备，包括存储器及处理器，所述存储器中储存有计算机程序，所述计算机程序被所述处理器执行时，使得所述处理器执行如下步骤：获取第一摄像头采集的第一图像；当检测到所述第一图像中包含运动物体时，检测所述第一图像的模糊度；当所述第一图像的模糊度小于预设模糊度时，获取第一图像序列中每帧第一图像对应的第一曝光参数，所述第一图像序列中记录所述第一图像；根据所述每帧第一图像对应的第一曝光参数确定第二摄像头的至少两个第二曝光参数；控制第二摄像头以所述至少两个第二曝光参数采集第二图像，以生成高动态范围图像。

一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现如下步骤：获取第一摄像头采集的第一图像；当检测到所述第一图像中包含运动物体时，检测所述第一图像的模糊度；当所述第一图像的模糊度小于预设模糊度时，获取第一图像序列中每帧第一图像对应的第一曝光参数，所述第一图像序列中记录所述第一图像；根据所述每帧第一图像对应的第一曝光参数确定第二摄像头的至少两个第二曝光参数；控制第二摄像头以所述至少两个第二曝光参数采集第二图像，以生成高动态范围图像。

上述图像生成方法和装置、电子设备、计算机可读存储介质，通过获取第一摄像头采集的第一图像，并检测第一图像中的运动物体和检测第一图像的模糊度，当第一图像的模糊度小于预设模糊度时，获取第一图像序列中每帧第一图像对应的第一曝光参数，根据第一曝光参数确定第二摄像头的第二曝光参数，并控制第二摄像头以第二曝光参数采集第二图像，生成高动态范围图像，能够通过检测第一摄像头拍摄的第一图像从而确定第二摄像头的曝光参数，且在第一摄像头被使用时不会干扰第二摄像头的曝光参数，避免出现参数配置错误，且能减少鬼影现象，提升HDR合成效率以及HDR图像的质量。

附图说明

为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为一个实施例中图像生成方法的应用环境图；

图2为一个实施例中图像生成方法的流程图；

图3为一个实施例中得到场景全息图的流程图；

图4为一个实施例中第一曝光参数对应的第一图像的图像直方图；

图5为另一个实施例中第一曝光参数对应的第一图像的图像直方图；

图6为又一个实施例中第一曝光参数对应的第一图像的图像直方图；

图7为一个实施例中场景全息图的示意图；

图8为另一个实施例中图像生成方法的流程示意图；

图9为一个实施例中图像生成装置的结构框图；

图10为一个实施例中电子设备的内部结构示意图。

具体实施方式

为了使本申请的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本申请进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本申请，并不用于限定本申请。

可以理解，本申请所使用的术语“第一”、“第二”等可在本文中用于描述各种元件，但这些元件不受这些术语限制。这些术语仅用于将第一个元件与另一个元件区分。举例来说，在不脱离本申请的范围的情况下，可以将第一图像称为第二图像，且类似地，可将第一摄像头称为第二摄像头。第一图像和第二图像两者都是图像，但其不是同一图像。第一摄像头和第二摄像头两者都是摄像头，但其不是同一摄像头。

本申请实施例还提供一种电子设备。上述电子设备中包括图像处理电路，图像处理电路可以利用硬件和/或软件组件实现，可包括定义ISP(Image Signal Processing，图像信号处理)管线的各种处理单元。图1为一个实施例中图像处理电路的示意图。如图1所示，为便于说明，仅示出与本申请实施例相关的图像处理技术的各个方面。如图1所示，图像处理电路包括第一ISP处理器130、第二ISP处理器140和控制逻辑器150。第一摄像头110包括一个或多个第一透镜112和第一图像传感器114。第一图像传感器114可包括色彩滤镜阵列(如Bayer滤镜)，第一图像传感器114可获取用第一图像的每个成像像素捕捉的光强度和波长信息等，并提供可由第一ISP处理器130处理的一组图像数据。第二摄像头120包括一个或多个第二透镜122和第二图像传感器124。第二图像传感器124可包括色彩滤镜阵列(如Bayer滤镜)，第二图像传感器124可获取用第二图像传感器124的每个成像像素捕捉的光强度和波长信息等，并提供可由第二ISP处理器140处理的一组图像数据。

第一摄像头110采集的第一图像传输给第一ISP处理器130进行处理，第一ISP处理器130处理第一图像后，可将第一图像的统计数据，如图像的亮度、图像的反差值、图像的颜色等发送给控制逻辑器150，控制逻辑器150可根据统计数据确定第一摄像头110的第一曝光参数，从而第一摄像头110可根据第一曝光参数进行采集第一图像等操作。第一图像经过第一ISP处理器130进行处理后可存储至图像存储器160中，形成第一图像序列。第一ISP处理器130也可以读取图像存储器160中存储的图像以对进行处理。另外，第一图像经过ISP处理器130进行处理后可直接发送至显示器170进行显示，显示器170也可以读取图像存储器160中的图像以进行显示。

其中，第一ISP处理器130按多种格式逐个像素地处理图像数据。例如，每个图像像素可具有8、10、12或14比特的位深度，第一ISP处理器130可对图像数据进行一个或多个图像处理操作、收集关于图像数据的统计信息。其中，图像处理操作可按相同或不同的位深度精度进行。

图像存储器160可为存储器装置的一部分、存储设备、或电子设备内的独立的专用存储器，并可包括DMA(Direct Memory Access，直接直接存储器存取)特征。

当接收到来自第一图像传感器114接口时，第一ISP处理器130可进行一个或多个图像处理操作，如时域滤波。处理后的图像数据可发送给图像存储器160，以便在被显示之前进行另外的处理。第一ISP处理器130从图像存储器160接收处理数据，并对所述处理数据进行RGB和YCbCr颜色空间中的图像数据处理。第一ISP处理器130处理后的图像数据可输出给显示器170，以供用户观看和/或由图形引擎或GPU(Graphics Processing Unit，图形处理器)进一步处理。此外，第一ISP处理器130的输出还可发送给图像存储器160，且显示器170可从图像存储器160读取图像数据。在一个实施例中，图像存储器160可被配置为实现一个或多个帧缓冲器。

第一ISP处理器130确定的统计数据可发送给控制逻辑器150。例如，统计数据可包括自动曝光等第一图像传感器114统计信息。控制逻辑器150可包括执行一个或多个例程，如固件的处理器和/或微控制器，一个或多个例程可根据接收的统计数据，确定第一摄像头110的第一曝光参数及第一ISP处理器130的控制参数。例如，第一摄像头110的曝光参数可包括增益、曝光控制的积分时间、第一透镜112控制参数(例如聚焦或变焦用焦距)、或这些参数的组合等。ISP控制参数可包括用于自动白平衡和颜色调整，例如，在RGB处理期间的增益水平和色彩校正矩阵，以及第一透镜112阴影校正参数。

同样地，第二摄像头120采集的第二图像传输给第二ISP处理器140进行处理，第二ISP处理器140处理第一图像后，可将第二图像的统计数据，如图像的亮度、图像的反差值、图像的颜色等发送给控制逻辑器150。控制逻辑器150可根据统计数据以及第二图像生成高动态范围图像。控制逻辑器150还可根据统计数据确定第二摄像头120的第二曝光参数，从而第二摄像头120可根据控制参数进行自动对焦、自动曝光等操作。第二图像经过第二ISP处理器140进行处理后可存储至图像存储器160中，第二ISP处理器140也可以读取图像存储器160中存储的图像以对图像进行处理。另外，第二图像经过ISP处理器140进行处理后可直接发送至显示器170进行显示，显示器170也可以读取图像存储器160中的图像以进行显示。第二摄像头120和第二ISP处理器140也可以实现如第一摄像头110和第一ISP处理器130所描述的处理过程。

以下为运用图1中图像处理技术实现图像生成方法的步骤：第一ISP图像处理器获取第一摄像头采集的第一图像；当第一ISP图像处理器或控制逻辑器检测到第一图像中包含运动物体时，检测第一图像的模糊度；当第一图像的模糊度小于预设模糊度时，控制逻辑器获取第一图像序列中每帧第一图像对应的第一曝光参数，第一图像序列中记录第一图像；控制逻辑器根据每帧第一图像对应的第一曝光参数确定第二摄像头的至少两个第二曝光参数；控制逻辑器控制第二摄像头以至少两个第二曝光参数采集第二图像，以生成高动态范围图像。

图2为一个实施例中图像生成方法的流程图。本实施例中的图像生成方法，以运行于图1为例进行描述。如图2所示，图像生成方法包括步骤202至步骤210。

步骤202，获取第一摄像头采集的第一图像。

电子设备中包含第一摄像头和第二摄像头。第一摄像头和第二摄像头设于电子设备的同一侧，可用于采集包含相同场景的图像。第一摄像头和第二摄像头的种类可以相同，也可以不同。例如，第一摄像头和第二摄像头可以但不限于是彩色摄像头、广角摄像头、长焦摄像头中的一种或两种。第一摄像头和第二摄像头其中一个摄像头为主摄像头，另一个摄像头为副摄像头。

具体地，电子设备启动后，接收对相机的启动指令，第二摄像头可实时获取预览图像并展示在显示器。电子设备启动第一摄像头进行扫描测光。第一摄像头以第一曝光参数采集第一图像。第一ISP处理器获取第一摄像头以第一曝光参数采集的第一图像。

本实施例中，电子设备启动第一摄像头，第一ISP处理器获取第一摄像头以初始第一曝光参数采集的第一图像，其中，初始第一曝光参数可根据环境光亮度确定。初始第一曝光参数与环境光亮度之间存在预设的对应关系。例如环境光亮度越强，初始第一曝光参数越小。初始第一曝光参数可包括至少两个初始第一曝光参数。每个初始第一曝光参数对应一帧第一图像。

步骤204，当检测到第一图像中包含运动物体时，检测第一图像的模糊度。

具体地，运动物体是指在场景中运动的物体。第一图像的模糊度是指第一图像的模糊程度。电子设备可以将模糊度与纹理特征强度之间的关系或者模糊度与运动物体的速度之间的关系预先标定并存储，建立查找表(look up table)。第一图像的模糊度越高，则第一图像越模糊；第一图像的模糊度越低，则第一图像越清晰。

第一ISP处理器或控制逻辑器检测第一图像中是否包含运动物体。当第一图像中包含运动物体时，第一ISP处理器或控制逻辑器根据第一图像的纹理特征强度或者运动物体的速度检测第一图像的模糊度。

步骤206，当第一图像的模糊度小于预设模糊度时，获取第一图像序列中每帧第一图像对应的第一曝光参数，第一图像序列中记录第一图像。

具体地，预设模糊度是指在电子设备中预先存储的模糊度阈值。第一图像序列中记录至少两帧第一图像。第一图像序列中的至少两帧第一图像均为第一摄像头采集的图像。曝光参数包括曝光时间。曝光时间是摄像头在采集图像时，快门从打开到关闭的时间间隔。曝光参数还可以包括摄像头增益等。在曝光时间较小的情况下，可以采用较高的摄像头增益；在曝光时间较大的情况下，可以采用较小的摄像头增益。

当第一图像的模糊度小于预设模糊度时，即第一图像达到一定清晰度时，控制逻辑器获取第一图像序列中每帧第一图像对应的第一曝光参数。

本实施例中，控制逻辑器获取至少两帧第一图像中每帧第一图像对应的第一曝光参数。

在一个实施例中，当第一图像的模糊度大于或等于预设模糊度时，控制逻辑器调整第一图像对应的第一曝光参数。

步骤208，根据每帧第一图像对应的第一曝光参数确定第二摄像头的至少两个第二曝光参数。

其中，第一曝光参数的个数小于或等于第二曝光参数的个数。

具体地，控制逻辑器可根据每帧第一图像对应的第一曝光参数，确定第一图像序列对应的曝光参数范围。控制逻辑器可从第一曝光参数范围中任意选择至少两个第一曝光参数作为第二摄像头的第二曝光参数。

步骤210，控制第二摄像头以至少两个第二曝光参数采集第二图像，以生成高动态范围图像。

具体地，每个第二曝光参数对应每帧第二图像。控制逻辑器控制第二摄像头以至少两个曝光参数采集对应数量的第二图像，以使第一ISP处理器生成高动态范围(HDR)图像。其中，高动态范围图像中包含了被拍摄场景的全部信息，可以反映被拍摄场景真实的视觉效果。

本实施例中的图像生成方法，通过获取第一摄像头采集的第一图像，并检测第一图像中的运动物体和检测第一图像的模糊度，当第一图像的模糊度小于预设模糊度时，获取第一图像序列中每帧第一图像对应的第一曝光参数，根据第一曝光参数确定第二摄像头的第二曝光参数，并控制第二摄像头以第二曝光参数采集第二图像，生成高动态范围图像，能够通过检测第一摄像头拍摄的第一图像从而确定第二摄像头的曝光参数，且在第一摄像头被使用时不会干扰第二摄像头的曝光参数，避免出现参数配置错误，且能减少鬼影现象，提升HDR合成效率以及HDR图像的质量。

在一个实施例中，该图像生成方法还包括：当检测到第一图像的模糊度大于或等于预设模糊度时，按照预设曝光参数差值调整第一图像对应的第一曝光参数。

具体地，预设曝光参数差值是指曝光参数之间的差值。例如可以是0.01s、0.02s、0.03s、10s、100s等不限于此。或者可以是0.1Ev(Exposure Value，曝光值)、0.5Ev、1Ev、2Ev等不限于此。当第一ISP图像处理器检测到第一图像的模糊度大于或等于预设模糊度时，控制逻辑器按照预设曝光参数差值调整第一摄像头的第一图像对应的第一曝光参数。

本实施例中，当第一ISP图像处理器或控制逻辑器检测到第一图像的模糊度大于或等于预设模糊度时，按照预设曝光参数差值减小第一摄像头的第一图像对应的第一曝光参数。控制逻辑器得到调整后的第一曝光参数，则控制第一摄像头以调整后的第一曝光参数采集图像。第一ISP图像处理器获取第一摄像头以调整后的第一曝光参数采集的第一图像。当第一ISP图像处理器或控制逻辑器检测到以调整后的第一曝光参数采集的第一图像中包含运动物体时，检测以调整后的第一曝光参数采集的第一图像的模糊度，直至以调整后的第一曝光参数采集的第一图像的模糊度小于预设模糊度时，不再调整第一图像对应的第一曝光参数。

本实施例中，当第一ISP图像处理器或控制逻辑器检测到第一图像的模糊度大于或等于预设模糊度时，控制逻辑器可根据第一图像对应的第一曝光参数对应的区间，按照对应的预设曝光参数差值调整第一摄像头的第一图像对应的第一曝光参数。例如，当第一图像对应的第一曝光参数对应的区间为区间A，那么控制逻辑器按照对应的第一预设曝光参数差值调整第一图像对应的第一曝光参数。当第一图像对应的第一曝光参数对应的区间为区间B，那么控制逻辑器按照对应的第二预设曝光参数差值调整第一图像对应的第一曝光参数。其中，若区间A的最小值小于区间B的最小值，则第一预设曝光参数差值小于第二预设曝光参数差值。

本实施例中，当第一图像的模糊度小于预设模糊度，且第一图像的数量大于或等于预设数量时，控制逻辑器获取第一图像序列中每帧第一图像对应的第一曝光参数。预设数量可以是终端预设的大于2的值。例如预设数量为3，那么当第二帧图像的模糊度小于预设模糊度，此时第一图像的数量小于预设数量4，则控制逻辑器按照预设曝光参数减小第一图像对应的第一曝光参数，第一摄像头继续采集第一图像，直至采集到4帧第一图像，控制逻辑器获取4帧第一图像中每帧第一图像对应的第一曝光参数。

本实施例中的图像生成方法，当检测到第一图像的模糊度大于或等于预设模糊度时，按照预设曝光参数差值调整第一图像对应的第一曝光参数，能够根据图像的模糊情况，调整曝光参数，能满足图像的清晰度，可以减少鬼影现象，进而提升高动态范围图像的质量。

在一个实施例中，根据每帧第一图像对应的第一曝光参数确定第二摄像头的至少两个第二曝光参数，包括：对每帧第一图像进行分析，得到场景全息图；根据场景全息图以及每帧第一图像对应的第一曝光参数确定第二摄像头的至少两个第二曝光参数。

具体地，第一ISP图像传感器对每帧第一图像进行内容分析，从而得到包含第一图像内容的场景全息图。控制逻辑器根据场景全息图以及每帧第一图像对应的第一曝光参数得到场景全息图对应的第一曝光参数，根据场景全息图对应的第一曝光参数确定第二摄像头的至少两个第二曝光参数。其中，场景全息图对应的第一曝光参数可以为至少两个第一曝光参数。

本申请实施例中的图像生成方法，通过对每帧第一图像进行分析，得到场景全息图，根据场景全息图以及每帧第一图像对应的第一曝光参数确定第二摄像头的至少两个第二曝光参数，能够得到重新配置的第二摄像头的第二曝光参数，能满足图像的清晰度，减少鬼影现象，进而提升高动态范围图像的质量。

在一个实施例中，如图3所示，对每帧第一图像进行分析，得到场景全息图，包括：

步骤302，根据每帧第一图像中各像素点的亮度值建立每帧第一图像对应的图像直方图。

具体地，第一ISP图像处理器根据每帧第一图像各像素点的亮度值建立每帧第一图像对应的图像直方图。例如，共有3帧第一图像如图4所示，为一个实施例中第一曝光参数对应的第一图像的图像直方图。如图5所示，为另一个实施例中第一曝光参数对应的第一图像的图像直方图。如图6所示，为又一个实施例中第一曝光参数对应的第一图像的图像直方图。其中，图4、图5和图6中的横坐标轴为第一图像对应的第一曝光参数，纵坐标为亮度信息。

步骤304，将每帧第一图像对应的图像直方图合成，并生成场景全息图。

具体地，第一ISP图像处理器将每帧第一图像对应的图像直方图中的亮度值合成，并生成场景全息图。如图7所示，为一个实施例中场景全息图的示意图。其中，场景全息图是根据图4、图5和图6中的3张图像直方图合成的。对于图4、图5和图6中均存在某一曝光参数对应的亮度值时，可求取亮度值平均值作为场景全息图对应曝光参数的亮度值。例如，当曝光参数为2时，第一帧第一图像对应的亮度值为2，第二帧第一图像对应的亮度值为4，第三帧第一图像对应的亮度值为3，那么在场景全息图中，当曝光参数为2时，对应的亮度值为(2+4+3)/3＝3。而当曝光参数为20时，第一帧第一图像和第二帧第一图像中均未存在当曝光参数为20时对应的亮度值，第三帧第一图像对应的亮度值为10，故在场景全息图中，曝光参数为20时对应的亮度值为10。

根据分析结果以及每帧第一图像对应的第一曝光参数确定第二摄像头的至少两个第二曝光参数，包括：

步骤306，从场景全息图对应的第一曝光参数中选取至少两个曝光参数作为第二摄像头的第二曝光参数。

具体地，场景全息图中对应的第一曝光参数为至少两个，控制逻辑器从场景全息图对应的第一曝光参数中，选取至少两个能涵盖整个全息图的曝光参数作为第二摄像头的曝光参数。例如，场景全息图对应的第一曝光参数的范围为1至10。那么任取x+y+z＝10,其中x,y和z为正实数，且不相同。例如取2、3和5作为第二摄像头的第二曝光参数。

本申请实施例中的图像生成方法，根据每帧第一图像中各像素点的亮度值建立每帧第一图像对应的图像直方图，将每帧第一图像对应的图像直方图合成，并生成场景全息图，从场景全息图对应的第一曝光参数中选取至少两个曝光参数作为第二摄像头的第二曝光参数，能够根据选取的至少两个曝光参数获取第二摄像头对应的第二图像，减少鬼影现象，进而提升高动态范围图像的质量。

在一个实施例中，检测第一图像的模糊度，包括：对第一图像进行滤波，得到第一图像中纹理特征的强度；根据第一图像中纹理特征的强度确定第一图像的模糊度。

具体地，纹理特征强度与模糊度之间的关系可通过标定得到，预先存储在电子设备中，具体可以存储在图像存储器中。滤波是指是将信号中特定波段频率滤除的操作。滤波方式具体可以是高通滤波。高通滤波(high-pass filter)是一种过滤方式，规则为高频信号能正常通过，而低于设定临界值的低频信号则被阻隔、减弱。第一ISP图像处理器对第一图像进行高通滤波，得到第一图像中的纹理特征，进而得到第一图像中的纹理特征强度。控制逻辑器可根据第一图像中纹理特征的强度以及纹理特征强度与第一图像的模糊度之间的对应关系，确定第一图像的模糊度。

本实施例中的图像生成方法，通过对第一图像进行滤波，得到第一图像中纹理特征的强度，根据第一图像中纹理特征的强度确定第一图像的模糊度，能够判断第一图像的模糊度是否满足条件，从而得到第二摄像头的至少两个第二曝光参数，能够根据选取的至少两个曝光参数获取第二摄像头对应的第二图像，减少鬼影现象，进而提升高动态范围图像的质量。

在一个实施例中，获取第一摄像头采集的第一图像，包括：获取第一摄像头采集的至少两帧第一图像，至少两帧第一图像包括第一帧第一图像和第二帧第一图像，第二帧为与第一帧相邻的下一帧。检测第一图像的模糊度，包括：根据第一帧第一图像中运动物体的位置与第二帧第一图像中运动物体的位置，处理得到运动物体的运动速度；根据运动物体的移动速度确定第二帧第一图像的模糊度。

具体地，该至少两帧第一图像可以是分别对应不同的第一曝光参数。该至少两帧第一图像是同一场景下的至少两帧图像。例如，第一图像可以是三帧，其中，三帧第一图像分别对应欠曝光-Ev、正常曝光Ev0和过曝光+Ev对应的曝光参数。运动物体的位置可根据第一帧第一图像与第二帧第一图像之间对应像素点的灰度差或者亮度差的绝对值，得到运动物体的位置。或者，运动物体的位置可通过光流法计算得到。光流法是利用图像序列中像素在时间域上的变化以及相邻帧之间的相关性来找到上一帧跟当前帧之间存在的对应关系，从而计算出相邻帧之间物体的运动信息的一种方法。或者，运动物体的位置可通过检测第一图像中的特征点得到。运动物体的位置与运动物体的速度之间的对应关系可通过标定得到，并存储在电子设备中，具体可以存储在图像存储器中。

第一ISP图像处理器获取第一摄像头采集的至少两帧第一图像，其中，至少两帧第一图像包括第一帧第一图像和第二帧第一图像，第二帧为与第一帧相邻的下一帧。第一ISP图像处理器或控制逻辑器根据第一帧第一图像中运动物体的位置和第二帧第一图像中运动物体的位置，以及运动物体的位置与运动物体速度之间的对应关系，处理得到运动物体的运动速度。

本实施例中的图像生成方法，获取第一摄像头采集的至少两帧第一图像，至少两帧第一图像包括第一帧第一图像和第二帧第一图像，第二帧为与第一帧相邻的下一帧，根据第一帧第一图像中运动物体的位置与第二帧第一图像中运动物体的位置，处理得到运动物体的运动速度，根据运动物体的移动速度确定第二帧第一图像的模糊度，能够根据模糊度这个条件确定第二摄像头的第二曝光参数，减少鬼影现象，进而提升高动态范围图像的质量。

在一个实施例中，获取第一摄像头采集的第一图像，包括：获取第一摄像头采集的至少两帧第一图像，其中，至少两帧第一图像包括第一帧第一图像和第二帧第一图像，第二帧为与第一帧相邻的下一帧。检测到第一图像中包含运动物体的方式，包括：获取第一帧第一图像和第二帧图像中相同区域中对应的像素点的亮度值或颜色值，确定对应像素点的亮度差值或颜色差值；当相同区域中存在预设数量的像素点的亮度差值或颜色差值均大于预设阈值时，确定第二帧第一图像中包含运动物体。

具体地，第一ISP图像处理器获取第一帧第一图像和第二帧第一图像中相同区域中对应的像素点的亮度值，确定该区域中对应像素点的亮度差值。例如，第一ISP图像处理器获取第一帧第一图像的A区域中所有像素点对应的亮度值，以及第二帧第一图像的A区域中所有像素点对应的亮度值，确定第一帧第一图像A区域中像素点1与第二帧第一图像A区域中像素点1之间的亮度差值，确定A区域中像素点2与B区域中像素点2之间的亮度差值……等不限于此。当相同区域中存在预设数量的像素点的亮度差值大于预设阈值时，其中该预设阈值为亮度差值对应的预设阈值，第一ISP图像处理器或控制逻辑器确定第二帧第一图像中包含运动物体。例如，预设数量为100，A区域中存在101个亮度差值大于预设阈值的像素点时，第一ISP图像处理器或控制逻辑器确定第二帧第一图像中包含运动物体。或者，第一ISP图像处理器获取第一帧第一图像和第二帧第一图像中相同区域中对应的颜色值，确定对应像素点的颜色差值。当该相同区域中存在预设数量的像素点的颜色差值大于预设阈值时，第一ISP图像处理器或控制逻辑器确定第二帧第一图像中包含运动物体。第一ISP图像处理器或控制逻辑器还可以确定第一帧第一图像中包含运动物体。第一ISP图像处理器或控制逻辑器检测第二帧第一图像的模糊度。

本实施例中的图像生成方法，获取第一摄像头采集的至少两帧第一图像，至少两帧第一图像包括第一帧第一图像和第二帧第一图像，第二帧为与第一帧相邻的下一帧，获取第一帧第一图像和第二帧第一图像中相同区域中对应的像素点的亮度值或颜色值，确定对应像素点的亮度差值或颜色差值，当相同区域中存在预设数量的像素点的亮度差值或颜色差值均大于预设阈值时，确定第二帧第一图像中包含运动物体，当存在运动物体时，图像容易模糊，进而能够根据模糊度这个条件调整并确定第二摄像头的第二曝光参数，减少鬼影现象，进而提升高动态范围图像的质量。

在一个实施例中，第一ISP图像处理器还可以通过比对第一帧第一图像和第二帧第一图像中的特征从而确定第一图像中存在运动物体。

在一个实施例中，该图像生成方法还包括：确定第一图像对应的场景类型；查找场景类型对应的预设模糊度。具体地，第一ISP图像处理器或控制逻辑器可根据第一图像在预览时对应的场景类型得到第一图像对应的场景类型。场景类型具体可以包括夜景、正常、人像、全景等不限于此。例如，在夜景模式下，图像的细节可能比鬼影重要。第一图像对应的场景类型为夜景，那么第一ISP图像处理器查找夜景对应的预设模糊度。此时夜景对应的预设模糊度较正常模式的高。

本申请实施例中的图像生成方法，通过确定第一图像对应的场景类型，查找场景类型对应的预设模糊度，能够根据场景类型动态地调整预设模糊度，提升高动态范围图像的质量。

在一个实施例中，如图8所示，为另一个实施例中图像生成方法的流程示意图，包括以下步骤：

步骤802，获取第一曝光参数。

步骤804，获取第一摄像头以第一曝光参数采集的第一图像。

步骤806，检测到第一图像中包含运动物体时，检测第一图像的模糊度。

步骤808，判断第一图像的模糊度是否小于预设模糊度。

步骤810，当第一图像的模糊度大于或等于预设模糊度时，调整第一曝光参数。

步骤812，当第一图像的模糊度小于预设模糊度时，获取第一图像序列中每帧第一图像对应的第一曝光参数。

步骤814，根据每帧第一图像中各像素点的亮度值建立每帧第一图像对应的图像直方图。

步骤816，将每帧第一图像对应的图像直方图合成，生成场景全息图。

步骤818，从场景全息图对应的第一曝光参数中选取至少两个曝光参数作为第二摄像头的第二曝光参数。

步骤820，控制第二摄像头以至少两个第二曝光参数采集第二图像，以生成高动态范围图像。

本实施例中的图像生成方法，通过获取第一摄像头采集的第一图像，并检测第一图像中的运动物体和检测第一图像的模糊度，当第一图像的模糊度小于预设模糊度时，获取第一图像序列中每帧第一图像对应的第一曝光参数，根据第一曝光参数确定第二摄像头的第二曝光参数，并控制第二摄像头以第二曝光参数采集第二图像，生成高动态范围图像，能够通过检测第一摄像头拍摄的第一图像从而确定第二摄像头的曝光参数，且在第一摄像头被使用时不会干扰第二摄像头的曝光参数，避免出现参数配置错误，能够根据图像的模糊情况，调整曝光参数，能满足图像的清晰度，且能减少鬼影现象，提升HDR合成效率以及HDR图像的质量。

在一个实施例中，一种图像生成方法，包括：

步骤(a1),获取第一摄像头采集的至少两帧第一图像，其中，至少两帧第一图像包括第一帧第一图像和第二帧第一图像，第二帧为与第一帧相邻的下一帧。

步骤(a2)，获取第一帧第一图像和第二帧第一图像中相同区域中对应的像素点的亮度值或颜色值，确定对应像素点的亮度差值或颜色差值。

步骤(a3)，当相同区域中存在预设数量的像素点的亮度差值或颜色差值均大于预设阈值时，确定第二帧第一图像中包含运动物体。

步骤(a4)，根据第一帧第一图像中运动物体的位置与第二帧第一图像中运动物体的位置，处理得到运动物体的运动速度。

步骤(a5)，根据运动物体的移动速度确定第二帧第一图像的模糊度。

步骤(a6)，当检测到第一图像的模糊度大于或等于预设模糊度时，按照预设曝光参数差值调整第一图像对应的第一曝光参数。

步骤(a7)，当第一图像的模糊度小于预设模糊度时，获取第一图像序列中每帧第一图像对应的第一曝光参数，第一图像序列中记录第一图像。

步骤(a8)，根据每帧第一图像中各像素点的亮度值建立每帧第一图像对应的图像直方图。

步骤(a9)，将每帧第一图像对应的图像直方图合成，并生成场景全息图。

步骤(a10)，从场景全息图对应的第一曝光参数中选取至少两个曝光参数作为第二摄像头的第二曝光参数。

步骤(a11)，控制第二摄像头以至少两个第二曝光参数采集第二图像，以生成高动态范围图像。

本实施例中的图像生成方法，通过获取第一摄像头采集的第一图像，并检测第一图像中的运动物体和检测第一图像的模糊度，当第一图像的模糊度小于预设模糊度时，获取第一图像序列中每帧第一图像对应的第一曝光参数，根据第一曝光参数确定第二摄像头的第二曝光参数，并控制第二摄像头以第二曝光参数采集第二图像，生成高动态范围图像，能够通过检测第一摄像头拍摄的第一图像从而确定第二摄像头的曝光参数，且在第一摄像头被使用时不会干扰第二摄像头的曝光参数，避免出现参数配置错误，能够根据图像的模糊情况，调整曝光参数，能满足图像的清晰度，且能减少鬼影现象，提升HDR合成效率以及HDR图像的质量。

应该理解的是，虽然图2、3和8的流程图中的各个步骤按照箭头的指示依次显示，但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明，这些步骤的执行并没有严格的顺序限制，这些步骤可以以其它的顺序执行。而且，图2、3和8中的至少一部分步骤可以包括多个子步骤或者多个阶段，这些子步骤或者阶段并不必然是在同一时刻执行完成，而是可以在不同的时刻执行，这些子步骤或者阶段的执行顺序也不必然是依次进行，而是可以与其它步骤或者其它步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。

在一个实施例中，如图9所示，为一个实施例的图像生成装置的结构框图。一种图像生成装置，包括获取模块902、检测模块904、确定模块906和控制模块908，其中：

获取模块902，用于获取第一摄像头采集的第一图像。

检测模块904，用于当检测到第一图像中包含运动物体时，检测第一图像的模糊度。

获取模块902还用于当第一图像的模糊度小于预设模糊度时，获取第一图像序列中每帧第一图像对应的第一曝光参数，第一图像序列中记录第一图像。

确定模块906，用于根据每帧第一图像对应的第一曝光参数确定第二摄像头的至少两个第二曝光参数。

控制模块908，用于控制第二摄像头以至少两个第二曝光参数采集第二图像，以生成高动态范围图像。

本实施例中的图像生成装置，通过获取第一摄像头采集的第一图像，并检测第一图像中的运动物体和检测第一图像的模糊度，当第一图像的模糊度小于预设模糊度时，获取第一图像序列中每帧第一图像对应的第一曝光参数，根据第一曝光参数确定第二摄像头的第二曝光参数，并控制第二摄像头以第二曝光参数采集第二图像，生成高动态范围图像，能够通过检测第一摄像头拍摄的第一图像从而确定第二摄像头的曝光参数，且在第一摄像头被使用时不会干扰第二摄像头的曝光参数，避免出现参数配置错误，且能减少鬼影现象，提升HDR合成效率以及HDR图像的质量。

在一个实施例中，该图像生成装置还包括调整模块。调整模块用于当检测到第一图像的模糊度大于或等于预设模糊度时，按照预设曝光参数差值调整第一图像对应的第一曝光参数。

本实施例中的图像生成装置，当检测到第一图像的模糊度大于或等于预设模糊度时，按照预设曝光参数差值调整第一图像对应的第一曝光参数，能够根据图像的模糊情况，调整曝光参数，能满足图像的清晰度，可以减少鬼影现象，进而提升高动态范围图像的质量。

在一个实施例中，确定模块906用于对每帧第一图像进行分析，得到场景全息图；根据场景全息图以及每帧第一图像对应的第一曝光参数确定第二摄像头的至少两个第二曝光参数。

本申请实施例中的图像生成装置，通过对每帧第一图像进行分析，得到场景全息图，根据场景全息图以及每帧第一图像对应的第一曝光参数确定第二摄像头的至少两个第二曝光参数，能够得到重新配置的第二摄像头的第二曝光参数，能满足图像的清晰度，可以减少鬼影现象，进而提升高动态范围图像的质量。

在一个实施例中，确定模块906用于根据每帧第一图像中各像素点的亮度值建立每帧第一图像对应的图像直方图；将每帧第一图像对应的图像直方图合成，并生成场景全息图；从场景全息图对应的第一曝光参数中选取至少两个曝光参数作为第二摄像头的第二曝光参数。

本申请实施例中的图像生成装置，根据每帧第一图像中各像素点的亮度值建立每帧第一图像对应的图像直方图，将每帧第一图像对应的图像直方图合成，并生成场景全息图，从场景全息图对应的第一曝光参数中选取至少两个曝光参数作为第二摄像头的第二曝光参数，能够根据选取的至少两个曝光参数获取第二摄像头对应的第二图像，减少鬼影现象，进而提升高动态范围图像的质量。

在一个实施例中，检测模块904用于对第一图像进行滤波，得到第一图像中纹理特征的强度；根据第一图像中纹理特征的强度确定第一图像的模糊度。

本实施例中的图像生成装置，通过对第一图像进行滤波，得到第一图像中纹理特征的强度，根据第一图像中纹理特征的强度确定第一图像的模糊度，能够判断第一图像的模糊度是否满足条件，从而得到第二摄像头的至少两个第二曝光参数，能够根据选取的至少两个曝光参数获取第二摄像头对应的第二图像，减少鬼影现象，进而提升高动态范围图像的质量。

在一个实施例中，获取模块902用于获取第一摄像头采集的至少两帧第一图像，至少两帧第一图像包括第一帧第一图像和第二帧第一图像，第二帧为与第一帧相邻的下一帧。检测模块904用于根据第一帧第一图像中运动物体的位置与第二帧第一图像中运动物体的位置，处理得到运动物体的运动速度；根据运动物体的移动速度确定第二帧第一图像的模糊度。

本实施例中的图像生成装置，获取第一摄像头采集的至少两帧第一图像，至少两帧第一图像包括第一帧第一图像和第二帧第一图像，第二帧为与第一帧相邻的下一帧，根据第一帧第一图像中运动物体的位置与第二帧第一图像中运动物体的位置，处理得到运动物体的运动速度，根据运动物体的移动速度确定第二帧第一图像的模糊度，能够根据模糊度这个条件确定第二摄像头的第二曝光参数，减少鬼影现象，进而提升高动态范围图像的质量。

在一个实施例中，获取模块902用于获取第一摄像头采集的至少两帧第一图像，至少两帧第一图像包括第一帧第一图像和第二帧第一图像，第二帧为与第一帧相邻的下一帧。检测模块904用于获取第一帧第一图像和第二帧图像中相同区域中对应的像素点的亮度值或颜色值，确定对应像素点的亮度差值或颜色差值；当相同区域中存在预设数量的像素点的亮度差值或颜色差值均大于预设阈值时，确定第二帧第一图像中包含运动物体。

本实施例中的图像生成装置，获取第一摄像头采集的至少两帧第一图像，至少两帧第一图像包括第一帧第一图像和第二帧第一图像，第二帧为与第一帧相邻的下一帧，获取第一帧第一图像和第二帧第一图像中相同区域中对应的像素点的亮度值或颜色值，确定对应像素点的亮度差值或颜色差值，当相同区域中存在预设数量的像素点的亮度差值或颜色差值均大于预设阈值时，确定第二帧第一图像中包含运动物体，当存在运动物体时，图像容易模糊，进而能够根据模糊度这个条件调整并确定第二摄像头的第二曝光参数，减少鬼影现象，进而提升高动态范围图像的质量。

在一个实施例中，确定模块906用于确定第一图像对应的场景类型；查找场景类型对应的预设模糊度。本申请实施例中的图像生成装置，通过确定第一图像对应的场景类型，查找场景类型对应的预设模糊度，能够根据场景类型动态地调整预设模糊度，提升高动态范围图像的质量。

上述图像生成装置中各个模块的划分仅用于举例说明，在其他实施例中，可将图像生成装置按照需要划分为不同的模块，以完成上述图像生成装置的全部或部分功能。

图10为一个实施例中电子设备的内部结构示意图。如图10所示，该电子设备包括通过系统总线连接的处理器和存储器。其中，该处理器用于提供计算和控制能力，支撑整个电子设备的运行。存储器可包括非易失性存储介质及内存储器。非易失性存储介质存储有操作系统和计算机程序。该计算机程序可被处理器所执行，以用于实现以下各个实施例所提供的一种图像生成方法。内存储器为非易失性存储介质中的操作系统计算机程序提供高速缓存的运行环境。该电子设备可以是手机、平板电脑或者个人数字助理或穿戴式设备等。

本申请实施例中提供的图像生成装置中的各个模块的实现可为计算机程序的形式。该计算机程序可在终端或服务器上运行。该计算机程序构成的程序模块可存储在终端或服务器的存储器上。该计算机程序被处理器执行时，实现本申请实施例中所描述方法的步骤。

本申请实施例还提供了一种计算机可读存储介质。一个或多个包含计算机可执行指令的非易失性计算机可读存储介质，当所述计算机可执行指令被一个或多个处理器执行时，使得所述处理器执行图像生成方法的步骤。

一种包含指令的计算机程序产品，当其在计算机上运行时，使得计算机执行图像生成方法。

本申请实施例所使用的对存储器、存储、数据库或其它介质的任何引用可包括非易失性和/或易失性存储器。合适的非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)，它用作外部高速缓冲存储器。作为说明而非局限，RAM以多种形式可得，诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDR SDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)。

以上所述实施例仅表达了本申请的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对本申请专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本申请构思的前提下，还可以做出若干变形和改进，这些都属于本申请的保护范围。因此，本申请专利的保护范围应以所附权利要求为准。

Claims (10)

1.一种图像生成方法，其特征在于，包括：

获取第一摄像头采集的第一图像；

当检测到所述第一图像中包含运动物体时，检测所述第一图像的模糊度；

当所述第一图像的模糊度小于预设模糊度时，获取第一图像序列中每帧第一图像对应的第一曝光参数，所述第一图像序列中记录至少两帧所述第一图像；

对所述每帧所述第一图像进行分析，得到场景全息图；所述场景全息图是将每帧第一图像所对应的图像直方图合成所得到的；所述图像直方图是根据亮度值和曝光参数建立的；

从所述场景全息图对应的第一曝光参数范围中，选取至少两个涵盖所述场景全息图的曝光参数作为第二摄像头的第二曝光参数；

控制所述第二摄像头以所述至少两个第二曝光参数采集第二图像，以生成高动态范围图像。

2.根据权利要求1所述的方法，其特征在于，所述方法还包括：

当检测到所述第一图像的模糊度大于或等于预设模糊度时，按照预设曝光参数差值调整所述第一图像对应的第一曝光参数。

3.根据权利要求1所述的方法，其特征在于，所述对所述每帧第一图像进行分析，得到场景全息图，包括：

根据每帧第一图像中各像素点的亮度值建立所述每帧第一图像对应的图像直方图；

将所述每帧第一图像对应的图像直方图合成，并生成场景全息图。

4.根据权利要求1或2所述的方法，其特征在于，所述检测所述第一图像的模糊度，包括：

对所述第一图像进行滤波，得到所述第一图像中纹理特征的强度；

根据所述第一图像中纹理特征的强度确定所述第一图像的模糊度。

5.根据权利要求1或2所述的方法，其特征在于，所述获取第一摄像头采集的第一图像，包括：

获取第一摄像头采集的至少两帧第一图像，其中，所述至少两帧第一图像包括第一帧第一图像和第二帧第一图像，所述第二帧为与第一帧相邻的下一帧；

所述检测所述第一图像的模糊度，包括：

根据第一帧第一图像中运动物体的位置与第二帧第一图像中运动物体的位置，处理得到所述运动物体的运动速度；

根据所述运动物体的移动速度确定所述第二帧第一图像的模糊度。

6.根据权利要求1或2所述的方法，其特征在于，所述获取第一摄像头采集的第一图像，包括：

获取第一摄像头采集的至少两帧第一图像，其中，所述至少两帧第一图像包括第一帧第一图像和第二帧第一图像，所述第二帧为与第一帧相邻的下一帧；

所述检测到所述第一图像中包含运动物体的方式，包括：

获取所述第一帧第一图像和所述第二帧第一图像中相同区域中对应的像素点的亮度值或颜色值，确定对应像素点的亮度差值或颜色差值；

当所述相同区域中存在预设数量的像素点的亮度差值或颜色差值均大于预设阈值时，确定所述第二帧第一图像中包含运动物体。

7.一种图像生成装置，其特征在于，包括：

获取模块，用于获取第一摄像头采集的第一图像；

检测模块，用于当检测到所述第一图像中包含运动物体时，检测所述第一图像的模糊度；

所述获取模块，还用于当所述第一图像的模糊度小于预设模糊度时，获取第一图像序列中每帧第一图像对应的第一曝光参数，所述第一图像序列中记录至少两帧所述第一图像；

确定模块，用于对所述每帧所述第一图像进行分析，得到场景全息图；所述场景全息图是将每帧第一图像所对应的图像直方图合成所得到的；所述图像直方图是根据亮度值和曝光参数建立的；

所述确定模块，还用于从所述场景全息图对应的第一曝光参数范围中，选取至少两个涵盖所述场景全息图的曝光参数作为第二摄像头的第二曝光参数；

控制模块，用于控制所述第二摄像头以所述至少两个第二曝光参数采集第二图像，以生成高动态范围图像。

8.根据权利要求7所述的装置，其特征在于，所述确定模块用于根据每帧第一图像中各像素点的亮度值建立所述每帧第一图像对应的图像直方图；

将所述每帧第一图像对应的图像直方图合成，并生成场景全息图。

9.一种电子设备，包括存储器及处理器，所述存储器中储存有计算机程序，所述计算机程序被所述处理器执行时，使得所述处理器执行如权利要求1至6中任一项所述的图像生成方法的步骤。

10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1至6中任一项所述的方法的步骤。

Images