CN108810407B - 一种图像处理方法、移动终端及计算机可读存储介质 - Google Patents

Abstract

本申请适用于图像处理技术领域，提供了一种图像处理方法、移动终端及计算机可读存储介质，所述图像处理方法包括：在所述移动终端的摄像头启动后，确定当前启动的摄像头是否为前置摄像头，若当前启动的摄像头为前置摄像头，则通过第一检测模型检测所述摄像头的预览画面中是否存在前景目标，若通过第一检测模型在所述预览画面中检测到前景目标，则获取所述前景目标的前景类型，并估计所述预览画面的背景类型，根据所述前景目标的前景类型和估计的所述预览画面的背景类型，对所述前景目标进行图像处理，通过本申请可以解决目前拍摄的照片效果单一的问题，使得拍摄的照片呈现的效果多样化。

Description

一种图像处理方法、移动终端及计算机可读存储介质

技术领域

本申请属于图像处理技术领域，尤其涉及一种图像处理方法、移动终端及计算机可读存储介质。

背景技术

随着智能移动终端的发展，人们对于手机等移动终端上拍照的使用越来越频繁。现有的大部分移动终端的拍照功能支持图像处理，例如，针对人脸的滤镜功能、磨皮功能、美白功能等。

然而，目前图像处理的方式比较单一，例如，针对人脸进行的处理就是美颜相关的处理。所以，目前拍摄的照片的效果比较单一，用户的体验度较差。

发明内容

有鉴于此，本申请实施例提供了一种图像处理方法、移动终端及计算机可读存储介质，以解决目前拍摄的照片效果单一、用户体验度较差的问题。

本申请实施例的第一方面提供了一种图像处理方法，应用于移动终端，所述方法包括：

在所述移动终端的摄像头启动后，确定当前启动的摄像头是否为前置摄像头；

若当前启动的摄像头为前置摄像头，则通过第一检测模型检测所述摄像头的预览画面中是否存在前景目标；

若通过第一检测模型在所述预览画面中检测到前景目标，则获取所述前景目标的前景类型，并估计所述预览画面的背景类型；

根据所述前景目标的前景类型和估计的所述预览画面的背景类型，对所述前景目标进行图像处理。

本申请实施例的第二方面提供了一种移动终端，包括：

确定模块，用于在所述移动终端的摄像头启动后，确定当前启动的摄像头是否为前置摄像头；

第一前景识别模块，用于若当前启动的摄像头为前置摄像头，则通过第一检测模型检测所述摄像头的预览画面中是否存在前景目标；

第一背景识别模块，用于若通过第一检测模型在所述预览画面中检测到前景目标，则获取所述前景目标的前景类型，并估计所述预览画面的背景类型；

第一图像处理模块，用于根据所述前景目标的前景类型和估计的所述预览画面的背景类型，对所述前景目标进行图像处理。

本申请实施例的第三方面提供了一种移动终端，包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现本申请实施例第一方面提供的所述方法的步骤。

本申请实施例的第四方面提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序被一个或多个处理器执行时实现本申请实施例第一方面提供的所述方法的步骤。

本申请实施例的第五方面提供了一种计算机程序产品，所述计算机程序产品包括计算机程序，所述计算机程序被一个或多个处理器执行时实现本申请实施例第一方面提供的所述方法的步骤。

本申请实施例在前置摄像头拍摄时，通过第一检测模型检测预览画面的前景目标获取前景目标的前景类型，并估计预览画面的背景类型，通过前景目标的前景类型和估计的背景类型对前景目标进行图像处理，由于前景摄像头进行拍摄时，通常是用于自拍，所以前景目标为人脸的几率较大，那么图像处理时的对象主要集中在前景目标，背景类型可以根据背景图像估计获得以节省内存占用率，然后根据前景类型和背景类型对所述前景目标进行处理，既节省了内存占用率，又使得拍摄的照片呈现的效果多样化。

附图说明

为了更清楚地说明本申请实施例中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。

图1是本申请实施例提供的一种图像处理方法的实现流程示意图；

图2是本申请实施例提供的另一种图像处理方法的实现流程示意图；

图3是本申请实施例提供的另一种图像处理方法的实现流程示意图；

图4是本申请实施例提供的一种移动终端的示意框图；

图5是本申请实施例提供的另一种移动终端的示意框图。

具体实施方式

以下描述中，为了说明而不是为了限定，提出了诸如特定系统结构、技术之类的具体细节，以便透彻理解本申请实施例。然而，本领域的技术人员应当清楚，在没有这些具体细节的其它实施例中也可以实现本申请。在其它情况中，省略对众所周知的系统、装置、电路以及方法的详细说明，以免不必要的细节妨碍本申请的描述。

应当理解，当在本说明书和所附权利要求书中使用时，术语“包括”指示所描述特征、整体、步骤、操作、元素和/或组件的存在，但并不排除一个或多个其它特征、整体、步骤、操作、元素、组件和/或其集合的存在或添加。

还应当理解，在此本申请说明书中所使用的术语仅仅是出于描述特定实施例的目的而并不意在限制本申请。如在本申请说明书和所附权利要求书中所使用的那样，除非上下文清楚地指明其它情况，否则单数形式的“一”、“一个”及“该”意在包括复数形式。

还应当进一步理解，在本申请说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合，并且包括这些组合。

如在本说明书和所附权利要求书中所使用的那样，术语“如果”可以依据上下文被解释为“当...时”或“一旦”或“响应于确定”或“响应于检测到”。类似地，短语“如果确定”或“如果检测到[所描述条件或事件]”可以依据上下文被解释为意指“一旦确定”或“响应于确定”或“一旦检测到[所描述条件或事件]”或“响应于检测到[所描述条件或事件]”。

为了说明本申请所述的技术方案，下面通过具体实施例来进行说明。

图1是本申请实施例提供的一种图像处理方法的实现流程示意图，应用于移动终端，如图所示该方法可以包括以下步骤：

步骤S101，在移动终端的摄像头启动后，确定当前启动的摄像头是否为前置摄像头。

在本申请实施例中，手机等移动终端中通常设有前置摄像头和后置摄像头，而前置摄像头和后置摄像头由于位置的不同，进行拍照时的应用场景也会不相同，前置摄像头通常用于拍摄者的自拍，后置摄像头通常用于拍摄其它人或物体。对于前置摄像头而言，自拍时需要对人脸进行处理以达到较好的拍摄效果，对于后置摄像头而言，通常需要对整个画面进行处理以达到较好的拍摄效果。所以，在移动终端的摄像头启动后，需要先确定当前启动的摄像头是前置摄像头还是后置摄像头，然后在针对预览画面进行相关的图像处理。

步骤S102，若当前启动的摄像头为前置摄像头，则通过第一检测模型检测所述摄像头的预览画面中是否存在前景目标。

在本申请实施例中，所述第一检测模型为目标检测模型，通常用于检测所述预览画面中的前景目标。

实际应用中，第一检测模型也可采用场景检测模型检测摄像头的预览画面中是否存在前景目标。场景检测模型通常是针对单张图像的内容分析输出多个场景及其每个场景在图像中的位置区域，适合输出图像的前景信息。

为了便于区分，我们继续解释场景分类模型，所述场景分类模型通常是针对单张图像的内容分析输出单个场景，适合输出图片的背景信息。所以，在获得预览画面的前景目标时，需要采用场景检测模型，在获得预览画面的背景类型时，需要采用场景分类模型。当然，实际应用中，也可以采用其它模型用来获得预览画面的前景目标、与所述前景目标对应的前景类型、背景类型。

步骤S103，若通过第一检测模型在所述预览画面中检测到前景目标，则获取所述前景目标的前景类型，并估计所述预览画面的背景类型。

在本申请实施例中，在通过第一检测模型检测到前景目标时，所述第一检测模型会输出所述前景目标的前景类型，以及所述前景目标的位置信息。将预览画面中前景目标之外的区域作为背景图像，估计所述预览画面的背景类型。所述估计所述预览画面的背景类型可以通过图3所示实施例的方法进行估计获得所述预览画面的背景类型，在此不再详述。

步骤S104，根据所述前景目标的前景类型和估计的所述预览画面的背景类型，对所述前景目标进行图像处理。

在本申请实施例中，由于当前启动的为前景摄像头，所以，主要拍摄的对象为前景目标，在对所述预览画面进行图像处理时，可以主要针对所述前景目标进行图像处理，进行图像处理的方式可以依据所述前景目标的前景类型和估计的所述预览画面的背景类型。需要说明的是，可以仅针对前景目标进行图像处理，也可以先对预览画面进行全局处理再针对前景目标进行局部处理。

作为举例，当所述前景目标为人脸时，可以确定的前景类型为人脸，若估计的背景类型为夜景，则对所述前景目标进行图像处理时，可以先对所述前景目标进行去噪处理，获得去除噪声后的人脸图像，然后在对所述去除噪声后的人脸图像进行图像增强处理，最后在对增强处理后的人脸图像进行美颜处理。这样可以获得清晰且具有美颜效果的人脸图像。

本申请实施例在前置摄像头拍摄时，通过第一检测模型检测预览画面的前景目标获取前景目标的前景类型，并估计预览画面的背景类型，通过前景目标的前景类型和估计的背景类型对前景目标进行图像处理，由于前景摄像头进行拍摄时，通常是用于自拍，所以前景目标为人脸的几率较大，那么处理的对象应该集中在前景目标，背景类型可以根据背景图像估计获得以节省内存占用率，然后根据前景类型和背景类型对所述前景目标进行处理，既节省了内存占用率，又使得拍摄的照片呈现的效果多样化。

图2是本申请实施例提供的另一种图像处理方法的流程示意图，如图所示该方法可以包括以下步骤：

步骤S201，在所述移动终端的摄像头启动后，确定当前启动的摄像头是否为前置摄像头。

步骤S202，若当前启动的摄像头为前置摄像头，则通过第一检测模型检测所述摄像头的预览画面中是否存在前景目标。

步骤S201至步骤S202的内容可参照步骤S101至步骤S102的描述，在此不再赘述。

步骤S203，若通过第一检测模型在所述预览画面中检测到前景目标，则获取所述前景目标的前景类型，并判断所述前景目标是否符合预设条件。

在本申请实施例中，获取所述前景目标的前景类型后，还需要判断所述前景目标是否符合预设条件。

所述判断所述前景目标是否符合预设条件包括：

判断所述前景目标在所述预览画面中所占的比例是否大于预设值；

若所述前景目标在所述预览画面中所占的比例大于预设值，则确定所述前景目标符合预设条件；

若所述前景目标在所述预览画面中所占的比例小于或等于所述预设值，则确定所述前景目标不符合预设条件。

在本申请实施例中，判断所述前景目标是否符合预设条件是从所述前景目标在所述预览画面中所占的比例确定的所述前景是否符合预设条件。若所述前景目标在所述预览画面中所占的比例较小，则所述前景目标不符合预设条件，表示拍摄者当前拍摄的对象除了前景目标，还包括背景；若所述前景目标在所述预览画面中所占的比例较大，则所述前景目标符合预设条件，表示拍摄者当前拍摄的对象主要为前景目标。根据不同的拍摄对象可以设置不同的图像处理方式。

计算所述前景目标在所述预览画面中所占的比例，可以计算前景目标所在的检测框在所述预览画面中所占的比例，也可以计算所述前景目标实际的区域在所述预览画面中所占的比例，如果计算所述前景目标实际的区域在所述预览画面中所占的比例，需要将所述前景目标从所述预览画面中分割出来，将所述前景目标从所述预览画面中分割出来的方法可以参照如图3所示实施例的方法。

步骤S204，若所述前景目标符合预设条件，则估计所述预览画面的背景类型。

步骤S204和步骤S103的内容一致，可参照步骤S103的描述，在此不再赘述。

步骤S205，根据所述前景目标的前景类型和估计的所述预览画面的背景类型，对所述前景目标进行图像处理。

步骤S205和步骤S104的内容一致，可参照步骤S104的描述，在此不再赘述。

步骤S206，若所述前景目标不符合预设条件，则通过第二检测模型检测所述预览画面的背景类型。

在本申请实施例中，若所述前景目标不符合预设条件，表示当前拍摄对象除了前景目标还有背景，就需要精确的获得所述背景图像的背景类型。以便于能够根据所述背景类型和前景目标的前景类型对所述预览画面进行图像处理。

通过步骤S204以及图1所示实施例的描述可以看出，前景目标在预览画面中所占的比例较大时，表示当前的拍摄对象为所述前景目标，进行图像处理时的处理对象也为前景目标，而背景所占的区域较小，可以不对所述背景区域进行图像处理。然而，当所述前景目标在预览画面中所占的比例较小时，拍摄对象除了前景目标还包括背景区域，所以在对所述预览画面进行处理时，需要进行全局处理，或者在全局处理后再对所述前景目标进行局部处理。对所述预览画面进行全局处理就需要精确的获取所述预览画面的背景类型，就不能采用估计的方法获得，所以本申请实施例在所述前景目标不符合预设条件时，通过第二检测模型检测所述预览画面的背景类型。所述第二检测模型可以是图1所示实施例中描述的场景分类模型，还可以是其它卷积神经网络模型，在此不做限制。

步骤S207，根据所述前景目标的前景类型和检测到的所述预览画面的背景类型，对所述预览画面进行图像处理。

在本申请实施例中，若所述前景类型为人脸，所述背景类型为夜景，则可以对所述预览画面进行全局去噪处理获得去除噪声后的图像，并对所述去除噪声后的图像进行全局图像增强处理；当然，在对所述预览画面进行全局的图像处理后，还可以在针对人脸进行美颜处理。

步骤S208，若当前启动的摄像头不是前置摄像头，则通过第一检测模型检测所述预览画面中是否存在前景目标。

步骤S209，若通过第一检测模型在所述预览画面中检测到前景目标，则获取所述前景目标的前景类型，并通过第二检测模型检测所述预览画面的背景类型。

步骤S210，根据所述前景目标的前景类型和检测到的所述预览画面的背景类型，对所述预览画面进行图像处理。

在本申请实施例中，若当前启动的摄像头不是前置摄像头，则表示当前启动的摄像头为后置摄像头，则表示当前拍摄的对象可能不仅包括前景目标还包括背景区域，这样，就需要精确的获取前景目标的前景类型和预览画面的背景类型，以便于根据所述前景目标的前景类型和检测到的所述预览画面的背景类型，对所述预览画面进行图像处理。

需要说明的是，若当前启动的为后置摄像头，则图像的处理方式可以参照启动的为前置摄像头且预览画面中的前景目标在预览画面中所占的比例小于或等于预设值时图像的处理方式，在此不再赘述。

图3是本申请实施例提供的另一种图像处理方法的流程示意图，如图所示该方法是在图1或图2所示实施例的基础上，描述如何估计所述预览画面的背景类型，具体可以包括以下步骤：

步骤S301，根据所述前景目标在所述预览画面中的位置信息，从所述预览画面中去除所述前景目标获得所述预览画面的背景图像。

在本申请实施例中，所述前景目标在所述预览画面中的位置信息可以是所述前景目标对应的检测框在所述预览画面中的位置信息，从所述预览画面中去除前景目标获得所述预览画面的背景图像的步骤可以是：

基于所述检测框的位置信息，从所述预览画面中获取所述检测框内的图像；对所述检测框内的图像进行分割处理获得前景目标，并将所述预览画面中的前景目标去除获得背景图像。

本申请实施例中，由于检测框通常为包含前景目标的矩形窗口，所以检测框内的图像并非完全是前景目标，尤其是前景目标的形状不规则时，可能检测框内的图像中也包含了背景图像，由于本申请实施例中，根据背景图像获取背景类型本身就是估计的，所以，需要获取到背景图像的精确区域，这样才能够降低估计背景类型时的误差。可以根据检测框的位置信息，从预览画面中获得检测框内的图像。然后对检测框内的图像进行分割处理，获得前景目标，预览画面中将前景目标去除后的图像就是背景图像。

作为本申请又一实施例，所述对所述检测框内的图像进行分割处理获得前景目标包括：

获取灰度阈值序列，并通过所述灰度阈值序列中的每个灰度阈值对所述检测框内的图像进行二值化处理，获得二值化图像序列。

基于所述检测框内的图像的灰度梯度，识别所述检测框内的图像中前景目标的边界，获得前景目标轮廓线。

从所述二值化图像序列中获取与所述前景目标轮廓线匹配度最高的二值化图像。

将与所述第二目标轮廓线的匹配度最高的二值化图像与所述前景目标轮廓线融合生成连续的前景目标区域，在所述预览画面中所述前景目标区域内的图像为前景目标。

在本申请实施例中，可以对所述检测框内的图像进行二值化处理，若阈值设置的合适，可以得到所述前景目标区域。然而，实际应用中，很难精确的选取到合适的阈值将前景目标和背景分割开，即使选取到合适的阈值，背景中难免会存在与前景目标中的像素点的灰度值相同的像素点。所以，本申请实施例可以通过二值化方法与灰度梯度方法结合识别所述检测框内的前景目标。

首先对所述检测框内的图像进行灰度处理，获得灰度图像，然后获取灰度阈值序列，通过灰度阈值序列中的每个灰度阈值对所述检测框内的图像进行二值化处理，就可以获得二值化图像序列，这些二值化灰度图像序列中，会存在一个灰度图像，这个灰度图像能大致的表示前景目标区域。

由于检测框是通过第一检测模型识别得到的前景目标的位置信息，所以可以确定检测框内存在一个前景目标，且前景目标占据了所述检测框的大部分区域。而实际应用中，目标的边界是区分目标和背景的重要依据，而通常边界点的周围灰度值变化率较高，因此，可以通过图像的灰度梯度来识别目标的边界，获得目标的目标轮廓线。然而，目标轮廓线也会存在一个问题是：图像中实际上是边界，然而由于梯度变化不明显可能就不会生成轮廓线；或者，实际上不是边界，由于在前景目标内部的灰度值变化较明显而在目标内部生成轮廓线。

通过分析可知，实际上二值化的方法和灰度梯度的方法均会存在一定的缺陷，获得的结果并非是非常精确地结果。为了能够获得精确的结果，本申请实施例将二值化的方法和灰度梯度的方法结合在一起获得第二目标。

二值化图像序列中，会有一幅灰度图像中目标的区域范围最接近前景目标真实的区域范围，如何从二值化图像序列中获得最接近前景目标真实的区域范围的图像就可以从所述二值化图像序列中获取与所述目标轮廓线匹配度最高的二值化图像。匹配度可以通过二值化方法和灰度梯度方法分别获得的目标的区域的重合度作为匹配度。每一个二值化图像中的目标区域可以暂时看作前景目标的目标区域，灰度梯度方法获得的轮廓线内的区域也可以暂时看作前景目标的目标区域，找到与灰度梯度方法获得的目标区域重合度最高的二值化图像。这个二值化图像中的目标区域最能够表示真正的前景目标区域。

实际上无论获得的匹配度最高的二值化图像中的目标区域，还是灰度梯度方法获得的轮廓线表示的目标区域都无法精确的描述前景目标区域，然而，可以将与所述前景目标轮廓线的匹配度最高的二值化图像与所述前景目标轮廓线融合生成连续的前景目标区域，通过二值化图像摒弃掉灰度梯度获得的轮廓线中不精确的部分，通过灰度梯度方法获得的轮廓线摒弃掉二值化图像中不精确的部分，融合后获得连续的前景目标区域，前景目标区域并不是真正的前景目标图像，因为是通过二值化后的灰度图像和轮廓线融合的，所以，获得的前景目标区域表示的是前景目标在所述预览画面中的坐标。在预览画面中的前景目标区域内的图像才是前景目标。

本申请实施例通过二值化方法和灰度梯度方法结合在一起获得前景目标。能够更精确的从预览画面中分割出前景目标。在获得前景目标之后就可以从预览画面中将所述前景目标去除，获得背景图像，再根据所述背景图像中像素点的数据特征值估计所述背景图像的背景类型。

步骤S302，获取所述背景图像中像素点在RGB色域空间中的坐标。

步骤S303，计算所有像素点在RGB色域空间中的坐标均值，根据所述坐标均值在所述色域空间中对应的颜色确定所述背景图像的背景类型。

在本申请实施例中，为了降低内存使用率，可以根据背景图像估计背景图像的背景类型，例如，获取所述背景图像中像素点在RGB色域空间中的坐标；计算所有像素点在RGB色域空间中的坐标均值，根据所述坐标均值在所述色域空间中对应的颜色确定所述背景图像的背景类型。

实际应用中，可以在色域空间中，根据颜色范围划分不同的区域，针对不同的区域设置不同的背景类型。在计算获得背景图像中所有像素点在RGB色域空间中的坐标均值之后，根据所述坐标均值在色域空间中对应的颜色范围确定背景类型。作为举例，若背景图像中所有像素点在RGB色域空间中的坐标均值在色域空间中对应的颜色为绿色，则可以估计背景图像的背景类型为草地；若背景图像中所有像素点在RGB色域空间中的坐标均值在色域空间中对应的颜色为黑色，则可以估计背景图像的背景类型为夜景；若背景图像中所有像素点在RGB色域空间中的坐标均值在色域空间中对应的颜色为蓝色，则可以估计背景图像的背景类型为蓝天。

需要说明的是，本申请实施例将RGB色域空间作为举例，实际应用中还可以是其它色域空间。

应理解，上述实施例中各步骤的序号的大小并不意味着执行顺序的先后，各过程的执行顺序应以其功能和内在逻辑确定，而不应对本申请实施例的实施过程构成任何限定。

图4是本申请一实施例提供的移动终端的示意框图，为了便于说明，仅示出与本申请实施例相关的部分。

该移动终端4可以是内置于手机、平板电脑、笔记本等移动终端内的软件单元、硬件单元或者软硬结合的单元，也可以作为独立的挂件集成到所述手机、平板电脑、笔记本等移动终端中。

所述移动终端4包括：

确定模块41，用于在所述移动终端的摄像头启动后，确定当前启动的摄像头是否为前置摄像头；

第一前景识别模块42，用于若当前启动的摄像头为前置摄像头，则通过第一检测模型检测所述摄像头的预览画面中是否存在前景目标；

第一背景识别模块43，用于若通过第一检测模型在所述预览画面中检测到前景目标，则获取所述前景目标的前景类型，并估计所述预览画面的背景类型；

第一图像处理模块44，用于根据所述前景目标的前景类型和估计的所述预览画面的背景类型，对所述前景目标进行图像处理。

可选的，所述第一背景识别模块43还包括：

判断单元431，用于在估计所述预览画面的背景类型之前，判断所述前景目标是否符合预设条件；

第一背景识别单元432还用于：

若所述前景目标符合预设条件，则估计所述预览画面的背景类型。

可选的，所述第一背景识别模块43还包括：

第二背景识别单元433，用于在判断所述前景目标是否符合预设条件之后，若所述前景目标不符合预设条件，则通过第二检测模型检测所述预览画面的背景类型；

所述移动终端4还包括：

第二图像处理模块45，用于根据所述前景目标的前景类型和检测到的所述预览画面的背景类型，对所述预览画面进行图像处理。

可选的，所述判断单元431还用于：

判断所述前景目标在所述预览画面中所占的比例是否大于预设值；

若所述前景目标在所述预览画面中所占的比例大于预设值，则确定所述前景目标符合预设条件；

若所述前景目标在所述预览画面中所占的比例小于或等于所述预设值，则确定所述前景目标不符合预设条件。

可选的，所述第一背景识别单元432包括：

背景图像获取子单元，用于根据所述前景目标在所述预览画面中的位置信息，从所述预览画面中去除所述前景目标获得所述预览画面的背景图像；

背景类型识别子单元，用于根据所述背景图像中像素点的数据特征值估计所述背景图像的背景类型。

可选的，所述背景类型识别子单元包括：

坐标获取子单元，用于获取所述背景图像中像素点在RGB色域空间中的坐标；

背景类型识别子单元，用于计算所有像素点在RGB色域空间中的坐标均值，根据所述坐标均值在所述色域空间中对应的颜色确定所述背景图像的背景类型。

可选的，所述移动终端4还包括：

第二前景识别模块46，用于在确定当前启动的摄像头是否为前置摄像头之后，若当前启动的摄像头不是前置摄像头，则通过第一检测模型检测所述预览画面中是否存在前景目标；

第二背景识别模块47，用于若通过第一检测模型在所述预览画面中检测到前景目标，则获取所述前景目标的前景类型，并通过第二检测模型检测所述预览画面的背景类型；

第三图像处理模块48，用于根据所述前景目标的前景类型和检测到的所述预览画面的背景类型，对所述预览画面进行图像处理。

所属领域的技术人员可以清楚地了解到，为了描述的方便和简洁，仅以上述各功能单元、模块的划分进行举例说明，实际应用中，可以根据需要而将上述功能分配由不同的功能单元、模块完成，即将所述移动终端的内部结构划分成不同的功能单元或模块，以完成以上描述的全部或者部分功能。实施例中的各功能单元、模块可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中，上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。另外，各功能单元、模块的具体名称也只是为了便于相互区分，并不用于限制本申请的保护范围。上述装置中单元、模块的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。

图5是本申请又一实施例提供的移动终端的示意框图。如图5所示，该实施例的移动终端5包括：一个或多个处理器50、存储器51以及存储在所述存储器51中并可在所述处理器50上运行的计算机程序52。所述处理器50执行所述计算机程序52时实现上述各个图像处理方法实施例中的步骤，例如图1所示的步骤S101至S104。或者，所述处理器50执行所述计算机程序52时实现上述移动终端实施例中各模块/单元的功能，例如图4所示模块41至44的功能。

示例性的，所述计算机程序52可以被分割成一个或多个模块/单元，所述一个或者多个模块/单元被存储在所述存储器51中，并由所述处理器50执行，以完成本申请。所述一个或多个模块/单元可以是能够完成特定功能的一系列计算机程序指令段，该指令段用于描述所述计算机程序52在所述移动终端5中的执行过程。例如，所述计算机程序52可以被分割成确定模块、第一前景识别模块、第一背景识别模块、第一图像处理模块。

确定模块，用于在所述移动终端的摄像头启动后，确定当前启动的摄像头是否为前置摄像头；

第一前景识别模块，用于若当前启动的摄像头为前置摄像头，则通过第一检测模型检测所述摄像头的预览画面中是否存在前景目标；

第一背景识别模块，用于若通过第一检测模型在所述预览画面中检测到前景目标，则获取所述前景目标的前景类型，并估计所述预览画面的背景类型；

第一图像处理模块，用于根据所述前景目标的前景类型和估计的所述预览画面的背景类型，对所述前景目标进行图像处理。

其它模块或者单元可参照图4所示的实施例中的描述，在此不再赘述。

所述移动终端包括但不仅限于处理器50、存储器51。本领域技术人员可以理解，图5仅仅是移动终端5的一个示例，并不构成对移动终端5的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件，例如所述移动终端还可以包括输入设备、输出设备、网络接入设备、总线等。

所述处理器50可以是中央处理单元(Central Processing Unit，CPU)，还可以是其他通用处理器、数字信号处理器(Digital Signal Processor，DSP)、专用集成电路(Application Specific Integrated Circuit，ASIC)、现成可编程门阵列(Field-Programmable Gate Array，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。

所述存储器51可以是所述移动终端5的内部存储单元，例如移动终端5的硬盘或内存。所述存储器51也可以是所述移动终端5的外部存储设备，例如所述移动终端5上配备的插接式硬盘，智能存储卡(Smart Media Card,SMC)，安全数字(Secure Digital,SD)卡，闪存卡(Flash Card)等。进一步地，所述存储器51还可以既包括所述移动终端5的内部存储单元也包括外部存储设备。所述存储器51用于存储所述计算机程序以及所述移动终端所需的其他程序和数据。所述存储器51还可以用于暂时地存储已经输出或者将要输出的数据。

在上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述或记载的部分，可以参见其它实施例的相关描述。

本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本申请的范围。

在本申请所提供的实施例中，应该理解到，所揭露的移动终端和方法，可以通过其它的方式实现。例如，以上所描述的移动终端实施例仅仅是示意性的，例如，所述模块或单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通讯连接可以是通过一些接口，装置或单元的间接耦合或通讯连接，可以是电性，机械或其它的形式。

所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。

另外，在本申请各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。

所述集成的模块/单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本申请实现上述实施例方法中的全部或部分流程，也可以通过计算机程序来指令相关的硬件来完成，所述的计算机程序可存储于一计算机可读存储介质中，该计算机程序在被处理器执行时，可实现上述各个方法实施例的步骤。其中，所述计算机程序包括计算机程序代码，所述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。所述计算机可读介质可以包括：能够携带所述计算机程序代码的任何实体或装置、记录介质、U盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、电载波信号、电信信号以及软件分发介质等。需要说明的是，所述计算机可读介质包含的内容可以根据司法管辖区内立法和专利实践的要求进行适当的增减，例如在某些司法管辖区，根据立法和专利实践，计算机可读介质不包括是电载波信号和电信信号。

以上所述实施例仅用以说明本申请的技术方案，而非对其限制；尽管参照前述实施例对本申请进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围，均应包含在本申请的保护范围之内。

Claims (8)

1.一种图像处理方法，其特征在于，应用于移动终端，所述方法包括：

在所述移动终端的摄像头启动后，确定当前启动的摄像头是否为前置摄像头；

若当前启动的摄像头为前置摄像头，则通过第一检测模型检测所述摄像头的预览画面中是否存在前景目标；

若通过第一检测模型在所述预览画面中检测到前景目标，则获取所述前景目标的前景类型，并将所述预览画面中前景目标之外的区域作为背景图像，根据所述背景图像估计所述预览画面的背景类型；

根据所述前景目标的前景类型和估计的所述预览画面的背景类型，对所述前景目标进行图像处理；

若当前启动的摄像头不是前置摄像头，则通过第一检测模型检测所述预览画面中是否存在前景目标；

若通过第一检测模型在所述预览画面中检测到前景目标，则获取所述前景目标的前景类型，并通过第二检测模型检测所述预览画面的背景类型；

根据所述前景目标的前景类型和检测到的所述预览画面的背景类型，对所述预览画面进行图像处理；

所述估计所述预览画面的背景类型包括：

根据所述前景目标对应的检测框在所述预览画面中的位置信息，基于所述检测框的位置信息，从所述预览画面中获取所述检测框内的图像；获取灰度阈值序列，并通过所述灰度阈值序列中的每个灰度阈值对所述检测框内的图像进行二值化处理，获得二值化图像序列；基于所述检测框内的图像的灰度梯度，识别所述检测框内的图像中前景目标的边界，获得前景目标轮廓线；从所述二值化图像序列中获取与所述前景目标轮廓线匹配度最高的二值化图像；将与第二目标轮廓线的匹配度最高的二值化图像与所述前景目标轮廓线融合生成连续的前景目标区域，在所述预览画面中所述前景目标区域内的图像为前景目标，并将所述预览画面中的前景目标去除获得背景图像；根据所述背景图像中像素点的数据特征值估计所述背景图像的背景类型。

2.如权利要求1所述的图像处理方法，其特征在于，在估计所述预览画面的背景类型之前，还包括：

判断所述前景目标是否符合预设条件；

若所述前景目标符合预设条件，则估计所述预览画面的背景类型。

3.如权利要求2所述的图像处理方法，其特征在于，在判断所述前景目标是否符合预设条件之后，还包括：

若所述前景目标不符合预设条件，则通过第二检测模型检测所述预览画面的背景类型；

根据所述前景目标的前景类型和检测到的所述预览画面的背景类型，对所述预览画面进行图像处理。

4.如权利要求2所述的图像处理方法，其特征在于，所述判断所述前景目标是否符合预设条件包括：

判断所述前景目标在所述预览画面中所占的比例是否大于预设值；

若所述前景目标在所述预览画面中所占的比例大于预设值，则确定所述前景目标符合预设条件；

若所述前景目标在所述预览画面中所占的比例小于或等于所述预设值，则确定所述前景目标不符合预设条件。

5.如权利要求1所述的图像处理方法，其特征在于，所述根据所述背景图像中像素点的数据特征值估计所述背景图像的背景类型包括：

获取所述背景图像中像素点在RGB色域空间中的坐标；

计算所有像素点在RGB色域空间中的坐标均值，根据所述坐标均值在所述色域空间中对应的颜色确定所述背景图像的背景类型。

6.一种移动终端，其特征在于，包括：

确定模块，用于在所述移动终端的摄像头启动后，确定当前启动的摄像头是否为前置摄像头；

第一前景识别模块，用于若当前启动的摄像头为前置摄像头，则通过第一检测模型检测所述摄像头的预览画面中是否存在前景目标；

第一背景识别模块，用于若通过第一检测模型在所述预览画面中检测到前景目标，则获取所述前景目标的前景类型，并将所述预览画面中前景目标之外的区域作为背景图像，根据所述背景图像估计所述预览画面的背景类型；

第一图像处理模块，用于根据所述前景目标的前景类型和估计的所述预览画面的背景类型，对所述前景目标进行图像处理；

第二前景识别模块，用于在确定当前启动的摄像头是否为前置摄像头之后，若当前启动的摄像头不是前置摄像头，则通过第一检测模型检测所述预览画面中是否存在前景目标；

第二背景识别模块，用于若通过第一检测模型在所述预览画面中检测到前景目标，则获取所述前景目标的前景类型，并通过第二检测模型检测所述预览画面的背景类型；

第三图像处理模块，用于根据所述前景目标的前景类型和检测到的所述预览画面的背景类型，对所述预览画面进行图像处理；

所述第一背景识别模块，还用于根据所述前景目标对应的检测框在所述预览画面中的位置信息，基于所述检测框的位置信息，从所述预览画面中获取所述检测框内的图像；获取灰度阈值序列，并通过所述灰度阈值序列中的每个灰度阈值对所述检测框内的图像进行二值化处理，获得二值化图像序列；基于所述检测框内的图像的灰度梯度，识别所述检测框内的图像中前景目标的边界，获得前景目标轮廓线；从所述二值化图像序列中获取与所述前景目标轮廓线匹配度最高的二值化图像；将与第二目标轮廓线的匹配度最高的二值化图像与所述前景目标轮廓线融合生成连续的前景目标区域，在所述预览画面中所述前景目标区域内的图像为前景目标，并将所述预览画面中的前景目标去除获得背景图像；根据所述背景图像中像素点的数据特征值估计所述背景图像的背景类型。

7.一种移动终端，包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现如权利要求1至5任一项所述方法的步骤。

8.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有计算机程序，所述计算机程序被一个或多个处理器执行时实现如权利要求1至5任一项所述方法的步骤。

Images