CN108427938A - 图像处理方法、装置、存储介质和电子设备 - Google Patents

Abstract

本申请实施例公开了一种图像处理方法、装置、存储介质和电子设备；所述方法包括：当采集包含用户人眼的原始图像时，获取原始图像中用户的人眼聚焦区域，判断人眼聚焦区域是否位于预设区域当中，若否，则从缓存队列中抽取多帧图像并从中选取出目标图像，根据目标图像对原始图像进行处理，以使用户的人眼聚焦区域位于预设区域当中。本申请实施例可以自动检测原始图像当中人眼的聚焦区域，当该聚焦区域不在预设区域中时，从缓存队列中选取人眼聚焦区域在预设区域中的目标图像，并通过目标图像对原始图像进行处理，从而提升电子设备的最终成像效果。

Description

图像处理方法、装置、存储介质和电子设备

技术领域

本申请涉及电子设备领域，具体涉及一种图像处理方法、装置、存储介质和电子设备。

背景技术

随着终端技术的发展，终端已经开始从以前简单地提供通话设备渐渐变成一个通用软件运行的平台。该平台不再以提供通话管理为主要目的，而是提供一个包括通话管理、游戏娱乐、办公记事、移动支付等各类应用软件在内的运行环境，随着大量的普及，已经深入至人们的生活、工作的方方面面。

目前，由于智能终端的硬件性能越来越高，尤其是摄像头的规格越来越好，成像的质量也越来越高，并且由于智能终端的拍照功能越来越强大，譬如，智能对焦、场景分析、笑脸识别、语音输入、快速连拍等等，越来越多的用户喜欢采用智能手机拍照，不仅拍照效果好，而且使用方便。但是，在用户拍摄的时候，会出现这样的情况：用户对拍摄完成的照片进行浏览时，经常会发现眼睛并没有看镜头，而是看往其他地方的，这就使得最终成像的效果不佳。

发明内容

本申请实施例提供一种图像处理方法、装置、存储介质和电子设备，可以提高电子设备的最终成像效果。

第一方面，本申请实施例提供一种图像处理方法，包括：

当采集包含用户人眼的原始图像时，获取所述原始图像中用户的人眼聚焦区域；

判断所述人眼聚焦区域是否位于预设区域当中；

若否，则从缓存队列中抽取多帧图像并从中选取出目标图像；

根据所述目标图像对所述原始图像进行处理，以使所述用户的人眼聚焦区域位于所述预设区域当中。

第二方面，本申请实施例还提供了一种图像处理装置，包括：

获取模块，用于当采集包含用户人眼的原始图像时，获取所述原始图像中用户的人眼聚焦区域；

判断模块，用于判断所述人眼聚焦区域是否位于预设区域当中；

选取模块，用于当所述判断模块判断为否时，从缓存队列中抽取多帧图像并从中选取出目标图像；

处理模块，用于根据所述目标图像对所述原始图像进行处理，以使所述用户的人眼聚焦区域位于所述预设区域当中。

第三方面，本申请实施例还提供一种存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现上述图像处理方法的步骤。

第四方面，本申请实施例还提供一种电子设备，包括存储器，处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现上述图像处理方法的步骤。

本申请实施例提供的图像处理方法首先当采集包含用户人眼的原始图像时，获取原始图像中用户的人眼聚焦区域，判断人眼聚焦区域是否位于预设区域当中，若否，则从缓存队列中抽取多帧图像并从中选取出目标图像，根据目标图像对原始图像进行处理，以使用户的人眼聚焦区域位于预设区域当中。本申请实施例可以自动检测原始图像当中人眼的聚焦区域，当该聚焦区域不在预设区域中时，从缓存队列中选取人眼聚焦区域在预设区域中的目标图像，并通过目标图像对原始图像进行处理，从而提升电子设备的最终成像效果。

附图说明

为了更清楚地说明本申请实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本申请实施例提供的图像处理方法的一种流程示意图。

图2为本申请实施例提供的图像处理方法的另一种流程示意图。

图3为本申请实施例提供的图像处理方法的一种场景示意图。

图4为本申请实施例提供的图像处理装置的一种结构示意图。

图5为本申请实施例提供的图像处理装置的另一种结构示意图。

图6为本申请实施例提供的图像处理装置的又一种结构示意图。

图7为本申请实施例提供的电子设备的一种结构示意图。

图8为本申请实施例提供的电子设备的另一种结构示意图。

图9为本申请实施例提供的图像处理电路的结构示意图。

具体实施方式

请参照图式，其中相同的组件符号代表相同的组件，本申请的原理是以实施在一适当的运算环境中来举例说明。以下的说明是基于所例示的本申请具体实施例，其不应被视为限制本申请未在此详述的其它具体实施例。

在以下的说明中，本申请的具体实施例将参考由一部或多部计算机所执行的步骤及符号来说明，除非另有述明。因此，这些步骤及操作将有数次提到由计算机执行，本文所指的计算机执行包括了由代表了以一结构化型式中的数据的电子信号的计算机处理单元的操作。此操作转换该数据或将其维持在该计算机的内存系统中的位置处，其可重新配置或另外以本领域测试人员所熟知的方式来改变该计算机的运作。该数据所维持的数据结构为该内存的实体位置，其具有由该数据格式所定义的特定特性。但是，本申请原理以上述文字来说明，其并不代表为一种限制，本领域测试人员将可了解到以下所述的多种步骤及操作亦可实施在硬件当中。

本申请的原理使用许多其它泛用性或特定目的运算、通信环境或组态来进行操作。所熟知的适合用于本申请的运算系统、环境与组态的范例可包括(但不限于)手持电话、个人计算机、服务器、多处理器系统、微电脑为主的系统、主架构型计算机、及分布式运算环境，其中包括了任何的上述系统或装置。

以下将分别进行详细说明。

本实施例将从图像处理装置的角度进行描述，该装置具体可以集成在电子设备中，该电子设备可以为移动互连接网络设备(如智能手机、平板电脑)等具备图像处理功能的电子设备。

首先参考图1，图1为本申请实施例提供的图像处理方法的一种流程示意图，包括以下步骤：

步骤S101，当采集包含用户人眼的原始图像时，获取原始图像中用户的人眼聚焦区域。

在一实施例中，上述原始图像可以是获取具有数字图像格式(例如BMP、JPG等)的人物照片，也可以由数码相机或手机即时拍照生成人物照片。本领域技术人员易于想到的是，还可以通过视频截图、照片扫描等方式获取人物图像，或者从其他电子设备获取到的人物图像，本发明实施例对此不加以限定。

在实际使用当中，本申请实施例主要用于将图像中未看向镜头人眼图像进行处理，因此在获取到原始图像之后，还可以进一步判断该原始图像当中是否存在人眼，具体可以利用人眼识别技术检测原始图像当中是否存在人眼，若存在则继续获取原始图像中用户的人眼聚焦区域。

需要说明的是，在一实施例当中，在获取到该包含人眼的原始图像后还可以进一步进行预处理，该预处理可以包括图像增强、平滑处理、降噪处理等等。比如，在得到原始图像之后，可以对图像中的信息有选择地加强和抑制，以改善图像的视觉效果，或将图像转变为更适合于机器处理的形式，以便于数据抽取或识别。例如一个图像增强系统可以通过高通滤波器来突出图像的轮廓线，从而使机器能够测量轮廓线的形状和周长。图像增强技术有多种方法，反差展宽、对数变换、密度分层和直方图均衡等都可用于改变图像灰调和突出细节。

在一实施例中，根据所述原始图像，获取终端采集所述原始图像时用户的眼部聚焦区域，可以根据眼球追踪技术来确定人眼的聚焦区域，上述眼球追踪方式也可以有多种，一是根据眼球和眼球周边的特征变化进行跟踪，二是根据虹膜角度变化进行跟踪，三是主动投射红外线等光束到虹膜来提取特征。在精度方面，红外线投射方式有比较大的优势，大概能在30英寸的屏幕上精确到1厘米以内，因此在一实施例当中可以利用电子设备上的红外距离传感器来实现眼球追踪，从而确定人眼聚焦区域。

步骤S102，判断人眼聚焦区域是否位于预设区域当中，若否，则执行步骤S103，若是，则结束流程。

在一实施例当中，上述预设区域为拍摄的电子设备所在的区域，因此上述判断人眼聚焦区域是否位于预设区域即为判断人眼是否看向摄像头。具体的，可以现根据原始图像确定电子设备的拍摄位置，比如根据原始图像的成像效果获取拍摄角度，从而确定电子设备与被拍摄的用户之间的相对位置信息，并将拍摄的电子设备所在的位置确定为预设区域，进而判断人眼聚焦区域是否位于预设区域当中，若不在预设区域当中，则确定被拍摄用户的人眼未看向摄像头，则执行步骤S103，若在预设区域当中，确定被拍摄用户的人眼看向摄像头，则不必执行进一步操作。

需要说明的是，上述原始图像中的用户可以为一个也可以为多个，比如多人照片当中存在多个人眼时，则获取原始图像中多个用户的人眼聚焦区域，并分别判断多个用户人眼聚焦区域是否位于预设区域当中。

步骤S103，从缓存队列中抽取多帧图像并从中选取出目标图像。

本实施例中，在进入相机的预览界面后，电子设备可以根据当前的环境参数，每隔30毫秒至60毫秒采集一帧图像，并将采集到的图像保存到缓存队列。该缓存队列可以为定长队列，例如该缓存队列可以保存电子设备最新采集到的15帧图像。

当确定原始图像当中人眼聚焦区域不位于预设区域当中时，从缓存队列中抽取与上述原始图像最为接近的多帧图像，比如上述原始图像为第1帧图像，则可以取第2-8帧图像，并从中选取出符合预设条件的目标图像。其中，上述预设条件为图像中的用户人眼聚焦区域位于预设区域当中。

在一实施例中，若上述多帧图像当中有多张图像都满足预设条件，也即图像中的人眼聚焦区域都位于预设区域当中，则可以从上述多张满足预设条件的多张图像当中挑选用户眼睛最大的一张作为目标图像。其中，眼睛大小可以根据检测眼睛上下眼睑点之间的距离来确定，比如，上下眼睑点是指通过虹膜中心的上下方向的中心轴线与虹膜轮廓的交点。检测出上下眼睑点后即可计算出两者之间的距离。通过检测，可知眼睛的上下眼睑点之间的距离。

步骤S104，根据目标图像对原始图像进行处理，以使用户的人眼聚焦区域位于预设区域当中。

其中，由于目标图像当中用户的人眼聚焦区域位于预设区域当中，而原始图像当中用户的人眼聚焦区域不位于预设区域当中，因此可以将目标图像当中的人眼图像与原始图像进行合成，以使最终的成像图像当中目标对象的人眼为睁开状态。也即上述根据目标图像对原始图像进行处理的步骤可以包括：

获取目标图像当中目标对象的人眼图像；

根据人眼图像对原始图像进行合成。

本发明实施例中，上述电子设备可以是任何能够进行图像浏览并处理的设备，例如：手机、平板电脑(Tablet Personal Computer)、膝上型电脑(Laptop Computer)、个人数字助理(personal digital assistant，简称PDA)、移动上网装置(Mobile InternetDevice，MID)或可穿戴式设备(Wearable Device)等。

由上可知，本申请实施例可以当采集包含用户人眼的原始图像时，获取原始图像中用户的人眼聚焦区域，判断人眼聚焦区域是否位于预设区域当中，若否，则从缓存队列中抽取多帧图像并从中选取出目标图像，根据目标图像对原始图像进行处理，以使用户的人眼聚焦区域位于预设区域当中。本申请实施例可以自动检测原始图像当中人眼的聚焦区域，当该聚焦区域不在预设区域中时，从缓存队列中选取人眼聚焦区域在预设区域中的目标图像，并通过目标图像对原始图像进行处理，从而提升电子设备的最终成像效果。

根据上一实施例的描述，以下将进一步地来说明本申请的图像处理方法。

请参阅图2，图2为本申请实施例提供的另一种图像处理方法的流程示意图，包括以下步骤：

步骤S201，当采集包含用户人眼的原始图像时，获取用户的人眼图像，并提取人眼图像中的眼球特征信息。

在一实施例中，上述原始图像可以是获取具有数字图像格式(例如BMP、JPG等)的人物照片，也可以由数码相机或手机即时拍照生成人物照片。本领域技术人员易于想到的是，还可以通过视频截图、照片扫描等方式获取人物图像，或者从其他电子设备获取到的人物图像，本发明实施例对此不加以限定。

在一实施例中，可以先通过前置摄像头获取用户的人脸图像，然后在该人脸图像当中提取人眼图像，这样可以提升人眼图像获取的速度和效率。比如，通过电子设备的前置摄像头来进行人脸识别以获取目标图像中的人脸图像，然后再该人脸图像中提取人眼图像，进而可以提取人眼图像中的眼球特征信息。其中，人脸识别可以采用基于Haar特征的Adaboost(AdaptiveBoosting，自适应增强)算法对原始图像中的人脸进行检测，或者采用其他算法对原始图像中的人脸进行检测，眼球特征信息可以包括瞳孔在人眼中的位置。

步骤S202，根据眼球特征信息确定用户的人眼聚焦区域。

具体的，根据瞳孔在人眼中的位置确定用户的人眼聚焦区域。在其他实施例中，还可以根据眼球和眼球周边的特征变化进行跟踪，或者可以根据虹膜角度变化进行跟踪，还可以主动投射红外线等光束到虹膜来提取特征以确定用户的人眼聚焦区域。

步骤S203，判断人眼聚焦区域是否位于预设区域当中，若否，则执行步骤S204，若是，则结束流程。

在一实施例当中，上述预设区域为拍摄的电子设备所在的区域，因此上述判断人眼聚焦区域是否位于预设区域即为判断人眼是否看向摄像头。具体的，可以现根据原始图像确定电子设备的拍摄位置，比如根据原始图像的成像效果获取拍摄角度，从而确定电子设备与被拍摄的用户之间的相对位置信息，并将拍摄的电子设备所在的位置确定为预设区域，进而判断人眼聚焦区域是否位于预设区域当中。

步骤S204，从缓存队列中抽取多帧图像并从中选取出目标图像。

当确定原始图像当中人眼聚焦区域不位于预设区域当中时，从缓存队列中抽取与上述原始图像最为接近的多帧图像，比如上述原始图像为第1帧图像，则可以取第2-8帧图像，并从中选取出符合预设条件的目标图像。其中，上述预设条件为图像中的用户人眼聚焦区域位于预设区域当中。

步骤S205，根据目标图像对原始图像进行处理，以使用户的人眼聚焦区域位于预设区域当中。

在一实施例中，可以将目标图像当中的人眼图像提取出来，然后将该人眼图像替换进原始图像当中，以使得用户的人眼聚焦区域位于预设区域当中。

步骤S206，将对原始图像进行处理后的图像确定为基础图像。

步骤S207，若基础图像为多人图像，则将从缓存队列中抽取的多帧图像确定为待处理图像。

步骤S208，将基础图像与待处理图像进行预设处理并输出。

在申请本实施例中，若上述基础图像为多人图像，即基础图像中至少包含两张人脸图像，还可以利用多帧合成进一步提升最终的成像效果。

比如，在缓存队列中获取与上述基础图像最为靠近的4帧图像，并作为待处理图像。其中，该基础图像中至少包含一个符合预设条件的人脸图像。之后，终端可以对该基础图像进行预设处理并输出。例如，预设条件可以是基础图像中某一用户的眼睛比该用户在其它待处理图像中的眼睛都更大。

比如，基础图像为A，待处理图像为B、C、D、E。上述图像为甲、乙、丙三人的合照图像，电子设备可以对该5帧图像进行人脸和人眼识别，并获取图像中人脸部分的眼睛大小。针对每个对象，判断待处理图像当中是否存在眼睛比基础图像当中更大的图像，若存在，则对基础图像中的人脸进行替换。比如用户丙在图像D中的眼睛比图像A中的更大，则电子设备可以将图像D中用户丙的人脸图像确定为目标人脸图像，图像A中用户丙的人脸图像确定为待替换人脸图像，然后电子设备可以使用图像D中用户丙的人脸图像替换掉图像A中用户丙的人脸图像。

在得到经过图像替换处理的图像后，终端可以对该图像进行图像降噪处理并输出。

如图3所示，图3为本申请实施例提供的图像的获取方法的场景示意图。

本实施例中，在进入相机的预览界面后，终端可以根据当前的环境参数，每隔30毫秒至60毫秒采集一帧图像，并将采集到的图像保存到缓存队列。该缓存队列可以为定长队列，例如该缓存队列可以保存终端最新采集到的15帧图像。

比如，用户甲打开终端相机准备为甲、乙、丙三人拍摄合照，此时终端可以检测到相机在采集包含人脸的图像。若甲眼睛最大的图像为第一帧、乙眼睛最大的图像为第三帧，丙眼睛最大的图像为第一帧，则可以确定第一帧为基础图像，获取最为靠近第一帧的4帧图像为待处理图像，比如第二帧、第三帧、第四帧以及第5帧，对于第一帧，首先执行上述的图像处理方法，此处不再赘述。

对上述第一帧图像处理完成后，再根据上述第二帧、第三帧、第四帧以及第5帧对第一帧图像进行多帧合成，最后在进行图像降噪处理并输出。

其中，在进行多帧降噪时，终端可以先将基础图像和待处理图像对齐，并获取图像中每一组对齐像素的像素值。若同一组对齐像素的像素值相差不多，那么电子设备可以计算这组对齐像素的像素值均值，再用该像素值均值替换掉基础图像中的对应像素的像素值。若同一组对齐像素的像素值相差较多，那么可以不对基础图像中的像素值进行调整。

也即，上述将基础图像与待处理图像进行预设处理并输出的步骤具体可以包括：

从基础图像中确定出不符合预设条件的待替换人脸图像；

从待处理图像中确定出符合预设条件的目标人脸图像，目标人脸图像与待替换人脸图像为相同对象的人脸图像；

在基础图像中，将待替换人脸图像替换为目标人脸图像，得到经过图像替换处理的基础图像；

对经过图像替换处理的基础图像进行图像降噪处理并输出。

本发明实施例中，上述电子设备可以是任何能够进行LTE通讯的设备，例如：手机、平板电脑(Tablet Personal Computer)、膝上型电脑(Laptop Computer)、个人数字助理(personal digital assistant，简称PDA)、移动上网装置(Mobile Internet Device，MID)或可穿戴式设备(Wearable Device)等。

由上可知，本申请实施例提供的图像处理方法可以当采集包含用户人眼的原始图像时，获取用户的人眼图像，并提取人眼图像中的眼球特征信息，根据眼球特征信息确定用户的人眼聚焦区域，判断人眼聚焦区域是否位于预设区域当中，若否，则从缓存队列中抽取多帧图像并从中选取出目标图像，根据目标图像对原始图像进行处理，以使用户的人眼聚焦区域位于预设区域当中，将对原始图像进行处理后的图像确定为基础图像，若基础图像为多人图像，则将从缓存队列中抽取的多帧图像确定为待处理图像，将基础图像与待处理图像进行预设处理并输出。本申请实施例可以自动检测原始图像当中人眼的聚焦区域，当该聚焦区域不在预设区域中时，从缓存队列中选取人眼聚焦区域在预设区域中的目标图像，并通过目标图像对原始图像进行处理，从而提升电子设备的最终成像效果。

为了便于更好的实施本申请实施例提供的图像处理方法，本申请实施例还提供了一种基于上述图像处理方法的装置。其中名词的含义与上述图像处理方法中相同，具体实现细节可以参考方法实施例中的说明。

请参阅图4，图4为本申请实施例提供的一种图像处理装置的结构示意图，该图像处理装置30包括：获取模块301、判断模块302、选取模块303以及处理模块304；

获取模块301，用于当采集包含用户人眼的原始图像时，获取原始图像中用户的人眼聚焦区域；

判断模块302，用于判断人眼聚焦区域是否位于预设区域当中；

选取模块303，用于当判断模块302判断为否时，从缓存队列中抽取多帧图像并从中选取出目标图像；

处理模块304，用于根据目标图像对原始图像进行处理，以使用户的人眼聚焦区域位于预设区域当中。

在一实施例中，如图5所示，获取模块301可以具体包括：

提取子模块3011，用于获取用户的人眼图像，并提取人眼图像中的眼球特征信息；

确定子模块3012，用于根据眼球特征信息确定用户的人眼聚焦区域。

在一实施例中，处理模块304可以具体包括：

获取子模块3041，用于获取目标图像当中用户的人眼图像；

合成子模块3042，用于根据人眼图像对原始图像进行合成。

在一实施例中，如图6所示，上述图像处理装置30还可以包括：第一确定模块305、第二确定模块306以及输出模块307；

该第一确定模块305，用于将对原始图像进行处理后的图像确定为基础图像；

该第二确定模块306，用于当基础图像为多人图像时，则将从缓存队列中抽取的多帧图像确定为待处理图像；

该输出模块307，用于将基础图像与待处理图像进行预设处理并输出。

由上可知，本申请实施例提供的图像处理装置30可以当采集包含用户人眼的原始图像时，获取原始图像中用户的人眼聚焦区域，判断人眼聚焦区域是否位于预设区域当中，若否，则从缓存队列中抽取多帧图像并从中选取出目标图像，根据目标图像对原始图像进行处理，以使用户的人眼聚焦区域位于预设区域当中。本申请实施例可以自动检测原始图像当中人眼的聚焦区域，当该聚焦区域不在预设区域中时，从缓存队列中选取人眼聚焦区域在预设区域中的目标图像，并通过目标图像对原始图像进行处理，从而提升电子设备的最终成像效果。

本申请还提供一种存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现方法实施例提供的图像处理方法。

本申请还提供一种电子设备，包括存储器，处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时实现方法实施例提供的图像处理方法。

在本申请又一实施例中还提供一种电子设备，该电子设备可以是智能手机、平板电脑等设备。如图7所示，电子设备400包括处理器401、存储器402。其中，处理器401与存储器402电性连接。

处理器401是电子设备400的控制中心，利用各种接口和线路连接整个电子设备的各个部分，通过运行或加载存储在存储器402内的应用程序，以及调用存储在存储器402内的数据，执行电子设备的各种功能和处理数据，从而对电子设备进行整体监控。

在本实施例中，电子设备400中的处理器401会按照如下的步骤，将一个或一个以上的应用程序的进程对应的指令加载到存储器402中，并由处理器401来运行存储在存储器402中的应用程序，从而实现各种功能：

当采集包含用户人眼的原始图像时，获取所述原始图像中用户的人眼聚焦区域；

判断所述人眼聚焦区域是否位于预设区域当中；

若否，则从缓存队列中抽取多帧图像并从中选取出目标图像；

根据所述目标图像对所述原始图像进行处理，以使所述用户的人眼聚焦区域位于所述预设区域当中。

请参阅图8，图8为本申请实施例提供的电子设备结构示意图。该电子设备500可以包括射频(RF，Radio Frequency)电路501、包括有一个或一个以上计算机可读存储介质的存储器502、输入单元503、显示单元504、传感器504、音频电路506、无线保真(WiFi，Wireless Fidelity)模块507、包括有一个或者一个以上处理核心的处理器508、以及电源509等部件。本领域技术人员可以理解，图8中示出的电子设备结构并不构成对电子设备的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。

射频电路501可用于收发信息，或通话过程中信号的接收和发送，特别地，将基站的下行信息接收后，交由一个或者一个以上处理器508处理；另外，将涉及上行的数据发送给基站。通常，射频电路501包括但不限于天线、至少一个放大器、调谐器、一个或多个振荡器、用户身份模块(SIM，Subscriber Identity Module)卡、收发信机、耦合器、低噪声放大器(LNA，Low Noise Amplifier)、双工器等。此外，射频电路501还可以通过无线通信与网络和其他设备通信。该无线通信可以使用任一通信标准或协议，包括但不限于全球移动通信系统(GSM，Global System of Mobile communication)、通用分组无线服务(GPRS，GeneralPacket Radio Service)、码分多址(CDMA，Code Division Multiple Access)、宽带码分多址(WCDMA，Wideband Code Division Multiple Access)、长期演进(LTE，Long TermEvolution)、电子邮件、短消息服务(SMS，Short Messaging Service)等。

存储器502可用于存储应用程序和数据。存储器502存储的应用程序中包含有可执行代码。应用程序可以组成各种功能模块。处理器508通过运行存储在存储器502的应用程序，从而执行各种功能应用以及数据处理。存储器502可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等；存储数据区可存储根据电子设备的使用所创建的数据(比如音频数据、电话本等)等。此外，存储器502可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。相应地，存储器502还可以包括存储器控制器，以提供处理器508和输入单元503对存储器502的访问。

输入单元503可用于接收输入的数字、字符信息或用户特征信息(比如指纹)，以及产生与用户设置以及功能控制有关的键盘、鼠标、操作杆、光学或者轨迹球信号输入。具体地，在一个具体的实施例中，输入单元503可包括触敏表面以及其他输入设备。触敏表面，也称为触摸显示屏或者触控板，可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触敏表面上或在触敏表面附近的操作)，并根据预先设定的程式驱动相应的连接装置。可选的，触敏表面可包括触摸检测装置和触摸控制器两个部分。其中，触摸检测装置检测用户的触摸方位，并检测触摸操作带来的信号，将信号传送给触摸控制器；触摸控制器从触摸检测装置上接收触摸信息，并将它转换成触点坐标，再送给处理器508，并能接收处理器508发来的命令并加以执行。

显示单元504可用于显示由用户输入的信息或提供给用户的信息以及电子设备的各种图形用户接口，这些图形用户接口可以由图形、文本、图标、视频和其任意组合来构成。显示单元504可包括显示面板。可选的，可以采用液晶显示器(LCD，Liquid CrystalDisplay)、有机发光二极管(OLED，Organic Light-Emitting Diode)等形式来配置显示面板。进一步的，触敏表面可覆盖显示面板，当触敏表面检测到在其上或附近的触摸操作后，传送给处理器508以确定触摸事件的类型，随后处理器508根据触摸事件的类型在显示面板上提供相应的视觉输出。虽然在图8中，触敏表面与显示面板是作为两个独立的部件来实现输入和输入功能，但是在某些实施例中，可以将触敏表面与显示面板集成而实现输入和输出功能。

电子设备还可包括至少一种传感器505，比如光传感器、运动传感器以及其他传感器。具体地，光传感器可包括环境光传感器及接近传感器，其中，环境光传感器可根据环境光线的明暗来调节显示面板的亮度，接近传感器可在电子设备移动到耳边时，关闭显示面板和/或背光。作为运动传感器的一种，重力加速度传感器可检测各个方向上(一般为三轴)加速度的大小，静止时可检测出重力的大小及方向，可用于识别手机姿态的应用(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等；至于电子设备还可配置的陀螺仪、气压计、湿度计、温度计、红外线传感器等其他传感器，在此不再赘述。

音频电路506可通过扬声器、传声器提供用户与电子设备之间的音频接口。音频电路506可将接收到的音频数据转换成电信号，传输到扬声器，由扬声器转换为声音信号输出；另一方面，传声器将收集的声音信号转换为电信号，由音频电路506接收后转换为音频数据，再将音频数据输出处理器508处理后，经射频电路501以发送给比如另一电子设备，或者将音频数据输出至存储器502以便进一步处理。音频电路506还可能包括耳塞插孔，以提供外设耳机与电子设备的通信。

无线保真(WiFi)属于短距离无线传输技术，电子设备通过无线保真模块507可以帮助用户收发电子邮件、浏览网页和访问流式媒体等，它为用户提供了无线的宽带互联网访问。虽然图8示出了无线保真模块507，但是可以理解的是，其并不属于电子设备的必须构成，完全可以根据需要在不改变发明的本质的范围内而省略。

处理器508是电子设备的控制中心，利用各种接口和线路连接整个电子设备的各个部分，通过运行或执行存储在存储器502内的应用程序，以及调用存储在存储器502内的数据，执行电子设备的各种功能和处理数据，从而对电子设备进行整体监控。可选的，处理器508可包括一个或多个处理核心；优选的，处理器508可集成应用处理器和调制解调处理器，其中，应用处理器主要处理操作系统、用户界面和应用程序等，调制解调处理器主要处理无线通信。可以理解的是，上述调制解调处理器也可以不集成到处理器508中。

电子设备还包括给各个部件供电的电源509(比如电池)。优选的，电源可以通过电源管理系统与处理器508逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。电源509还可以包括一个或一个以上的直流或交流电源、再充电系统、电源故障检测电路、电源转换器或者逆变器、电源状态指示器等任意组件。

尽管图8中未示出，电子设备还可以包括摄像头、蓝牙模块等，在此不再赘述。

本发明实施例还提供一种电子设备。上述电子设备中包括图像处理电路，图像处理电路可以利用硬件和/或软件组件实现，可包括定义ISP(Image Signal Processing，图像信号处理)管线的各种处理单元。图9为一个实施例中图像处理电路的结构示意图。如图9所示，为便于说明，仅示出与本发明实施例相关的图像处理技术的各个方面。

如图9所示，图像处理电路包括图像信号处理器640和控制逻辑器650。成像设备610捕捉的图像数据首先由图像信号处理器640处理，图像信号处理器640对图像数据进行分析以捕捉可用于确定和/或成像设备610的一个或多个控制参数的图像统计信息。成像设备610可包括具有一个或多个透镜611和图像传感器612的照相机。图像传感器612可包括色彩滤镜阵列(如Bayer滤镜)，图像传感器612可获取用图像传感器612的每个成像像素捕捉的光强度和波长信息，并提供可由图像信号处理器640处理的一组原始图像数据。传感器620可基于传感器620接口类型把原始图像数据提供给图像信号处理器640。传感器620接口可以利用SMIA(Standard Mobile Imaging Architecture，标准移动成像架构)接口、其它串行或并行照相机接口或上述接口的组合。

图像信号处理器640按多种格式逐个像素地处理原始图像数据。例如，每个图像像素可具有8、10、12或14比特的位深度，图像信号处理器640可对原始图像数据进行一个或多个图像处理操作、收集关于图像数据的统计信息。其中，图像处理操作可按相同或不同的位深度精度进行。

图像信号处理器640还可从图像存储器630接收像素数据。例如，从传感器620接口将原始像素数据发送给图像存储器630，图像存储器630中的原始像素数据再提供给图像信号处理器640以供处理。图像存储器630可为存储器装置的一部分、存储设备、或电子设备内的独立的专用存储器，并可包括DMA(Direct Memory Access，直接直接存储器存取)特征。

当接收到来自传感器620接口或来自图像存储器630的原始图像数据时，图像信号处理器640可进行一个或多个图像处理操作，如时域滤波。处理后的图像数据可发送给图像存储器630，以便在被显示之前进行另外的处理。图像信号处理器640从图像存储器630接收处理数据，并对所述处理数据进行原始域中以及RGB和YCbCr颜色空间中的图像数据处理。处理后的图像数据可输出给显示器670，以供用户观看和/或由图形引擎或GPU(GraphicsProcessing Unit，图形处理器)进一步处理。此外，图像信号处理器640的输出还可发送给图像存储器630，且显示器670可从图像存储器630读取图像数据。在一种实施方式中，图像存储器630可被配置为实现一个或多个帧缓冲器。此外，图像信号处理器640的输出可发送给编码器/解码器660，以便编码/解码图像数据。编码的图像数据可被保存，并在显示于显示器670设备上之前解压缩。编码器/解码器660可由CPU或GPU或协处理器实现。

图像信号处理器640确定的统计数据可发送给控制逻辑器650。例如，统计数据可包括自动曝光、自动白平衡、自动聚焦、闪烁检测、黑电平补偿、透镜611阴影校正等图像传感器612统计信息。控制逻辑器650可包括执行一个或多个例程(如固件)的处理器和/或微控制器，一个或多个例程可根据接收的统计数据，确定成像设备610的控制参数以及的控制参数。例如，控制参数可包括传感器620控制参数(例如增益、曝光控制的积分时间)、照相机闪光控制参数、透镜611控制参数(例如聚焦或变焦用焦距)、或这些参数的组合。ISP控制参数可包括用于自动白平衡和颜色调整(例如，在RGB处理期间)的增益水平和色彩校正矩阵，以及透镜611阴影校正参数。

具体实施时，以上各个模块可以作为独立的实体来实现，也可以进行任意组合，作为同一或若干个实体来实现，以上各个模块的具体实施可参见前面的方法实施例，在此不再赘述。

需要说明的是，本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成，该程序可以存储于计算机可读存储介质中，如存储在终端的存储器中，并被该终端内的至少一个处理器执行，在执行过程中可包括如图像处理方法的实施例的流程。其中，存储介质可以包括：只读存储器(ROM，Read OnlyMemory)、随机存取记忆体(RAM，Random Access Memory)、磁盘或光盘等。

以上对本申请实施例提供的一种图像处理方法、装置、存储介质和电子设备进行了详细介绍，其各功能模块可以集成在一个处理芯片中，也可以是各个模块单独物理存在，也可以两个或两个以上模块集成在一个模块中。上述集成的模块既可以采用硬件的形式实现，也可以采用软件功能模块的形式实现。本文中应用了具体个例对本申请的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本申请的方法及其核心思想；同时，对于本领域的技术人员，依据本申请的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本申请的限制。

Claims (11)

1.一种图像处理方法，其特征在于，包括以下步骤：

当采集包含用户人眼的原始图像时，获取所述原始图像中用户的人眼聚焦区域；

判断所述人眼聚焦区域是否位于预设区域当中；

若否，则从缓存队列中抽取多帧图像并从中选取出目标图像；

根据所述目标图像对所述原始图像进行处理，以使所述用户的人眼聚焦区域位于所述预设区域当中。

2.根据权利要求1所述的图像处理方法，其特征在于，所述获取所述用户的人眼聚焦区域，包括：

获取用户的人眼图像，并提取所述人眼图像中的眼球特征信息；

根据所述眼球特征信息确定所述用户的人眼聚焦区域。

3.根据权利要求2所述的图像处理方法，其特征在于，所述眼球特征信息包括所述瞳孔在所述人眼中的位置；

所述根据所述眼球特征信息确定所述用户的人眼聚焦区域，包括：

根据所述瞳孔在所述人眼中的位置确定所述用户的人眼聚焦区域。

4.根据权利要求1所述的图像处理方法，其特征在于，所述根据所述目标图像对所述原始图像进行处理，包括：

获取所述目标图像当中所述用户的人眼图像；

根据所述人眼图像对所述原始图像进行合成。

5.根据权利要求1所述的图像处理方法，其特征在于，所述方法还包括：

将对所述原始图像进行处理后的图像确定为基础图像；

若所述基础图像为多人图像，则将所述从缓存队列中抽取的多帧图像确定为待处理图像；

将所述基础图像与所述待处理图像进行预设处理并输出。

6.根据权利要求5所述的图像处理方法，其特征在于，所述将所述基础图像与所述待处理图像进行预设处理并输出，包括：

从所述基础图像中确定出不符合所述预设条件的待替换人脸图像；

从所述待处理图像中确定出符合所述预设条件的目标人脸图像，所述目标人脸图像与所述待替换人脸图像为相同对象的人脸图像；

在所述基础图像中，将所述待替换人脸图像替换为所述目标人脸图像，得到经过图像替换处理的基础图像；

对所述经过图像替换处理的基础图像进行图像降噪处理并输出。

7.一种图像处理装置，其特征在于，所述装置包括：

获取模块，用于当采集包含用户人眼的原始图像时，获取所述原始图像中用户的人眼聚焦区域；

判断模块，用于判断所述人眼聚焦区域是否位于预设区域当中；

选取模块，用于当所述判断模块判断为否时，从缓存队列中抽取多帧图像并从中选取出目标图像；

处理模块，用于根据所述目标图像对所述原始图像进行处理，以使所述用户的人眼聚焦区域位于所述预设区域当中。

8.根据权利要求7所述的图像处理装置，其特征在于，所述获取模块具体包括：

提取子模块，用于获取用户的人眼图像，并提取所述人眼图像中的眼球特征信息；

确定子模块，用于根据所述眼球特征信息确定所述用户的人眼聚焦区域。

9.根据权利要求7所述的图像处理装置，其特征在于，所述处理模块具体包括：

获取子模块，用于获取所述目标图像当中所述用户的人眼图像；

合成子模块，用于根据所述人眼图像对所述原始图像进行合成。

10.一种存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1-6任一项所述方法的步骤。

11.一种电子设备，包括存储器，处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时实现如权利要求1-6任一项所述方法的步骤。