[go: up one dir, main page]

CN1678033A - 摄像装置及其控制方法及程序及存储介质 - Google Patents

摄像装置及其控制方法及程序及存储介质 Download PDF

Info

Publication number
CN1678033A
CN1678033A CNA2005100628613A CN200510062861A CN1678033A CN 1678033 A CN1678033 A CN 1678033A CN A2005100628613 A CNA2005100628613 A CN A2005100628613A CN 200510062861 A CN200510062861 A CN 200510062861A CN 1678033 A CN1678033 A CN 1678033A
Authority
CN
China
Prior art keywords
image data
face area
detection
face
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CNA2005100628613A
Other languages
English (en)
Other versions
CN100413321C (zh
Inventor
川口善也
小林义宏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Publication of CN1678033A publication Critical patent/CN1678033A/zh
Application granted granted Critical
Publication of CN100413321C publication Critical patent/CN100413321C/zh
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161—Detection; Localisation; Normalisation
    • G06V40/166—Detection; Localisation; Normalisation using acquisition arrangements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/61—Control of cameras or camera modules based on recognised objects
    • H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633—Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • H04N23/635—Region indicators; Field of view indicators
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/67—Focus control based on electronic image sensor signals
    • H04N23/675—Focus control based on electronic image sensor signals comprising setting of focusing regions
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/71—Circuitry for evaluating the brightness variation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/72—Combination of two or more compensation controls

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Theoretical Computer Science (AREA)
  • Color Television Image Signal Generators (AREA)
  • Studio Devices (AREA)
  • Automatic Focus Adjustment (AREA)
  • Exposure Control For Cameras (AREA)
  • Focusing (AREA)
  • Processing Of Color Television Signals (AREA)

Abstract

在具备自动调焦功能或者自动曝光功能的摄像装置中，把从A/D变换单元输出的数字图像数据直接或者实施规定处理后作为第1图像数据进行存储，另一方面对成为第1图像数据基础的数字图像数据实施规定处理作为第2图像数据存储。从第2图像数据中检测脸部区域，在从第2图像数据中检测脸部区域期间根据从A/D变换单元输出的图像数据进行图像显示，从第2图像数据进行的脸部区域的检测结束后，使用在第1图像数据中的与用脸部区域检测单元检测出的脸部区域对应的部分的数据，抽出用于进行自动调焦、自动曝光或者白平衡的信息，进行自动调焦、自动曝光，或者白平衡。

Description

摄像装置及其控制方法 及程序及存储介质
技术领域
本发明涉及从输入图像中检测作为主要被照物的人物脸部位置，对该人物使焦点和曝光一致的技术。
背景技术
当用数字静态照相机等的摄像装置拍摄人物的情况下，要获得在作为主被照物的人物脸部聚焦，在作为主被照物的人物脸部上用最佳的曝光拍摄。在以往的AF/AE(自动调焦/自动曝光)控制中，把画面内预先确定的区域作为测距/测光区域，控制在该测距/测光区域上焦点和曝光一致。因而，当作为主被照物的人物脸部未包含在测距/测光区域中的情况下，存在在人物的脸部上焦点和曝光不一致的问题。
例如把画面中央部分设定为测距/测光区域，如果以图5A所示那样的二个人并排的构图，或如图5B所示那样的人物偏向画面右侧的构图拍摄，则在人物的背景上焦点和曝光一致。在图5A、5B中虚线框部分是测距/测光区域。对此提出了许多从摄像图像中检测人物脸部位置，从检测出的区域中抽出AF/AE评价值，使焦点和曝光一致的控制方法。例如，可以列举特开平05-041830号公报、特开2001-119622号公报、特开2003-107335号公报、特开2003-107555号公报等。
在特开平05-041830号公报中，从摄像图像中获得肌肤颜色区域，如果判定为该肌肤颜色区域是人物的脸部，则控制曝光使得其后取得的摄像图像的肌肤颜色区域中的平均亮度信号电平达到所希望的值。即，检测人物脸部位置的摄像图像和检测在曝光控制中使用的评价值的摄像图像不同。
在特开2001-119622号公报以及特开2003-107335号公报中展示了在摄像图像的人物脸部曝光的控制方法，在特开2003-107555号公报中展示了在摄像图像人物的脸部聚焦的控制方法，但都未叙述是否把检测人物的脸部位置的摄像图像和检测AF/AE评价值的摄像图像看做相同。
但是，因为在人物脸部位置检测中需要时间，所以从摄像图像中检测人物脸部位置设定测距/测光区域，从其后取得的摄像图像中即使检测出AF/AE评价值，如果人物运动或者摄像装置颤动，则存在人物脸部从测距/测光区域脱离，在人物脸部上焦点和曝光不一致的问题。
例如，说明拍摄从左向右在画面内移动的人物，取得图6A、图6B所示那样的2帧的摄像图像的情况。图6B例如是从图6A开始1秒钟后得到的摄像图像。
从图6A、图6B各图像中检测出人物脸部位置的结果是用x，y表示的虚线包围的区域。把从图6A的图像中判定为人物脸部位置的x区域设定为测距/测光区域，当从其后取得的图6B的图像中检测出AF/AE评价值的情况下，在图6B中人物脸部的位置移动到y区域，如果以从x区域检测出的AF/AE评价值为基础进行AF/AE控制，则焦点和曝光存在于x区域背景中，聚焦在和人物有关系的对象物上。
发明内容
本发明就是鉴于这样的问题而提出的，其目的在于提供一种摄像装置，它因为可以对成为脸部区域检测对象的帧图像进行AF/AE/WB评价值检测，所以与以往相比可以更精确地进行对人物脸部的焦点调节和曝光控制，抗人物的运动和相机抖动的能力强。
本发明提供一种摄像装置，其特征在于具备：将由成像光学系统的成像所形成的被摄物像进行光电变换，输出图像信号的摄像单元；将从上述摄像单元输出的图像信号数字化，输出数字图像数据的A/D变换单元；以从上述A/D变换单元输出的数字图像数据为基础作为第1图像数据进行存储的第1存储单元；以成为上述第1图像数据的基础的数字图像数据为基础作为与第1图像数据不同的第2图像数据进行存储第2存储单元；从上述第2图像数据中检测脸部区域的脸部区域检测单元；在上述脸部区域检测单元从上述第2图像数据中检测脸部区域期间，根据由上述A/D变换单元输出的图像数据进行图像显示的显示装置；上述脸部区域检测单元完成从上述第2图像数据进行的脸部区域检测后，使用在上述第1图像数据中的与由上述脸部区域检测单元所检测出的脸部区域对应的部分的数据，抽出用于进行自动调焦、自动曝光以及白平衡的信息中的至少一个信息的抽出单元；根据由上述抽出单元所抽出的信息，进行自动调焦控制、自动曝光控制以及白平衡控制的至少一个控制的控制单元。
本发明提供一种摄像装置，其特征在于具备：将由成像光学系统成像的被摄物像进行光电变换，输出图像信号的摄像单元；将从上述摄像单元输出的图像信号数字化输出数字图像数据的A/D变换单元；使用从上述A/D变换单元输出的数字图像数据，抽出用于进行自动调焦、自动曝光，以及白平衡的信息中的至少一个信息的抽出单元；把由上述抽出单元所抽出的信息作为第1图像数据进行存储的第1存储单元；在成为上述第1图像数据的基础的数字图像数据中作为与第1图像数据不同的第2图像数据进行存储的第2存储单元；从上述第2图像数据中检测脸部区域的脸部区域检测单元；在上述脸部区域检测单元从上述第2图像数据中检测脸部区域期间，根据用上述A/D变换单元输出的图像数据进行图像显示的显示装置；上述脸部区域检测单元完成来自上述第2图像数据的脸部区域的检测后，根据在上述第1图像数据中的与由上述脸部区域检测单元所检测出的脸部区域对应的部分的数据，进行自动调焦、自动曝光以及白平衡控制的至少一个控制的控制单元。
本发明提供一种摄像装置，其特征在于具备：将由成像光学系统的成像所形成的被摄物像进行光电变换，输出图像信号的摄像单元；将从上述摄像单元输出的图像信号数字化，输出数字图像数据的A/D变换单元；以从上述A/D变换单元输出的数字图像数据为基础作为第1图像数据进行顺序存储的第1存储单元；以成为上述第1图像数据的基础的数字图像数据为基础，作为与第1图像数据不同的第2图像数据进行顺序存储的第2存储单元；从上述第2图像数据中检测脸部区域的脸部区域检测单元；使用与在上述脸部区域检测单元进行脸部区域的检测期间所得到的第2图像数据中与在上述脸部区域的检测中所使用的图像数据的相似度在规定值以内的至少一个第2图像数据相同的、图像数据所生成的上述第1图像数据，抽出用于进行自动调焦、自动曝光，以及白平衡的信息的至少1个信息的抽出单元；根据用上述抽出单元抽出的信息，进行自动调焦、自动曝光以及白平衡控制的至少一个控制的控制单元。
本发明提供一种摄像装置，其特征在于具备：将由成像光学系统的成像所形成的被摄物像进行光电变换，输出图像信号的摄像单元；将从上述摄像单元输出的图像信号数字化，输出数字图像数据的A/D变换单元；以从上述A/D变换单元输出的数字图像数据为基础作为第1图像数据进行顺序存储的第1存储单元；以成为上述第1图像数据的基础的数字图像数据为基础，作为与第1图像数据不同的第2图像数据进行顺序存储的第2存储单元；从上述第2图像数据中检测脸部区域的脸部区域检测单元；当在上述脸部区域检测单元进行脸部区域的检测期间所得到的第2图像数据中，没有与检测到上述脸部区域的第2图像数据的相似度在规定值以内的另一第2图像数据的情况下，进行不采用脸部检测结果的自动调焦、自动曝光以及白平衡控制的至少一个控制的控制单元。
本发明提供一种摄像装置，其特征在于具备：将由成像光学系统的成像所形成的被摄物像进行光电变换，输出图像信号的摄像单元；将从上述摄像单元输出的图像信号数字化，输出数字图像数据的A/D变换单元；使用从上述A/D变换单元输出的数字图像数据，抽出用于进行自动调焦、自动曝光，以及白平衡的信息的至少1个信息的抽出单元；把用上述抽出单元抽出的信息作为第1数据进行顺序存储的第1存储单元；以成为上述第1图像数据的基础的数字图像数据为基础，作为与第1图像数据不同的第2图像数据进行顺序存储的第2存储单元；从上述第2图数据中检测脸部区域的脸部区域检测单元；根据第1图像数据中的与用上述脸部区域检测单元所检测出的脸部区域对应的部分的数据，进行自动调焦、自动曝光以及白平衡控制的至少一个控制的控制单元，其中该第1图像数据是由与在上述脸部区域检测单元进行脸部区域检测期间所得到的第2图像数据中的在上述脸部区域检测中所使用的图像数据的相似度在规定值以内的某一第2图像数据相同的图像数据所生成的。
本发明提供一种摄像装置，其特征在于具备：将由成像光学系统的成像所形成的被摄物像进行光电变换，输出图像信号的摄像单元；将从上述摄像单元输出的图像信号数字化，输出数字图像数据的A/D变换单元；使用从上述A/D变换单元输出的数字图像数据，抽出用于进行自动调焦、自动曝光，以及白平衡的信息中的至少一个信息的抽出单元；把由上述抽出单元所抽出的信息作为第1数据进行顺序存储的第1存储单元；以成为上述第1图像数据的基础的数字图像数据为基础，作为与第1图像数据不同的第2图像数据进行顺序存储的第2存储单元；从上述第2图像数据中检测脸部区域的脸部区域检测单元；当在上述脸部区域检测单元进行脸部检测期间所得到的第2图像数据中，没有与检测到上述脸部区域的第2图像数据的相似度在规定值以内的另一第2图像数据的情况下，进行不采用脸部检测结果的自动调焦、自动曝光以及白平衡控制的至少一个控制的控制单元。
本发明提供一种摄像装置的控制方法，其特征在于具备：将由成像光学系统的成像所形成的被摄物像进行光电变换，输出图像信号的摄像步骤；将从上述摄像单元步骤输出的图像信号数字化，输出数字图像数据的A/D变换步骤；以从上述A/D变换步骤输出的数字图像数据为基础作为第1图像数据进行存储的第1存储步骤；以成为上述第1图像数据的基础的数字图像数据为基础作为与第1图像数据不同的第2图像数据进行存储的第2存储步骤；从上述第2图像数据中检测脸部区域的脸部区域检测步骤；上述脸部检测步骤从上述第2图像数据中检测出脸部区域期间后，根据由上述A/D变换步骤输出的图像数据进行图像显示的显示步骤；上述脸部检测步骤完成从上述第2图像数据进行的脸部区域检测后，使用在上述第1图像数据中的与由上述脸部区域检测步骤检测出的脸部区域对应的部分的数据，抽出用于进行自动调焦、自动曝光以及白平衡的信息中的至少一个信息的抽出步骤；根据由上述抽出步骤抽出的信息，进行自动调焦控制、自动曝光控制以及白平衡控制的至少一个控制的控制步骤。
本发明提供一种摄像装置的控制方法，其特征在于具备：将由成像光学系统成像的被摄物像进行光电变换，输出图像信号的摄像步骤；将从上述摄像步骤输出的图像信号数字化，输出数字图像数据的A/D变换步骤；使用从上述A/D变换步骤输出的数字图像数据，抽出用于进行自动调焦、自动曝光，以及白平衡的信息中的至少一个信息的抽出步骤；把由上述抽出步骤抽出的信息作为第1数据进行存储的第1存储步骤；在成为上述第1图像数据的基础的数字图像数据中作为与第1图像数据不同的第2图像数据进行存储的第2存储步骤；从上述第2图像数据中检测脸部区域的脸部检测步骤；在上述脸部检测步骤从上述第2图像数据中检测出脸部区域期间，根据用上述A/D变换步骤输出的图像数据进行图像显示的显示步骤；上述脸部检测步骤完成从上述第2图像数据进行的脸部区域的检测后，根据在上述第1图像数据中的与由上述脸部区域检测单元检测的脸部区域对应单元的数据，进行自动调焦、自动曝光以及白平衡控制的至少一个控制的控制步骤。
本发明提供一种摄像装置的控制方法，其特征在于具备：将由成像光学系统的成像所形成的被摄物像进行光电变换，输出图像信号的摄像步骤；将从上述摄像步骤输出的图像信号数字化，输出数字图像数据的A/D变换步骤；以从上述A/D变换步骤输出的数字图像数据为基础作为第1图像数据进行顺序存储的第1存储步骤；以成为上述第1图像数据的基础的数字图像数据为基础，作为与第1图像数据不同的第2图像数据进行顺序存储的第2存储步骤；从上述第2图像数据检测脸部区域的脸部区域检测步骤；使用与在上述脸部检测步骤进行脸部区域的检测期间所得到的第2图像数据中的在上述脸部区域检测中所使用的图像数据的相似度在规定值以内的另一第2图像数据相同的、图像数据所生成的上述第1图像数据，进行抽出用于进行自动调焦、自动曝光以及白平衡控制的信息中的至少一个信息的控制步骤；根据由上述抽出步骤抽出的信息，进行自动调焦、自动曝光以及白平衡控制的至少一个控制的控制步骤。
本发明提供一种摄像装置的控制方法，其特征在于具备：将由成像光学系统的成像所形成的被摄物像进行光电变换，输出图像信号的摄像步骤；将从上述摄像步骤输出的图像信号数字化，输出数字图像数据的A/D变换步骤；以从上述A/D变换步骤输出的数字图像数据为基础作为第1图像数据进行顺序存储的第1存储步骤；以成为上述第1图像数据的基础的数字图像数据为基础，作为与第1图像数据不同的第2图像数据进行顺序存储的第2存储步骤；从上述第2图像数据检测脸部区域的脸部区域检测步骤；当在上述脸部检测步骤进行脸部区域的检测期间所得到的第2图像数据中，没有与检测到上述脸部区域的第2图像数据的相似度在规定值以内的另一第2图像数据的情况下，进行不采用脸部检测结果的自动调焦、自动曝光以及白平衡控制的至少一个控制的控制步骤。
本发明提供一种摄像装置的控制方法，其特征在于具备：将由成像光学系统的成像所形成的被摄物像进行光电变换，输出图像信号的摄像步骤；将从上述摄像步骤输出的图像信号数字化，输出数字图像数据的A/D变换步骤；使用从上述A/D变换步骤输出的数字图像数据，抽出用于进行自动调焦、自动曝光，以及白平衡的信息中的至少一个信息的抽出步骤；把由上述抽出步骤抽出的信息作为第1图像数据进行顺序存储的第1存储步骤；以成为上述第1图像数据的基础的数字图像数据为基础，作为与第1图像数据不同的第2图像数据进行顺序存储的第2存储步骤；从上述第2图像数据之一中检测脸部区域的脸部区域检测步骤；基于在上述脸部检测步骤进行脸部区域的检测期间所得到的第2图像数据中与在上述脸部区域的检测中所使用的图像数据的相似度在规定值以内的某一第2图像数据相同的、图像数据所生成的上述第1图像数据中的、与由上述脸部检测步骤检测出的脸部区域对应的部分的数据，进行自动调焦、自动曝光以及白平衡控制的至少一个控制的控制步骤。
本发明提供一种摄像装置的控制方法，其特征在于具备：将由成像光学系统的成像所形成的被摄物像进行光电变换，输出图像信号的摄像步骤；将从上述摄像步骤输出的图像信号数字化，输出数字图像数据的A/D变换步骤；使用从上述A/D变换步骤输出的数字图像数据，抽出用于进行自动调焦、自动曝光，以及白平衡的信息中的至少一个信息的抽出步骤；把由上述抽出步骤抽出的信息作为第1图像数据进行顺序存储的第1存储步骤；以成为上述第1图像数据的基础的数字图像数据为基础，作为与第1图像数据不同的第2图像数据进行顺序存储的第2存储步骤；从上述第2图像数据中检测脸部区域的脸部区域检测步骤；当在上述脸部检测步骤进行脸部区域的检测期间所得到的第2图像数据中，没有与检测出上述脸部区域的第2图像数据的相似度在规定值以内的另一第2图像数据的情况下，进行不采用脸部检测结果的自动调焦、自动曝光以及白平衡控制的至少一个控制的控制步骤。
通过以下结合附图的详细描述，本发明的其它特征和优点将更加清楚。
附图说明
图1是本发明的摄像装置的实施方式1的功能方框图。
图2是本发明的实施方式1中的处理流程图。
图3是本发明的实施方式1中的时间图。
图4A、4B、4C是展示本发明实施方式1中的存储器的存储空间的图。
图5A、5B是展示测距/测光区域和人物位置关系的图。
图6A、6B是展示运动的人物的摄像图像的图。
图7是本发明的摄像装置的实施方式2的功能方框图。
图8是本发明实施方式2中的处理的流程图。
图9是本发明实施方式2中的时间图。
图10A、10B、10C是展示本发明实施方式2中的存储器的存储空间的图。
图11是本发明实施方式3中的处理的流程图。
图12是本发明实施方式3中的时间图。
图13A、13B、13C是展示本发明实施方式3中的存储器的存储空间的图。
图14是本发明实施方式4中的处理的流程图。
图15是本发明实施方式4中的时间图。
图16A、16B、16C是展示本发明实施方式4中的存储器的存储空间的图。
具体实施方式
以下，参照附图详细说明本发明适宜的实施方式。
(实施方式1)
图1是本发明的摄像装置的实施方式1的功能方框图。
在图1中，10是由镜头和光圈等组成的成像光学单元，进行聚焦调节和曝光调节。11是把光学像变换为电气信号的CCD等的摄像元件，12是把来自摄像元件11的模拟图像信号变换为数字图像数据的A/D变换电路，13是对从A/D变换电路12输出的图像数据实施伽马处理、内插处理、矩阵变换等制成视频数据的信号处理单元，14是和存储器(DRAM)15之间进行视频数据和各种控制数据的写入/读出的存储器I/F，16是从视频数据中判定人物脸部区域的脸部区域判定单元，17是检测AF/AE/WB(自动调焦/自动曝光/白平衡)评价值的AF/AE/WB检测单元。18是负责各种控制的CPU，根据来自AF/AE/WB检测单元17的评价值控制成像光学单元，另外，进行在信号处理单元13中的信号处理的参数设定。19是显示单元，随时显示在信号处理单元13中制成的视频数据，由使用者可以实时观察被照物的样子的液晶监视器等组成的显示单元。
以下，根据图2所示的流程图说明本发明的实施方式1的摄像装置的动作。
在数字静态照相机中在摄影前在显示单元19上进行这些要拍摄的图像的监视，在本实施方式中假设在监视动作中抽出人物脸部位置以及AF/AE/WB评价值。
在步骤S101中，如果对监视的图像设定了进行脸部检测的脸部检测模式，则入射到成像光学单元10的光在摄像元件11的受光面上成像，从摄像元件11中作为模拟图像信号输出。模拟图像信号在A/D变换电路12中被变换为数字图像数据，输入到信号处理单元13。进而，在此如果进行了脸部检测模式的设定则开始对信号处理单元13进行信号输入，如果半按下释放键(SW1)，也可以对信号处理单元13开始信号的输入。
在信号处理单元13中，步骤S102和步骤S103的2个处理并行进行。在步骤S102中，把已输入的图像数据照原样(以RAW压缩方式压缩的数据)通过存储器I/F14存储在存储器15预先确定的存储空间(存储空间A)。另一方面，在步骤S103中，对已输入的图像数据实施伽马处理、内插处理、矩阵变换等制成视频数据。
在步骤S104中，CPU18通过存储器I/F14在和存储器15的存储空间A不同的预先确定的存储空间(存储空间B)中存储在步骤S103中制成的视频数据。在步骤S102中存储的图像数据，和在步骤S103中制成的视频数据，以从A/D变换电路12输出的同一图像数据为基础。
在步骤S105中，脸部区域判定单元16使用在步骤S104中被存储在存储空间B上的脸部检测模式设定后的最初的1帧的视频数据检测人物脸部区域。被存储在存储空间B上的视频数据比被存储在存储空间A上的图像数据容量还小，如果从被存储在存储空间B上的视频数据中进行脸部区域的检测，则可以比在从被存储在存储空间A中的图像数据中进行还短的时间完成脸部区域检测。
作为人物脸部区域的检测方法，在使用采用主要成分分析的固有脸部(eigenface：特征脸部)的方法(M.A.Turk and A.P.Pentland，“Face recognition using eigenfaces，”Proc.Of IEEE Conf.onComputer Vision and Pattern Recognition，pp.586-591，1991.)，和在特开平09-251534号公报中，提出了利用眼睛、鼻子、嘴等的特征点的方法，并可以适用。这些方法通过输入图像和多个标准模式的模式匹配法判定输入图像是否是人物的脸部。
在本实施方式中，在预先被存储在存储器15存储空间C中的人物脸部的标准模式，和在步骤S104中被存储在存储空间B上的脸部检测模式设定后的最初1帧的视频数据之间进行图像匹配。而后在进行该图像匹配期间，如使用者可以监视被照物那样，显示单元19随时显示在脸部检测模式设定后最初得到的1帧后新得到的视频数据。
在步骤S106中，AF/AE/WB检测单元17根据在步骤S105中检测出的人物脸部的信息，设定检测AF(自动调焦)评价值的区域(AF区域)，检测AE(自动曝光)评价值的区域(AE区域)以及检测WB(白平衡)评价值的区域(WB)。在通常的方法中设定AF/AE/WB区域。进而，AF/AE/WB区域的设定用CPU18进行也可以。
在步骤S107中，对于以在步骤S102中被存储在存储空间A上的RAW压缩方式压缩的数据的脸部检测模式设定后的最初1帧数据，把包含在步骤S106中设定的AF/AE/WB区域中的以RAW压缩方式压缩的数据读出到AF/AE/WB检测单元17，检测AF/AE/WB评价值。进而，在以RAW压缩方式压缩的数据中，不仅包含亮度信息还包含颜色信息。
在步骤S108中，CPU18根据在步骤S107中得到的AF/AE/WB评价值获得AF/AE/WB调整量，控制成像光学单元10。另外，以在步骤S107中得到的AE评价值为基础，进行在信号处理单元13中的信号处理的参数设定。
如上所述在数字静态照相机的监视动作中，因为连续从A/D变换电路12中输出帧图像，所以即使在进行从上述步骤S105到步骤S108的处理的过程中，也把下一帧图像输入到信号处理单元13。为了对成为脸部检测对象的帧1的图像进行脸部区域判定和AF/AE/WB评价值检测，对每帧切换存储空间，进行从上述步骤S102到步骤S107的处理。根据图3的时间图以及图4A-4C的存储空间图说明其形态。
对于帧图像按照被输入到信号处理单元13中的顺序标注帧1、帧2、帧3、......的号码，另外，把输入帧1的图像数据的期间称为帧1期间，同样地接着称为帧2期间、帧3期间、......。在此，假设为了检测人物脸部的位置需要10帧期间。
图3的时间图展示从以垂直同步信号划分的帧1期间开始到帧12期间的从上述步骤S101到步骤S108的处理的时刻，和在各个步骤中处理的帧号码。在图3中，图像数据输入相当于步骤S101，以RAW压缩方式压缩的数据存储相当于步骤S102，视频数据存储相当于步骤S104，脸部区域判定相当于步骤S105，AF/AE/WB评价值检测相当于步骤S107，AF/AE/WB控制相当于步骤S108。
(1)帧1期间
对于被输入到信号处理单元13的帧1的图像数据，并行进行上述步骤S102和步骤S104的2个处理，用帧1的RAW压缩方式压缩的数据被存储在存储空间A上，视频数据被存储在存储空间B上。图4A展示帧1期间的存储空间的例子。在存储空间C上假设预先存储在脸部区域判定时使用的脸部标准模式。
(2)帧2～11期间
步骤S105的脸部区域判定是采用读出被存储在存储空间B上的帧1的视频数据，和被存储在存储空间C上的标准模式的模式匹配进行脸部判定。即使在帧2～11期间也是从A/D变换电路12输出到信号处理单元13的图像数据被连续输入，显示单元19使用以在该帧2～11期间得到的图像数据为基础的视频数据进行显示动作，但脸部区域判定对被存储在存储空间B中的帧1的视频数据进行。
在步骤S106中CPU18如果完成脸部区域判定(在图3中得到帧11的图像的时刻)对在步骤S105中被存储的帧1的图像设定AF/AE/WB区域。
在步骤S107中，AF/AE/WB检测单元17从存储空间A上读出在步骤S106中以在AF/AE/WB区域上设定帧1的RAW压缩方式压缩的数据，进行AF/AE/WB评价值检测。进而，作为AF评价值，因为不能从1帧的图像中获得，所以还加入从在步骤S106中被设定在AF/AE/WB区域上的帧1到数帧后的帧进行评价值的检测。
而后，在步骤S108中，CPU18根据在步骤S107中取得的评价值进行AF/AE/WB控制。另一方面，对于被输入到信号处理单元13中的帧2的图像数据，实施和上述帧1期间同样的处理，但以帧2的RAW压缩方式压缩的数据被存储在和存储空间A不同的存储空间A’上，视频数据被存储在和存储空间B不同的存储空间B’上。图4B展示帧2期间的存储空间的例子。
例如，作为帧1以及帧11的摄像图像当取得图6A、图6B所示的摄像图像的情况下，在帧1期间以图6A的RAW压缩方式压缩的数据和视频数据，在帧11期间以图6B的RAW压缩方式压缩的数据和视频数据被存储在存储器15中。从图6A的视频数据中检测出脸部位置的结果是用x表示的虚线包围的区域，AF/AE/WB控制以从在图6A的x区域的RAW压缩方式压缩的数据中检测出的AF/AE/WB评价值为基础进行。
(3)帧12期间以后
帧12期间以后，进行和上述帧2～11期间同样的处理，但存储器15的写入/读出的存储空间对每个帧交替不同。即，在帧3期间，在上述步骤S102以及S104中的对存储器15的写入在存储空间A以及存储空间B上进行，在上述步骤S105的脸部区域判定中的从存储器15的读出从存储空间B’以及存储空间A’进行。图4C展示在帧22期间结束后的存储空间的例子。
(4)静止图像拍摄时
如果把在监视动作中得到的AE评价值存储在存储器15中，则即使在监视动作后进行的静止图像拍摄时，也可以使用该AE评价值设定在信号处理单元13中的伽马处理、内插处理、矩阵变换等的参数。
通过上述说明，如果采用上述实施方式，则虽然从对帧1的图像开始脸部区域检测到结束期间得到帧2～10期间的新的图像数据，但如果在帧11期间得到脸部区域检测结果，则使用存储着的帧1的图像进行AF/AE/WB评价值检测。即，对同一帧进行脸部区域检测和AF/AE/WB评价值检测，可以比以往更高精度地进行对人物脸部的焦点调节和曝光控制，可以提供抗人物运动和相机抖动动的能力强的摄像装置。
(实施方式2)
图7是本发明摄像装置的实施方式2的功能方框图。
在图7中，10是由镜头和光圈等组成的成像光学单元，进行焦点调节和曝光调节。11是把光学像变换为电气信号的CCD等的摄像元件，12是把来自摄像元件11的模拟图像信号变换为数字图像数据的A/D变换电路，13是对从A/D变换电路12输出的图像数据实施伽马处理、内插处理、矩阵变换等制成视频数据的信号处理单元，14是在和存储器(DRAM)15之间进行视频数据和各种控制数据的写入/读出的存储器I/F，16是从视频数据中判定人物脸部区域的脸部区域判定单元，17是检测AF/AE/WB评价值的AF/AE/WB检测单元。18是负责各种控制的CPU，AF/AE/WB根据来自检测单元17的评价值控制成像光学单元，另外，进行在信号处理单元13中的信号处理的参数设定。19是显示单元，随时显示在信号处理单元13中制成的视频数据，是由使用者可以实时观察被照物的样子所使用的液晶监视器等组成的显示单元。
以下，根据图8所示的流程图说明本发明实施方式2中的摄像装置的动作。
在数字静止照相机中在拍摄前在显示单元19中进行这些要拍摄的图像的监视，在本实施方式中，假设在监视动作中抽出人物脸部位置以及AF/AE/WB评价值。
在步骤S201中，如果对监视着的图像设定了进行脸部检测的脸部检测模式，则入射到成像光学单元10中的光在摄像元件11的受光面上成像，从摄像元件11中作为模拟图像信号输出。模拟图像信号在A/D变换电路12中被变换为数字图像数据，被输入到信号处理单元13以及AF/AE/WB检测单元17。进而，在此如果设定脸部检测模式，则开始对信号处理单元13的信号输入，但如果半按下释放键(SW1)，则可以开始对信号处理单元13的信号输入。
在步骤S202中，AF/AE/WB检测单元从在脸部检测模式设定后的最初被输入的图像数据中检测AF/AE/WB评价值。
在步骤S203中，CPU18通过存储器I/F14在存储器15的预先确定的存储空间(存储空间A)上存储AF/AE/WB评价值的积分值。
在此，例如把画面整体分割为例如纵横16块的256块，把各个块内的AF/AE/WB评价值的积分值存储在存储器15中。由此，与在实施方式1中把以RAW压缩方式压缩的数据存储在存储器15中的情况相比，可以削减被存储在存储器15中的数据量。另外，AF评价值可以通过对图像数据实施高通滤波或者带通滤波得到，只包含特定范围的频率成分。因而，通过把AF评价值频率变换为低频成分进行抽选(decimate：数据间隔剔除)，可以削减存储在存储器15中的数据量。
在步骤S204中，信号处理单元13对输入的图像数据实施伽马处理、内插处理、矩阵变换等制成视频数据。
在步骤S205中，CPU18通过存储器I/F14在和存储器15的存储空间A不同的预先确定的存储空间(存储空间B)上，存储在步骤S204中制成的视频数据。在步骤S102中存储的图像数据、在步骤S103中制成的视频数据以从A/D变换电路12输出的同一图像数据为基础。
在步骤S206中，脸部区域判定单元16使用在步骤S205中被存储在存储空间B上的脸部检测模式设定后的最初1帧的视频数据检测人物脸部区域。作为人物脸部区域的检测方法，在使用采用主要成分分析的固有脸部(eigenface：特征脸部)的方法(M.A.Turk and A.P.Pentland，“Face recognition using eigenfaces，”Proc.Of IEEE Conf.on Computer Vision and Pattern Recognition，pp.586-591，1991.)，和特开平09-251534号公报中，提出了利用眼睛、鼻子、嘴等的特征的方法，可以适用。这些方法通过输入图像和多个标准模式的模式匹配法判定输入图像是否是人物脸部。
在本实施方式中，在预先被存储在存储器15的存储空间C中的人物脸部的标准模式，和在步骤S205中被存储在存储空间B中的视频数据之间进行模式匹配。而后在进行该模式匹配的期间，如使用者可以监视被照物那样，显示单元19随时显示在脸部检测模式设定后的最初得到的1帧后新得到的视频数据。
在步骤S207中，CPU18根据在步骤S206中检测出的人物脸部区域的信息，设定检测AF评价值的区域(AF区域)以及检测AE评价值的区域(AE区域)。当在步骤S206中判定为人物脸部不存在的情况下，用通常的方法设定AF/AE/WB区域。
以下，在步骤S208中，CPU18在步骤S203中在被存储在存储空间A中的AF/AE/WB评价值内，读出在步骤S207中设定的包含在AF/AE/WB区域中的区域(已叙述的分割后的256块中的1个或者多个)的AF/AE/WB评价值。
在步骤S209中，CPU18获得AF/AE/WB调整量，控制成像光学单元10。另外，根据在步骤S208中得到的AE评价值，进行在信号处理单元13中的信号处理的参数设定。
如上所述在数字静止照相机的监视动作中，因为连续从A/D变换电路12中输出帧图像，所以即使在进行从上述步骤S206到步骤S209的处理的过程中，也可以向信号处理单元13以及AF/AE/WB检测单元17输入以后的帧图像。因为对成为脸部检测对象的帧1的图像进行AF/AE/WB评价值检测，所以对每帧切换存储空间进行从上述步骤S202到步骤S208的处理。根据图9的时间图以及图10A、B、C的存储空间图说明其形态。
对帧图像按照被输入到信号处理单元13以及AF/AE/WB检测单元17的顺序标注帧1、帧2、帧3、......的号码，另外，把输入帧1的图像数据的期间称为帧1期间，同样地接着称为帧2期间、帧3期间、......。在此，假设为了检测人物脸部的位置需要10帧期间。
图9的时间图展示从以垂直同步信号划分的帧1期间开始到帧12期间的从上述步骤S201到步骤S209的处理的时刻，和在各个步骤中处理的帧号码。在图9中，图像数据输入相当于步骤S201，AF/AE/WB评价值检测以及存储相当于步骤S202和步骤S203，视频数据存储相当于步骤S205，脸部区域判定相当于步骤S206，AF/AE/WB评价值读出相当于步骤S208，AF/AE/WB控制相当于步骤S209。
(1)帧1期间
对于帧1的图像数据，在AF/AE/WB检测单元17中并行进行上述步骤S202以及步骤S203的处理，在信号处理单元13中并行进行上述步骤S205的处理，帧1的AF/AE/WB评价值被存储在存储空间A上，视频数据被存储在存储空间B上。图10A展示帧1期间的存储空间的例子。在存储空间C中，假设预先存储在脸部区域判定时使用的脸部标准模式。
(2)帧2～11期间
步骤S206的脸部区域判定读出被存储在存储空间B上的帧1的视频数据，和被存储在存储空间C上的标准模式实施模式匹配进行脸部判定。即使在帧2～11期间也是从A/D变换电路12输出到信号处理单元13的图像数据被连续输入，显示单元19使用以在该帧2～11期间得到的图像数据为基础的视频数据进行显示动作，但脸区域判定对被存储在存储空间B中的帧1的视频数据进行。
在步骤S207中CPU18如果完成脸部区域判定，则对在步骤S206中被存储的成为脸部区域判定对象的帧1的数据，进行AF/AE/WB区域的设定。
在步骤S208中，AF/AE/WB检测单元17从存储器15中读出在步骤S207中被设定在AF/AE/WB区域上的帧1的AF/AE/WB评价值。进而，作为AF评价值，因为不能从1帧的图像中获得，所以还加入从在步骤S207中被设定在AF/AE/WB区域上的帧1到数帧后的帧进行评价值的检测。
而后，在步骤S209中，CPU18根据在步骤S208中读出的评价值进行AF/AE/WB控制。
另一方面，对帧2的图像数据实施和上述帧1期间同样的处理，但帧2的AF/AR/WB评价值被存储在和存储空间A不同的存储空间A’上，视频数据被存储在和存储空间B不同的存储空间B’上。图10B展示帧2期间的存储空间的例子。
例如，作为帧1以及帧11的摄像图像当取得图6A、图6B所示的摄像图像的情况下，在帧1期间把图6A的AF/AE/WB的评价值和视频数据存储在存储器15中，在帧11期间把图6B的AF/AE/WB评价值和视频数据存储在存储器15中。从图6A的视频数据中检测出脸部位置的结果是用x表示的虚线包围的区域，AF/AE/WB控制以从存储器15读出从图6A的x区域得到的AF/AE/WB评价值进行。
(3)帧12期间以后
帧12期间以后，进行和上述帧2～11期间一样的处理，但存储器15的写入/读出的存储空间对每个帧不同。即，在帧3期间，在上述步骤S203以及S205中的对存储器15的写入在存储空间A以及存储空间B上进行，在上述步骤S206的脸部区域判定中的从存储器15的读出从存储空间B’以及存储空间A’进行。图10C展示在帧22期间结束后的存储空间的例子。
(4)静止图像拍摄时
如果把在监视动作中得到的AE评价值存储在存储器15中，则即使在监视动作后进行的静止图像拍摄时，也可以使用该AE评价值设定在信号处理单元13中的伽马处理、内插处理、矩阵变换等的参数。
通过上述说明，如果采用上述实施方式，则虽然从对帧1的图像开始脸部区域检测到结束期间得到帧2～10期间的新的图像数据，但如果在帧11期间得到脸部区域检测结果，则从存储着的帧1的图像读出AF/AE/WB评价值。即，对同一帧进行脸部区域检测和AF/AE/WB评价值检测，可以比以往更高精度地进行对人物脸部的焦点调节和曝光控制，可以提供抗人物运动和相机抖动动的能力强的摄像装置。
(实施方式3)
本实施方式相对于在实施方式1中对帧1的图像进行AF/AE/WB评价值检测区域，在相对成为脸部区域检测对象的帧图像的变化量根据规定范围内的摄像图像进行AF/AE/WB评价值检测这一点上和实施方式1不同。
因为摄像装置的构成和实施方式1一样所以省略说明。
以下，根据图11所示的流程图说明本发明实施方式3的摄像装置的动作。
在数字静态照相机中在摄影前在显示单元19上进行这些要摄影的图像的监视，在本实施方式中假设在监视动作中抽出人物脸部位置以及AF/AE/WB评价值。
在步骤S301中，如果对监视着的图像设定了进行脸部检测的脸部检测模式，则入射到成像光学单元10的光在摄像元件11的受光面上成像，从摄像元件11中作为模拟图像信号输出。模拟图像信号在A/D变换电路12中被变换为数字图像数据，输入到信号处理单元13。进而，在此如果进行脸部检测模式的设定则开始对信号处理单元13的信号输入，如果半按下释放键(SW1)，则也可以对信号处理单元13开始信号的输入。
在信号处理单元13中，步骤S302和步骤S303的2个处理并行进行。在步骤S302中，把已输入的图像数据按原样(以RAW压缩方式压缩的数据)通过存储器I/F14存储在存储器15预先确定的存储空间(存储空间A)。另一方面，在步骤S303中，对已输入的图像数据实施伽马处理、内插处理、矩阵变换等制成视频数据。
在步骤S304中，CPU18通过存储器I/F14在和存储器15的存储空间A不同的预先确定的存储空间(存储空间B)中存储在步骤S303中制成的视频数据。在步骤S102中存储的图像数据，和在步骤S103中制成的视频数据，以从A/D变换电路12输出的同一图像数据为基础。
在步骤S305中，脸部区域判定单元16使用在步骤S304中被存储在存储空间B上的脸部检测模式设定后的最初的1帧的视频数据检测人物脸部区域。
作为人物脸部区域的检测方法，在使用采用主要成分分析的固有脸部(eigenface：特征脸部)的方法(M.A.Turk and A.P.Pentland，“Face recognition using eigenfaces，”Proc.Of IEEE Conf.onComputer Vision and Pattern Recognition，pp.586-591，1991.)，和在特开平09-251534号公报中，提出了利用眼睛、鼻子、嘴等的特征点的方法，并可以适宜。这些方法通过输入图像和多个标准模式的模式匹配法判定输入图像是否是人物的脸部。
在本实施方式中，在预先被存储在存储器15的存储空间C中的人物脸部的标准模式，和在步骤S304中被存储在存储空间B上的脸部检测模式设定后的最初的1帧的视频数据之间进行图像匹配。而后在进行该图像匹配期间，如使用者可以监视被照物那样，显示单元19随时显示在脸部检测模式设定后最初得到的1帧后新得到的视频数据。
在步骤S306中，AF/AE/WB检测单元17根据在步骤S305中检测出的人物脸部的信息，设定检测AF(自动调焦)评价值的区域(AF区域)以及检测AE(自动曝光)评价值的区域(AE区域)。当在步骤S305中判定为人物脸部不存在的情况下，用通常的方法设定AF/AE/WB区域。进而，AF/AE/WB区域的设定用CPU18进行也可以。
在步骤S307中，在步骤S302中被存储在存储空间A上的1帧期间以后的RAW压缩方式压缩的数据内，对于相对成为脸部检测对象的帧1的图像的变换量在规定范围内的最新的图像数据，把包含在步骤S306中设定的AF/AE/WB区域中的以RAW压缩方式压缩的数据读出到AF/AE/WB检测单元17，检测AF/AE/WB评价值。进而，在以RAW压缩方式压缩的数据中，不仅包含亮度信息还包含颜色信息。
在步骤S308中，CPU18根据在步骤S307中得到的AF/AE/WB评价值获得AF/AE/WB调整量，控制成像光学单元10。另外，以在步骤S307中得到的AE评价值为基础，进行在信号处理单元13中的信号处理的参数设定。
如上所述在数字静态照相机的监视动作中，因为连续从A/D变换电路12中输出帧图像，所以即使在进行从上述步骤S305到步骤S308的处理的过程中，也把下一帧图像输入到信号处理单元13。为了根据相对成为脸部检测对象的帧1图像的变化量在规定范围内的摄像图像进行脸部区域判定和AF/AE/WB评价值检测，对每帧切换存储空间进行从上述步骤S302到步骤S307的处理。根据图12的时间图以及图13A-13C的存储空间图说明其形态。
对于帧图像按照被输入到信号处理单元13中的顺序标注帧1、帧2、帧3、......的号码，另外，把输入帧1的图像数据的期间称为帧1期间，同样地接着称为帧2期间、帧3期间、......。在此，假设为了检测人物脸部的位置需要10帧期间。
图12的时间图展示从以垂直同步信号划分的帧1期间到帧12期间的从上述步骤S301到步骤S308的处理的时刻，和在各个步骤中处理的帧号码。在图12中，图像数据输入相当于步骤S301，以RAW压缩方式压缩的数据存储相当于步骤S302，视频数据存储相当于步骤S304，脸部区域判定相当于步骤S305，AF/AE/WB评价值检测相当于步骤S307，AF/AE/WB控制相当于步骤S308。
(1)帧1期间
对于被输入到信号处理单元13中的帧1的图像数据，并行进行上述步骤S302和步骤S304的2个处理，在用帧1的压缩方式压缩的数据被存储在存储空间A上，视频数据被存储在存储空间B上。图4A展示帧1期间的存储空间的例子。在存储空间C上假设预先存储在脸部区域判定时使用的脸部标准模式。
(2)帧2～11期间
步骤S305的脸部区域判定读出被存储在存储空间B上的帧1的视频数据，进行和采用被存储在存储空间C上的标准模式的模式匹配的脸部判定。即使在帧2～11期间也是从A/D变换电路12输出到信号处理单元13的图像数据被连续输入，显示单元19使用以在该帧2～11期间得到的图像数据为基础的视频数据进行显示动作，但脸区域判定对被存储在存储空间B中的帧1的视频数据进行。对于帧2～11的图像数据，也实施和上述帧1期间一样的处理，以帧2～11的RAW压缩方式压缩的数据在和存储空间A不同的存储空间上，视频数据在和存储空间B不同的存储空间上顺序存储。图13B展示帧11期间结束后的存储空间的例子。在图13B的存储空间A’上存储以帧11的RAW压缩方式压缩的数据，在存储空间B’上存储帧11的视频数据。
在步骤S306中CPU18获得在步骤S305中存储的成为脸部判定对象的帧1的图像和帧2～11的图像的相关。而后，根据获得的相关值进行帧间的变化是否在容许值内的判定，如果变化在容许值内，则场景没有变化，对变化在容许值内的帧并且是最新的帧的图像，设定AF/AE/WB区域。
在步骤S307中，AF/AE/WB检测单元17从存储空间A读出与在步骤S306中被设定在AF/AE/WB区域上的帧对应的帧的以RAW压缩方式压缩的数据，进行AF/AE/WB评价值检测。进而，作为AF评价值，因为不能从1帧的图像中获得，所以还以在步骤S306中被设定在AF/AE区域上的帧为基础加入前后的帧进行评价值的检测。进而，如果评价值的检测结束，则CPU18删除从帧1到帧11的存储着的数据。
而后，在步骤S308中，CPU18根据在步骤307中获得的评价值进行AF/AE/WB控制。另一方面，对于被输入到信号处理单元13中的帧2的图像数据，实施和上述帧1期间同样的处理，但以帧2的RAW压缩方式压缩的数据被存储在和存储空间A不同的存储空间A’上，视频数据被存储在和存储空间B不同的存储空间B’上，图13B展示帧2期间的存储空间的例子。
例如，作为帧1以及帧11的摄像图像当取得图6A、图6B所示的摄像图像的情况下，在帧1期间以图6A的RAW压缩方式压缩的数据和视频数据，在帧11期间以图6B的RAW压缩方式压缩的数据和视频数据被存储在存储器15中。从图6A的视频数据中检测出脸部位置的结果是用x表示的虚线包围的区域，AF/AE/WB控制以从在图6A的x区域的RAW压缩方式压缩的数据中检测出的AF/AE/WB评价值为基础进行。
(3)帧12期间以后
帧12期间以后，进行和上述帧2～11期间一样的处理，但存储器15的写入/读出的存储空间对每个帧交替不同。即，在帧3期间，在上述步骤S302以及S304中的对存储器15的写入在存储空间A以及存储空间B上进行，在上述步骤S305的脸部区域判定中的从存储器15的读出从存储空间B’以及存储空间A’进行。图13C展示在帧22期间结束后的存储空间的例子。
(4)静止图像拍摄时
如果把在监视动作中得到的AE评价值存储在存储器15中，则即使在监视动作后进行的静止图像拍摄时，也可以使用该AE评价值设定在信号处理单元13中的伽马处理、内插处理、矩阵变换等的参数。
进而，在本实施方式中，假设对于场景变化在容许值内的帧并且是最新的帧的图像，设定AF/AE/WB区域，但如果场景变化是容许值内的帧的图像，则也可以把某个图像作为在区域设定时使用的图像。
另外，对于在场景变化是容许值内的帧图像中场景变化最小的(评价高)的帧图像，也可以设定AF/AE/WB区域。
另外，当没有场景变化在容许值内的帧图像的情况下，例如进行通常的评价测光，设定AF/AE/WB区域进行AF/AE/WB控制。
通过上述说明，如果采用上述实施方式，因为可以根据相对成为脸部区域检测对象的帧图像的变化在规定范围内的摄像图像进行AF/AE/WB评价值检测，所以可以比以往更高精度地进行对人物脸部的焦点调节和曝光控制，可以提供抗人物运动和相机抖动动能力强的摄像装置。
另外，通过用在时间上最新的帧图像进行AF/AE/WB评价值检测不改变构图自身，即使在从时间变化开始场景全体的亮度等变化时也可以进行正确的曝光控制。
(实施方式4)
在本实施方式中相对在实施方式2中对帧1的数据进行AF/AE/WB评价值检测，在根据相对成为脸部区域检测对象的帧图像的变化量在规定范围内的摄像图像进行AF/AE/WB评价值检测的方面和实施方式2不同。
因为摄像装置的构成和实施方式2一样所以省略说明。
以下，根据图14所示的流程图说明本发明的实施方式4的摄像装置的动作。
在数字静态照相机中在摄影前在显示单元19上进行这些要摄影的图像的监视，在本实施方式中假设在监视动作中抽出人物脸部位置以及AF/AE/WB评价值。
在步骤S401中，如果对监视的图像设定了进行脸部检测的脸部检测模式，则入射到成像光学单元10的光在摄像元件11的受光面上成像，从摄像元件11中作为模拟图像信号输出。模拟图像信号在A/D变换电路12中被变换为数字图像数据，输入到信号处理单元13以及AF/AE/WB检测单元17。进而，在此如果进行脸部检测的设定则开始对信号处理单元13的信号输入，当如果半按下释放键(SW1)，则也可以对信号处理单元13开始信号的输入。
在步骤S402中，AF/AE/WB检测单元从随时输入的图像数据中检测AF/AE/WB评价值。
在步骤S403中，CPU18通过存储器I/F14在存储器15的预先确定的存储空间(存储空间A)中存储AF/AE/WB评价值的积分值。
在此，把画面整体分割为例如纵横16块的256块，把各块内的AF/AE/WB评价值的积分值存储在存储器15中。由此，与在实施方式3中把以RAW压缩方式压缩的数据存储在存储器15中的情况相比，可以削减被存储在存储器15中的数据量。另外，AF评价值可以通过对图像数据实施高通滤波或者带通滤波得到，只包含特定范围的频率成分。因而，通过把AF评价值频率变换为低频成分抽选(decimate：数据间隔剔除)，可以削减存储在存储器15中的数据量。
在步骤S404中，信号处理单元13对输入的图像数据实施伽马处理、内插处理、矩阵变换等制成视频数据。
在步骤S405中，CPU18通过存储器I/F14在和存储器15的存储空间A不同的预先确定的存储空间(存储空间B)上存储在步骤S404中制成的视频数据。在步骤S102中存储的图像数据、在步骤S103中制成的视频数据以从A/D变换电路12输出的同一图像数据为基础。
在步骤S406中，脸部区域判定单元16使用在步骤S405中被存储在存储空间B上的脸部检测模式设定后的最初1帧的视频数据检测人物脸部区域。作为人物脸部区域的检测方法，在使用采用主要成分分析的固有脸部(eigenface：特征脸部)的方法(M.A.Turk and A.P.Pentland，“Face recognition using eigenfaces，”Proc.Of IEEE Conf.on Computer Vision and Pattern Recognition，pp.586-591，1991.)，和特开平09-251534号公报中，提出了利用眼睛、鼻子、嘴等的特征的方法，可以适用。这些方法通过输入图像和多个标准模式的模式匹配法判定输入图像是否是人物脸部。
在本实施方式中，在预先被存储在存储器15的存储空间C中的人物脸部的标准模式，和在步骤S405中被存储在存储空间B中的视频数据之间进行模式匹配。而后在进行该模式匹配的期间，如使用者可以监视被照物那样，显示单元19随时显示在脸部检测模式设定后的最初得到的1帧后新得到的视频数据。
在步骤S407中，CPU18根据在步骤S406中检测出的人物脸部区域的信息，设定检测AF评价值的区域(AF区域)以及检测AE评价值的区域(AE区域)。当在步骤S406中判定为人物脸部不存在的情况下，用通常的方法设定AF/AE/WB区域。
以下，在步骤S408中，CPU18从在步骤S403中被存储在存储空间A中的1帧期间以后的图像数据内，选择相对成为脸部检测对象的帧1的图像数据的变化量在规定范围内的最新的图像数据。而后在该被选择的图像数据的AF/AE/WB评价值内，读出包含在步骤S407中设定的AF/AE/WB区域中的(已叙述的被分割后的256块中的1个或者多个)的AF/AE/WB评价值。
在步骤S409中，CPU18获得AF/AE/WB调整量，控制成像光学单元10。另外，根据在步骤S408中得到的AE评价值，进行在信号处理单元13中的信号处理得到参数设定。
如上所述在数字静止照相机的监视动作中，因为连续从A/D变换电路12中输出帧图像，所以即使在进行从上述步骤S406到步骤S409的处理的过程中，也可以像信号处理单元13以及AF/AE/WB检测单元17输入以下的帧图像。因为根据相对成为脸部检测对象的帧1的图像的变化量在规定范围内的摄像图像进行AF/AE/WB评价值检测，所以对每帧切换存储空间进行从上述步骤S402到步骤S408的处理。根据图15的时间图以及图16A、B、C的存储空间图说明其形态。
对帧图像按照被输入到信号处理单元13以及AF/AE/WB检测单元17的顺序标注帧1、帧2、帧3、......的号码，另外，把输入帧1的图像数据的期间称为帧1期间，同样地接着称为帧2期间、帧3期间、......。在此，假设为了检测人物脸部的位置需要10帧期间。
图15的时间图展示以垂直同步信号划分的从帧1期间到帧12期间的进行从上述步骤S401到步骤S409的处理的时刻，和在各步骤中处理的帧号码。在图15中，图像数据输入相当于步骤S401，AF/AE/WB评价值检测以及存储相当于步骤S402和步骤S403，视频数据存储相当于步骤S405，脸部区域判定相当于步骤S406，AF/AE/WB评价值读出相当于步骤S408，AF/AE/WB控制相当于步骤S409。
(1)帧1期间
对于帧1的图像数据，在AF/AE/WB检测单元17中并行进行上述步骤S402以及步骤S403的处理，在信号处理单元13中进行上述步骤S405的处理，帧1的AF/AE/WB评价值被存储在存储空间A上，视频数据被存储在存储空间B上。图10A展示帧1期间的存储空间的例子。在存储空间C中，假设预先存储在脸部区域判定时使用的脸部标准模式。
(2)帧2～11期间
步骤S406的脸部区域判定是读出被存储在存储空间B上的帧1的视频数据，和被存储在存储空间C上的标准模式之间进行模式匹配的脸部判定。即使在帧2～11期间也是从A/D变换电路12输出到信号处理单元13的图像数据被连续输入，显示单元19使用以在该帧2～11期间得到的图像数据为基础的视频数据进行显示动作，但脸区域判定对被存储在存储空间B中的帧1的视频数据进行。对帧2～11的图像数据也实施和上述帧1期间同样的处理，帧2～11的AF/AE/WB评价值被存储在和存储空间A不同的存储空间上，视频数据被顺序存储在和存储空间B不同的存储空间上。帧11期间结束后的存储空间的例子如图16B所示。在图16B的存储空间A’上存储帧11的AF/AE/WB评价值，在存储空间B’上存储帧11的视频数据。
在步骤S407中CPU18获得在步骤S406中成为存储着的脸部区域判定对象的帧1的图像和帧2～11的图像的相关。而后，根据该获得的相关值进行帧间的变化是否在容许值内的判定，如果变化在容许内则作为场景没有变化，对变化在容许值内的帧并且是最新的帧数据，行AF/AE/WB区域的设定。
在步骤S408中，AF/AE/WB检测单元17从存储器15中读出在步骤S407中被设定在AF/AE/WB区域上与的帧对应的帧区域AF/AE/WB评价值。进而，作为AF评价值，因为不能从1帧的图像中获得，所以还以在步骤S407中被设定在AF/AE/WB区域上的帧为基准加入前后的多个帧数据进行评价值的检测。进而，如果评价值的检测结束，则CPU18删除从帧1到帧11的存储着的数据。
而后，在步骤S409中，CPU18根据在步骤S408中读出的评价值进行AF/AE/WB控制。
另一方面，对帧2的图像数据实施和上述帧1期间同样的处理，但帧2的AF/AR/WB评价值被存储在和存储空间A不同的存储空间A’上，视频数据被存储在和存储空间B不同的存储空间B’上。图16B展示帧2期间的存储空间的例子。
例如，作为帧1以及帧11的摄像图像当取得图6A、图6B所示的摄像图像的情况下，在帧1期间把图6A的AF/AE/WB的评价值和视频数据存储在存储器15中，在帧11期间把图6B的AF/AE/WB评价值和视频数据存储在存储器15中。从图6A的视频数据中检测出脸部位置的结果是用x表示的虚线包围的区域，AF/AE/WB控制以从存储器15读出从图6A的x区域得到的AF/AE/WB评价值进行。
(3)帧12期间以后
帧12期间以后，进行和上述帧2～11期间一样的处理，但存储器15的写入/读出的存储空间对每个帧不同。即，在帧3期间，在上述步骤S403以及S405中的对存储器15的写入在存储空间A以及存储空间B上进行，在上述步骤S406的脸部区域判定中的从存储器15的读出从存储空间B’以及存储空间A’进行。图10C展示在帧22期间结束后的存储空间的例子。
(4)静止图像拍摄时
如果把在监视动作中得到的AE评价值存储在存储器15中，则即使在监视动作后进行的静止图像拍摄时，也可以使用该AE评价值设定在信号处理单元13中的伽马处理、内插处理、矩阵变换等的参数。
进而，即使在本实施方式中也和实施方式1一样，假设对于场景包含在容许值内的帧并且是最新的帧的图像，设定AF/AE/WB区域，但如果场景包含是容许值内的帧的图像，则也可以把某个图像作为在区域设定时使用的图像。
另外，当没有场景变化在容许值内的帧图像的情况下，例如进行通常的评价测光，设定AF/AE/WB区域进行AF/AE/WB控制。
过上述说明，如果采用上述实施方式，因为可以根据相对成为脸部检测对象的帧图像的变化量在规定范围内的摄像图像进行AF/AE/WB评价值检测，所以与以往相比可以更高精度地进行对人物脸部的焦点调节和曝光控制，可以提供抗人物运动和相机抖动动能力强的摄像装置。
另外，通过用时间上最新的帧数据进行AF/AE/WB评价值检测，即使构图自身没有变化，也可以在从时间变化开始场景全体亮度等变化时进行正确的曝光控制。
(其它实施方式)
另外，各实施方式的目的当然也可以通过把记录有实现上述的实施方式功能的软件的程序代码的存储介质提供给系统或者装置，该系统或者装置的计算机(或者CPU和MPU)读出被存储在存储介质中的程序代码执行执行。这种情况下，从存储介质读出的程序代码自身实现上述实施方式的功能，存储该程序代码的存储介质构成本发明。另外，当然还包含这样的情况，即，计算机通过执行读出的程序代码，不仅可以实现上述实施方式的功能，而且根据该程序代码的指示，在计算机上运行的操作系统(OS)等进行实际处理的一部分或者全部，通过该处理实现上述实施方式的功能。
进而，还包含这种情况，即，从存储介质读出的程序代码在被写入插入到计算机上的功能扩展卡和与计算机连接的功能扩展单元中具备的存储器后，根据该程序代码的指示，该功能扩展卡和功能扩展单元具备的CPU等进行实际处理的一部分或者全部，通过该处理实现上述实施方式的功能。
当把本发明适用在上述存储介质的情况下，在该存储介质中存储与前面说明的流程图对应的程序代码。
如果采用上述实施方式，因为根据相对成为脸部区域检测对象的帧图像的变化量在规定范围内的摄像图像进行AF/AE/WB评价值检测，所示与以往相比可以更高精度地进行对人物脸部的焦点调节和曝光控制，可以提供抗人物运动和相机抖动动能力强的摄像装置。
在不偏离本发明的精神和范围的前提下可以对本发明进行种种修改。

Claims (28)

1、一种摄像装置，其特征在于具备：
将由成像光学系统的成像所形成的被摄物像进行光电变换，输出图像信号的摄像单元；
将从上述摄像单元输出的图像信号数字化，输出数字图像数据的A/D变换单元；
以从上述A/D变换单元输出的数字图像数据为基础作为第1图像数据进行存储的第1存储单元；
以成为上述第1图像数据的基础的数字图像数据为基础作为与第1图像数据不同的第2图像数据进行存储的第2存储单元；
从上述第2图像数据中检测脸部区域的脸部区域检测单元；
在上述脸部区域检测单元从上述第2图像数据中检测脸部区域期间，根据由上述A/D变换单元输出的图像数据进行图像显示的显示装置；
上述脸部区域检测单元完成从上述第2图像数据进行的脸部区域检测后，使用在上述第1图像数据中的与由上述脸部区域检测单元所检测出的脸部区域对应的部分的数据，抽出用于进行自动调焦、自动曝光以及白平衡的信息中的至少一个信息的抽出单元；
根据由上述抽出单元所抽出的信息，进行自动调焦控制、自动曝光控制以及白平衡控制的至少一个控制的控制单元。
2、权利要获得1所述的摄像装置，其特征在于：上述抽出单元从与上述脸部区域检测单元从上述第2图像数据中所检测出的脸部区域相应的部分的数据中，检测用于进行自动调焦、自动曝光或者白平衡的信息中的至少一个信息。
3、权利要获得1所述的摄像装置，其特征在于：上述抽出单元从上述第1图像数据中检测用于进行自动调焦、自动曝光或者白平衡的信息中的至少一个信息并存储，从存储的信息中读出与上述脸部区域检测单元从上述第2图像数据中所检测出的脸部区域的位置对应的信息。
4、一种摄像装置，其特征在于具备：
将由成像光学系统成像的被摄物像进行光电变换，输出图像信号的摄像单元；
将从上述摄像单元输出的图像信号数字化输出数字图像数据的A/D变换单元；
使用从上述A/D变换单元输出的数字图像数据，抽出用于进行自动调焦、自动曝光，以及白平衡的信息中的至少一个信息的抽出单元；
把由上述抽出单元所抽出的信息作为第1图像数据进行存储的第1存储单元；
在成为上述第1图像数据的基础的数字图像数据中作为与第1图像数据不同的第2图像数据进行存储的第2存储单元；
从上述第2图像数据中检测脸部区域的脸部区域检测单元；
在上述脸部区域检测单元从上述第2图像数据中检测脸部区域期间，根据用上述A/D变换单元输出的图像数据进行图像显示的显示装置；
上述脸部区域检测单元完成从上述第2图像数据的脸部区域进行的检测后，根据在上述第1图像数据中的与由上述脸部区域检测单元所检测出的脸部区域对应的部分的数据，进行自动调焦、自动曝光以及白平衡控制的至少一个控制的控制单元。
5、一种摄像装置，其特征在于具备：
将由成像光学系统的成像所形成的被摄物像进行光电变换，输出图像信号的摄像单元；
将从上述摄像单元输出的图像信号数字化，输出数字图像数据的A/D变换单元；
以从上述A/D变换单元输出的数字图像数据为基础作为第1图像数据进行顺序存储的第1存储单元；
以成为上述第1图像数据的基础的数字图像数据为基础，作为与第1图像数据不同的第2图像数据进行顺序存储的第2存储单元；
从上述第2图像数据中检测脸部区域的脸部区域检测单元；
使用根据与在上述脸部区域检测单元进行脸部区域的检测期间所得到的第2图像数据中与在上述脸部区域的检测中所使用的图像数据的相似度在规定值以内的任意一个第2图像数据相同的、图像数据所生成的上述第1图像数据，抽出用于进行自动调焦、自动曝光，以及白平衡的信息的至少1个信息的抽出单元；
根据用上述抽出单元抽出的信息，进行自动调焦、自动曝光以及白平衡控制的至少一个控制的控制单元。
6、权利要获得5所述的摄像装置，其特征在于：上述抽出单元选择与在上述脸部区域的检测中所使用的第2图像数据的相似度在规定值内的多个第2图像数据中的最新的第2图像数据，使用根据与该被选择出的第2图像数据相同的图像数据所生成的第1图像数据，抽出用于进行自动调焦、自动曝光，以及白平衡的信息的至少1个信息。
7、权利要获得5所述的摄像装置，其特征在于：上述抽出单元从与在上述脸部区域的检测中所使用的第2图像数据的相似度在规定值以内的多个第2图像数据中选择相对于在上述脸部区域的检测中所使用的第2图像数据场景变化最少的第2图像数据，使用从与该被选择的第2图像数据相同的图像数据所生成的第1图像数据，抽出用于进行自动调焦、自动曝光，以及白平衡的信息的至少1个信息。
8、一种摄像装置，其特征在于具备：
将由成像光学系统的成像所形成的被摄物像进行光电变换，输出图像信号的摄像单元；
将从上述摄像单元输出的图像信号数字化，输出数字图像数据的A/D变换单元；
以从上述A/D变换单元输出的数字图像数据为基础作为第1图像数据进行顺序存储的第1存储单元；
以成为上述第1图像数据的基础的数字图像数据为基础，作为与第1图像数据不同的第2图像数据进行顺序存储的第2存储单元；
从上述第2图像数据中检测脸部区域的脸部区域检测单元；
当在上述脸部区域检测单元进行脸部区域的检测期间所得到的第2图像数据中，没有与检测到上述脸部区域的第2图像数据的相似度在规定值以内的另一第2图像数据的情况下，进行不采用脸部检测结果的自动调焦、自动曝光以及白平衡控制的至少一个控制的控制单元。
9、一种摄像装置，其特征在于具备：
将由成像光学系统的成像所形成的被摄物像进行光电变换，输出图像信号的摄像单元；
将从上述摄像单元输出的图像信号数字化，输出数字图像数据的A/D变换单元；
使用从上述A/D变换单元输出的数字图像数据，抽出用于进行自动调焦、自动曝光，以及白平衡的信息的至少1个信息的抽出单元；
把用上述抽出单元抽出的信息作为第1数据进行顺序存储的第1存储单元；
以成为上述第1图像数据的基础的数字图像数据为基础，作为与第1图像数据不同的第2图像数据进行顺序存储的第2存储单元；
从上述第2图数据中检测脸部区域的脸部区域检测单元；
根据第1图像数据中的与用上述脸部区域检测单元所检测出的脸部区域对应的部分的数据，进行自动调焦、自动曝光以及白平衡控制的至少一个控制的控制单元，其中该第1图像数据是根据与在上述脸部区域检测单元进行脸部区域检测期间所得到的第2图像数据中的在上述脸部区域检测中所使用的图像数据的相似度在规定值以内的某一第2图像数据相同的图像数据所生成的。
10、权利要获得9所述的摄像装置，其特征在于：上述控制单元选择与在上述脸部区域的检测中所使用的第2图像数据的相似度在规定值以内的多个第2图像数据中的最新的第2图像数据，根据与从与该选择的第2图像数据相同的图像数据所生成的第1图像数据中与由上述脸部区域检测单元所检测出的脸部区域对应的部分的数据，进行自动调焦、自动曝光以及白平衡控制的至少一个控制。
11、权利要获得9所述的摄像装置，其特征在于：上述控制单元选择与在上述脸部区域的检测中所使用的第2图像数据的相似度在规定值以内的多个第2图像数据中相对于用于上述脸部区域的检测的第2图像数据场景变化最少的第2图像数据，根据与从与该选择出的第2图像数据相同的图像数据所生成的第1图像数据中与由上述脸部区域检测单元所检测出的脸部区域对应的部分的数据，进行自动调焦、自动曝光以及白平衡控制的至少一个控制。
12、一种摄像装置，其特征在于具备：
将由成像光学系统的成像所形成的被摄物像进行光电变换，输出图像信号的摄像单元；
将从上述摄像单元输出的图像信号数字化，输出数字图像数据的A/D变换单元；
使用从上述A/D变换单元输出的数字图像数据，抽出用于进行自动调焦、自动曝光，以及白平衡的信息中的至少一个信息的抽出单元；
把由上述抽出单元所抽出的信息作为第1数据进行顺序存储的第1存储单元；
以成为上述第1图像数据的基础的数字图像数据为基础，作为与第1图像数据不同的第2图像数据进行顺序存储的第2存储单元；
从上述第2图像数据中检测脸部区域的脸部区域检测单元；
当在上述脸部区域检测单元进行脸部检测期间所得到的第2图像数据中，没有与检测到上述脸部区域的第2图像数据的相似度在规定值以内的另一第2图像数据的情况下，进行不采用脸部检测结果的自动调焦、自动曝光以及白平衡控制的至少一个控制的控制单元。
13、一种摄像装置的控制方法，其特征在于具备：
将由成像光学系统的成像所形成的被摄物像进行光电变换，输出图像信号的摄像步骤；
将从上述摄像单元步骤输出的图像信号数字化，输出数字图像数据的A/D变换步骤；
以从上述A/D变换步骤输出的数字图像数据为基础作为第1图像数据进行存储的第1存储步骤；
以成为上述第1图像数据的基础的数字图像数据为基础作为与第1图像数据不同的第2图像数据进行存储的第2存储步骤；
从上述第2图像数据中检测脸部区域的脸部区域检测步骤；
上述脸部检测步骤从上述第2图像数据中检测出脸部区域期间后，根据由上述A/D变换步骤输出的图像数据进行图像显示的显示步骤；
上述脸部检测步骤完成从上述第2图像数据进行的脸部区域检测后，使用在上述第1图像数据中的与由上述脸部区域检测步骤检测出的脸部区域对应的部分的数据，抽出用于进行自动调焦、自动曝光以及白平衡的信息中的至少一个信息的抽出步骤；
根据由上述抽出步骤抽出的信息，进行自动调焦控制、自动曝光控制以及白平衡控制的至少一个控制的控制步骤。
14、一种摄像装置的控制方法，其特征在于具备：
将由成像光学系统成像的被摄物像进行光电变换，输出图像信号的摄像步骤；
将从上述摄像步骤输出的图像信号数字化，输出数字图像数据的A/D变换步骤；
使用从上述A/D变换步骤输出的数字图像数据，抽出用于进行自动调焦、自动曝光，以及白平衡的信息中的至少一个信息的抽出步骤；
把由上述抽出步骤抽出的信息作为第1数据进行存储的第1存储步骤；
在成为上述第1图像数据的基础的数字图像数据中作为与第1图像数据不同的第2图像数据进行存储的第2存储步骤；
从上述第2图像数据中检测脸部区域的脸部检测步骤；
在上述脸部检测步骤从上述第2图像数据中检测脸部区域期间，根据用上述A/D变换步骤输出的图像数据进行图像显示的显示步骤；
上述脸部检测步骤完成从上述第2图像数据进行的脸部区域的检测后，根据在上述第1图像数据中的与由上述脸部区域检测步骤检测出的脸部区域对应的部分的数据，进行自动调焦、自动曝光以及白平衡控制的至少一个控制的控制步骤。
15、一种摄像装置的控制方法，其特征在于具备：
将由成像光学系统的成像所形成的被摄物像进行光电变换，输出图像信号的摄像步骤；
将从上述摄像步骤输出的图像信号数字化，输出数字图像数据的A/D变换步骤；
以从上述A/D变换步骤输出的数字图像数据为基础作为第1图像数据进行顺序存储的第1存储步骤；
以成为上述第1图像数据的基础的数字图像数据为基础，作为与第1图像数据不同的第2图像数据进行顺序存储的第2存储步骤；
从上述第2图像数据检测脸部区域的脸部区域检测步骤；
使用根据与在上述脸部检测步骤进行脸部区域的检测期间所得到的第2图像数据中的在上述脸部区域检测中所使用的图像数据的相似度在规定值以内的另一第2图像数据相同的、图像数据所生成的上述第1图像数据，进行抽出用于进行自动调焦、自动曝光以及白平衡控制的信息中的至少一个信息的控制步骤；
根据由上述抽出步骤抽出的信息，进行自动调焦、自动曝光以及白平衡控制的至少一个控制的控制步骤。
16、权利要获得15所述的摄像装置的控制方法，其特征在于：上述抽出步骤选择与在上述脸部区域的检测中所使用的第2图像数据的相似度在规定值以内的多个第2图像数据中最新的第2图像数据，使用根据与该被选择的第2图像数据相同的图像数据所生成的第1图像数据，抽出用于进行自动调焦、自动曝光，以及白平衡的信息中的至少一个的信息。
17、权利要获得15所述的摄像装置的控制方法，其特征在于：上述抽出步骤，在与在上述脸部区域的检测中所使用的第2图像数据的相似度在规定值以内的多个第2图像数据中，选择相对在上述脸部区域的检测中所使用的第2图像数据场景变化最少的第2图像数据，使用根据与该被选择的第2图像数据相同的图像数据所生成的第1图像数据，抽出用于进行自动调焦、自动曝光以及白平衡控制的信息中的至少一个信息。
18、一种摄像装置的控制方法，其特征在于具备：
将由成像光学系统的成像所形成的被摄物像进行光电变换，输出图像信号的摄像步骤；
将从上述摄像步骤输出的图像信号数字化，输出数字图像数据的A/D变换步骤；
以从上述A/D变换步骤输出的数字图像数据为基础作为第1图像数据进行顺序存储的第1存储步骤；
以成为上述第1图像数据的基础的数字图像数据为基础，作为与第1图像数据不同的第2图像数据进行顺序存储的第2存储步骤；
从上述第2图像数据检测脸部区域的脸部区域检测步骤；
当在上述脸部检测步骤进行脸部区域的检测期间所得到的第2图像数据中，没有与检测到上述脸部区域的第2图像数据的相似度在规定值以内的另一第2图像数据的情况下，进行不采用脸部检测结果的自动调焦、自动曝光以及白平衡控制的至少一个控制的控制步骤。
19、一种摄像装置的控制方法，其特征在于具备：
将由成像光学系统的成像所形成的被摄物像进行光电变换，输出图像信号的摄像步骤；
将从上述摄像步骤输出的图像信号数字化，输出数字图像数据的A/D变换步骤；
使用从上述A/D变换步骤输出的数字图像数据，抽出用于进行自动调焦、自动曝光，以及白平衡的信息中的至少一个信息的抽出步骤；
把由上述抽出步骤抽出的信息作为第1图像数据进行顺序存储的第1存储步骤；
以成为上述第1图像数据的基础的数字图像数据为基础，作为与第1图像数据不同的第2图像数据进行顺序存储的第2存储步骤；
从上述第2图像数据之一中检测脸部区域的脸部区域检测步骤；
基于在上述脸部检测步骤进行脸部区域的检测期间所得到的第2图像数据中与在上述脸部区域的检测中所使用的图像数据的相似度在规定值以内的任意一个第2图像数据相同的、图像数据所生成的上述第1图像数据中的、与由上述脸部检测步骤检测出的脸部区域对应的部分的数据，进行自动调焦、自动曝光以及白平衡控制的至少一个控制的控制步骤。
20、权利要获得19所述的摄像装置的控制方法，其特征在于：上述控制步骤选择与在上述脸部区域的检测中所使用的第2图像数据的相似度在规定值以内的多个第2图像数据中的最新的第2图像数据，根据从与该被选择的第2图像数据相同的图像数据所生成的第1图像数据中的与用上述脸部区域检测步骤检测出的脸部区域对应的部分的数据，进行自动调焦、自动曝光以及白平衡控制的至少一个控制。
21、权利要获得19所述的摄像装置的控制方法，其特征在于：上述控制步骤选择相对于在上述脸部区域的检测中所使用的第2图像数据的相似度在规定值以内的多个第2图像数据中的在上述脸部区域的检测中所使用的第2图像数据场景变化最少的第2图像数据，根据从与该被选择的第2图像数据相同的图像数据所生成的第1图像数据中的、与由上述脸部检测步骤检测出的脸部区域对应的部分数据，进行自动调焦、自动曝光以及白平衡控制的至少一个控制。
22、一种摄像装置的控制方法，其特征在于具备：
将由成像光学系统的成像所形成的被摄物像进行光电变换，输出图像信号的摄像步骤；
将从上述摄像步骤输出的图像信号数字化，输出数字图像数据的A/D变换步骤；
使用从上述A/D变换步骤输出的数字图像数据，抽出用于进行自动调焦、自动曝光，以及白平衡的信息中的至少一个信息的抽出步骤；
把由上述抽出步骤抽出的信息作为第1图像数据进行顺序存储的第1存储步骤；
以成为上述第1图像数据的基础的数字图像数据为基础，作为与第1图像数据不同的第2图像数据进行顺序存储的第2存储步骤；
从上述第2图像数据中检测脸部区域的脸部区域检测步骤；
当在上述脸部检测步骤进行脸部区域的检测期间所得到的第2图像数据中，没有与检测出上述脸部区域的第2图像数据的相似度在规定值以内的另一第2图像数据的情况下，进行不采用脸部检测结果的自动调焦、自动曝光以及白平衡控制的至少一个控制的控制步骤。
23、一种程序，使计算机执行权利要获得13所述的控制方法。
24、一种程序，使计算机执行权利要获得15所述的控制方法。
25、一种程序，使计算机执行权利要获得18所述的控制方法。
26、一种存储介质，存储有使计算机可以读取的权利要获得23所述的控制程序。
27、一种存储介质，存储有使计算机可以读取的权利要获得24所述的控制程序。
28、一种存储介质，存储有使计算机可以读取的权利要获得25所述的控制程序。
CNB2005100628613A 2004-04-01 2005-04-01 摄像装置及其控制方法 Expired - Fee Related CN100413321C (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2004109071 2004-04-01
JP2004109071 2004-04-01
JP2005093874A JP4154400B2 (ja) 2004-04-01 2005-03-29 撮像装置及びその制御方法及びプログラム
JP2005093874 2005-03-29

Publications (2)

Publication Number Publication Date
CN1678033A true CN1678033A (zh) 2005-10-05
CN100413321C CN100413321C (zh) 2008-08-20

Family

ID=35050315

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB2005100628613A Expired - Fee Related CN100413321C (zh) 2004-04-01 2005-04-01 摄像装置及其控制方法

Country Status (3)

Country Link
US (1) US7573505B2 (zh)
JP (1) JP4154400B2 (zh)
CN (1) CN100413321C (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101742124B (zh) * 2008-11-26 2012-10-10 奥林巴斯映像株式会社 摄像装置及摄像装置的光量调节方法
CN102231801B (zh) * 2005-11-25 2013-07-10 株式会社尼康 电子摄像机及图像处理装置
CN101350883B (zh) * 2007-07-17 2013-09-04 富士胶片株式会社 自动白平衡校正值计算装置、方法以及摄像装置
CN101378458B (zh) * 2007-08-30 2016-06-29 三星电子株式会社 使用脸部识别功能的数字拍摄设备和方法
CN107508970A (zh) * 2017-07-31 2017-12-22 努比亚技术有限公司 一种拍照方法及移动终端

Families Citing this family (67)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7844076B2 (en) * 2003-06-26 2010-11-30 Fotonation Vision Limited Digital image processing using face detection and skin tone information
EP1643758B1 (en) * 2004-09-30 2013-06-19 Canon Kabushiki Kaisha Image-capturing device, image-processing device, method for controlling image-capturing device, and associated storage medium
JP2007065290A (ja) * 2005-08-31 2007-03-15 Nikon Corp オートフォーカス装置
JP4914045B2 (ja) * 2005-09-07 2012-04-11 キヤノン株式会社 撮像装置及び撮像装置の制御方法
JP4639271B2 (ja) * 2005-12-27 2011-02-23 三星電子株式会社 カメラ
JP4665780B2 (ja) * 2006-01-30 2011-04-06 ソニー株式会社 顔重要度判定装置、方法、および撮像装置
EP1874043B1 (en) 2006-02-20 2013-12-04 Panasonic Corporation Image pick up apparatus
US7877004B2 (en) * 2006-03-03 2011-01-25 Olympus Imaging Corp. Imaging apparatus and imaging method
JP2007251532A (ja) 2006-03-15 2007-09-27 Fujifilm Corp 撮像装置及び顔領域抽出方法
JP2007324856A (ja) * 2006-05-31 2007-12-13 Sony Corp 撮像装置、撮像制御方法
US20080019669A1 (en) * 2006-07-18 2008-01-24 Sahra Reza Girshick Automatically editing video data
JP4925271B2 (ja) * 2006-08-21 2012-04-25 株式会社メガチップス 一眼レフデジタルカメラにおける連続撮像方法
JP4218720B2 (ja) * 2006-09-22 2009-02-04 ソニー株式会社 撮像装置、および撮像装置制御方法、並びにコンピュータ・プログラム
JP4808578B2 (ja) 2006-09-22 2011-11-02 富士フイルム株式会社 デジタルカメラおよびその制御方法
JP4879840B2 (ja) * 2006-09-22 2012-02-22 富士フイルム株式会社 デジタルカメラおよびその制御方法
JP4254841B2 (ja) * 2006-10-20 2009-04-15 ソニー株式会社 撮像装置、撮像方法、画像処理装置、画像処理方法および画像処理プログラム
JP2008108024A (ja) * 2006-10-25 2008-05-08 Matsushita Electric Ind Co Ltd 画像処理装置および撮像装置
JP4953770B2 (ja) * 2006-11-02 2012-06-13 キヤノン株式会社 撮像装置
JP4789776B2 (ja) * 2006-11-02 2011-10-12 キヤノン株式会社 撮像装置及び撮像方法
US10021291B2 (en) 2006-11-16 2018-07-10 Samsung Electronics Co., Ltd Portable device enabling a user to manually adjust locations of focusing and photometry and method for taking images
KR100805293B1 (ko) * 2006-11-16 2008-02-20 삼성전자주식회사 휴대기기 및 그 촬영방법
JP4725802B2 (ja) 2006-12-27 2011-07-13 富士フイルム株式会社 撮影装置、合焦方法および合焦プログラム
JP4254873B2 (ja) 2007-02-16 2009-04-15 ソニー株式会社 画像処理装置及び画像処理方法、撮像装置、並びにコンピュータ・プログラム
JP4976160B2 (ja) 2007-02-22 2012-07-18 パナソニック株式会社 撮像装置
JP4974704B2 (ja) * 2007-02-22 2012-07-11 パナソニック株式会社 撮像装置
RU2338252C1 (ru) * 2007-03-06 2008-11-10 Корпорация "САМСУНГ ЭЛЕКТРОНИКС Ко., Лтд." Способ предотвращения печати размытых фотографий
JP2008245055A (ja) * 2007-03-28 2008-10-09 Fujifilm Corp 画像表示装置、撮影装置および画像表示方法
JP4819737B2 (ja) * 2007-04-10 2011-11-24 キヤノン株式会社 撮像装置及び制御方法
US20080278589A1 (en) * 2007-05-11 2008-11-13 Karl Ola Thorn Methods for identifying a target subject to automatically focus a digital camera and related systems, and computer program products
IL183385A0 (en) * 2007-05-24 2007-09-20 Yosef Cohen Security systems and methods
IL183386A0 (en) * 2007-05-24 2007-09-20 Wavebreak Technologies Ltd Systems and methods for counting an audience
WO2009008164A1 (ja) 2007-07-09 2009-01-15 Panasonic Corporation デジタル一眼レフカメラ
JP5116397B2 (ja) * 2007-08-06 2013-01-09 キヤノン株式会社 撮像装置、およびその制御方法
US20100272365A1 (en) * 2007-11-29 2010-10-28 Koji Yamamoto Picture processing method and picture processing apparatus
JP5094536B2 (ja) * 2008-05-08 2012-12-12 キヤノン株式会社 撮像装置及びその被写体の追尾方法
JP4760947B2 (ja) * 2008-08-05 2011-08-31 カシオ計算機株式会社 画像処理装置、プログラム
JP5178441B2 (ja) 2008-10-14 2013-04-10 三洋電機株式会社 電子カメラ
JP5127686B2 (ja) 2008-12-11 2013-01-23 キヤノン株式会社 画像処理装置および画像処理方法、ならびに、撮像装置
KR20100069501A (ko) * 2008-12-16 2010-06-24 삼성전자주식회사 영상 처리 방법 및 장치, 및 이를 이용한 디지털 촬영 장치
JP5219795B2 (ja) 2008-12-26 2013-06-26 キヤノン株式会社 被写体追跡装置、その制御方法、撮像装置、表示装置及びプログラム
JP2010226558A (ja) * 2009-03-25 2010-10-07 Sony Corp 画像処理装置、画像処理方法、及び、プログラム
US8886206B2 (en) 2009-05-01 2014-11-11 Digimarc Corporation Methods and systems for content processing
US8520131B2 (en) * 2009-06-18 2013-08-27 Nikon Corporation Photometric device, imaging device, and camera
JP2011090569A (ja) * 2009-10-23 2011-05-06 Sony Corp 画像処理装置および画像処理方法
US8509482B2 (en) 2009-12-21 2013-08-13 Canon Kabushiki Kaisha Subject tracking apparatus, subject region extraction apparatus, and control methods therefor
JP2011182252A (ja) 2010-03-02 2011-09-15 Ricoh Co Ltd 撮像装置および画像撮影方法
JP5967916B2 (ja) 2011-08-09 2016-08-10 キヤノン株式会社 焦点検出センサ及び焦点検出センサを用いた光学機器
JP6024107B2 (ja) * 2012-01-06 2016-11-09 株式会社リコー 画像処理装置、撮像装置、画像処理方法およびプログラム
JP5959923B2 (ja) 2012-04-26 2016-08-02 キヤノン株式会社 検出装置、その制御方法、および制御プログラム、並びに撮像装置および表示装置
US9286509B1 (en) * 2012-10-19 2016-03-15 Google Inc. Image optimization during facial recognition
JP6087615B2 (ja) * 2012-12-19 2017-03-01 キヤノン株式会社 画像処理装置およびその制御方法、撮像装置、および表示装置
JP6099973B2 (ja) * 2012-12-27 2017-03-22 キヤノン株式会社 被写体領域追跡装置、その制御方法及びプログラム
JP6049448B2 (ja) 2012-12-27 2016-12-21 キヤノン株式会社 被写体領域追跡装置、その制御方法及びプログラム
JP6521626B2 (ja) 2014-12-25 2019-05-29 キヤノン株式会社 被写体追跡装置、方法およびプログラム
JP6509027B2 (ja) 2015-05-12 2019-05-08 キヤノン株式会社 被写体追跡装置、光学機器、撮像装置、被写体追跡装置の制御方法、プログラム
JP6555940B2 (ja) 2015-06-12 2019-08-07 キヤノン株式会社 被写体追跡装置、撮像装置、及び被写体追跡装置の制御方法
US10565712B2 (en) 2016-06-21 2020-02-18 Canon Kabushiki Kaisha Image processing apparatus and method for controlling the same
JP6800628B2 (ja) 2016-06-22 2020-12-16 キヤノン株式会社 追跡装置、追跡方法、及びプログラム
WO2019080934A1 (zh) * 2017-10-27 2019-05-02 Oppo广东移动通信有限公司 图像处理方法、装置和电子装置
US11064173B2 (en) 2017-12-14 2021-07-13 International Business Machines Corporation Photographic directional light reference for articulating devices
US10896350B2 (en) 2018-04-10 2021-01-19 Canon Kabushiki Kaisha Image processing apparatus, image processing method, and image capture apparatus
JP6812387B2 (ja) 2018-07-02 2021-01-13 キヤノン株式会社 画像処理装置及び画像処理方法、プログラム、記憶媒体
US11516378B2 (en) * 2020-04-27 2022-11-29 Qualcomm Incorporated Methods and apparatus employing a phase detection autofocus (PDAF) optical system
JP7527129B2 (ja) * 2020-04-28 2024-08-02 キヤノン株式会社 焦点調節装置、撮像装置、焦点調節方法、及びプログラム
US11496674B2 (en) * 2020-09-18 2022-11-08 Microsoft Technology Licensing, Llc Camera placement guidance
JP7595480B2 (ja) 2021-02-17 2024-12-06 キヤノン株式会社 電子機器、電子機器の制御方法およびプログラム
JP2022150652A (ja) 2021-03-26 2022-10-07 キヤノン株式会社 画像処理装置及び画像処理方法

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3343921B2 (ja) 1991-08-06 2002-11-11 ミノルタ株式会社 人物適応露出制御装置
JP3279913B2 (ja) 1996-03-18 2002-04-30 株式会社東芝 人物認証装置、特徴点抽出装置及び特徴点抽出方法
JP4018218B2 (ja) * 1997-12-25 2007-12-05 キヤノン株式会社 光学装置及び測距点選択方法
JP4401497B2 (ja) 1999-10-20 2010-01-20 キヤノン株式会社 撮像装置及びその制御方法
US6940545B1 (en) * 2000-02-28 2005-09-06 Eastman Kodak Company Face detecting camera and method
JP2003107335A (ja) 2001-09-28 2003-04-09 Ricoh Co Ltd 撮像装置、自動合焦方法、およびその方法をコンピュータが実行するためのプログラム
US7298412B2 (en) * 2001-09-18 2007-11-20 Ricoh Company, Limited Image pickup device, automatic focusing method, automatic exposure method, electronic flash control method and computer program
JP4794786B2 (ja) 2001-09-28 2011-10-19 株式会社リコー 撮像装置、自動露出方法、およびその方法をコンピュータが実行するためのプログラム
US6975759B2 (en) * 2002-06-25 2005-12-13 Koninklijke Philips Electronics N.V. Method and system for white balancing images using facial color as a reference signal
JP2006025238A (ja) * 2004-07-08 2006-01-26 Fuji Photo Film Co Ltd 撮像装置
US8194173B2 (en) * 2004-07-16 2012-06-05 Nikon Corporation Auto-focusing electronic camera that focuses on a characterized portion of an object

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102231801B (zh) * 2005-11-25 2013-07-10 株式会社尼康 电子摄像机及图像处理装置
CN101350883B (zh) * 2007-07-17 2013-09-04 富士胶片株式会社 自动白平衡校正值计算装置、方法以及摄像装置
CN101378458B (zh) * 2007-08-30 2016-06-29 三星电子株式会社 使用脸部识别功能的数字拍摄设备和方法
CN101742124B (zh) * 2008-11-26 2012-10-10 奥林巴斯映像株式会社 摄像装置及摄像装置的光量调节方法
CN107508970A (zh) * 2017-07-31 2017-12-22 努比亚技术有限公司 一种拍照方法及移动终端

Also Published As

Publication number Publication date
JP2005318554A (ja) 2005-11-10
US7573505B2 (en) 2009-08-11
JP4154400B2 (ja) 2008-09-24
CN100413321C (zh) 2008-08-20
US20050231628A1 (en) 2005-10-20

Similar Documents

Publication Publication Date Title
CN1678033A (zh) 摄像装置及其控制方法及程序及存储介质
CN1977527A (zh) 图像获取装置和图像拍摄方法
CN1941918A (zh) 摄像装置以及摄像方法
CN1275456C (zh) 电子摄像机
CN101335838B (zh) 图像拾取设备以及图像拾取方法
CN1230783C (zh) 图像处理装置及其控制方法、及摄影装置及其控制方法
CN1428645A (zh) 调焦装置、摄像装置、对焦方法、程序以及存储介质
CN1622598A (zh) 图像由多个图像处理设备处理的图像捕获装置和方法
CN1929561A (zh) 图像捕获设备和图像捕获方法
CN1812492A (zh) 数字相机、图像回放装置、面部图像显示装置及其控制方法
CN1893561A (zh) 图像拾取装置，控制方法，和程序
CN1723693A (zh) 图像传感设备及其自动聚焦控制方法
CN1738364A (zh) 图像摄取设备及其控制方法
CN1968391A (zh) 摄影装置、显示控制方法、程序
CN1933558A (zh) 图像处理装置和方法、及其程序
TW201138442A (en) Image capture apparatus, image capturing method and computer readable medium
KR20110089665A (ko) 디지털 영상 처리 장치, 영상 처리 방법 및 이를 기록한 기록 매체
CN1977526A (zh) 图像捕捉方法和图像捕捉设备
CN1928692A (zh) 具有多个摄像元件的照相机装置
CN1580934A (zh) 画幅调节装置、拍摄装置和洗印装置
CN100337465C (zh) 图像拾取装置和成像方法
CN1573503A (zh) 图像摄取装置、图像摄取系统和图像摄取方法
CN1928693A (zh) 摄像装置和自动聚焦控制方法
KR20120034420A (ko) 디지털 촬영 장치 및 이의 제어 방법
CN1731269A (zh) 摄像装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20080820

Termination date: 20200401

CF01 Termination of patent right due to non-payment of annual fee