JP2005292994A - 人物認識装置と通行制御装置 - Google Patents

Abstract

【課題】 認識対象者が直接装置に手を触れずに簡便にＩＤ用サインあるいはパスワード用サインを入力することができる。
【解決手段】 予め登録者の動作で示される独自のＩＤ用サイン及びパスワード用サインを顔画像とともに登録しておき、認証処理において、認識対象者が上記登録手段に登録したＩＤ用サインあるいはパスワード用サインをカメラに向けて示し、上記カメラにて撮影した画像から認識対象者が示すサインを検出し、この検出したサインと予め登録されている各登録者のＩＤ用サインあるいはパスワード用サインとを照合することにより登録者を特定したり認識対象者が登録者であることを認証したりするようにしたものである。
【選択図】 図１

Description

この発明は、例えば、顔画像などの生体情報の照合により人物を認識する人物認証装置、および、生体照合を用いて重要施設（部屋、フロア、建物など）の出入りや機器のアクセス管理などを行う通行制御装置に関する。

従来、人物認識装置としては、顔画像、指紋、手形、声紋、筆跡、網膜、虹彩などの生体情報（バイオメトリクス）を用いて人物を認識するものが提案されている。これらの生体情報は、接触型と非接触型に分類される。接触型の生体情報とは、本人が装置に触れることにより得られる生体情報である。また、非接触型の生体情報とは、本人が装置に触れることなく得られる生体情報である。たとえば、指紋、手形、筆跡などは、接触型の生体情報に属する。これらのような接触型の生体情報を用いた人物認識装置では、認証対象者が生体情報を入力するために装置に接触しなければならないという欠点がある。

これに対して、顔画像、声紋、網膜、虹彩などは、非接触型の生体情報に属する。これらのような非接触型の生体情報を用いた人物認識装置では、認識対象者が装置に接触することなく生体情報を入力することができるという利点がある。特に、顔画像は、他の生体情報に比べて認識対象者が意識することなく生体情報としての顔画像を入力できる面で優れている。

しかしながら、上記のような非接触型の生体情報を用いた人物認識装置あっても、照合の対象者を１人に絞り込むための識別情報（ＩＤ情報）や生体情報による照合が失敗した場合に用いられるパスワードは、テンキーなどの操作部に認識対象者が直接接触して入力するようになっているのが現状である。このような場合、生体情報を非接触で入力するという効果が有効に利用できないという問題点がある。

このような問題点を解決する技術として、特開２００２−２５１６１４号公報（特許文献１）では、目を所定時間閉じて開くという特定の動作を規定しておき、この特定の動作の検出を条件として、顔画像の照合を行う方法が提案されている。しかしながら、上記特許文献１に記載の方法では、規定の動作を検出することを条件としているため、ユーザ独自のサインの登録および照合は不可能であり、また、照合時に必ず認識対象者が規定の動作を行わなくてはならないため利便性が悪いという問題点がある。
特開２００２−２５１６１４号公報

この発明は、上記のような問題点を解決するものであり、利便性を損なうことなく、非接触での生体情報以外の情報の入力や操作などを容易に行うことができる人物認識装置及び通行制御装置を提供することを目的とする。

この発明の人物認識装置は、登録者の顔画像と登録者独自の動作で示されるサインとが登録されている登録手段と、認識対象者を撮影する撮影手段と、この撮影手段により撮影した画像を入力する画像入力手段と、この画像入力手段により入力した画像から当該認識対象者が示すサインを検出するサイン検出手段と、このサイン検出手段により検出したサインと前記登録手段に登録されているサインとを照合するサイン照合手段と、前記画像入力手段により入力した画像から顔画像を検出する顔画像検出手段と、この顔画像検出手段により検出した顔画像と前記登録手段に登録されている前記サイン照合手段によりサインが一致した登録者の顔画像とを照合する顔照合手段と、この顔照合手段により当該認識対象者の顔画像と前記サイン照合手段によりサインが一致した登録者の顔画像とが一致するか否かにより、当該認識対象者が前記サイン照合手段によりサインが一致した登録者であるか否かを認識する認識手段とを有する。

この発明の人物認識装置は、登録者の顔画像と登録者独自の動作で示されるサインとが登録されている登録手段と、認識対象者を撮影する撮影手段と、この撮影手段により撮影した画像を入力する画像入力手段と、この画像入力手段により入力した画像から顔画像を検出する顔画像検出手段と、この顔画像検出手段により検出した顔画像と前記登録手段に登録されている顔画像とを照合する顔照合手段と、この顔照合手段により当該認識対象者の顔画像と前記登録手段に登録されている顔画像とが一致しなかった場合、前記画像入力手段により入力した画像から当該認識対象者が示すサインを検出するサイン検出手段と、このサイン検出手段により検出したサインと前記登録手段に登録されている各登録者のサインとを照合するサイン照合手段と、前記顔照合手段により当該認識対象者の顔画像と前記登録手段に登録されている登録者の顔画像とが一致した場合、あるいは、前記サイン照合手段により前記サイン検出手段が検出したサインと前記登録手段に登録されている登録者のサインと一致した場合、前記認識対象者が顔画像あるいはサインが一致した登録者であることを認識する認識手段とを有する。

この発明の人物認識装置は、種々の動作モードを有するものにおいて、動作モードを特定の動作モードに変更する人物の動作で示されるモード変更用のサインが登録されている登録手段と、人物を撮影する撮影手段と、この撮影手段により撮影した人物の画像を入力する画像入力手段と、この画像入力手段により入力した人物の画像から当該人物が示すサインを検出するサイン検出手段と、このサイン検出手段により検出したサインと前記登録手段に登録されているモード変更用のサインとを照合するサイン照合手段と、このサイン照合手段により前記サイン検出手段が検出したサインと前記登録手段に登録されているモード変更用のサインとが一致した場合、動作モードを前記モード変更用のサインが対応する前記特定の動作モードに変更する処理手段とを有する。

この発明の人物認識装置は、種々の動作モードを有するものにおいて、人物の動作で示されるサインが特定の動作モードにおいて有効となる種々の操作に対応した操作用のサインとして登録されている登録手段と、前記特定の動作モードにおいて人物を撮影する撮影手段と、この撮影手段により撮影した人物の画像を入力する画像入力手段と、前記画像入力手段により入力した人物の画像から当該人物が示すサインを検出するサイン検出手段と、このサイン検出手段により検出したサインと前記登録手段に登録されている操作用のサインとを照合するサイン照合手段と、このサイン照合手段により前記サイン検出手段が検出したサインと前記登録手段に登録されている操作用のサインとが一致した場合、当該操作用のサインに対応する操作に応じた動作を実行する処理手段とを有する。

この発明の通行制御装置は、登録者の顔画像と登録者独自の動作で示されるサインとが登録されている登録手段と、認識対象者を撮影する撮影手段と、この撮影手段により撮影した画像を入力する画像入力手段と、この画像入力手段により入力した画像から当該認識対象者が示すサインを検出するサイン検出手段と、このサイン検出手段により検出したサインと前記登録手段に登録されているサインとを照合するサイン照合手段と、前記画像入力手段により入力した画像から顔画像を検出する顔画像検出手段と、この顔画像検出手段により検出した顔画像と前記登録手段に登録されている前記サイン照合手段によりサインが一致した登録者の顔画像とを照合する顔照合手段と、この顔照合手段により当該認識対象者の顔画像と前記サイン照合手段によりサインが一致した登録者の顔画像とが一致するか否かにより、当該認識対象者が前記サイン照合手段によりサインが一致した登録者であるか否かを認識する認識手段と、この認識手段により当該認識対象者が前記登録手段に登録されている登録者であることが認識された場合、当該認識対象者の通行を許可する通行制御手段とを有する。

この発明の通行制御装置は、登録者の顔画像と登録者独自の動作で示されるサインとが登録されている登録手段と、認識対象者を撮影する撮影手段と、この撮影手段により撮影した画像を入力する画像入力手段と、この画像入力手段により入力した画像から顔画像を検出する顔画像検出手段と、この顔画像検出手段により検出した顔画像と前記登録手段に登録されている顔画像とを照合する顔照合手段と、この顔照合手段により当該認識対象者の顔画像と前記登録手段に登録されている顔画像とが一致しなかった場合、前記画像入力手段により入力した画像から当該認識対象者が示すサインを検出するサイン検出手段と、このサイン検出手段により検出したサインと前記登録手段に登録されている各登録者のサインとを照合するサイン照合手段と、前記顔照合手段により当該認識対象者の顔画像と前記登録手段に登録されている登録者の顔画像とが一致した場合、あるいは、前記サイン照合手段により前記サイン検出手段が検出したサインと前記登録手段に登録されている登録者のサインと一致した場合、前記認識対象者が顔画像あるいはサインが一致した登録者であることを認識する認識手段と、この認識手段により当該認識対象者が前記登録手段に登録されている登録者であることが認識された場合、当該認識対象者の通行を許可する通行制御手段とを有する。

この発明によれば、利便性を損なうことなく、非接触での生体情報以外の情報の入力や操作などを容易に行うことができる人物認識装置及び通行制御装置を提供できる。

この発明を実施するための最良の形態について図面を参照しつつ説明する。

図１は、本実施の形態に係る人物認識装置１及び通行制御装置２の構成を概略的に示すものである。この人物認識装置１は、ユーザインターフェース部１０と処理部２０とを有している。また、上記人物認識装置１の処理部２０にドア開閉機構２００を接続することにより通行制御装置２が実現される。

上記ユーザインターフェース部１０は、カメラ１１０、表示部１１１、及び補助照明１１２などにより構成される。上記カメラ１１０は、ＣＣＤセンサなどの撮像素子を用いたテレビジョンカメラにより構成され、動画や連続した静止画を撮影する。上記カメラ１１０は、認識対象者Ｐの顔画像（少なくとも顔を含んでいる画像）や認識対象者Ｐが示す動作などを撮影する撮影手段として機能する。

上記表示部１１１は、認識対象者Ｐに対する操作案内や上記カメラ１１０にて撮影している画像などを表示する表示装置である。例えば、上記カメラ１１０に対する認識対象者Ｐの距離や左右方向の位置が最適になるようなガイダンスを表示する場合、上記表示部１１１には、上記カメラ１１０にて撮影中の画像とともに最適な顔の位置を丸印等で案内表示する。

上記補助照明部１１２は、上記カメラ１１０が撮影する場所の明るさが十分でない場合に、上記カメラ１１０で撮影する認識対象者Ｐに対して補助照明としての光を照射する蛍光灯などの照明機器である。上記補助照明部１１２は、例えば、カメラ１１０の右上方あるいは左上方から認識対象者Ｐの少なくとも顔に向けて光を照射する補助照明と、カメラ１１０の下方から認識対象者Ｐの少なくとも顔に向けて光を照射する補助照明とにより構成される。なお、上記カメラ１１０にて撮影する領域における照度が十分なものであれば、上記補助照明部１１２は省略するようにしても良い。

次に、上記処理部２０について説明する。
上記処理部２０は、たとえば、コンピュータ等の構成によって実現可能である。すなわち、上記処理部２０は、ハードディスク装置や光ディスク等の記憶媒体に予め記録した種々の制御プログラムを図示しないＣＰＵなどからなる制御部が実行することによって、処理手段として機能し、後述するような種々の動作を実現している。以下、処理部２０の具体的な構成例について図１を参照して詳細に説明する。

上記処理部２０は、画像入力手段としての画像入力部１２１、顔画像検出手段としての顔検出部１２２、特徴量抽出手段としての特徴抽出部１２３、登録手段としての登録情報保持部１２４、認識手段、顔照合手段あるいはサイン照合手段としての認識部１２５、認証開始判定手段としての自動認証開始判定部１２６、通行制御手段としての通行制御部１２７、及びサイン検出手段としてのサイン検出部１２８などを有している。

上記画像入力部１２１は、画像データを送受信するためのインターフェースにより構成される。上記画像入力部１２１は、例えば、上記カメラ１１０から取得した撮影画像としてのアナログの画像データをＡ／Ｄ変換してデジタル化し、後段の各部（顔検出部１２２、自動認証開始判定部１２６あるいはサイン検出部１２８）へ供給するようになっている。

上記顔検出部１２２は、上記画像入力部１２１から供給された上記カメラ１１０にて撮影した画像から認識対象者Ｐの顔画像を検出する。上記顔検出部１２２では、における顔領域の検出方法は、たとえば、あらかじめ用意されたテンプレートと画像中を移動させながら相関値を求めることにより、最も高い相関値をもった場所を顔領域として検出し、その顔領域の画像を顔画像とする。その他、上記顔検出部１２２としては、固有空間法や部分空間法を利用した顔領域抽出法などの顔領域の検出方法を用いるようにしても良い。

上記特徴抽出部１２３は、上記顔検出部１２２にて検出した顔画像を用いて、濃淡情報あるいは部分空間情報などの顔の特徴量を抽出するものである。例えば、上記特徴抽出部１２３は、上記顔検出部１２２にて検出された顔画像から顔の特徴量としての目、鼻の位置を検出する。さらに、上記特徴抽出部１２３は、顔画像から検出された顔の特徴量としての目、鼻などの位置を基に、顔領域を一定の大きさ、形状に切り出し、その濃淡情報を特徴量として抽出する。たとえば、上記特徴量は、ｍピクセル×ｎピクセルの領域の濃淡値をそのまま情報として用いて、ｍ×ｎ次元の情報を特徴ベクトルとして抽出される。

上記登録情報保持部１２４は、ハードディスク装置などの記憶装置により構成され、予め登録者に関する認識データ等が登録される。例えば、上記登録情報保持部１２４には、後述する管理者モードでの処理において、登録者の氏名等の個人情報と、登録者を認識するための認識データとが登録される。上記認識データは、例えば、登録者の顔画像、上記特徴抽出部１２３で抽出される登録者の顔の特徴量、当該登録者を識別するための識別情報としてのＩＤ用サイン、及び、当該登録者のパスワード情報としてのパスワード用サインなどである。上記ＩＤ用サイン及び上記パスワード用サインについては、後で詳細に説明する。

上記認識部１２５は、上記カメラ１１０にて撮影した認識対象者Ｐを認識（認証）する処理を行うものである。上記認識部１２５は、認識対象者Ｐを顔画像により認識する処理として、上記登録情報保持部１２４に認識データとして登録されている登録者の特徴量と上記特徴抽出部１２３で得られた特徴量とを照合（比較）する顔画像による照合処理を行う。また、上記認識部１２５は、上記カメラ１１０にて撮影した認識対象者Ｐが示すサインと上記登録情報保持部１２４に認識データとして登録されているＩＤ用サインあるいはパスワード用サインとを照合するサインの照合処理を行う機能も有している。

また、顔画像による照合処理としては、上記認識部１２５は、上記カメラ１１０にて撮影した認識対象者Ｐが上記登録情報保持部１２４に登録されている登録者のうち誰であるか認識する１対Ｎ照合と呼ばれる処理モード（１対Ｎ照合モード）で認識処理を行う機能と、上記カメラ１１０にて撮影した認識対象者Ｐが上記登録情報保持部１２４に登録されている特定の登録者と一致（同定）するか否かを認識する１対１照合と呼ばれる処理モード（１対１照合モード）で認証処理を行う機能とを有している。

例えば、１対Ｎ照合モードでの認識処理では、上記認識部１２５は、上記カメラ１１０で撮影した認識対象者Ｐの顔画像と上記登録情報保持部１２４に登録されている各登録者の顔画像との照合度としての類似度を算出して最大類似度を判断し、その最大類似度が所定の閾値以上である場合に、認識対象者Ｐが当該最大類似度となる認識データに対応する登録者であると判断する。

また、１対１照合モードでの認識処理では、上記認識部１２５は、まず、ＩＤ用サインにより上記登録情報保持部１２４に登録されている各登録者のうち照合処理の対象となる登録者を特定し、その特定した登録者の顔画像と上記カメラ１１０で撮影した認識対象者Ｐの顔画像との照合度としての類似度を算出し、その類似度が所定の閾値以上である場合に認識対象者Ｐが特定されている登録者であると判断する。

また、上記自動認証開始判定部１２６は、上記カメラ１１０にて撮影した画像に基づいて人物の有無を検知し、その検知結果に基づいて認識（認証）処理の開始を判定するものである。例えば、上記自動認証開始判定部１２６は、上記画像入力部１２１を介して上記カメラ１１０にて撮影された画像が連続的に供給され、それらの連続する画像の差分情報に基づいて上記カメラ１１０の撮影範囲（撮影画像）に人物が存在するか否かを判定する。

また、上記通行制御部１２７は、上記認識部１２５による認識対象者Ｐに対する認識結果に基づいてドア開閉機構２００を制御することにより、上記認識対象者Ｐの通行を制御するものである。上記ドア開閉機構２００は、施設への入出用のドアに設けられ、そのドアの開閉あるいはドアの開錠施錠を制御する機構である。

例えば、上記認識部１２５にて認識対象者Ｐが上記登録情報保持部１２４に登録されている登録者である場合、上記通行制御部１２７は、上記認識部１２５からの認識対象者Ｐと登録者とが一致した旨の通知を受けて、上記ドア開閉機構２００によりドアを開放する。また、登録者のうち一部の登録者（ドアの通行権限を有する人物）のみが上記ドアの通行可能とする場合、上記通行制御部１２７は、上記認識部１２５により認識対象者Ｐがドアの通行権限を有する人物であると認識された際に、上記ドア開閉機構によるドアの開放を行うように制御する。

また、上記サイン検出部１２８は、上記カメラ１１０が撮影した連続画像（映像）から認識対象者Ｐが示すサイン（ＩＤ用サインあるいはパスワード用サイン）を検出するものである。上記サイン検出部１２８は、上記画像入力部１２１を介して上記カメラ１１０にて撮影された連続画像を取得し、それらの連続する画像の差分画像から当該認識対象者Ｐの動きなどを検出するものである。

次に、上記サイン検出部１２８で検出されるサインについて説明する。

上記ＩＤ用サイン及び上記パスワード用サインとして用いられるサインは、人物の動作などにより示されるものである。例えば、上記ＩＤ用サイン及び上記パスワード用サインとして用いられるサインは、まばたきによるパターン、指（形や動き）によるパターン、手（形や動き）によるパターン、顔の表情によるパターン、あるいは、それらの組み合わせなどで示されるものである。本人物認識装置１では、特定のパターンをＩＤ用サインやパスワード用サインとして登録者に与えるものではなく、登録者自身が決めたサインとしてのパターンを予め認証データとして登録することを特徴としている。

例えば、まばたきによるパターンは、左右の目をまばたきさせる順序やそれらのまばたきの間隔などを登録者自身が決めてサインを形成するようにすればよい。また、指によるパターンは、指が示す形や動きの変化パターンや変化させる間隔などを登録者自身が決めてサインを形成するようにすればよい。また、顔の表情によるパターンは、顔の表情の変化パターンやそれらの顔の表情を変化する間隔などを登録者自身が決めてサインを形成するようにすればよい。

このように、本人物認識装置１にて上記ＩＤ用サイン及び上記パスワード用サインとして用いられるサインは、身体的な動きのパターンにより特定されるものであり、登録者自身が決められるものである。従って、サインとして用いる身体的な動きのパターンは、各登録者自身が独自に設定でき、サインとして使用する身体的な動きのパターンの自由度を高めることができる。

また、本人物認識装置１では、管理者が行う動作モードの変更操作、登録モードにおける管理者による操作なども、予め上記登録情報保持部１２４に登録しておいたサインによって行なうことができるようになっているものとする。この場合、上記登録情報保持部１２４には、例えば、人物認識装置１を通常の動作モード（例えば、照合モード）から特定の動作モード（例えば、登録モード）への変更させるための操作入力の代わりとしてのモード変更用のサイン、あるいは、特定の動作モードにおける種々の操作（例えば、登録モードにおける管理者の各種操作）に対応して操作用のサインが予め登録される。なお、上記モード変更用のサインや操作用のサインについても、上記ＩＤ用サインやパスワード用サインと、同様に、人物の動作で示されるものである。

次に、上記のように構成される人物認識装置１における基本的な顔画像の登録処理及び認証処理について説明する。
図２及び図３は、ＩＤ用サイン及びパスワード用のサインを上記登録情報保持部１２４に登録する際の動作を説明するためのフローチャートである。図２は、通常の動作モードとしての照合モードから特定の動作モードとしての登録用の動作モード（登録モード）へ移行する際の動作例を説明するためのフローチャートである。また、図３は、登録モードでの操作用のサインによる動作例とサインの登録処理とを説明するためのフローチャートである。

まず、照合モードから登録モードへ移行する際の動作例について図２を参照しつつ説明する。

上記人物認識装置１は、通常、顔照合を行う動作モード（照合モード）で動作しているものとする。この照合モードでの動作時において、上記人物認識装置１では、上記自動認証開始判定部１２６が上記カメラ１１０にて撮影される画像に基づいて認証処理の開始を判定するため人物が検知されたか否かを判定している（ステップＳ１）。上記自動認証開始判定部１２６により人物が検知されたと判定した場合、上記画像入力部１２１は、上記カメラ１１０が撮影している画像を取り込み、その画像を上記サイン検出部１２８へ供給する（ステップＳ２）。

すると、上記サイン検出部１２８は、上記画像入力部１２１より供給される画像より撮影されている人物が示すサインを検出する。これによりサインが検出されると、上記認識部１２５は、上記サイン検出部１２８にて検出したサインが登録モードへ移行するための所定のサインであるか否かを判断する（ステップＳ３）。例えば、管理者用のサインを登録モードへ移行するためのサインとして設定している場合、上記サイン検出部１２８にて検出したサインが管理者用のサインであるか否かを判断する。

このような判断により上記サイン検出部１２８にて検出されたサインが登録モードへ移行する所定のサインでないと判断した場合（ステップＳ３、ＮＯ）、上記認識部１２５は、通常の顔照合による人物の認識処理を実行する（ステップＳ４）。この顔照合による人物の認識処理については、後で詳細に説明する。

また、上記判断により登録モードへ移行する所定のサインであると判断した場合（ステップＳ３、ＹＥＳ）、上記認識部１２５は、当該人物認識装置１の動作モードを照合モードから登録モードへ移行させる処理を行う（ステップＳ５）。これにより、当該人物認識装置１の動作モードは、登録モードへ移行し、ＩＤ用のサイン、パスワード用のサインあるいはその他の情報を上記登録情報保持部１２４に登録することが可能な状態となる。

上記のように、予め登録しておいた操作用のサインによって、通常モードから各種の情報を登録する登録モードへ移行させる操作を行なうようにしたため、直接装置に手を触れずに簡便に登録モードの移行させる操作が可能となる。さらに、この結果として、装置に触れることなく衛生的であり、手操作が不自由な障害者でも操作を行なうことも可能となる。

次に、登録モードにおいて操作用のサインによる動作例とＩＤ用サインあるいはパスワード用サインの登録処理の動作例とについて図３を参照しつつ説明する。
上記登録モードへ移行すると、上記表示部１１１には、登録モード用のメニュー画面が表示される（ステップＳ１１）。この状態において、当該人物認識装置１は、管理者が示す操作用のサインによってメニューの操作が可能な状態となっている。上記操作用のサインは、予め各種の操作に対応して上記登録情報保持部１２４に登録されているものであり、管理者の動作により示される。したがって、上記管理者は、所望の操作に対応する操作用のサインを上記カメラ１１０の前で示すことによりメニューの操作を行なう。

すなわち、登録モード用のメニュー画面が表示されている状態において、上記画像入力部１２１は、上記カメラ１１０が撮影している映像を取り込み、その映像を上記サイン検出部１２８へ供給する。これに対して、上記サイン検出部１２８は、上記画像入力部１２１より供給される映像より上記管理者が示すサインを検出する（ステップＳ１２）。これにより管理者が示す操作用のサインが検出されると、上記認識部１２５は、当該サインと上記登録情報保持部１２４に登録されている操作用のサインとを照合することにより、管理者が示したサイン（操作用のサイン）に対応する操作内容を判別する（ステップＳ１３、Ｓ１５、Ｓ２１、Ｓ２３）。

ここで、上記認識部１２５により管理者が示すサインが登録者に関する情報を入力する操作に対応する操作用のサインであると判別した場合（ステップＳ１３、ＹＥＳ）、上記表示部１１１には、登録者に関する情報（被登録者を特定するための情報や被登録者の個人情報など）を入力する旨の案内を表示する。

この状態において、管理者は、図示しない操作部などにより被登録者に関する情報としての被登録者を特定するための情報や氏名等の個人情報などを入力する。この管理者によって入力された被登録者を特定するための情報や被登録者の個人情報などの被登録者に関する情報は上記登録情報保持部１２４に登録される（ステップＳ１４）。このような登録者に関する情報の登録が完了すると、上記表示部１１１には再び登録モード用のメニュー画面が表示され（ステップＳ１１）、管理者による操作用のサインが入力可能な状態となる。

また、上記表示部１１１に登録モード用のメニュー画面が表示されている状態において、上記認識部１２５により上記サイン検出部１２８にて検出した管理者が示すサインが登録者のＩＤ用サインあるいはパスワード用サインとしてのサイン登録に移行する操作に対応する操作用のサインであると判別した場合（ステップＳ１５、ＹＥＳ）、上記表示部１１１には、被登録者が登録するＩＤ用サインあるいはパスワード用サインを上記カメラ１１０の前で示すように案内を行う。

この案内に応じて被登録者は、上記カメラ１１０の前でＩＤ用サインあるいはパスワード用サインとして登録したいサインを示す。これにより、上記画像入力部１２１は、サインを示している被登録者の画像を上記カメラ１１０にて撮影して取り込む（ステップＳ１６）。

上記カメラ１１０から取り込んだ画像は、上記サイン検出部１２８へ供給される。上記サイン検出部１２８は、上記画像入力部１２１から供給された画像からサインを検出し、上記認識部１２５にて当該サインが有効であるか否かを判断する（ステップＳ１７）。例えば、上記認識部１２５は、上記サイン検出部１２８にて検出されたサインが既に上記登録情報保持部１２４に登録されているサインと一致しないかを判断することにより当該サインが有効であるか否かを判断する。

この判断により上記サイン検出部１２８にて検出したサインが有効なものでないと判断された場合（ステップＳ１７、ＮＯ）、上記表示部１１１には異なるサインを示す旨の案内を表示し、上記ステップＳ１６へ戻って上記サイン検出部１２８によるサインの検出処理を再度実行する。

また、上記判断により上記サイン検出部１２８にて検出したサインが有効なものであると判断した場合（ステップＳ１７、ＹＥＳ）、上記サイン検出部１２８は、検出したサインを被登録者に確認させるため、上記表示部１１１に検出されたサインを示す映像を表示する（ステップＳ１８）。上記表示部１１１に表示されたサインが満足するものであれば、当該被登録者あるいは管理者が当該サインの登録を指示する（ステップＳ１９、ＹＥＳ）。また、上記表示部１１１に表示されたサインが満足するものでなければ、当該被登録者あるいは管理者が当該サインの登録を指示し（ステップＳ１９、ＮＯ）、上記ステップＳ１６からの処理を再度実行する。

上記サイン検出部１２８にて検出したサインが確認されると（ステップＳ１９、ＹＥＳ）、上記サイン検出部１２８は、検出したサインを被登録者に関する情報に対応して上記登録情報保持部１２４に登録する処理を行う（ステップＳ２０）。

このサイン登録処理では、検出したサインを当該被登録者のＩＤ用サインあるいはパスワード用サインとして上記登録情報保持部１２４に記録する。このような上記サイン検出部１２８にて検出したサインの登録すると、上記表示部１１１には再び登録モード用のメニュー画面が表示され（ステップＳ１１）、管理者による操作用のサインが入力可能な状態となる。

また、上記表示部１１１に登録モード用のメニュー画面が表示されている状態において、上記認識部１２５により上記サイン検出部１２８にて検出した管理者が示すサインが登録者の顔画像の登録に移行する操作用のサインであると判別した場合（ステップＳ２１、ＹＥＳ）、当該人物認識装置１は、当該被登録者の認証データとしての顔画像及び顔の特徴量を上記登録情報保持部１２４に登録する処理を実行する（ステップＳ２２）。

この顔画像及び顔の特徴量の登録処理では、上記カメラ１１０にて撮影した被登録者の顔画像から上記顔検出部１２２及び特徴抽出部１２３にて顔の特徴量を抽出し、当該顔画像と特徴量とを当該被登録者に対応して上記登録情報保持部１２４に記録する。このような顔画像の登録が終了すると、上記表示部１１１には再び登録モード用のメニュー画面が表示され（ステップＳ１１）、管理者による操作用のサインが入力可能な状態となる。

また、上記表示部１１１に登録モード用のメニュー画面が表示されている状態において、上記認識部１２５により上記サイン検出部１２８にて検出した管理者が示すサインが登録モード終了を示す操作用のサインであると判別した場合（ステップＳ２３、ＹＥＳ）、当該人物認識装置１は、登録モードから通常モードへ移行する処理を行い（ステップＳ２４）、通常の動作としての顔画像による照合処理が可能な状態とする。

上記のように、被登録者に関する情報、被登録者の認証データとしてのＩＤ用サイン、パスワード用サイン及び顔画像を登録する登録モードにおいて、予め登録しておいた操作用のサインによって各種の操作を行なうようにしたため、直接装置に手を触れずに簡便に被登録者に関する情報の登録、ＩＤ用サイン、パスワード用サイン、および顔画像などの登録を行なうことができる。さらに、この結果として、装置に触れることなく衛生的であり、手操作が不自由な障害者でも操作を行なうことも可能となる。

次に、本人物認識装置における顔画像とサイン（ＩＤ用サイン及びパスワード用サイン）とを用いた人物認識処理について説明する。

まず、１対１照合モードにおける上記人物認識装置１の動作例について説明する。図４は、１対１照合モードにおける人物認識装置１の動作例を説明するためのフローチャートである。

図４に示すように、１対１照合モードの場合、まず、認識対象者Ｐは、上記カメラ１１０に向けてＩＤ用サインを示す。これに対して、上記カメラ１１０にて撮影している画像は、上記画像入力部１２１を介して上記自動認証開始判定部１２６へ供給されている。従って、上記カメラ１１０にて人物が撮影されると（ステップＳ３１、ＹＥＳ）、上記自動認証開始判定部１２６は認証開始を判定する。

上記自動認証開始判定部１２６により認証開始が判定されると、上記画像入力部１２１は、上記カメラ１１０にて撮影した画像を上記サイン検出部１２８へ供給する（ステップＳ３２）。これにより、上記認識対象者Ｐがカメラ１１０に向けて示しているＩＤ用サインの映像は、上記サイン検出部１２８へ供給される。

上記サイン検出部１２８は、上記画像入力部１２１を介して上記カメラ１１０から取り込んだ映像から上記認識対象者Ｐが示しているＩＤ用サインを検出する処理を行う（ステップＳ３３）。このサイン検出処理において上記サイン検出部１２８が上記カメラ１１０から取り込んだ映像からＩＤ用サインが検出できなかった場合（ステップＳ３３、ＮＯ）、上記表示部１１１にＩＤ用サインの入力案内を表示することにより、再度、当該認識対象者ＰにＩＤ用サインを示すよう案内し（ステップＳ３４）、上記ステップＳ３２へ戻る。

また、上記サイン検出処理において上記サイン検出部１２８が上記カメラ１１０から取り込んだ映像からサインを検出した場合（ステップＳ３３、ＹＥＳ）、上記認識部１２５は、上記サイン検出部１２８が検出したサインと上記登録情報保持部１２４に登録されているＩＤ用サインとのサイン照合処理を行う（ステップＳ３５）。

このサイン照合処理において上記サイン検出部１２８が検出したサインと上記登録情報保持部１２４に登録されているＩＤ用サインとが一致しなかった場合（ステップＳ３６、
ＮＯ）、上記表示部１１１にＩＤ用サインの入力案内を表示することにより、再度、当該認識対象者ＰにＩＤ用サインを示すよう案内し（ステップＳ３４）、上記ステップＳ３２へ戻る。

また、上記サイン照合処理において上記サイン検出部１２８が検出したサインと上記登録情報保持部１２４に登録されているＩＤ用サインのいずれかが一致した場合（ステップＳ３６、ＹＥＳ）、当該人物認識装置１は、当該認識対象者Ｐの顔画像とＩＤ用サインが一致した登録者の顔画像との顔照合処理を行なう。すなわち、上記サイン検出部１２８が検出したサインと登録者のＩＤ用サインとが一致した場合（ステップＳ３６、ＹＥＳ）、上記顔検出部１２２は、上記画像入力部１２１を介して供給される上記カメラ１１０が撮影した画像から認識対象者の顔画像を検出する（ステップＳ３７）。これにより認識対象者の顔画像が検出されると、上記特徴抽出部１２３は、当該顔画像から顔の特徴量を抽出し（ステップＳ３８）、上記認識部１２５へ供給する。

上記認識部１２５は、上記特徴抽出部１２３により抽出した当該認識対象者の顔の特徴量と上記登録情報保持部１２４に登録されている上記ＩＤ用サインが一致した登録者の顔の特徴量とを照合する顔照合処理を行なう（ステップＳ３９）。

この顔照合処理により認識対象者の顔の特徴量とＩＤ用サインで特定された登録者の顔の特徴量とが一致した場合、つまり、両者の類似度が所定の類似度以上である場合（ステップＳ４０、ＹＥＳ）、上記認識部１２５は、当該認識対象者が上記ＩＤ用サインで特定された登録者であることを認識し、その認識結果を表示部１１１に表示するとともに、上記通行制御部１２７へ通知する。これにより、上記通行制御部１２７は、当該登録者が通行の権限を有する人物であれば、上記ドア開閉機構２００によりドアを開放し、当該認識対象者の通行を許可する（ステップＳ４１）。

また、上記顔照合処理により認識対象者の顔の特徴量とＩＤ用サインで特定された登録者の顔の特徴量とが一致しなかった場合、つまり、両者の類似度が所定の類似度未満である場合（ステップＳ４０、ＮＯ）、上記表示部１１１には、パスワード用サインの入力案内が表示される（ステップＳ４１）。上記入力案内に応じて当該認識対象者は、上記カメラ１１０に向かってパスワード用サインを示す。

この状態において、上記画像入力部１２１は、上記カメラ１１０にて撮影した画像を上記サイン検出部１２８へ供給する。これにより、上記認識対象者Ｐがカメラ１１０に向けて示しているパスワード用サインの映像は、上記サイン検出部１２８へ供給される（ステップＳ４３）。

上記サイン検出部１２８は、上記画像入力部１２１を介して上記カメラ１１０から取り込んだ映像から上記認識対象者Ｐが示しているパスワード用サインを検出する処理を行う（ステップＳ４４）。このサイン検出処理において上記サイン検出部１２８が上記カメラ１１０から取り込んだ映像からパスワード用サインが検出できなかった場合（ステップＳ４４、ＮＯ）、上記ステップＳ４２へ戻り、上記表示部１１１にパスワード用サインの入力案内を表示することにより、再度、パスワード用サインの入力状態として当該認識対象者Ｐにパスワード用サインを示すよう案内する。

また、上記サイン検出処理において上記サイン検出部１２８が上記カメラ１１０から取り込んだ映像からサインを検出した場合（ステップＳ４４、ＹＥＳ）、上記認識部１２５は、上記サイン検出部１２８が検出したサインと上記登録情報保持部１２４に登録されているＩＤ用サインで特定された登録者のパスワード用サインとのサイン照合処理を行う（ステップＳ４５）。

このサイン照合処理において上記サイン検出部１２８が検出したサインと上記登録情報保持部１２４に登録されている当該登録者のパスワード用サインとが一致しなかった場合（ステップＳ４６、ＮＯ）、上記認識部１２５は、当該認識対象者ＰがＩＤ用サインにより特定された登録者でないと認識し、上記表示部１１１に認証不可である旨とドアの通行が不可である旨を案内表示し、当該認証処理を終了する。この場合、上記通行制御部１２７は、上記ドア開閉機構２００によりドアを閉鎖したままとすることにより当該認識対象者Ｐの通行を不許可としている（ステップＳ４７）。

また、上記サイン照合処理において上記サイン検出部１２８が検出したサインと上記登録情報保持部１２４に登録されているＩＤ用サインで特定された登録者のパスワード用サインとが一致した場合（ステップＳ４６、ＹＥＳ）、上記認識部１２５は、当該認識対象者Ｐが上記ＩＤ用サインで特定された登録者であると認識し、上記表示部１１１に認証可である旨とドアの通行を許可する旨とを案内表示し、上記通行制御部１２７へ当該認識対象者のドアの通行を許可する旨を通知する。これにより、上記通行制御部１２７は、上記ドア開閉機構２００によりドアを開放（あるいはドアの施錠を開錠）し、当該認識対象者Ｐの通行を許可する（ステップＳ４１）。

上記のように、予め複数の登録者がそれぞれ独自のＩＤ用サインを顔画像とともに登録しておき、１対１照合モードによる認証処理において、認識対象者が上記登録手段に登録したＩＤ用サインをカメラに向けて示し、上記カメラにて撮影した画像から認証対象者が示すサインを検出し、この検出したサインと予め登録されている各登録者のＩＤ用サインとを照合することにより顔画像の照合対象とする登録者を特定するようにしたものである。

また、予め登録者が独自のパスワード用サインを顔画像とともに登録手段に登録しておき、１対１照合モードによる認証処理において、認証対象者の顔画像が登録手段に登録されている登録者の顔画像と一致しなかった場合、認識対象者がパスワード用サインをカメラに向けて示し、上記カメラにて撮影した画像から認証対象者が示すサインを検出し、この検出したサインと上記登録手段に登録されている登録者のパスワード用サインとを照合することにより当該認識対象者が上記登録手段に登録されている登録者であるかことを認証するようにしたものである。

これらの動作を実現する人物認識装置あるいは通行制御装置によれば、認識対象者が直接装置に手を触れずに簡便にＩＤ用サインあるいはパスワード用サインを入力することができ、この結果として、認識対象者が装置に触れることなく衛生的であり、さらに、手による操作が不自由な障害者でも簡単に操作を行なうことが可能となる。また、完全に被接触で操作が行えるため、装置の耐久性を向上させたりすることが可能となり、さらには、ユーザインターフェース部にテンキー等の操作部を設置する必要がないため、装置の製作費を削減したり、取り付け位置を省スペース化したりすることができる。

次に、１対Ｎ照合モードにおける上記人物認識装置１の動作例について説明する。図５は、１対Ｎ照合モードにおける人物認識装置１の動作例を説明するためのフローチャートである。

図４に示すように、１対Ｎ照合モードの場合、まず、認識対象者Ｐは、上記カメラ１１０により顔画像を撮影する。これに対して、上記カメラ１１０にて撮影している画像は、上記画像入力部１２１を介して上記自動認証開始判定部１２６へ供給されている。上記自動認証開始判定部１２６は、上記画像入力部１２１を介して供給される上記カメラ１１０にて撮影された画像に基づいて上記カメラ１１０にて人物が撮影されたか否かを検知する（ステップＳ５１）。これにより上記カメラ１１０にて人物が撮影されたことを検知すると（ステップＳ３１、ＹＥＳ）、上記自動認証開始判定部１２６は、認証開始を判定する。

上記自動認証開始判定部１２６により認証開始が判定されると、上記画像入力部１２１は、上記カメラ１１０にて撮影した画像を上記顔検出部１２２へ供給する（ステップＳ５２）。上記顔検出部１２２は、上記画像入力部１２１を介して供給される上記カメラ１１０が撮影した画像から認識対象者の顔画像を検出する（ステップＳ５３）。これにより認識対象者の顔画像が検出されると、上記特徴抽出部１２３は、当該顔画像から顔の特徴量を抽出し（ステップＳ５４）、上記認識部１２５へ供給する。

上記認識部１２５は、上記特徴抽出部１２３により抽出した当該認識対象者の顔の特徴量と上記登録情報保持部１２４に登録されている全ての登録者の顔の特徴量とを照合する顔照合処理を行なう（ステップＳ５５）。この顔照合処理では、当該認識対象者の顔の特徴量と上記登録情報保持部１２４に登録されている各登録者の顔の特徴量との類似度を算出し、それらの最大類似度が所定の閾値以上であるか否かを判定し、最大類似度が所定の閾値以上である場合には当該認識対象者が当該最大類似度を与える登録者と一致するものと判断する。

上記顔照合処理により当該認識対象者が上記登録情報保持部１２４に登録されている登録者と一致すると判断した場合（ステップＳ５６、ＹＥＳ）、上記認識部１２５は、当該認識対象者が前記最大類似度を与える登録者であることを認識し、その認識結果を表示部１１１に表示するとともに、上記通行制御部１２７へ通知する。これにより、上記通行制御部１２７は、当該登録者が通行の権限を有する人物であれば、上記ドア開閉機構２００によりドアを開放（あるいはドアの施錠を開錠）し、当該認識対象者の通行を許可する（ステップＳ５７）。

また、上記顔照合処理により認識対象者が上記登録情報保持部１２４に登録されている登録者と一致しないと判断した場合（ステップＳ５６、ＮＯ）、上記表示部１１１には、パスワード用サインの入力案内が表示される（ステップＳ５８）。上記入力案内に応じて当該認識対象者は、上記カメラ１１０に向かってパスワード用サインを示す。

この状態において、上記画像入力部１２１は、上記カメラ１１０にて撮影した画像を上記サイン検出部１２８へ供給する。これにより、上記認識対象者Ｐがカメラ１１０に向けて示しているパスワード用サインの映像は、上記サイン検出部１２８へ供給される（ステップＳ５９）。

上記サイン検出部１２８は、上記画像入力部１２１を介して上記カメラ１１０から取り込んだ映像から上記認識対象者Ｐが示しているパスワード用サインを検出する処理を行う（ステップＳ６０）。このサイン検出処理において上記サイン検出部１２８が上記カメラ１１０から取り込んだ映像からパスワード用サインが検出できなかった場合（ステップＳ６０、ＮＯ）、上記ステップＳ５８へ戻り、上記表示部１１１にパスワード用サインの入力案内を表示することにより、再度、パスワード用サインの入力状態として当該認識対象者Ｐにパスワード用サインを示すよう案内する。

また、上記サイン検出処理において上記サイン検出部１２８が上記カメラ１１０から取り込んだ映像からサインを検出した場合（ステップＳ６０、ＹＥＳ）、上記認識部１２５は、上記サイン検出部１２８が検出したサインと上記登録情報保持部１２４に登録されている全ての登録者のパスワード用サインとのサイン照合処理を行う（ステップＳ６１）。

このサイン照合処理において上記サイン検出部１２８が検出したサインと上記登録情報保持部１２４に登録されている各登録者のパスワード用サインとが一致しなかった場合（ステップＳ６２、ＮＯ）、上記認識部１２５は、当該認識対象者Ｐが上記登録情報保持部１２４に登録されている登録者でないと認識し、上記表示部１１１に認証不可である旨とドアの通行が不可である旨を案内表示し、当該認証処理を終了する。この場合、上記通行制御部１２７は、上記ドア開閉機構２００によりドアを閉鎖したままとすることにより当該認識対象者Ｐの通行を不許可としている（ステップＳ６３）。

また、上記サイン照合処理において上記サイン検出部１２８が検出したサインと上記登録情報保持部１２４に登録されている何れかの登録者のパスワード用サインとが一致した場合（ステップＳ６２、ＹＥＳ）、上記認識部１２５は、当該認識対象者Ｐがパスワード用サインが一致した登録者であると認識し、上記表示部１１１に認証可である旨とドアの通行を許可する旨とを案内表示し、上記通行制御部１２７へ当該認識対象者のドアの通行を許可する旨を通知する。これにより、上記通行制御部１２７は、上記ドア開閉機構２００によりドアを開放（あるいはドアの施錠を開錠）し、当該認識対象者Ｐの通行を許可する（ステップＳ５７）。

上記のように、予め各登録者がそれぞれ独自のパスワード用サインを顔画像とともに登録手段に登録しておき、１対Ｎ照合モードによる認証処理において、認証対象者の顔画像が登録手段に登録されているどの登録者の顔画像とも一致しなかった場合、認識対象者がパスワード用サインをカメラに向けて示し、上記カメラにて撮影した画像から認証対象者が示すサインを検出し、この検出したサインと予め登録手段に登録されている各登録者のパスワード用サインとを照合することにより当該認識対象者が上記登録手段に登録されている登録者であるか否かを認証するようにしたものである。

これにより、認識対象者が直接装置に手を触れずに簡便にパスワード用サインを入力することができ、この結果として、認識対象者が装置に触れることなく衛生的であり、さらに、手による操作が不自由な障害者でも簡単に操作を行なうことが可能となる。また、完全に被接触で操作が行えるため、装置の耐久性を向上させたりすることが可能となり、さらには、ユーザインターフェース部にテンキー等の操作部を設置する必要がないため、装置の製作費を削減したり、取り付け位置を省スペース化したりすることができる。

本発明の実施の形態に係る人物認識装置及び通行制御装置の概略構成を示す図 通常の動作モードからサイン等を登録する登録モードへ移行する際の動作例を説明するためのフローチャート。 登録モードにおいてサインを含めた認証データの登録処理の動作例を説明するためのフローチャートである。 １対１照合による照合処理の動作手順を説明するためのフローチャート。 １対多照合による照合処理の動作手順を説明するするためのフローチャート。

符号の説明

１…人物認識装置、２…通行制御装置、１０…ユーザインターフェース部、２０…処理部、１１０…カメラ、１１１…表示部、１２１…画像入力部、１２２…顔検出部、１２３…特徴抽出部、１２４…登録情報保持部、１２５…認識部、１２７…通行制御部、１２８…サイン検出部、２００…ドア開閉機構

Claims (6)

1. 登録者の顔画像と登録者独自の動作で示されるサインとが登録されている登録手段と、
   認識対象者を撮影する撮影手段と、
   この撮影手段により撮影した画像を入力する画像入力手段と、
   この画像入力手段により入力した画像から当該認識対象者が示すサインを検出するサイン検出手段と、
   このサイン検出手段により検出したサインと前記登録手段に登録されているサインとを照合するサイン照合手段と、
   前記画像入力手段により入力した画像から顔画像を検出する顔画像検出手段と、
   この顔画像検出手段により検出した顔画像と前記登録手段に登録されている前記サイン照合手段によりサインが一致した登録者の顔画像とを照合する顔照合手段と、
   この顔照合手段により当該認識対象者の顔画像と前記サイン照合手段によりサインが一致した登録者の顔画像とが一致するか否かにより、当該認識対象者が前記サイン照合手段によりサインが一致した登録者であるか否かを認識する認識手段と、
   を有することを特徴とする人物認識装置。
2. 登録者の顔画像と登録者独自の動作で示されるサインとが登録されている登録手段と、
   認識対象者を撮影する撮影手段と、
   この撮影手段により撮影した画像を入力する画像入力手段と、
   この画像入力手段により入力した画像から顔画像を検出する顔画像検出手段と、
   この顔画像検出手段により検出した顔画像と前記登録手段に登録されている顔画像とを照合する顔照合手段と、
   この顔照合手段により当該認識対象者の顔画像と前記登録手段に登録されている顔画像とが一致しなかった場合、前記画像入力手段により入力した画像から当該認識対象者が示すサインを検出するサイン検出手段と、
   このサイン検出手段により検出したサインと前記登録手段に登録されている各登録者のサインとを照合するサイン照合手段と、
   前記顔照合手段により当該認識対象者の顔画像と前記登録手段に登録されている登録者の顔画像とが一致した場合、あるいは、前記サイン照合手段により前記サイン検出手段が検出したサインと前記登録手段に登録されている登録者のサインと一致した場合、前記認識対象者が顔画像あるいはサインが一致した登録者であることを認識する認識手段と、
   を有することを特徴とする人物認識装置。
3. 種々の動作モードを有する人物認識装置において、
   動作モードを特定の動作モードに変更する人物の動作で示されるモード変更用のサインが登録されている登録手段と、
   人物を撮影する撮影手段と、
   この撮影手段により撮影した人物の画像を入力する画像入力手段と、
   この画像入力手段により入力した人物の画像から当該人物が示すサインを検出するサイン検出手段と、
   このサイン検出手段により検出したサインと前記登録手段に登録されているモード変更用のサインとを照合するサイン照合手段と、
   このサイン照合手段により前記サイン検出手段が検出したサインと前記登録手段に登録されているモード変更用のサインとが一致した場合、動作モードを前記モード変更用のサインが対応する前記特定の動作モードに変更する処理手段と、
   を有することを特徴とする人物認識装置。
4. 種々の動作モードを有する人物認識装置において、
   人物の動作で示されるサインが特定の動作モードにおいて有効となる種々の操作に対応した操作用のサインとして登録されている登録手段と、
   前記特定の動作モードにおいて人物を撮影する撮影手段と、
   この撮影手段により撮影した人物の画像を入力する画像入力手段と、
   前記画像入力手段により入力した人物の画像から当該人物が示すサインを検出するサイン検出手段と、
   このサイン検出手段により検出したサインと前記登録手段に登録されている操作用のサインとを照合するサイン照合手段と、
   このサイン照合手段により前記サイン検出手段が検出したサインと前記登録手段に登録されている操作用のサインとが一致した場合、当該操作用のサインに対応する操作に応じた動作を実行する処理手段と、
   を有することを特徴とする人物認識装置。
5. 登録者の顔画像と登録者独自の動作で示されるサインとが登録されている登録手段と、
   認識対象者を撮影する撮影手段と、
   この撮影手段により撮影した画像を入力する画像入力手段と、
   この画像入力手段により入力した画像から当該認識対象者が示すサインを検出するサイン検出手段と、
   このサイン検出手段により検出したサインと前記登録手段に登録されているサインとを照合するサイン照合手段と、
   前記画像入力手段により入力した画像から顔画像を検出する顔画像検出手段と、
   この顔画像検出手段により検出した顔画像と前記登録手段に登録されている前記サイン照合手段によりサインが一致した登録者の顔画像とを照合する顔照合手段と、
   この顔照合手段により当該認識対象者の顔画像と前記サイン照合手段によりサインが一致した登録者の顔画像とが一致するか否かにより、当該認識対象者が前記サイン照合手段によりサインが一致した登録者であるか否かを認識する認識手段と、
   この認識手段により当該認識対象者が前記登録手段に登録されている登録者であることが認識された場合、当該認識対象者の通行を許可する通行制御手段と、
   を有することを特徴とする通行制御装置。
6. 登録者の顔画像と登録者独自の動作で示されるサインとが登録されている登録手段と、
   認識対象者を撮影する撮影手段と、
   この撮影手段により撮影した画像を入力する画像入力手段と、
   この画像入力手段により入力した画像から顔画像を検出する顔画像検出手段と、
   この顔画像検出手段により検出した顔画像と前記登録手段に登録されている顔画像とを照合する顔照合手段と、
   この顔照合手段により当該認識対象者の顔画像と前記登録手段に登録されている顔画像とが一致しなかった場合、前記画像入力手段により入力した画像から当該認識対象者が示すサインを検出するサイン検出手段と、
   このサイン検出手段により検出したサインと前記登録手段に登録されている各登録者のサインとを照合するサイン照合手段と、
   前記顔照合手段により当該認識対象者の顔画像と前記登録手段に登録されている登録者の顔画像とが一致した場合、あるいは、前記サイン照合手段により前記サイン検出手段が検出したサインと前記登録手段に登録されている登録者のサインと一致した場合、前記認識対象者が顔画像あるいはサインが一致した登録者であることを認識する認識手段と、
   この認識手段により当該認識対象者が前記登録手段に登録されている登録者であることが認識された場合、当該認識対象者の通行を許可する通行制御手段と、
   を有することを特徴とする通行制御装置。

Images