JP2010081480A - 携帯型不審者検出装置、不審者検出方法及びプログラム - Google Patents

Abstract

【課題】特定の個人を保護対象として不審者から保護することができる携帯型不審者検出装置を提供することを目的とする。
【解決手段】メガネ本体１１に５つのカメラが設けられ、メガネ１０を装着した装着者の方から横方向の被写体像を連続して撮影する。被写体像から顔領域の検出を行い、顔領域が検出された場合にはその顔の特徴量を算出することにより顔の向きと目の向きを検出し、これらに基づいて視線の向きを検出する。視線の向きから検出された顔領域の人物がカメラを見ているか否かを判定し、一定時間以上カメラを見ている顔がある場合にはその顔を不審者と判定し、小型スピーカ１８を介して不審者が検知されたことを示す警告メッセージを音声で出力する。さらに、小型コンピュータユニットを介して、遠隔地、例えば保護者の携帯電話や学校のＰＣなどの機器に不審者検知情報や画像を通知する。
【選択図】 図１

Description

本発明は携帯型不審者検出装置に係り、特に撮影者の死角にいる不審者の情報を撮影者が知ることができる携帯型不審者検出装置に関する。

特許文献１には、カメラにて人の顔を撮影することで視線を検知し、人物の興味や不審者としての判定を行う技術が提案されている。

特許文献２には、カメラをメガネにつけることで、遠隔地からメガネ装着者が見ているものを確認する技術が提案されている。
特開２００７−６４２７号公報 特開２００２−１９１０４３号公報

しかしながら、特許文献１に記載の発明では、監視カメラで保護できるものは固定対象、固定エリアに限定され、特定の個人を保護対象とすることはできない。

また、特許文献２に記載の発明では、メガネ装着者が見ているものを遠隔地で確認することを目的としているが、メガネ装着者を保護対象とすることを考えると、メガネ装着者が見ているものを撮影するだけでは不十分である。

本発明はこのような事情に鑑みてなされたもので、特定の個人を保護対象として不審者から保護することができる携帯型不審者検出装置を提供することを目的とする。

請求項１に記載の携帯型不審者検出装置は、撮影者の身体に装着されるウェアラブルな撮像手段と、前記撮像手段により連続して撮像された被写体像から人物の顔領域を検出する顔検出手段と、前記顔検出手段により人物の顔領域が検出された場合に、当該顔領域が検出された人物の視線方向を検出する視線方向検出手段と、前記視線方向検出手段が検出した視線方向に基づいて前記顔領域が検出された人物が前記撮影者を視認しているかどうかを判断する視認判断手段と、前記視認判断手段により前記顔領域が検出された人物が前記撮影者を視認していると判断された場合に、前記顔領域が検出された人物が前記撮影者を視認している時間を検出する時間検出手段と、前記時間検出手段により検出された時間が所定の時間以上となった場合には、前記顔領域が検出された人物を不審者と判断する不審者判断手段と、前記不審者判断手段により前記顔領域が検出された人物が不審者と判断された場合に、不審者が発見されたこと示す情報を前記撮影者に通知する通知手段と、を備えたことを特徴とする。

請求項１に記載の携帯型不審者検出装置によれば、ウェアラブルな撮像手段により連続して撮像された被写体像から人物の顔領域を検出し、顔領域が検出された場合にはその人物の視線方向を検出する。視線方向の検出結果に基づいて顔領域が検出された人物が撮影者を視認しているかどうかを判断し、顔領域が検出された人物が撮影者を視認していると判断された場合には、顔領域が検出された人物が撮影者を視認している時間を検出し、検出された時間が所定の時間以上となった場合には、顔領域が検出された人物を不審者と判断し、不審者が発見されたこと示す情報を撮影者に通知する。これにより、不審者を発見し、撮影者に危険を通知することができる。したがって、撮影者を危険から保護し、撮影者は危険を回避することができる。

請求項２に記載の携帯型不審者検出装置は、請求項１に記載の携帯型不審者検出装置において前記顔領域検出手段は、前記顔領域が検出された人物の顔領域と、当該人物の顔の向き及び黒目の位置を検出し、前記視線方向検出手段は、前記顔領域検出手段により検出された顔の向き及び黒目の位置に基づいて前記顔領域が検出された人物の視線方向を検出することを特徴とする。

請求項２に記載の携帯型不審者検出装置によれば、顔領域が検出された人物の顔の向きと、黒目の位置とを検出し、検出された顔の向き及び黒目の位置に基づいてその人物の視線方向を検出する。これにより、視線方向を確実に判別することができる。

請求項３に記載の携帯型不審者検出装置は、請求項１又は２かに記載の携帯型不審者検出装置において、前記顔検出手段により顔領域が検出された場合に、前記顔領域が検出された人物の前記撮影者に対する位置を検出する人物位置検出手段を備え、前記通知手段は、前記不審者判断手段により前記顔領域が検出された人物が不審者と判断された場合には、前記人物位置検出手段により検出された前記顔領域が検出された人物の前記撮影者に対する位置を前記撮影者に通知することを特徴とする。

請求項３に記載の携帯型不審者検出装置によれば、画像から顔領域が検出された場合に、顔領域が検出された人物の撮影者に対する位置を検出し、顔領域が検出された人物が不審者と判断された場合には、顔領域が検出された人物の撮影者に対する位置を撮影者に通知する。これにより、不審者がいることに加え、不審者の位置を撮影者に通知することができる。したがって、撮影者は不審者を適切に把握し、より確実に危険を回避することができる。

請求項４に記載の携帯型不審者検出装置は、請求項１から３のいずれかに記載の携帯型不審者検出装置において、前記顔検出手段により顔領域が検出された場合に、前記顔領域の検出結果に基づいて前記顔領域が検出された人物の性別及び年齢の少なくとも１つを検出する年齢／性別判断手段を備え、前記通知手段は、前記不審者判断手段により前記顔領域が検出された人物が不審者と判断された場合には、前記年齢／性別判断手段により検出された性別及び年齢の少なくとも１つを前記撮影者に通知することを特徴とする。

請求項４に記載の携帯型不審者検出装置によれば、画像から顔領域が検出された場合に、その検出結果に基づいて顔領域が検出された人物の性別及び年齢の少なくとも１つを検出し、顔領域が検出された人物が不審者と判断された場合には、検出された性別及び年齢の少なくとも１つを前記撮影者に通知する。これにより、不審者がいることに加え、不審者の性別や年齢などの詳細な情報を撮影者に通知することができる。これにより、撮影者は不審者を適切に把握し、より確実に危険を回避することができる。

請求項５に記載の携帯型不審者検出装置は、請求項１から４のいずれかに記載の携帯型不審者検出装置において、前記顔検出手段により顔領域が検出された場合に、前記顔領域が検出された人物までの距離を推定する距離推定手段を備え、前記通知手段は、前記不審者判断手段により前記顔領域が検出された人物が不審者と判断された場合であって、かつ前記距離推定手段により推定された前記顔領域が検出された人物までの距離が所定の距離以下となった場合には、前記撮影者に警告を通知することを特徴とする。

請求項５に記載の携帯型不審者検出装置によれば、画像から顔領域が検出された場合に、顔領域が検出された人物までの距離を推定し、顔領域が検出された人物が不審者と判断された場合であって、かつ顔領域が検出された人物までの距離が所定の距離以下となった場合には、撮影者に警告を通知する。これにより、不審者がいることに加え、不審者が近づいてきていることを撮影者に通知することができる。

請求項６に記載の携帯型不審者検出装置は、請求項１から５のいずれかに記載の携帯型不審者検出装置において、前記不審者判断手段により前記顔領域が検出された人物が不審者と判断された場合に、当該不審者と判断されたことを示す情報と、前記撮像手段により撮像された画像とを外部機器に送信する送信手段を備えたことを特徴とする。

請求項６に記載の携帯型不審者検出装置によれば、顔領域が検出された人物が不審者と判断された場合には、不審者と判断されたことを示す情報と、前記撮像手段により撮像された画像とを外部機器に送信する。これにより、撮影者の保護活動や犯人捜査に役立つ情報を外部機器、例えば保護者の所有する携帯電話やＰＣなどの機器に送信することができる。

請求項７に記載の携帯型不審者検出装置は、請求項６に記載の携帯型不審者検出装置において、前記携帯型不審者検出装置の位置情報を取得する装置位置取得手段を備え、前記送信手段は、前記不審者判断手段により前記顔領域が検出された人物が不審者と判断された場合に、前記装置位置取得手段により取得された位置情報を送信することを特徴とする。

請求項７に記載の携帯型不審者検出装置によれば、携帯型不審者検出装置の位置情報を取得し、不審者と判断されたことを示す情報と、前記撮像手段により撮像された画像に加え、取得された位置情報を外部機器に送信する。これにより、不審者が発見された位置が把握可能となる。

請求項８に記載の携帯型不審者検出装置は、請求項６又は７に記載の携帯型不審者検出装置において、前記不審者判断手段により前記顔領域が検出された人物が不審者と判断された時の時刻情報を取得する時刻情報取得手段を備え、前記送信手段は、前記不審者判断手段により前記顔領域が検出された人物が不審者と判断された場合に、前記時刻情報取得手段により取得された時刻情報を送信することを特徴とする。

請求項８に記載の携帯型不審者検出装置によれば、顔領域が検出された人物が不審者と判断された時の時刻情報を取得し、不審者と判断されたことを示す情報と、前記撮像手段により撮像された画像に加え、取得された時刻情報を外部機器に送信する。これにより、不審者が発見された時刻が把握可能となる。

請求項９に記載の携帯型不審者検出装置は、請求項６から８のいずれかに記載の携帯型不審者検出装置において、前記本体部に設けられ、前記撮影者の周辺の音情報を収集するマイクを備え、前記送信手段は、前記不審者判断手段により前記顔領域が検出された人物が不審者と判断された場合に、前記マイクにより収集された音情報を送信することを特徴とする。

請求項９に記載の携帯型不審者検出装置によれば、撮影者の周辺の音情報を収集するマイクが本体部に設けられ、不審者と判断されたことを示す情報と、前記撮像手段により撮像された画像に加え、マイクが収集した音情報を外部機器に送信する。これにより、不審者が発見されたときの状況が把握可能となる。

請求項１０に記載の携帯型不審者検出装置は、請求項１から９のいずれかに記載の携帯型不審者検出装置において、前記撮像手段は、複数の撮像素子と、当該複数の撮像素子に前記撮影者から見て異なる方向の被写体像を結像させる複数の撮像レンズを有することを特徴とする。これにより、より広範囲から不審者を発見し、撮影者に危険を通知することができる。

請求項１１に記載の携帯型不審者検出装置は、請求項１０に記載の携帯型不審者検出装置において、前記複数の撮像レンズは、前記複数の撮像素子に結像される複数枚の被写体像の一部が重複するように前記撮像手段に設けられ、前記複数の撮像素子により一部が重複するように結像された複数枚の被写体像のうちの重複する部分を合成して１枚の画像を生成する合成手段を備え、前記顔検出手段は、前記合成手段により合成された１枚の画像から人物の顔領域を検出することを特徴とする。

請求項１１に記載の携帯型不審者検出装置によれば、一部が重複するように複数の撮像素子に結像されたうちの重複する部分を合成して１枚の画像を生成し、合成した１枚の画像から人物の顔領域を検出する。これにより、顔領域の検出処理を１枚の画像のみに対して行なえばよく、確実に顔領域を検出することができる。

請求項１２に記載の携帯型不審者検出装置は、請求項１０又は１１に記載の携帯型不審者検出装置において、前記撮像手段はメガネに設けられ、少なくとも前記撮影者から見て前方と左右方向の被写体像を撮像することを特徴とする。

請求項１２に記載の携帯型不審者検出装置によれば、メガネに複数の撮像素子が設けられており、メガネを装着した撮影者から見て少なくとも前方と左右方向の被写体像を撮像する。これにより、保護対象にメガネを装着させるだけで、保護対象を保護することができる。

請求項１３に記載の携帯型不審者検出装置は、請求項１０又は１１に記載の携帯型不審者検出装置において、前記撮像手段は帽子又はヘルメットに設けられ、少なくとも前記撮影者から見て後方の被写体像を撮像することを特徴とする。

請求項１３に記載の携帯型不審者検出装置によれば、帽子又はヘルメットに複数の撮像素子が設けられており、帽子又はヘルメットをかぶった撮影者から見て少なくとも後方の被写体像を撮像する。これにより、より確実に保護対象を保護することができる。

請求項１４に記載の不審者検出方法は、ウェアラブルな撮像手段を用いて被写体像を連続して撮像するステップと、前記連続して撮像された被写体像から人物の顔領域を検出するステップと、前記人物の顔領域が検出された場合に、当該顔領域が検出された人物の視線方向を検出するステップと、前記検出した視線方向に基づいて前記顔領域が検出された人物が前記撮影者を視認しているかどうかを判断するステップと、前記撮影者を視認しているかどうかを判断するステップにおいて前記顔領域が検出された人物が前記撮影者を視認していると判断された場合に、前記顔領域が検出された人物が前記撮影者を視認している時間を検出するステップと、前記検出された時間が所定の時間以上となった場合には、前記顔領域が検出された人物を不審者と判断するステップと、前記顔領域が検出された人物が不審者と判断された場合に、不審者が発見されたこと示す情報を前記撮影者に通知するステップと、を含むことを特徴とする。

請求項１５に記載のプログラムは、請求項１４に記載の携帯型不審者検出方法を演算装置に演算させることを特徴とする。

本発明によれば、特定の個人を保護対象として不審者から保護することができる。

＜第１の実施の形態＞
図１は、第１の実施の形態に係る携帯型不審者検出装置１の概略図である。また、図３は、携帯型不審者検出装置１のブロック図である。

携帯型不審者検出装置１は、図１に示すように、主として、メガネ１０と、小型コンピュータユニット２０とで構成される。

メガネ１０は、主として、メガネ本体１１と、カメラ（１）１２と、カメラ（２）１３と、カメラ（３）１４と、カメラ（４）１５と、カメラ（５）１６と、小型マイク１７と、小型スピーカ１８とで構成される。

メガネ本体１１は、主として、レンズ枠１１ａと、右テンプル１１ｃと、左テンプル１１ｂとで構成される。レンズ枠１１ａには、カメラ（２）１３と、カメラ（３）１４と、カメラ（４）１５とが設けられる。左テンプル１１ｂには、カメラ（１）１２と、小型マイク１７と、小型スピーカ１８とが設けられる。右テンプル１１ｃには、カメラ（５）１６が設けられる。

図２は、メガネ本体１１に設けられたカメラ（１）１２、カメラ（２）１３、カメラ（３）１４、カメラ（４）１５及びカメラ（５）１６の配置と、その撮影範囲を示す図である。

レンズ枠１１ａの左前面にはカメラ（２）１３が設けられ、カメラ（２）１３は撮影者（メガネ装着者）の左斜め前方の被写体を撮像する。レンズ枠１１ａの中央前面にはカメラ（３）１４が設けられ、カメラ（３）１４はメガネ装着者の前方の被写体を撮像する。レンズ枠１１ａの右前面にはカメラ（４）１５が設けられ、カメラ（４）１５はメガネ装着者の右斜め前方の被写体を撮像する。

左テンプル１１ｂの外側後方には、カメラ（１）１２が設けられ、カメラ（１）１２はメガネ装着者の左側の被写体を撮像する。右テンプル１１ｃの外側後方にはカメラ（５）１６が設けられ、カメラ（５）１６はメガネ装着者の右側の被写体を撮像する。

また、カメラ（１）１２、カメラ（２）１３、カメラ（３）１４、カメラ（４）１５及びカメラ（５）１６は、それぞれのカメラで撮像される画像に重複部分があるように配置される。すなわち、カメラ（１）１２とカメラ（２）１３の撮影範囲が一部重複し、カメラ（２）１３とカメラ（３）１４の撮影範囲が一部重複し、カメラ（３）１４とカメラ（４）１５の撮影範囲が一部重複し、カメラ（４）１５とカメラ（５）１６の撮影範囲が一部重複するようにカメラ（１）１２〜カメラ（５）１６が配置される。

このようにカメラを配置することにより、正面を中心として２７０°程度の広画角をカバーすることができる。

カメラ（１）１２は、撮影レンズと、ＣＣＤイメージセンサ（以下、ＣＣＤという）と、ＣＣＤから得られる画像信号を処理するためのアナログ処理部、Ａ／Ｄ変換器、画像処理部及び圧縮伸張部とを備え、連続して被写体像を撮像することにより、動画を取得する。カメラ（１）１２を構成する各構成要素は既に公知であるため、説明を省略する。また、カメラ（２）１３、カメラ（３）１４、カメラ（４）１５及びカメラ（５）１６は、カメラ（１）１２と同様の構成であるため、説明を省略する。

小型コンピュータユニット２０は、図３に示すように、主として、ＣＰＵ２１と、メモリ２２と、ＧＰＳ装置２３と、携帯電話ユニット２４と、視線検出装置２５とで構成される。

ＣＰＵ２１は、所定のプログラムに従って携帯型不審者検出装置１の全体の動作を制御する制御部として機能するとともに、各種演算を行う演算装置として機能する。

メモリ２２は、バスを介してＣＰＵ２１と接続されており、ＣＰＵ２１が実行するプログラム及び制御に必要な各種データなどが格納される不揮発性メモリ（ＲＯＭ）領域と、プログラムの展開領域及びＣＰＵ２１の演算作業用領域として利用される揮発性メモリ（ＲＡＭ）領域とを含むブロックで構成される。ＲＯＭ領域は、音声や画像の保存領域としても利用され、ＲＡＭ領域は、画像データの一時記憶領域としても利用される。

ＧＰＳ装置２３には、４個以上のＧＰＳ衛星からの距離を同時に知ることにより自分の位置情報を取得する。また、ＧＰＳ装置２３は、衛星に搭載された原子時計からの時刻情報を取得する。ＧＰＳ装置２３は、既に公知の技術であるため、説明を省略する。

携帯電話ユニット２４は、公衆電話回線と接続された基地局との間で電波により音声、画像などの各種データの通信を行う。携帯電話ユニット２４を用いた各種データの通信方法は既に公知の技術であるため、説明を省略する。

視線検出装置２５は、被写体像から人物の顔領域を検出し、顔領域が検出された場合には顔の特徴量を算出することにより顔の向きや目の情報、例えば黒目の位置（目の向き）を検出し、顔の向きと目の向きに基づいて顔領域が検出され他人物の視線の向きを検出する。視線検出装置２５としては、例えば特開２００７−２６５３６７に記載の技術を用いることができる。

このように構成された携帯型不審者検出装置１の作用について説明する。図４は、携帯型不審者検出装置１の処理の流れを示すフローチャートである。以下の処理は主としてＣＰＵ２１によって行われる。

メガネ本体１１に設けられた電源スイッチ（図示せず）を押すことにより電源を投入し、保護対象であるユーザがメガネを装着すると、ＣＰＵ２１は処理を開始する。

ＣＰＵ２１は、カメラ（１）１２〜カメラ（５）１６へ指示を出し、カメラ（１）１２〜カメラ（５）１６は、被写体像をそれぞれ撮像する（ステップＳ１１）。これにより、図５（ａ）に示すように、１つのフレームにつき５枚の画像が撮像される。なお、カメラ（１）１２〜カメラ（５）１６で撮像されたフレームの画像は、それぞれバスを介してＣＰＵ２１に入力される。

ＣＰＵ２１は、カメラ（１）１２〜カメラ（５）１６で撮像された５枚の画像を合成する（ステップＳ１２）。カメラ（１）１２〜カメラ（５）１６は、撮像される画像の一部が重複するように配置されているため、図５（ｂ）に示すように、重複部分を重ね合わせるようにして合成を行う。これにより、広画角のフレームの画像が生成される。生成された広画角のフレームの画像は、ＣＰＵ２１から視線検出装置２５に順次入力される。

視線検出装置２５は、入力された広画角のフレームの画像に対して、顔領域（正面顔、横顔など）の検出を行い、顔領域が検出された場合にはその顔の特徴量を算出することにより顔の向きと目の向きを検出し、これらに基づいてその顔の視線の向きを検出する（ステップＳ１３）。

視線検出装置２５は、視線の向き等の情報を順次ＣＰＵ２１に入力する。また、ＣＰＵ２１は、顔領域が検出された合成画像上の位置に基づいて、検出された顔の撮影者に対する位置を検出する。そして、ＣＰＵ２１は、入力された視線の向きと、検出された顔の撮影者に対する位置とに基づいて、顔領域が検出された人物が保護対象（カメラ）を見ているか否かを判定する（ステップＳ１４）。

ＣＰＵ２１は、視線検出装置２５から入力された情報やその顔がカメラを見ているか否かの判定結果などを顔のログ情報としてＲＯＭ領域に記憶する。ＣＰＵ２１は、新たな情報（現フレームから検出された情報）が視線検出装置２５から入力されると、現在ＲＯＭ領域に記憶されているログ情報を参照して、１つ前のフレームに同一の顔があるかどうかを特定する（ステップＳ１５）。

ステップＳ１５で現在のログ情報に同一の顔があると特定された場合には、ＣＰＵ２１は、同一の顔毎に現フレームの画像から検出された情報と、ステップＳ１４で判定された結果とをログ情報に記憶する。ステップＳ１５で現在のログ情報に同一の顔がないと特定された場合には、ＣＰＵ２１は、新たな顔として現フレームから検出された情報と、ステップＳ１４で判定された結果をログ情報に記憶する（ステップＳ１６）。これにより、ログ情報が最新の情報に更新される。

ＣＰＵ２１は、ログ情報を参照し、一定時間以上カメラ（すなわち、撮影者）を見ている顔があるかどうかを判断する（ステップＳ１７）。

一定時間以上カメラを見ている顔が無いと判断された場合（ステップＳ１７でＮＯ）には、再度ステップＳ１１に戻り、ＣＰＵ２１は、カメラ（１）１２〜カメラ（５）１６に指示を出し、次のフレームの画像を撮影する。このようにして、広画角の動画に対して一定時間以上カメラを見ている顔があるかどうかの判断を行う。

一定時間以上カメラを見ている顔があると判断された場合（ステップＳ１７でＹＥＳ）には、ＣＰＵ２１は、一定時間以上カメラを見ている顔を不審者と判定し、小型スピーカ１８を介して不審者が検知されたことを示す警告メッセージを音声で出力する（ステップＳ１８）。これにより、携帯型不審者検出装置１は、保護対象である撮影者に危険を通知し、注意を促すことができる。

ＣＰＵ２１は、ステップＳ１７で不審者が判定されたフレームの画像をＲＯＭ領域に保存する（ステップＳ１９）。また、ＣＰＵ２１は、ＧＰＳ装置２３に指示を出し、携帯型不審者検出装置１の位置情報と、現在の時刻情報とを取得し、ＲＯＭ領域に保存する（ステップＳ２０）。それと共に、ＣＰＵ２１は、小型マイク１７で集音した入力音声の符号化処理を行い、音声データをＲＯＭ領域に記憶する。

ＣＰＵ２１は、ＲＯＭ領域に保存された画像と、位置情報と、時刻情報と、音声データと、不審者が検知されたことを示す情報とを携帯電話ユニット２４に出力し、携帯電話ユニット２４は、これらの情報を事前に登録しておいたメールアドレスに送信する（ステップＳ２１）。これにより、不審者が発見されたことを遠隔地に送信することができる。また、位置情報及び時刻情報を送信することにより、不審者がいることに加え、不審者の位置や不審者が発見された時間を送信することができる。また、マイクで集音した音声情報を送信することにより、不審者が発見されたときの状況を送信することができる。メール送信後、ＣＰＵ２１は一旦処理を終了し、再度ステップＳ１１の処理を行う。

本実施の形態によれば、不審行動と判断した場合には、保護対象である撮影者に危険を通知する。これにより、保護対象にメガネを装着させるだけで、保護対象を危険から保護し、撮影者は危険を回避することができる。

また、本実施の形態によれば、保護対象に危険を通知するとともに、遠隔地、例えば保護者の携帯電話や学校のＰＣなどの機器に不審者検知情報と不審者が撮影された画像を通知することができる。また、不審者の映像や位置情報などの撮影者の保護活動や犯人捜査に役立つ情報を通知することができる。

なお、本実施の形態では、ステップＳ１７において一定時間以上カメラを見ている顔があるかどうかを判断し、一定時間以上カメラを見ている顔がある場合にはその顔の人物を不審者と判定したが、不審者と判定する方法はこれに限らない。例えば、画像から検出された顔領域までの距離の算出し、その距離が所定の距離以内となった場合にその人物を不審者と判定するようにしてもよい。なお、画像から検出された顔領域までの距離は、被写体距離や、検出された顔領域の大きさなどに基づいて算出が可能である。

また、本実施の形態では、画像から被写体の顔領域を検出することにより被写体像から人物を検出したが、人物を検出する方法はこれに限らず、人の頭部（例えば後頭部）を検出することにより人物を検出するようにしても良い。

また、本実施の形態では、合成画像上で顔領域が検出された画像上の位置を求め、これに基づいて顔領域が検出された人物が保護対象（カメラ）を見ているか否かを判定したが、これに加え、顔領域が検出された画像上の位置に基づいて、検出された顔の撮影者に対する位置を検出するようにしてもよい。そして、その顔の人物が不審者と判定された場合には、その人物の撮影者に対する位置を撮影者に通知することにより、撮影者は不審者の位置を適切に把握でき、より確実に危険を回避することができる。

また、本実施の形態では、ステップＳ１３において、顔領域が検出された場合にはその顔の特徴量を算出することにより顔の向きと目の向きを検出したが、顔の向きや目の向きに加え、顔の特徴量に基づいて性別や年齢を検出するようにしても良い。そして、その顔の人物が不審者と判定された場合には、不審者がいることに加え、不審者の性別や年齢などの詳細な情報を撮影者に通知することにより、撮影者は不審者がだれであるかを適切に把握でき、より確実に危険を回避することができる。

また、本実施の形態では、ＧＰＳ装置２３が現在の時刻情報を取得したが、時刻情報はＧＰＳ装置により取得する場合に限らず、標準時刻電波やラジオ電波などを受信することにより時刻情報を取得するようにしてもよい。また、携帯型不審者検出装置１が内部時計などにより時刻情報を保持していてもよい。

また、本実施の形態では、ステップＳ１７で一定時間以上カメラを見ている顔があるかどうかを判断し、一定時間以上カメラを見ている顔がある場合にはその顔を不審者と判定したが、不審者は対象を注視し続けることが多いため、連続して一定時間以上カメラを見ている顔を不審者と判定するようにしてもよい。

また、本実施の形態では、ステップＳ１８において、画像内の人物が不審者と判定されたには、小型スピーカ１８を介して不審者が検知されたことを示す警告メッセージを音声で出力したが、不審者が検知されたことを通知する方法はメッセージを音声で出力する方法に限らない。例えば、メガネ本体１１にモータなどを設け、そのモータを振動させることにより警告するようにしてもよいし、メガネのレンズ部分に通常状態では透明の液晶パネルを設け、液晶パネルに警告メッセージや、不審者が検知されたフレームの画像を表示するようにしてもよい。

また、本実施の形態では、ステップＳ１２においてカメラ（１）１２〜カメラ（５）１６で撮像された５枚の画像を合成し、ステップＳ１３において合成画像から顔領域を検出したが、５枚の被写体像を合成せず、個々の被写体像から顔領域の検出をするようにしてもよい。

また、本実施の形態では、カメラ（１）１２〜カメラ（５）１６の５つのカメラを設けたが、カメラの数や位置はこの形態には限られない。

また、本実施の形態では、メガネに複数のカメラが設けられた形態について説明したが、ウェアラブルなものであればメガネに限定されない。例えば、帽子、ヘルメットなどに複数のカメラが設けられた形態も考えられる。帽子やヘルメットに複数のカメラを設ける形態の場合には、装着者の後方の被写体像の撮像も可能である。したがって、装着者を３６０°の方向から保護することも可能である。

なお、本発明は、メガネなどの装置に限らず、装置に適用するプログラムとして提供することもできる。

本発明が適用された携帯型不審者検出装置１の概略図である。 メガネ１０に設けられたカメラ（１）１２〜カメラ（５）１６の配置を説明する図である。 携帯型不審者検出装置１のブロック図である。 携帯型不審者検出装置１の処理の流れを示すフローチャートである。 各フレームの画像を合成する処理の概念図である。

符号の説明

１：携帯型不審者検出装置、１０：メガネ、１１：メガネ本体、１２：カメラ（１）、１４：画像特徴量算出装置、１３：カメラ（２）、１４：カメラ（３）、１５：カメラ（４）、１６：カメラ（５）、１７：小型マイク、１８：小型スピーカ、２０：小型コンピュータユニット、２１：ＣＰＵ、２２：メモリ、２３：ＧＰＳ装置、２４：携帯電話ユニット、２５：視線検出装置

Claims (15)

1. 撮影者の身体に装着されるウェアラブルな撮像手段と、
   前記撮像手段により連続して撮像された被写体像から人物の顔領域を検出する顔検出手段と、
   前記顔検出手段により人物の顔領域が検出された場合に、当該顔領域が検出された人物の視線方向を検出する視線方向検出手段と、
   前記視線方向検出手段が検出した視線方向に基づいて前記顔領域が検出された人物が前記撮影者を視認しているかどうかを判断する視認判断手段と、
   前記視認判断手段により前記顔領域が検出された人物が前記撮影者を視認していると判断された場合に、前記顔領域が検出された人物が前記撮影者を視認している時間を検出する時間検出手段と、
   前記時間検出手段により検出された時間が所定の時間以上となった場合には、前記顔領域が検出された人物を不審者と判断する不審者判断手段と、
   前記不審者判断手段により前記顔領域が検出された人物が不審者と判断された場合に、不審者が発見されたこと示す情報を前記撮影者に通知する通知手段と、
   を備えたことを特徴とする携帯型不審者検出装置。
2. 前記顔領域検出手段は、前記顔領域が検出された人物の顔領域と、当該人物の顔の向き及び黒目の位置を検出し、
   前記視線方向検出手段は、前記顔領域検出手段により検出された顔の向き及び黒目の位置に基づいて前記顔領域が検出された人物の視線方向を検出することを特徴とする請求項１に記載の携帯型不審者検出装置。
3. 前記顔検出手段により顔領域が検出された場合に、前記顔領域が検出された人物の前記撮影者に対する位置を検出する人物位置検出手段を備え、
   前記通知手段は、前記不審者判断手段により前記顔領域が検出された人物が不審者と判断された場合には、前記人物位置検出手段により検出された前記顔領域が検出された人物の前記撮影者に対する位置を前記撮影者に通知することを特徴とする請求項１又は２に記載の携帯型不審者検出装置。
4. 前記顔検出手段により顔領域が検出された場合に、前記顔領域の検出結果に基づいて前記顔領域が検出された人物の性別及び年齢の少なくとも１つを検出する年齢／性別判断手段を備え、
   前記通知手段は、前記不審者判断手段により前記顔領域が検出された人物が不審者と判断された場合には、前記年齢／性別判断手段により検出された性別及び年齢の少なくとも１つを前記撮影者に通知することを特徴とする請求項１から３のいずれかに記載の携帯型不審者検出装置。
5. 前記顔検出手段により顔領域が検出された場合に、前記顔領域が検出された人物までの距離を推定する距離推定手段を備え、
   前記通知手段は、前記不審者判断手段により前記顔領域が検出された人物が不審者と判断された場合であって、かつ前記距離推定手段により推定された前記顔領域が検出された人物までの距離が所定の距離以下となった場合には、前記撮影者に警告を通知することを特徴とする請求項１から４のいずれかに記載の携帯型不審者検出装置。
6. 前記不審者判断手段により前記顔領域が検出された人物が不審者と判断された場合に、当該不審者と判断されたことを示す情報と、前記撮像手段により撮像された画像とを外部機器に送信する送信手段を備えたことを特徴とする請求項１から５の何れかに記載の携帯型不審者検出装置。
7. 前記携帯型不審者検出装置の位置情報を取得する装置位置取得手段を備え、
   前記送信手段は、前記不審者判断手段により前記顔領域が検出された人物が不審者と判断された場合に、前記装置位置取得手段により取得された位置情報を送信することを特徴とする請求項６に記載の携帯型不審者検出装置。
8. 前記不審者判断手段により前記顔領域が検出された人物が不審者と判断された時の時刻情報を取得する時刻情報取得手段を備え、
   前記送信手段は、前記不審者判断手段により前記顔領域が検出された人物が不審者と判断された場合に、前記時刻情報取得手段により取得された時刻情報を送信することを特徴とする請求項６又は７に記載の携帯型不審者検出装置。
9. 前記本体部に設けられ、前記撮影者の周辺の音情報を収集するマイクを備え、
   前記送信手段は、前記不審者判断手段により前記顔領域が検出された人物が不審者と判断された場合に、前記マイクにより収集された音情報を送信することを特徴とする請求項６から８のいずれかに記載の携帯型不審者検出装置。
10. 前記撮像手段は、複数の撮像素子と、当該複数の撮像素子に前記撮影者から見て異なる方向の被写体像を結像させる複数の撮像レンズを有することを特徴とする請求項１から９のいずれかに記載の携帯型不審者検出装置。
11. 前記複数の撮像レンズは、前記複数の撮像素子に結像される複数枚の被写体像の一部が重複するように前記撮像手段に設けられ、
    前記複数の撮像素子により一部が重複するように結像された複数枚の被写体像のうちの重複する部分を合成して１枚の画像を生成する合成手段を備え、
    前記顔検出手段は、前記合成手段により合成された１枚の画像から人物の顔領域を検出することを特徴とする請求項１０に記載の携帯型不審者検出装置。
12. 前記撮像手段はメガネに設けられ、少なくとも前記撮影者から見て前方と左右方向の被写体像を撮像することを特徴とする請求項１０又は１１に記載の携帯型不審者検出装置。
13. 前記撮像手段は帽子又はヘルメットに設けられ、少なくとも前記撮影者から見て後方の被写体像を撮像することを特徴とする請求項１０又は１１に記載の携帯型不審者検出装置。
14. ウェアラブルな撮像手段を用いて被写体像を連続して撮像するステップと、
    前記連続して撮像された被写体像から人物の顔領域を検出するステップと、
    前記人物の顔領域が検出された場合に、当該顔領域が検出された人物の視線方向を検出するステップと、
    前記検出した視線方向に基づいて前記顔領域が検出された人物が前記撮影者を視認しているかどうかを判断するステップと、
    前記撮影者を視認しているかどうかを判断するステップにおいて前記顔領域が検出された人物が前記撮影者を視認していると判断された場合に、前記顔領域が検出された人物が前記撮影者を視認している時間を検出するステップと、
    前記検出された時間が所定の時間以上となった場合には、前記顔領域が検出された人物を不審者と判断するステップと、
    前記顔領域が検出された人物が不審者と判断された場合に、不審者が発見されたこと示す情報を前記撮影者に通知するステップと、
    を含むことを特徴とする不審者検出方法。
15. 請求項１４に記載の携帯型不審者検出方法を演算装置に演算させることを特徴とするプログラム。

Images