【０００１】
【発明の属する技術分野】
本発明は、例えば警備や監視に用いられる、不審者判定装置等に関する。
【０００２】
【従来の技術】
従来より、マンションや施設等の住人や施設利用者、または郵便配達等の業者、すなわち関係者以外の人物が、その施設侵入していないかどうかを調べるためには、当該場所に警備員を常駐させたり、警備会社による管理を行っていた。
【０００３】
図７に、従来の技術による監視システムの構成を示す。図に示すように、監視室７１０は監視用端末７１１を備えており、監視用端末７１０は、監視の対象となる施設７２０内の廊下７２１、第１の部屋７２２、第２の部屋７２２ｂにそれぞれに設けられたモニタカメラ７３０ａ、７３０ｂ、７３０ｃと接続されており、モニタカメラ７３０ａ、７３０ｂ、７３０ｃが受像した映像を表示する。
【０００４】
これにより、監視室７１０内の監視者は、施設７２０内の各部の人の往来を監視して、不審者や不審物があれば、直ちに警告を発したり、警察に連絡するなど、適切な処置を行うことができる。
【０００５】
【発明が解決しようとする課題】
しかしながら、モニタカメラを用いた監視を行おうとすると、監視室７１０内の監視者は、監視時間中は常にモニタを注視しなければならない。したがって、監視者は、２４時間、もしくは夜間常勤ができる警備会社のような専門の業者である必要があり、結果として監視システムの運営が高コストなものとなっていた。
【０００６】
本発明は、上記の課題に鑑みてなされたものであり、簡易な構成かつ低コストで施設の監視を行い、施設に侵入する不審者を判別するなど、撮像対象の状態変化を捕らえることが可能な状態変化判定装置等をを提供することを目的とする。
【０００７】
【課題を解決するための手段】
上記の目的を達成するために、第１の本発明は、所定のエリアを撮像して得られた画像の変化を用いて、前記所定のエリアの状態が変化したかどうかを判定する状態変化判定装置である。
【０００８】
また、第２の本発明は、所定のエリアを撮像して得られた、少なくとも所定のインターバルで前後に隣接する画像の全部または一部の差分をとる差分手段と、
前記差分と所定の閾値とを比較し、前記差分が前記所定の閾値以上である場合に変化が発生したとみなし、その変化発生後の差分の大きさに基づき異常ありと判定し、そうでない場合は異常なしと判定する異常判定手段と、
前記異常ありの判定が、所定の時間内に所定の回数生じた場合、前記所定のエリアの状態が変化したと判断する判断手段とを備えた状態変化判定装置である。
【０００９】
また、第３の本発明は、前記画像を複数の副領域として設定する副領域設定手段を備え、
少なくとも前記判断手段は、前記判断の結果を、前記複数の副領域のそれぞれについて得る第２の本発明の状態変化判定装置である。
【００１０】
また、第４の本発明は、前記異常判定手段は、前記変化発生後の差分の大きさが、所定の期間以上一定である場合、前記異常ありの判定を行う第２または第３の本発明の状態変化判定装置である。
【００１１】
また、第５の本発明は、前記所定のインターバルは、外部から設定可能な第２または第３の本発明の状態変化判定装置である。
【００１２】
また、第６の本発明は、前記判断手段における所定の時間および／または所定の回数は、外部から設定可能な第２または第３の本発明の状態変化判定装置である。
【００１３】
また、第７の本発明は、前記差分手段における前記差分をとる前記画像の一部の位置および／または大きさは、外部から設定可能な第２または第３の本発明の状態変化判定装置である。
【００１４】
また、第８の本発明は、前記異常判定手段における所定の閾値の大きさは、外部から設定可能な第２または第３の本発明の状態変化判定装置である。
【００１５】
また、第９の本発明は、前記判断手段の判断結果を含む判断情報を生成し、該判断情報を外部へ告知する告知手段をさらに備えた第２または第３の本発明の状態変化判定装置である。
【００１６】
また、第１０の本発明は、前記告知手段は、前記判断情報を、外部から設定可能な所定の時間帯に告知する第９の本発明の状態変化判定装置である。
【００１７】
また、第１１の本発明は、前記判断情報は、前記判断結果に対応した前記画像の全部または一部を含む第９の本発明の状態変化判定装置である。
【００１８】
また、第１２の本発明は、前記判断情報は、ネットワークを介して外部へ告知される第９の本発明の状態変化判定装置である。
【００１９】
また、第１３の本発明は、前記判断情報は、電子メールとして前記ネットワーク上を配信される第１２の本発明の状態変化判定装置である。
【００２０】
また、第１４の本発明は、前記電子メールのメールアドレスは、前記副領域の全部または一部に割り当てられている第１３の本発明の状態変化判定装置である。
【００２１】
また、第１５の本発明は、前記判断情報に基づく警告情報を生成し、該警告情報を発信する警報手段を備えた第２または第３の本発明の状態変化判定装置である。
【００２２】
また、第１６の本発明は、前記警告情報は、前記所定のエリアに対して発信される第１５の本発明の状態変化判定装置である。
【００２３】
また、第１７の本発明は、前記警報情報は、所定のインターバルをおいて複数回発信され、発信される毎にその内容が異なる第１５または第１６の本発明の状態変化判定装置である。
【００２４】
また、第１８の本発明は、前記撮像された画像、前記異常判断手段の判断動作の履歴、前記判定手段の判定動作の履歴の全部または一部を記録する履歴記録手段を備えた第２または第３の本発明の状態変化判定装置である。
【００２５】
また、第１９の本発明は、前記外部からの設定は、ネットワークを通じて行なうことができる第５から第８、または第１０のいずれかの本発明の状態変化判定装置である。
【００２６】
また、第２０の本発明は、前記所定のインターバル、前記判断手段における所定の時間および／または所定の回数、前記差分手段における前記差分をとる前記画像の一部の位置および／または大きさ、前記差分手段が差分を得るための条件の全部または一部は、前記撮像が行われている時間帯に応じて変更される第２または第３の本発明の状態変化判定装置である。
【００２７】
また、第２１の本発明は、第２の本発明の状態変化判定装置の、所定のエリアを撮像して得られた、少なくとも所定のインターバルで前後に隣接する画像の全部または一部の差分をとる差分手段と、前記差分と所定の閾値とを比較し、前記差分が前記所定の閾値以上である場合に変化が発生したとみなし、その変化発生後の差分の大きさに基づき異常ありと判定し、そうでない場合は異常なしと判定する異常判定手段と、前記異常ありの判定が、所定の時間内に所定の回数生じた場合、前記所定のエリアの状態が変化したと判断する判断手段との全部または一部としてコンピュータを機能させるためのプログラムである。
【００２８】
また、第２０の本発明は、第２１の本発明のプログラムを担持した媒体であって、コンピュータにより処理可能な媒体である。
【００２９】
【発明の実施の形態】
以下、本発明の実施の形態を、図面を参照して説明する。
【００３０】
（実施の形態１）
図１は、本発明の実施の形態１による不審者判定装置を中心に構築した監視システムの構成図である。図１において、監視システムは、施設１００内の監視場所１１０に配置されたモニタカメラ１１１と、モニタカメラ１１１に、キャプチャ手段２１０を介して接続された不審者判定装置２２０が配置された監視室２００と、本発明の状態変化判定装置に相当する不審者判定装置２２０とインターネット３００を介して通信を行う外部情報端末４００とを備えている。
【００３１】
モニタカメラ１１１は、例えば家庭用ビデオカメラやパソコン用のＣＣＤ小型モニタカメラにて実現され、本発明の所定のエリアに相当する、監視場所１１０内の所定の撮像範囲を撮像し、映像信号として不審者判定装置に出力する手段である。
【００３２】
キャプチャ手段２１０は、モニタカメラ１１１が撮像した映像を１フレーム毎の静止画としてキャプチャリングして、不審者判定装置２２０に出力する手段である。
【００３３】
次に、不審者判定装置２２０において、差分手段２２１は、モニタカメラ１１１からの映像を、所定のインターバルをおいて１フレーム毎取得し、各インターバル毎の一フレーム分の画像の差分をとる手段である。また、異常判断手段２２３は、差分手段２２１の取得した差分の大きさと、予め設定した所定の閾値とを比較し、差分が閾値以上である場合は変化が発生したとみなし、その変化発生後の差分の大きさを計測することにより異常の有無を判定し、それぞれの判定結果を生成する手段である。また、判断手段２２３は、異常判断手段２２３の判定結果を蓄積しておき、タイマ２２４を参照して、所定時間内に異常ありの判定結果が所定の回数生じた場合、モニタカメラ１１１に撮像された画像内に不審者が映っていると判断する手段である。また、告知手段２２５は、判断手段２２３の判断結果を含む情報を判断情報として生成し、これを出力する手段である。また、表示手段２２６は、例えばＣＲＴや液晶ディスプレイで実現され、判断情報を表示する手段である。また、通信手段２２７は、例えばモデムや無線通信端末で実現され、本発明のネットワークの一例であるインターネット３００に判断情報を送信する手段である。また、設定インタフェース２２８は、差分手段２２１、異常判定手段２２２、判断手段２２３の各パラメターを設定するための手段である。
【００３４】
また、外部情報端末は、例えばインターネット接続可能な携帯電話４０１や、同様の機能を有するパソコン４０２によって実現される手段である。なお、インターネット３００本発明のネットワークの一例であり、他のネットワークとしては、ＬＡＮやイントラネットなどのＷＡＮであってもよい。
【００３５】
次に、図２は、本実施の形態の不審者判定装置の動作を説明するためのフローチャートを示す図である。
【００３６】
さらに、図３（ａ）（ｂ）（ｃ）は、本実施の形態の不審者判定装置の動作を説明するための、モニタカメラ１１１の撮像した画像を示す図である。
【００３７】
以上のような構成を有する、本発明の実施の形態における不審者判定装置を用いた監視システムの動作について、図２のフローおよび図３を参照して説明を行うとともに、これにより、本発明の状態変化判定方法の動作について説明を行う。ただし、以下の説明においては、監視場所１１０の一例として、廊下に面した部屋の入口を例に取り、廊下は、郵便配達等の一時的な関係者の出入りをのぞけば、本来無人であることが正常であるものとする。
【００３８】
はじめに、モニタカメラ１１１は、連続的に廊下内の映像を撮像する（Ｓ１）。
【００３９】
モニタされた映像信号は、キャプチャ手段２１０に出力される。キャプチャ手段２１０は、入力される映像信号を１フレーム毎の画像信号として、不審者判定装置２２０へ出力する（Ｓ２）。
【００４０】
不審者判定装置２２０において、差分手段２２１は、画像信号の入力をうけると、所定のインターバルをおいて、これを取得する。このとき、モニタカメラ１１１が通常のビデオカメラである場合、１フレームは１／３０秒であるので、インターバルを５分と設定すれば、差分手段は６０フレーム毎に１フレームの画像を取得する。
【００４１】
さらに差分手段２２１は、取得した画像の前後の差分をとり、その大きさを求める（Ｓ３）。
【００４２】
ここで図３（ａ）は、無人状態の廊下を撮像した画像を説明する図である。（ア）は所定の撮像時の画像であり、（イ）は（ア）から５分を経過した状態の画像であり、（ウ）は（ア）から１０分を経過した状態の画像、（エ）は（ア）から１５分を経過した状態の画像、である。差分手段２２１は、この画像（イ）と画像（ア）との差分をとり、次いで画像（ウ）と画像（イ）との差分をとり、画像（エ）と画像（ウ）との差分をとる。
【００４３】
このとき、差分となるパラメータは、差分をとろうとする２枚の画像を所定数の画素に分解し、対応する個々の画素の情報の違いをとることにより行っている。例えば、画像を構成する画素が１バイトの情報量を有するとすると、二枚の画像のそれぞれの画素は８ビットの情報を有する。差分手段２２１は、この各ビットの情報（０か１か）が前後の画像で同じかどうかを見ることによって、違いがある場合に差分があるとみなす。差分はビット単位でカウントされ、このカウント値が差分値となる。
【００４４】
以下、モニタカメラ１１１の撮像する廊下の状態に応じて説明を行う。
【００４５】
図３（ａ）に示す例においては、廊下は無人状態であるから差分は発生しないため、それぞれの差分値はいずれも「０」として異常判定手段２２２に出力される。
【００４６】
異常判定手段２２２は、差分値の入力を受けると、予め設定された閾値と、入力された差分値との比較を行う。今回の場合、差分値は０なので、差分手段２２１に設定された閾値以上になることはない。そこで異常判定手段は「異常なし」と判定する（Ｓ４の「Ｎ」）。「異常なし」であれば、Ｓ１〜Ｓ３の動作が継続される。
【００４７】
次に、図３（ｂ）は、廊下に不審者が侵入し、その模様が撮像された画像を説明する図である。（ア）、（イ）、（ウ）、（エ）それぞれの時間経過は、図３（ａ）と同様であるが、（イ）、（ウ）の各画像にはそれぞれ人影５００ａ、人影５００ｂが映っている。
【００４８】
差分手段２２１は、この画像（イ）と画像（ア）との差分をとり、次いで画像（ウ）と画像（イ）との差分、さらに画像（エ）と画像（ウ）との差分をとる。画像（イ）と画像（ア）との差分値Ａは、人影５００ａが映っている分だけ大きくなっている。また画像（ウ）と画像（イ）との差分値Ｂは、人影５００ｂが人影５００ａとほぼ同様の位置および大きさにあるため０である。さらに画像（エ）と画像（ウ）との差分値Ｃは、人影５００ｃが人影５００ｂとほぼ同様の位置および大きさにあるため０であり、差分値Ｃと差分値Ｂと実質同一値に保たれている。
【００４９】
異常判定手段２２２は、差分値の入力を受けると、予め設定された閾値と、入力された差分値との比較を行うが、今回の場合、最初に得られたのは差分値Ａであり、これらは差分手段２２１に設定された閾値以上の値である。そこで異常判定手段２２２は変化が発生したとみなし（Ｓ４の「Ｙ」）、その後の差分の大きさを測定する。次に得られるのは差分値Ｂであり、次いで差分値Ｃが得られる。上述したように差分値Ｂ、Ｃは実質同一であり、つまり変化発生後の差分の大きさが一定に保たれていることとなる（Ｓ５）。このとき異常判定手段２２２は「異常あり」と判定し、この判定結果を判断手段２２３に出力する（Ｓ５の「Ｙ」）。
【００５０】
判断手段２２３は、判断結果の入力を受けると、タイマ２２４の計測時を参照して、所定の時間内に「異常あり」の判定結果が何回入力されたかを判定する（Ｓ７）。
【００５１】
所定回数「異常あり」の判定結果の入力をうけた場合、判断手段２２３は、モニタカメラ１１１が撮像した廊下に不審者がいると判断する（Ｓ８）。
【００５２】
一方、廊下を郵便配達のような関係者が通過する場合は、扉の前で静止する機会はまれであるか、あっても短時間であるために、差分をとるための画像に映ることは少ない。例えば図３（ｃ）のように、画像（ア）、（イ）、（ウ）、（エ）において、人影が映っているのは、人影５００ｄを含む画像（イ）だけである。
【００５３】
この場合、異常判定手段２２２は、最初には画像（イ）と画像（ア）との差分から差分値Ａを得るが、これが仮に差分手段２２１に設定された閾値以上の値であったとしても、次に得られるのは、画像（ウ）と画像（イ）との差分値Ｄであり、これは差分値Ａとほぼ同一であるのに対し、次に得られる差分値Ｅは、画像（エ）と画像（ウ）との差分値であり、これは実質０である。すなわち、差分値Ｅと差分値Ｄとは大きさが異なり、一定にはならない。つまり変化発生後の差分の大きさが一定に保たれていないこととなる（Ｓ５のＮ）。
【００５４】
このとき異常判定手段２２２は「異常なし」と判定し、再びＳ１に戻って動作をループする。この判定結果を判断手段２２３に出力する（Ｓ５の「Ｙ」）。
【００５５】
次に、判断手段２２３は、「不審者あり」の判断結果を告知手段２２５へ出力する。
【００５６】
告知手段２２５は、判断結果の入力を受けると、この内容を含む判断情報を生成し（Ｓ９）、通信手段２２７または表示手段２２６へ出力する。
【００５７】
通信手段２２７は、判断情報の入力をうけると、これをインターネット３００を介して外部情報端末４００へ送信する。判断情報の内容は、判断結果の他、判断結果が得られた日付、時間等の情報を含んでいてもよい。また、モニタカメラ１１１が監視している場所に関する情報を含んでいてもよい。このとき判断情報の形態は、外部情報端末４００が電子メール対応されていれば、電子メールであってもよいし、ＷＷＷブラウザ対応であれば、Ｗｅｂページのコンテンツの形態であってもよい。とくにＷｅｂページを用いる場合は、不審者判定装置２２０と外部情報端末４００との間に設けられた、図示しないサーバのＣＧＩを用いて、自動的にコンテンツの内容が書き換えられるようにすればよい。
【００５８】
ところで、上記の説明においては、告知手段２２５は、判断手段２２５の判断結果が「不審者あり」である場合に判断情報を出力しているが、平日昼間のマンションの玄関など、監視場所１１０の場所や監視の時間帯によっては、異常判定手段２２２および判断手段２２３が正常に動作していても、人物の往来が激しいため、「不審者あり」の判断結果が恒常的に出力され、判断情報が常に出力されることがある。
【００５９】
この場合、判断情報が例えば電子メールで外部情報端末４００に送られるような構成であれば、外部情報端末４００は判断情報の電子メールを常に受信していることになり、監視システムの実用上不具合がある。
【００６０】
告知手段２２５は、このような不具合に対処するため、設定インタフェース２２８からの入力に基づき、判断情報を出力する時間帯を設定し、この時間帯にのみ判断情報を出力するようにする。
【００６１】
例えば、異常判定手段２２２および判断手段２２３は午前０時から午後１１時５９分まで２４時間動作を続ける一方、告知手段２２５が動作するのは、監視場所１１０における人物の往来が少なくなると考えられる、午後１０時から午前６時までの間と設定する。この場合、判断手段２２３は２４時間中判断結果を出力するが、告知手段２２５が判断情報を生成するのは、午後１０時から午前６時までの間であるから、この間に得られた判断結果のみが、判断情報として外部へ出力されることになる。
【００６２】
これにより、判断情報の内容をより確かなものに絞り込み、有益な判断情報だけを告知することが可能となる。
【００６３】
なお、告知手段２２５の時間帯設定としては、平日の場合だと上記のような深夜時間帯にし、週末や休日の場合は２４時間にするなど、監視場所１１０の往来の状況に応じて任意に設定してよい。
【００６４】
また、このとき、電子メール他の告知情報には、「不審者がいる」の判断結果の基となった画像を画像ファイルとして添付するようにしてもよい。さらにこのとき画像は、判断手段２２３の判断結果の基となった、異常判定手段２２２が「異常あり」の判定を与える静止画を送付してもよい。このとき静止画は、異常ありの判定を与える差分値を有する全ての画像であってもよいし、その一部の単数または複数の画像であってもよい。
【００６５】
一方、表示手段２２６は、判断情報を表示する。このとき、「異常あり」の判断結果の基となった画像を同時に表示するようにしてもよい。
【００６６】
このように、本実施の形態による不審者判定装置を用いた監視システムによれば、監視の対象となるエリアを撮像して得られた画像の差分に基づき不審者の有無を判定し、不審者があると判断された場合にのみ、その判断結果を判断情報として外部へ告知することができる。これにより、監視者が常時モニタカメラをチェックすることなく、監視場所に不審者がいないかどうかを管理することが可能となる。
【００６７】
なお、上記の説明においては、差分手段２２１は、キャプチャ手段２１０から得られた画像の全領域の差分をとるとしたが、差分手段２２１は、得られた画像の一部を選択し、この選択領域のみ差分をとるようにしてもよい。
【００６８】
すなわち、図４の画像（ア）（イ）に示すように、画像（ア）（イ）それぞれ全体のなかから、図中点線で囲んだ選択領域６００ａ、６００ｂのみを抽出し、隣接する画像のそれぞれについて、選択領域６００ａ、６００ｂだけで差分値を得るようにする。
【００６９】
このような構成においては、撮像された画像全体の中で、かならず差分が発生することが期待され、監視が必要となる選択領域６００ａ、６００ｂと、差分が発生しないと考えられ、監視が不要と考えられる残りの領域６１０ａ、６１０ｂとを予め区別することができる。これにより、残りの領域６１０ａ、６１０ｂに関しては差分をとる処理が省略されるため、監視の精度を上げたり、差分手段２２１の処理の付加を軽減することが可能となる。
【００７０】
（実施の形態２）
図５は、本発明の実施の形態２による不審者判定装置を中心に構築した監視システムの構成図である。図５において、図１と同一部または相当部には同一符号を付し、詳細な説明は省略する。また、本発明の状態変化判定装置に相当する不審者判定装置２２０′において、警報手段６２０は、判断情報に基づき警告情報を生成する手段である。また、スピーカ６２１は監視場所１１０に設置された手段であり、警告情報を音声信号として出力する手段である。
【００７１】
このような構成を有する本実施の形態における不審者判定装置は、実施の形態１と同様の動作を行うものであるが、判断手段２２３が「不審者あり」の判断を行った場合、直接監視場所１１０に対して警報を発するものである。
【００７２】
すなわち、警報手段６２０は、告知手段２２５が生成した判断情報を取得して、警告情報を生成する。警告情報は、監視場所１１０に滞在すると考えられる不審者に対して警告となるものであればブザー音、サイレン音などの機械音であってもよいし、音声合成によって得られるか、または予め外部の図示しない記録手段に記録された音声データ（例えば「警告！警告！」等の人語）であってもよい。
【００７３】
また、警報手段６２０は、判断手段２２３が「不審者あり」の判断を行っている間、所定のインターバルをおいて連続的に警告情報を発信するが、その内容は、発信のインターバル毎に異なるものであってもよい。例えば、一回目の警報情報は人語の音声データであって、２回目は内容の異なる音声データとし、３回目以降の警報情報はサイレン音であるとする。これにより、監視場所１１０に滞在すると考えられる不審者に対して、速やかに監視場所１１０からの退去を促すことが可能となる。
【００７４】
なお、警報情報は、監視場所１１０に設置されたスピーカ６２１によって直接出力されるものとしたが、判断情報と同様に、インターネット３００を介して外部情報端末４００へ出力されるものとしてもよいし、電話や他の公衆通信回線を用いて、警察や警備会社へ発信されるものであってもよい。
【００７５】
（実施の形態３）
図８は、本発明の実施の形態３による不審者判定装置を中心に構築した監視システムの構成図である。図８において、図１と同一部または相当部には同一符号を付し、詳細な説明は省略する。また、本発明の状態変化判定装置に相当する不審者判定装置２３０において、副領域設定手段８０１は、本発明の副領域設定手段に相当し、設定インタフェース２２８からの設定に基づき、キャプチャ手段２１０がキャプチャした画像に、複数の所定の副領域を割り当て、設定する手段である。
【００７６】
このような構成を有する本実施の形態における不審者判定装置は、実施の形態１と同様の動作を行うものであるが、撮像された画像から複数の副領域を選択し、この副領域毎に不審者の有無の判定を行うものである。以下、実施の形態１との相違点を中心に説明を行う。
【００７７】
図９（ａ）は、本実施の形態の不審者判定装置の動作を説明するための図である。図においては、監視場所１１０の例として駐車場を用いた。モニタカメラ１１１が撮像した画像９００を、設定インタフェース２２８からの入力により、副領域９００ａ〜９００ｄを設定する。副領域９００ａ〜９００ｄとしては、駐車場の駐車スペース毎に相当するもので、各駐車スペースの契約者は異なり、異なる連絡先を有している。なお、副領域の設定は、画像９００を表示手段２２６に表示して、利用者はこれを参照しながら副領域を設定するようにする。
【００７８】
さらに、設定インタフェース２２８からの入力により、通信手段２２７に対して、副領域９００ａ〜９００ｄのそれぞれに対し、判断情報の通知先となる電子メールアドレスを設定する。なお、電子メールを利用できない連絡先に対しては設定を省略してよい。
【００７９】
次に、差分手段２２１，異常判定手段２２２は実施の形態１と同様、画面９００に対して差分、判定の動作を行うが、判断手段２２３は画像９００において不審者がいると判定した場合、その判断が行われた画面９００上の場所が、副領域９００ａ〜９００ｄのいずれに該当するかの判断も同時に行い、両方の判断結果を通信手段２２７に出力する。通信手段２２７は、上記判断が該当した副領域に対応する電子メールアドレスに対してのみ、判断情報を電子メールとして出力する。
【００８０】
このように、本実施の形態によれば、同一画面に複数の副領域を設定し、不審者の有無の判定結果が、各副領域のいずれで得られたかを判断するようにしたことにより、同一領域内の複数の場所を同時に管理して、不審者の有無を判定することができる。これは、上述したように、駐車場等の管理に適している。
なお、図９（ａ）においては、監視場所１１０として駐車場を設定し、副領域９００ａ〜９００ｄは、画面９００に写っている停車中の車がすべて含まれるように設定するものとして説明を行ったが、副領域の設定としては、図９（ｂ）に示すように、停車中の車体の一部と、他の部分とを含む小領域である副領域９０１ａ〜９０１ｄのように設定してもよい。図９（ａ）の場合では、副領域が撮像されている車全部を含むように設定しなければならず、画面９００の端部に位置する車は、画面９００の中央よりの車と画像が重なってしまい、十分監視可能な画像が得られない恐れがある。これに対し、図９（ｂ）の副領域のような小領域を設定すれば、画面の状態変化として、少なくとも画面９００内に停車している車の有無を判定することができる。これにより、車の車の盗難もしくは不法駐車といった事態に十分対応することが可能となる。
【００８１】
また、上記の説明においては、差分手段２２１，異常判定手段２２２は画像９００全体に対してそれぞれ差分、判定の動作を行うものとして説明を行ったが、差分手段２２１，異常判定手段２２２は、副領域のそれぞれに対して個々に差分、判定の動作を行うようにしてもよい。この場合、判断手段２２３の判断は、副領域９００ａ〜９００ｄのそれぞれに対して直接行うことになり、これにより判定がどの副領域で生じているかが判断されていることになる。
【００８２】
また、副領域の設定は、設定インタフェース２２８を用いるとしたが、この場合は、利用者は監視室２００から設定を行うことになる。他に、通信手段２２７を用いて、インターネット３００を介して外部情報端末４００から設定を行うようにしてもよい。この場合は、外部情報端末４００は通信手段２２７から画像９００を得ることになる。なお、画面上における領域設定の具体的な方法については、画像処理ソフトウェア等に用いられている公知の方法にて行い、詳細な説明は省略する。
【００８３】
また、上記の説明においては、実施の形態１と組み合わせたものとして説明を行ったが、本実施の形態は、実施の形態２と組み合わせて実施してもよい。
【００８４】
なお、上記の各実施の形態において、差分手段２２１は、所定のインターバルとして、５分ごとに得られた画像について差分をとるものとして説明を行ったが、このインターバルは、監視場所１１０の状態に応じた時間帯によって変更されるものとしてもよい。
【００８５】
例えば、マンションなどの場合、昼間に監視を行うと、監視場所１１０の人の往来は夜間より激しいと考えられるため、差分手段２２１のインターバルが短い場合は、異常判定手段２２２が「異常あり」の判定を行い、判断手段２２３が「不審者あり」の判断を行う頻度が、必要以上に多くなる恐れがある。
【００８６】
これに対し、タイマ２２４により計時される時間帯に基づき、差分手段２２１の動作インターバルを、昼間の場合は夜間の場合より大きくとるようにすれば、必要以上に「不審者あり」の判断が行われる機会を減少させ、より精度の高い監視が行えるようになる。
【００８７】
このとき、インターバルの変更は、昼間と夜間との２つに限らず、３つ以上の細かい時間帯に渡って行うようにしてもよい。また、差分手段２２１の動作インターバルに限らず、図４（ａ）（ｂ）に示すような、選択領域６００の大きさも、時間帯に応じて変更するようにしてもよい。
【００８８】
また、実施の形態１において、差分を与えるパラメータは、画像の有する情報の違いをビット単位で比較することによるとして得るとしたが、同一の差分値が得られない場合がある。これは、同一場所が撮像されている２つの画像において、画像を形成する画素は同一の情報を与えなければならないにも関わらず、モニタカメラ１１１の精度により、画像の情報に撮像毎に差異が生じ、これが差分としてカウントされるからである。
【００８９】
このとき、差分をとった後の画像のコントラストを高めると、画像の階調の濃淡のうち、淡い（明るい）部分をより強調して、モニタカメラの精度に基づく情報の差異を補償することができる。
【００９０】
しかし、同様の条件で夜間に差分を得ようとする、濃い（暗い）部はより強調されるため、差分を得るのに必要な画像の情報が失われてしまう。
【００９１】
このような場合には、昼間の場合とは逆に、差分をとった後の画像のコントラストを低めにすることにより、差分を得るための情報を残すようにする。
【００９２】
すなわち、差分手段２２１は、時間帯に応じて、差分値を得るための条件を変更することにようにする。これにより、昼夜によらず、同一の２つの画像の比較から、常に同一の差分が得ることができ、判断や判定に必要な情報を正確に得ることができる。
【００９３】
さらに、異常判定手段２２２が差分値との比較に用いる所定の閾値の大きさも、時間帯に応じて変更するようにしてもよい。また、判断手段２２３の判断基準となる「異常あり」が生じる時間および回数も、時間帯に応じて変更するようにしてもよい。
【００９４】
これにより、監視精度をさらにきめ細かく向上させることができる。
【００９５】
さらに、差分手段２２１における差分をとるインターバル、選択領域の位置やその大小、差分を得るための条件、異常判定手段２２２における閾値、判断手段２２３における判断基準となる時間および回数、告知手段２２５の動作時間帯の設定、上記の各手段のパラメータを変更するための時間帯の設定は、それぞれ個別に設定インタフェース２２８を介して外部から任意に設定するようにしてもよい。
【００９６】
このとき、設定インタフェース２２８と、通信手段２２７と接続することにより、インターネット３００を介した外部情報端末４００によって、電子メールや他の手段によって、設定インタフェース２２８で可能なパラメータの入力を行うようにしてもよい。
【００９７】
これにより、監視室２００に常駐することなく監視条件を変更することができる。
【００９８】
さらに、図６に示すように、不審者判定手段２２０″として、履歴記録手段６３０を設けて、差分手段２２１が差分をとるために用いた画像、異常判定手段２２２における判定結果、判断手段２２３における判断結果を、各手段が動作した時間とともに動作履歴として記録しておくようにしてもよい。このとき判定結果や判断結果は、「異常なし」「不審者なし」の場合を含んでおいてもよい。また、動作履歴は、判断情報とともに表示手段２２６にて表示したり、通信手段２２７として外部情報端末４００へ出力するようにしてもよい。
【００９９】
また、上記の各実施の形態は、単一のモニタカメラ１１１を接続して用いるものとして説明を行ったが、複数のモニタカメラを接続して、複数の監視場所を一台の不審者判定装置によって監視するようにしてもよい。
【０１００】
また、差分手段２２１は、モニタカメラ１１１から得られた動画像を、キャプチャ手段２１０によってキャプチャされた１フレーム毎の静止画から差分を得るようにしたが、差分手段２２１に入力される画像は、少なくとも差分をとることができる所定のインターバルで前後に隣接する静止画であればよい。したがって、差分手段２１１は、スチルカメラによって所定のインターバルで撮像された画像を断続的に取得するようにしてもよい。すなわち、監視場所１１０には、モニタカメラとして、動画用のビデオカメラの他、デジタルスチルカメラを設置し、キャプチャ手段２１０は省いた構成とすることができる。
【０１０１】
また、本発明は、実施の形態３にて説明したように、不審者の有無のみを判定する必要はなく、駐車した車の有無や、不審物の有無や、倉庫の保管物の有無など、監視場所を撮像して得られた画像の状態の変化の判定を利用する用途なら他の目的に用いてもよい。
【０１０２】
また、本発明は、上述した本発明の状態変化判定装置の全部または一部の手段（または、装置、素子、回路、部等）の機能をコンピュータにより実行させるためのプログラムであって、コンピュータと協働して動作するプログラムである。
【０１０３】
本発明は、上述した本発明の状態変化判定装置の全部または一部の手段の全部または一部の機能をコンピュータにより実行させるためのプログラムを担持した媒体であり、コンピュータにより読み取り可能且つ、読み取られた前記プログラムが前記コンピュータと協動して前記機能を実行する媒体である。
【０１０４】
なお本発明の一部の手段（又は、装置、素子、回路、部等）とは、それらの複数の手段の内の、幾つかの手段を意味し、あるいは、一つの手段の内の、一部の機能を意味するものである。
【０１０５】
また、本発明の一部の装置（又は、素子、回路、部等）とは、それらの複数の装置の内の、幾つかの装置を意味し、あるいは、一つの装置の内の、一部の手段（又は、素子、回路、部等）を意味し、あるいは、一つの手段の内の、一部の機能を意味するものである。
【０１０６】
また、本発明のプログラムを記録した、コンピュータに読みとり可能な記録媒体も本発明に含まれる。
【０１０７】
また、本発明のプログラムの一利用形態は、コンピュータにより読み取り可能な記録媒体に記録され、コンピュータと協働して動作する態様であっても良い。
【０１０８】
また、本発明のプログラムの一利用形態は、伝送媒体中を伝送し、コンピュータにより読みとられ、コンピュータと協働して動作する態様であっても良い。
【０１０９】
また、上述した本発明のコンピュータは、ＣＰＵ等の純然たるハードウェアに限らず、ファームウェアや、ＯＳ、更に周辺機器を含むものであっても良い。
【０１１０】
記録媒体としては、ＲＯＭ等が含まれ、伝送媒体としては、光ファイバやインターネット等の伝送機構、光・電波・音波等が含まれる。
【０１１１】
したがって、以上説明した様に、本発明の構成は、ソフトウェア的に実現しても良いし、ハードウェア的に実現しても良い。
【０１１２】
【発明の効果】
以上、説明したことから明らかなように、本発明によれば、簡易な構成かつ低コストで不審者を判別するなど、撮像対象の状態変化を捕らえることが可能な不審者判定装置等が得られる。
【図面の簡単な説明】
【図１】本発明の実施の形態１における不審者判定装置による監視システムの構成を示す図である。
【図２】本発明の実施の形態１における不審者判定装置の動作のフローチャートを示す図である。
【図３】（ａ）本発明の実施の形態１における不審者判定装置の動作を説明するための図である。
（ｂ）本発明の実施の形態１における不審者判定装置の動作を説明するための図である。
（ｃ）本発明の実施の形態１における不審者判定装置の動作を説明するための図である。
【図４】（ア）本発明の実施の形態１における不審者判定装置の、他の動作例を説明するための図である。
（イ）本発明の実施の形態１における不審者判定装置の、他の動作例を説明するための図である。
【図５】本発明の実施の形態２における不審者判定装置による監視システムの構成を示す図である。
【図６】本発明の実施の形態２における不審者判定装置による監視システムの、他の構成例を示す図である。
【図７】従来の技術による監視システムの構成を示す図である。
【図８】本発明の実施の形態３における不審者判定装置による監視システムの構成を示す図である。
【図９】（ａ）本発明の実施の形態３における不審者判定装置の動作を説明するための図である。
（ｂ）本発明の実施の形態３における不審者判定装置の動作を説明するための図である。
【符号の説明】
１００ 施設
１１０ 監視場所
１１１ モニタカメラ
２００ 監視室
２１０ キャプチャ手段
２２０ 不審者判定装置
２２１ 差分手段
２２２ 異常判定手段
２２３ 判断手段
２２４ タイマ
２２５ 告知手段
２２６ 表示手段
２２７ 通信手段
２２８ 設定インタフェース
３００ インターネット
４００ 外部情報端末
４０１ 携帯電話
４０２ パソコン[0001]
TECHNICAL FIELD OF THE INVENTION
The present invention relates to a suspicious person determination device and the like used for security and monitoring, for example.
[0002]
[Prior art]
Conventionally, a security guard has been stationed at the place to check whether residents or users of facilities such as condominiums and facilities, or users of postal services, etc. Or was managed by a security company.
[0003]
FIG. 7 shows a configuration of a monitoring system according to a conventional technique. As shown in the figure, the monitoring room 710 includes a monitoring terminal 711, and the monitoring terminal 710 is provided in a corridor 721, a first room 722, and a second room 722b in a facility 720 to be monitored. Are connected to the monitor cameras 730a, 730b, and 730c provided in the monitor, and display images received by the monitor cameras 730a, 730b, and 730c.
[0004]
Thus, the observer in the monitoring room 710 monitors the traffic of people in various parts of the facility 720, and if there is a suspicious person or suspicious object, immediately issues a warning or contacts the police, for example. It can be performed.
[0005]
[Problems to be solved by the invention]
However, when trying to perform monitoring using a monitor camera, the observer in the monitoring room 710 must always watch the monitor during the monitoring time. Therefore, the observer must be a specialized company such as a security company that can work 24 hours a day or at night, and as a result, the operation of the surveillance system has become expensive.
[0006]
The present invention has been made in view of the above-described problems, and can monitor a facility with a simple configuration and at a low cost, and can detect a change in the state of an imaging target, such as determining a suspicious person entering the facility. It is an object to provide a simple state change determination device and the like.
[0007]
[Means for Solving the Problems]
In order to achieve the above object, a first aspect of the present invention is a state change determination that determines whether a state of the predetermined area has changed using a change in an image obtained by imaging a predetermined area. Device.
[0008]
Further, the second invention is a difference means for taking a difference of all or a part of an image adjacent before and after at least a predetermined interval obtained by imaging a predetermined area,
The difference is compared with a predetermined threshold, and when the difference is equal to or greater than the predetermined threshold, it is considered that a change has occurred, and it is determined that there is an abnormality based on the magnitude of the difference after the change has occurred. Is abnormality determination means for determining that there is no abnormality,
A state change determination device comprising: a determination unit configured to determine that the state of the predetermined area has changed when the determination of the presence of an abnormality occurs a predetermined number of times within a predetermined time.
[0009]
Further, a third aspect of the present invention includes a sub-region setting means for setting the image as a plurality of sub-regions,
At least the determination unit is a state change determination device according to a second aspect of the present invention, which obtains a result of the determination for each of the plurality of sub-regions.
[0010]
In a fourth aspect of the present invention, the abnormality determining means determines the presence of the abnormality when the magnitude of the difference after the occurrence of the change is constant for a predetermined period or more. Is a state change determination device.
[0011]
A fifth aspect of the present invention is the state change determining apparatus according to the second or third aspect of the present invention, wherein the predetermined interval can be set from outside.
[0012]
A sixth aspect of the present invention is the state change determining apparatus according to the second or third aspect of the present invention, wherein the predetermined time and / or the predetermined number of times in the determining means can be set from the outside.
[0013]
According to a seventh aspect of the present invention, in the state change determining apparatus according to the second or third aspect of the present invention, the position and / or size of a part of the image from which the difference is obtained by the difference means can be set from the outside. is there.
[0014]
An eighth aspect of the present invention is the state change determining apparatus according to the second or third aspect of the present invention, wherein the magnitude of the predetermined threshold value in the abnormality determining means can be set externally.
[0015]
According to a ninth aspect of the present invention, there is provided the state change determination apparatus according to the second or third aspect of the present invention, further comprising: a determination unit that generates determination information including a determination result of the determination unit and notifies the determination information to the outside. It is.
[0016]
A tenth aspect of the present invention is the state change determining apparatus according to the ninth aspect of the present invention, wherein the notifying unit notifies the determination information in a predetermined time zone that can be set from the outside.
[0017]
An eleventh aspect of the present invention is the state change determining apparatus according to the ninth aspect of the present invention, wherein the determination information includes all or a part of the image corresponding to the determination result.
[0018]
A twelfth aspect of the present invention is the state change determining apparatus according to the ninth aspect of the present invention, wherein the determination information is notified outside via a network.
[0019]
A thirteenth aspect of the present invention is the state change determining apparatus according to the twelfth aspect of the present invention, wherein the determination information is distributed on the network as an electronic mail.
[0020]
A fourteenth aspect of the present invention is the state change judging apparatus according to the thirteenth aspect of the present invention, wherein the mail address of the electronic mail is assigned to all or a part of the sub-area.
[0021]
A fifteenth aspect of the present invention is the state change determining apparatus according to the second or third aspect of the present invention, further comprising warning means for generating warning information based on the determination information and transmitting the warning information.
[0022]
A sixteenth aspect of the present invention is the state change determining device according to the fifteenth aspect of the present invention, wherein the warning information is transmitted to the predetermined area.
[0023]
A seventeenth aspect of the present invention is the state change judging apparatus according to the fifteenth or sixteenth aspect of the present invention, wherein the alarm information is transmitted a plurality of times at predetermined intervals, and the content is different each time the information is transmitted.
[0024]
An eighteenth aspect of the present invention is the second or the following, further comprising a history recording unit for recording all or a part of the captured image, the history of the determination operation of the abnormality determination unit, and the history of the determination operation of the determination unit. It is the state change determination device of the third invention.
[0025]
A nineteenth aspect of the present invention is the state change determining apparatus according to any one of the fifth to eighth or tenth aspects, wherein the external setting can be performed through a network.
[0026]
In the twentieth aspect, the predetermined interval, a predetermined time and / or a predetermined number of times in the determination unit, a position and / or a size of a part of the image from which the difference is obtained in the difference unit, All or a part of the conditions for the difference means to obtain the difference is the state change determination device according to the second or third aspect of the present invention, which is changed according to the time zone in which the imaging is being performed.
[0027]
Further, a twenty-first aspect of the present invention provides a state change determination device according to the second aspect of the present invention, in which at least a predetermined interval is obtained by imaging a predetermined area, and at least a predetermined interval is used to determine the difference between all or a part of adjacent images. Comparing the difference with a predetermined threshold value, deeming that a change has occurred if the difference is equal to or greater than the predetermined threshold value, and determining that there is an abnormality based on the magnitude of the difference after the change has occurred. Otherwise, an abnormality determination unit that determines that there is no abnormality, and a determination unit that determines that the state of the predetermined area has changed if the determination of the presence of the abnormality occurs a predetermined number of times within a predetermined time. Is a program for causing a computer to function as all or part of the above.
[0028]
A twentieth aspect of the present invention is a medium that carries the program of the twenty-first aspect of the present invention, and is a medium that can be processed by a computer.
[0029]
BEST MODE FOR CARRYING OUT THE INVENTION
Hereinafter, embodiments of the present invention will be described with reference to the drawings.
[0030]
(Embodiment 1)
FIG. 1 is a configuration diagram of a monitoring system built around a suspicious individual determination device according to Embodiment 1 of the present invention. In FIG. 1, a monitoring system includes a monitoring camera 111 disposed at a monitoring location 110 in a facility 100 and a monitoring room 200 in which a suspicious person determination device 220 connected to the monitoring camera 111 via a capture unit 210 is disposed. And an external information terminal 400 that communicates via the Internet 300 with a suspicious person determination device 220 corresponding to the state change determination device of the present invention.
[0031]
The monitor camera 111 is realized by, for example, a home video camera or a small CCD monitor camera for a personal computer. The monitor camera 111 captures an image of a predetermined imaging range in the monitoring location 110 corresponding to a predetermined area of the present invention, and generates a suspicious video signal. Means for outputting to the person determination device.
[0032]
The capture unit 210 is a unit that captures an image captured by the monitor camera 111 as a still image for each frame and outputs the captured image to the suspicious person determination device 220.
[0033]
Next, in the suspicious person determination device 220, the difference means 221 acquires the video from the monitor camera 111 for each frame at predetermined intervals, and calculates the difference between the images for one frame at each interval. is there. Further, the abnormality determination unit 223 compares the magnitude of the difference acquired by the difference unit 221 with a predetermined threshold value set in advance, and when the difference is equal to or larger than the threshold value, it is considered that a change has occurred, and after the change has occurred. This is a means for determining the presence or absence of an abnormality by measuring the magnitude of the difference and generating each determination result. The determination unit 223 accumulates the determination result of the abnormality determination unit 223, and refers to the timer 224, and when the determination result indicating that there is an abnormality occurs a predetermined number of times within a predetermined time period, the image is captured by the monitor camera 111. This is a means for determining that a suspicious individual is reflected in the image. The notifying unit 225 is a unit that generates information including the determination result of the determining unit 223 as the determination information, and outputs the generated information. The display unit 226 is realized by, for example, a CRT or a liquid crystal display, and is a unit for displaying determination information. Further, the communication unit 227 is realized by, for example, a modem or a wireless communication terminal, and is a unit that transmits determination information to the Internet 300, which is an example of the network of the present invention. The setting interface 228 is a unit for setting each parameter of the difference unit 221, the abnormality determination unit 222, and the determination unit 223.
[0034]
The external information terminal is a unit realized by, for example, a mobile phone 401 connectable to the Internet or a personal computer 402 having a similar function. The Internet 300 is an example of the network of the present invention, and the other network may be a WAN such as a LAN or an intranet.
[0035]
Next, FIG. 2 is a diagram illustrating a flowchart for explaining the operation of the suspicious individual determination device of the present embodiment.
[0036]
Further, FIGS. 3A, 3B, and 3C are diagrams showing images taken by the monitor camera 111 for explaining the operation of the suspicious individual determination apparatus of the present embodiment.
[0037]
The operation of the monitoring system using the suspicious person determination device according to the embodiment of the present invention having the above-described configuration will be described with reference to the flowchart of FIG. 2 and FIG. The operation of the state change determination method will be described. However, in the following description, as an example of the monitoring place 110, the entrance of a room facing the corridor is taken as an example, and the corridor is originally unmanned except for temporary entry and exit of mail delivery and the like. Is normal.
[0038]
First, the monitor camera 111 continuously captures an image of the inside of the corridor (S1).
[0039]
The monitored video signal is output to the capture means 210. The capture unit 210 outputs the input video signal to the suspicious individual determination device 220 as an image signal for each frame (S2).
[0040]
In the suspicious individual judging device 220, upon receiving an image signal, the difference means 221 acquires the image signal at predetermined intervals. At this time, if the monitor camera 111 is a normal video camera, one frame is 1/30 second, so if the interval is set to 5 minutes, the difference means acquires one frame image every 60 frames.
[0041]
Further, the difference means 221 obtains the difference before and after the acquired image, and obtains the size (S3).
[0042]
Here, FIG. 3A is a diagram illustrating an image obtained by capturing an unmanned corridor. (A) is an image at the time of predetermined imaging, (A) is an image after 5 minutes from (A), (C) is an image after 10 minutes from (A), (A) (D) is an image after 15 minutes have passed since (a). The difference means 221 calculates the difference between the image (a) and the image (a), then calculates the difference between the image (c) and the image (a), and calculates the difference between the image (d) and the image (c). Take.
[0043]
At this time, a parameter serving as a difference is obtained by decomposing two images for which a difference is to be obtained into a predetermined number of pixels, and taking a difference in information of each corresponding pixel. For example, assuming that pixels constituting an image have a 1-byte information amount, each pixel of two images has 8-bit information. The difference means 221 determines whether there is a difference when there is a difference by checking whether the information (0 or 1) of each bit is the same in the preceding and succeeding images. The difference is counted in bit units, and this count value becomes the difference value.
[0044]
Hereinafter, description will be given according to the state of the corridor where the monitor camera 111 captures images.
[0045]
In the example shown in FIG. 3A, no difference occurs because the corridor is unmanned, so that each difference value is output to the abnormality determination unit 222 as “0”.
[0046]
Upon receiving the input of the difference value, the abnormality determination unit 222 compares the preset threshold value with the input difference value. In this case, since the difference value is 0, the difference value does not exceed the threshold value set in the difference means 221. Therefore, the abnormality determination means determines that there is no abnormality ("N" in S4). If there is no abnormality, the operations of S1 to S3 are continued.
[0047]
Next, FIG. 3B is a diagram illustrating an image in which a suspicious person has invaded the corridor and the pattern is captured. The time lapse of each of (a), (a), (c), and (d) is the same as that of FIG. 3 (a). Is reflected.
[0048]
The difference means 221 calculates the difference between the image (a) and the image (a), and then calculates the difference between the image (c) and the image (a), and further calculates the difference between the image (d) and the image (c). . The difference value A between the image (a) and the image (a) is increased by the amount of the shadow 500a. Further, the difference value B between the image (C) and the image (A) is 0 because the human figure 500b is located at substantially the same position and size as the human figure 500a. Further, the difference value C between the image (d) and the image (c) is 0 because the human figure 500c is located at substantially the same position and size as the human figure 500b, and is kept substantially the same as the differential value C and the differential value B. I'm dripping.
[0049]
When receiving the input of the difference value, the abnormality determination unit 222 compares the preset threshold value with the input difference value. In this case, the difference value A is obtained first, These are values equal to or greater than the threshold value set in the difference means 221. Therefore, the abnormality determination unit 222 determines that a change has occurred (“Y” in S4), and measures the magnitude of the difference thereafter. Next, the difference value B is obtained, and then the difference value C is obtained. As described above, the difference values B and C are substantially the same, that is, the magnitude of the difference after the occurrence of the change is kept constant (S5). At this time, the abnormality determination unit 222 determines that there is “abnormality”, and outputs the determination result to the determination unit 223 (“Y” in S5).
[0050]
Upon receiving the input of the determination result, the determination unit 223 determines how many times the determination result of “abnormal” has been input within a predetermined time by referring to the measurement time of the timer 224 (S7).
[0051]
When the determination result of the predetermined number of times “abnormal” is received, the determination unit 223 determines that there is a suspicious individual in the corridor captured by the monitor camera 111 (S8).
[0052]
On the other hand, when a stakeholder such as a postman passes through the corridor, the chance to stop in front of the door is rare or even short, so it will not be reflected in the image for taking the difference. Few. For example, as shown in FIG. 3C, in the images (A), (A), (C), and (D), only the image (A) including the human shadow 500d shows the shadow.
[0053]
In this case, the abnormality determination unit 222 first obtains the difference value A from the difference between the image (a) and the image (a), but even if this is a value greater than or equal to the threshold value set in the difference unit 221. Next, the difference value D between the image (C) and the image (A) is obtained, which is almost the same as the difference value A, whereas the difference value E obtained next is the same as the image (C). D) is the difference value between the image (c) and this is substantially zero. That is, the difference value E and the difference value D have different magnitudes and are not constant. That is, the magnitude of the difference after the occurrence of the change is not kept constant (N in S5).
[0054]
At this time, the abnormality determination unit 222 determines that there is no abnormality, and returns to S1 again to loop the operation. The result of this determination is output to the determination means 223 ("Y" in S5).
[0055]
Next, the determination unit 223 outputs the determination result of “there is a suspicious individual” to the notification unit 225.
[0056]
When receiving the input of the determination result, the notification unit 225 generates determination information including the content (S9), and outputs it to the communication unit 227 or the display unit 226.
[0057]
Upon receiving the input of the determination information, the communication unit 227 transmits the determination information to the external information terminal 400 via the Internet 300. The content of the determination information may include information such as the date and time when the determination result was obtained, in addition to the determination result. Further, the information may include information on a place monitored by the monitor camera 111. At this time, the form of the judgment information may be an e-mail if the external information terminal 400 supports the e-mail, or may be a form of Web page content if the external information terminal 400 supports the WWW browser. In particular, when a Web page is used, the content of the content may be automatically rewritten using a CGI of a server (not shown) provided between the suspicious individual determination device 220 and the external information terminal 400.
[0058]
By the way, in the above description, the notifying unit 225 outputs the judgment information when the judgment result of the judging unit 225 is “there is a suspicious individual”. Depending on the location and the monitoring time zone, even if the abnormality determining means 222 and the determining means 223 are operating normally, the traffic of the person is intense, and the result of the determination of “the presence of a suspicious person” is constantly output, and the determination information is output. May always be output.
[0059]
In this case, if the determination information is sent to the external information terminal 400 by e-mail, for example, the external information terminal 400 will always receive the e-mail of the determination information, which is a practical problem of the monitoring system. There is.
[0060]
The notification unit 225 sets a time zone for outputting the judgment information based on the input from the setting interface 228, and outputs the judgment information only in this time zone in order to deal with such a problem.
[0061]
For example, while the abnormality determination unit 222 and the determination unit 223 continue to operate for 24 hours from midnight to 11:59 pm, the operation of the notification unit 225 is considered to reduce the traffic of persons at the monitoring location 110. Set between 10 pm and 6 am In this case, the judgment means 223 outputs the judgment result during 24 hours, but the notifying means 225 generates the judgment information from 10 pm to 6 am, so the judgment result obtained during this time is obtained. Only the information is output to the outside as the judgment information.
[0062]
As a result, it is possible to narrow down the contents of the judgment information to more reliable ones and to notify only useful judgment information.
[0063]
The time zone setting of the notification means 225 may be arbitrarily set according to the traffic situation of the monitoring place 110, such as the midnight time zone as described above for weekdays and 24 hours for weekends and holidays. May be set.
[0064]
At this time, an image serving as the basis of the determination result of “there is a suspicious individual” may be attached to the notification information such as the e-mail as an image file. Further, at this time, the image may be sent as a still image, which is based on the result of the determination by the determining unit 223, and gives the determination of “abnormal” by the abnormality determining unit 222. At this time, the still image may be all the images having the difference value that gives the determination of the abnormality, or may be a single or a plurality of the images.
[0065]
On the other hand, the display means 226 displays the judgment information. At this time, the image based on the determination result of “abnormal” may be displayed at the same time.
[0066]
As described above, according to the monitoring system using the suspicious individual determination device according to the present embodiment, the presence or absence of the suspicious individual is determined based on the difference between the images obtained by imaging the area to be monitored. Only when it is determined that there is, the result of the determination can be notified to the outside as the determination information. This makes it possible to manage whether or not there is a suspicious person at the monitoring location without the monitoring person constantly checking the monitor camera.
[0067]
In the above description, the difference unit 221 calculates the difference of the entire area of the image obtained from the capture unit 210. However, the difference unit 221 selects a part of the obtained image and selects the selected image. The difference may be calculated only for the region.
[0068]
That is, as shown in the images (A) and (A) of FIG. 4, only the selection areas 600a and 600b surrounded by a dotted line in the figure are extracted from the entire images (A) and (A), and the adjacent images are extracted. For each of them, a difference value is obtained only in the selection areas 600a and 600b.
[0069]
In such a configuration, a difference is expected to occur in the entire captured image, and it is considered that there is no difference between the selection areas 600a and 600b that need to be monitored, and no monitoring is required. The possible remaining regions 610a, 610b can be distinguished in advance. As a result, since the processing for obtaining the difference is omitted for the remaining areas 610a and 610b, it is possible to increase the monitoring accuracy and reduce the addition of the processing of the difference unit 221.
[0070]
(Embodiment 2)
FIG. 5 is a configuration diagram of a monitoring system built around a suspicious individual determination device according to Embodiment 2 of the present invention. In FIG. 5, the same or corresponding parts as those in FIG. 1 are denoted by the same reference numerals, and detailed description will be omitted. Further, in the suspicious individual determination device 220 'corresponding to the state change determination device of the present invention, the warning means 620 is a means for generating warning information based on the determination information. The speaker 621 is a unit installed at the monitoring place 110, and is a unit that outputs warning information as an audio signal.
[0071]
The suspicious individual determination apparatus according to the present embodiment having such a configuration performs the same operation as that of the first embodiment, but when the determination unit 223 makes a determination of “there is a suspicious individual”, it is directly monitored. An alarm is issued to the place 110.
[0072]
That is, the warning unit 620 acquires the determination information generated by the notification unit 225 and generates warning information. The warning information may be a mechanical sound such as a buzzer sound or a siren sound as long as it warns a suspicious person who is considered to stay at the monitoring place 110, obtained by voice synthesis, or (For example, a human language such as "Warning! Warning!") Recorded in a recording unit (not shown).
[0073]
The warning unit 620 continuously transmits warning information at predetermined intervals while the determining unit 223 performs the determination of “the presence of a suspicious individual”, but the content differs depending on the transmission interval. It may be something. For example, it is assumed that the first alarm information is voice data of a human language, the second is voice data having different contents, and the third and subsequent alarm information is a siren sound. Thereby, it is possible to promptly prompt a suspicious person who is considered to stay at the monitoring place 110 to leave the monitoring place 110.
[0074]
Note that the alarm information is directly output by the speaker 621 installed at the monitoring place 110, but may be output to the external information terminal 400 via the Internet 300, similarly to the determination information. The information may be transmitted to the police or a security company using a telephone or another public communication line.
[0075]
(Embodiment 3)
FIG. 8 is a configuration diagram of a monitoring system built around a suspicious individual determination device according to Embodiment 3 of the present invention. 8, the same or corresponding parts as those in FIG. 1 are denoted by the same reference numerals, and a detailed description thereof will be omitted. In the suspicious individual determination device 230 corresponding to the state change determination device of the present invention, the sub-region setting unit 801 corresponds to the sub-region setting unit of the present invention. This is a means for allocating and setting a plurality of predetermined sub-regions to a captured image.
[0076]
The suspicious individual determination device according to the present embodiment having such a configuration performs the same operation as that of the first embodiment, but selects a plurality of sub-regions from a captured image, and This is to determine the presence or absence of a suspicious individual. Hereinafter, the description will focus on the differences from the first embodiment.
[0077]
FIG. 9A is a diagram for explaining the operation of the suspicious individual determination device according to the present embodiment. In the figure, a parking lot is used as an example of the monitoring place 110. The sub-regions 900a to 900d are set based on an image 900 captured by the monitor camera 111 from the setting interface 228. The sub-areas 900a to 900d correspond to each parking space of the parking lot, and the contractor of each parking space is different and has different contact information. The setting of the sub-region is such that the image 900 is displayed on the display unit 226, and the user sets the sub-region while referring to the image.
[0078]
Further, in accordance with an input from the setting interface 228, an e-mail address to which the determination information is notified is set in the communication means 227 for each of the sub-areas 900a to 900d. The setting may be omitted for a contact who cannot use the e-mail.
[0079]
Next, the difference unit 221 and the abnormality determination unit 222 perform a difference and determination operation on the screen 900 in the same manner as in the first embodiment. When the determination unit 223 determines that there is a suspicious person in the image 900, A determination is also made as to which of the sub-areas 900a to 900d the location on the screen 900 where the determination has been made, and both determination results are output to the communication means 227. The communication means 227 outputs the judgment information as an e-mail only to the e-mail address corresponding to the sub-area to which the above judgment has been made.
[0080]
As described above, according to the present embodiment, a plurality of sub-regions are set on the same screen, and the determination result of the presence or absence of a suspicious individual is determined in each of the sub-regions. It is possible to simultaneously manage a plurality of locations in the same area and determine the presence or absence of a suspicious individual. This is suitable for management of a parking lot or the like as described above.
In FIG. 9A, a description will be given assuming that a parking lot is set as the monitoring place 110 and the sub-areas 900 a to 900 d are set so as to include all the parked cars shown in the screen 900. However, as shown in FIG. 9B, the sub-regions are set as sub-regions 901a to 901d, which are small regions including a part of the stopped vehicle body and other parts. Is also good. In the case of FIG. 9A, it is necessary to set so that the sub-region includes all the cars whose images are being imaged, and the car located at the end of the screen 900 is different from the car from the center of the screen 900 in the image. There is a possibility that images that can be sufficiently monitored cannot be obtained. On the other hand, if a small area such as the sub-area in FIG. 9B is set, it is possible to determine at least the presence or absence of a vehicle stopped within the screen 900 as the screen state change. This makes it possible to sufficiently cope with a situation such as theft of a car or illegal parking.
[0081]
In the above description, the difference unit 221 and the abnormality determination unit 222 perform the difference and determination operations on the entire image 900, respectively. However, the difference unit 221 and the abnormality determination unit 222 Difference and determination operations may be individually performed on each of the regions. In this case, the judgment by the judging means 223 is made directly for each of the sub-regions 900a to 900d, whereby it is judged in which sub-region the judgment is made.
[0082]
Further, the setting of the sub area is described using the setting interface 228, but in this case, the user performs the setting from the monitoring room 200. Alternatively, the setting may be made from the external information terminal 400 via the Internet 300 using the communication unit 227. In this case, the external information terminal 400 obtains the image 900 from the communication unit 227. Note that a specific method of setting an area on the screen is performed by a known method used in image processing software and the like, and a detailed description is omitted.
[0083]
Further, in the above description, the description has been made assuming that the present embodiment is combined with the first embodiment. However, the present embodiment may be implemented in combination with the second embodiment.
[0084]
In each of the above embodiments, the description has been given assuming that the difference unit 221 calculates a difference for an image obtained every five minutes as a predetermined interval. It may be changed depending on the time zone.
[0085]
For example, in the case of an apartment or the like, if monitoring is performed in the daytime, traffic of people at the monitoring location 110 is considered to be more intense than at night. Therefore, when the interval of the difference unit 221 is short, the abnormality determination unit 222 determines that "abnormal". There is a possibility that the frequency at which the determination is made and the determination unit 223 makes a determination of “the presence of a suspicious individual” may be increased more than necessary.
[0086]
On the other hand, if the operation interval of the difference means 221 is set to be longer in the daytime than in the nighttime based on the time period measured by the timer 224, the judgment of "the presence of a suspicious individual" is made more than necessary. The chances of being monitored and more accurate monitoring.
[0087]
At this time, the change of the interval is not limited to two, that is, daytime and nighttime, and may be performed over three or more fine time zones. Further, not only the operation interval of the difference unit 221 but also the size of the selection area 600 as shown in FIGS. 4A and 4B may be changed according to the time zone.
[0088]
Further, in the first embodiment, the parameter for giving a difference is obtained as a result of comparing the difference of information included in an image on a bit basis, but the same difference value may not be obtained in some cases. This is because, in two images where the same place is imaged, the pixels forming the image must give the same information. Because it is counted as a difference.
[0089]
At this time, if the contrast of the image after the difference is increased, the light (bright) portion of the gradation of the image can be further emphasized to compensate for the difference in information based on the accuracy of the monitor camera. it can.
[0090]
However, a dark (dark) portion, which seeks to obtain a difference at night under the same conditions, is more emphasized, and information of an image necessary for obtaining the difference is lost.
[0091]
In such a case, contrary to the case of daytime, by lowering the contrast of the image after obtaining the difference, information for obtaining the difference is left.
[0092]
That is, the difference means 221 changes the condition for obtaining the difference value according to the time zone. Thereby, the same difference can always be obtained from the comparison of the same two images regardless of day or night, and the judgment and the information necessary for the judgment can be obtained accurately.
[0093]
Further, the magnitude of the predetermined threshold value used by the abnormality determination unit 222 for comparison with the difference value may be changed according to the time zone. Further, the time and the number of occurrences of “abnormality”, which are the criteria of the determination means 223, may be changed according to the time zone.
[0094]
Thereby, the monitoring accuracy can be more finely improved.
[0095]
Further, an interval for obtaining a difference in the difference means 221, the position and magnitude of the selected area, a condition for obtaining the difference, a threshold value in the abnormality determination means 222, a time and number of times used as a criterion for the determination means 223, and an operation of the notification means 225. The setting of the time zone and the setting of the time zone for changing the parameters of the respective units may be individually and arbitrarily set via the setting interface 228.
[0096]
At this time, by connecting the setting interface 228 and the communication means 227, the external information terminal 400 via the Internet 300 can input parameters that can be set by the setting interface 228 by e-mail or other means. Is also good.
[0097]
Thereby, the monitoring condition can be changed without staying in the monitoring room 200.
[0098]
Further, as shown in FIG. 6, a history recording unit 630 is provided as the suspicious individual determining unit 220 ″, the image used for obtaining the difference by the difference unit 221, the determination result of the abnormality determining unit 222, and the determination result of the determining unit 223. The result of the determination may be recorded as an operation history together with the time at which each unit operates, and at this time, the result of the determination and the result of the determination may include the case of “no abnormality” and “no suspicious person”. Good. The operation history may be displayed on the display unit 226 together with the judgment information, or may be output to the external information terminal 400 as the communication unit 227.
[0099]
In the above embodiments, a single monitor camera 111 is connected and used. However, a plurality of monitor cameras are connected and a plurality of monitoring locations are connected to one suspicious person determination device. The monitoring may be performed by using
[0100]
Also, the difference unit 221 obtains a difference between a moving image obtained from the monitor camera 111 and a still image for each frame captured by the capture unit 210, but the image input to the difference unit 221 is At least a still image adjacent before and after at a predetermined interval at which a difference can be obtained may be used. Therefore, the difference unit 211 may intermittently obtain images captured by the still camera at predetermined intervals. That is, a digital still camera other than a video camera for a moving image may be installed at the monitoring location 110 as a monitor camera, and the capture unit 210 may be omitted.
[0101]
Further, as described in Embodiment 3, the present invention does not need to determine only the presence or absence of a suspicious individual, and includes the presence or absence of a parked car, the presence or absence of a suspicious object, the presence or absence of storage in a warehouse, and the like. Any other application may be used as long as it uses the determination of the change in the state of the image obtained by imaging the monitoring location.
[0102]
Further, the present invention is a program for causing a computer to execute the functions of all or a part of the above-described state change determination device of the present invention (or an apparatus, an element, a circuit, a unit, or the like). It is a program that works in cooperation.
[0103]
The present invention is a medium that carries a program for causing a computer to execute all or a part of the functions of all or part of the above-described state change determination device of the present invention, and is readable and readable by a computer. Is a medium for executing the functions in cooperation with the computer.
[0104]
Note that some means (or an apparatus, an element, a circuit, a part, or the like) of the present invention means some of the plurality of means or one of the means. Means the function of the unit.
[0105]
In addition, some devices (or elements, circuits, units, and the like) of the present invention mean some of the plurality of devices, or some of the devices. (Or an element, a circuit, a part, or the like), or a part of the function of one means.
[0106]
The present invention also includes a computer-readable recording medium that records the program of the present invention.
[0107]
Further, one usage form of the program of the present invention may be a form in which the program is recorded on a computer-readable recording medium and operates in cooperation with the computer.
[0108]
One use form of the program of the present invention may be a form in which the program is transmitted through a transmission medium, read by a computer, and operates in cooperation with the computer.
[0109]
Further, the above-described computer of the present invention is not limited to pure hardware such as a CPU, but may include firmware, an OS, and peripheral devices.
[0110]
The recording medium includes a ROM and the like, and the transmission medium includes a transmission mechanism such as an optical fiber and the Internet, light, radio waves, and sound waves.
[0111]
Therefore, as described above, the configuration of the present invention may be realized by software or hardware.
[0112]
【The invention's effect】
As is apparent from the above description, according to the present invention, it is possible to obtain a suspicious individual determination device or the like that can capture a change in the state of an imaging target, such as determining a suspicious individual with a simple configuration and low cost. .
[Brief description of the drawings]
FIG. 1 is a diagram showing a configuration of a monitoring system using a suspicious individual determination device according to Embodiment 1 of the present invention.
FIG. 2 is a diagram illustrating a flowchart of an operation of the suspicious individual determination device according to the first embodiment of the present invention.
FIG. 3A is a diagram for explaining the operation of the suspicious individual determination device according to the first embodiment of the present invention.
(B) It is a figure for explaining operation of a suspicious individual judging device in Embodiment 1 of the present invention.
(C) It is a figure for explaining operation of a suspicious individual determination device in Embodiment 1 of the present invention.
FIG. 4 (a) is a diagram for explaining another operation example of the suspicious individual determination device according to the first embodiment of the present invention.
(A) It is a figure for explaining other examples of operation of the suspicious individual determination device in Embodiment 1 of the present invention.
FIG. 5 is a diagram showing a configuration of a monitoring system using a suspicious individual determination device according to Embodiment 2 of the present invention.
FIG. 6 is a diagram illustrating another configuration example of the monitoring system using the suspicious individual determination device according to the second embodiment of the present invention.
FIG. 7 is a diagram showing a configuration of a monitoring system according to a conventional technique.
FIG. 8 is a diagram showing a configuration of a monitoring system using a suspicious individual determination device according to Embodiment 3 of the present invention.
FIG. 9A is a diagram illustrating an operation of a suspicious individual determination device according to Embodiment 3 of the present invention.
(B) It is a figure for explaining operation of a suspicious individual judging device in Embodiment 3 of the present invention.
[Explanation of symbols]
100 facilities
110 Monitoring place
111 monitor camera
200 monitoring room
210 Capture Means
220 Suspicious person determination device
221 Difference means
222 abnormality determination means
223 Judgment means
224 timer
225 Notification means
226 Display means
227 Communication means
228 Setting interface
300 Internet
400 external information terminal
401 mobile phone
402 PC