JP2012070223A - Monitoring camera, monitoring system, and monitoring method - Google Patents
Monitoring camera, monitoring system, and monitoring method Download PDFInfo
- Publication number
- JP2012070223A JP2012070223A JP2010213368A JP2010213368A JP2012070223A JP 2012070223 A JP2012070223 A JP 2012070223A JP 2010213368 A JP2010213368 A JP 2010213368A JP 2010213368 A JP2010213368 A JP 2010213368A JP 2012070223 A JP2012070223 A JP 2012070223A
- Authority
- JP
- Japan
- Prior art keywords
- imaging
- reference axis
- acceleration
- change amount
- value
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012544 monitoring process Methods 0.000 title claims abstract description 142
- 238000000034 method Methods 0.000 title claims abstract description 17
- 230000008859 change Effects 0.000 claims abstract description 183
- 238000003384 imaging method Methods 0.000 claims abstract description 129
- 230000001133 acceleration Effects 0.000 claims abstract description 127
- 230000005856 abnormality Effects 0.000 claims abstract description 63
- 238000004364 calculation method Methods 0.000 claims abstract description 49
- 238000005070 sampling Methods 0.000 claims description 32
- 230000008569 process Effects 0.000 claims description 4
- 239000002131 composite material Substances 0.000 claims description 3
- 238000005259 measurement Methods 0.000 abstract description 21
- 238000001514 detection method Methods 0.000 abstract description 16
- 238000012545 processing Methods 0.000 abstract description 8
- 230000035939 shock Effects 0.000 abstract description 2
- 238000013508 migration Methods 0.000 abstract 1
- 230000005012 migration Effects 0.000 abstract 1
- 238000004891 communication Methods 0.000 description 22
- 238000010586 diagram Methods 0.000 description 13
- 230000002159 abnormal effect Effects 0.000 description 9
- 230000004044 response Effects 0.000 description 6
- 230000000694 effects Effects 0.000 description 2
- 238000002474 experimental method Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 206010034719 Personality change Diseases 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 230000012447 hatching Effects 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 238000004091 panning Methods 0.000 description 1
Images
Landscapes
- Closed-Circuit Television Systems (AREA)
- Alarm Systems (AREA)
- Studio Devices (AREA)
Abstract
Description
本発明は、監視対象が不正に動かされたことを検出する技術に関する。 The present invention relates to a technique for detecting that a monitoring target is illegally moved.
マンションや店舗の入り口、ATM等における防犯を意図しつつ、現場に監視員を直接派遣することなく、監視カメラにより現場を監視する技術が知られている。そして、このような監視カメラにおいては、適切な撮像範囲を撮像する必要があるため、当該監視カメラの撮像方向が適切に設定されている必要がある。しかし、現場に監視員がいないため、犯罪等を企図する者(以下、「悪意者」と称する)により、監視カメラの撮像方向が犯行前に変更されてしまう危険性がある。 There is known a technique for monitoring a site with a monitoring camera without intending to send a monitoring person directly to the site while intending to prevent crime at an entrance of an apartment, a store, an ATM, or the like. And in such a monitoring camera, since it is necessary to image an appropriate imaging range, the imaging direction of the monitoring camera needs to be set appropriately. However, since there is no surveillance staff at the site, there is a risk that a person who intends to commit a crime (hereinafter referred to as a “malicious person”) changes the imaging direction of the surveillance camera before the crime.
従来より、監視カメラの撮像方向が変更されたことを検出し、警報を発する技術が提案されている。例えば、特許文献1には、角速度センサーによって、監視カメラの予期せぬ動きを検出する技術が記載されている。特に、特許文献1では、監視カメラの動きが小さい場合は、監視カメラによって撮像されている画像の輝度変化を検出することにより、検出精度を向上させている。
Conventionally, there has been proposed a technique for detecting that the imaging direction of the surveillance camera has been changed and issuing an alarm. For example,
ところが、特許文献1に記載されている角速度センサーとしては、例えば、ジャイロセンサが想定されるが、ジャイロセンサは比較的高価であり、コストアップを招来するという問題があった。
However, as the angular velocity sensor described in
また、画像の輝度変化を検出するためには、撮像画像に対する画像処理が必要であるため情報処理における負荷が大きいという問題がある。さらに、撮像画像において輝度変化がない場合は検出できないという問題もある。 Further, in order to detect a change in luminance of an image, there is a problem that a load on information processing is heavy because image processing on a captured image is necessary. Furthermore, there is also a problem that it cannot be detected when there is no change in luminance in the captured image.
本発明は、上記課題に鑑みてなされたものであり、コストダウンを図るとともに、画像処理を用いることなく、監視カメラの不正移動の検出精度を向上させる技術を提供することを目的とする。 The present invention has been made in view of the above problems, and an object thereof is to provide a technique for reducing costs and improving the detection accuracy of unauthorized movement of a surveillance camera without using image processing.
上記の課題を解決するため、請求項1の発明は、異常の有無を監視する監視カメラであって、撮像範囲に存在する被写体を撮像して撮像情報を取得する撮像手段と、基準軸に沿った方向の加速度を測定する加速度測定手段と、前記撮像手段の基準姿勢における前記基準軸に沿った方向の加速度を基準値として記憶する記憶手段と、前記加速度測定手段により測定された前記基準軸に沿った方向の加速度と前記記憶手段に記憶されている前記基準値との差分を求めることにより、前記基準軸に沿った方向の加速度の変化量を求める変化量演算手段と、前記変化量演算手段により求められた変化量に応じて、前記撮像手段に対する異常の有無を判定する異常判定手段とを備えることを特徴とする。
In order to solve the above problems, the invention of
また、請求項2の発明は、請求項1の発明に係る監視カメラであって、前記異常判定手段は、前記変化量演算手段により求められた変化量と第1閾値とに応じて前記撮像手段に対する異常の有無を判定する第1判定手段を備えることを特徴とする。
The invention according to
また、請求項3の発明は、請求項2の発明に係る監視カメラであって、前記第1判定手段は、前記変化量演算手段により求められた変化量の絶対値を前記基準軸ごとに求めて加算し前記第1閾値と比較することを特徴とする。
The invention according to
また、請求項4の発明は、請求項2の発明に係る監視カメラであって、前記第1判定手段は、前記変化量演算手段により求められた変化量に基づいて合成加速度の変化量を求めて前記第1閾値と比較することを特徴とする。
The invention according to claim 4 is the surveillance camera according to
また、請求項5の発明は、請求項1ないし4のいずれかの発明に係る監視カメラであって、前記異常判定手段は、前記変化量演算手段により求められた変化量を判定期間中において積分することにより積分値を求め、前記積分値の絶対値と第2閾値とを比較することにより前記撮像手段に対する異常の有無を判定する第2判定手段をさらに備えることを特徴とする。
The invention according to claim 5 is the surveillance camera according to any one of
また、請求項6の発明は、請求項1ないし4のいずれかの発明に係る監視カメラであって、前記異常判定手段は、前記変化量演算手段により求められた変化量を判定期間中において第1のサンプリング周期で取得しつつ、取得した前記変化量について、前記判定期間中における平均値の絶対値を前記基準軸ごとに求めるとともに、求めた前記基準軸ごとの前記平均値の絶対値を加算して判定値を求める平均値演算手段と、前記平均値演算手段により求められた判定値と第2閾値とに応じて前記撮像手段に対する異常の有無を判定する第3判定手段とをさらに備えることを特徴とする。
The invention according to
また、請求項7の発明は、請求項6の発明に係る監視カメラであって、前記平均値演算手段は、前記判定期間中において前記第1のサンプリング周期で取得した複数の変化量に含まれる正の変化量と負の変化量との比に応じて、前記第1のサンプリング周期を第2のサンプリング周期に変更することを特徴とする。
The invention according to claim 7 is the surveillance camera according to the invention according to
また、請求項8の発明は、請求項1ないし7のいずれかの発明に係る監視カメラであって、前記基準軸は、第1基準軸と前記第1基準軸に直交する第2基準軸とを含むことを特徴とする。
The invention according to claim 8 is the surveillance camera according to any one of
また、請求項9の発明は、請求項8の発明に係る監視カメラであって、前記基準軸は、前記第1基準軸および第2基準軸のいずれにも直交する第3基準軸をさらに含むことを特徴とする。
The invention according to
また、請求項10の発明は、請求項1ないし9のいずれかの発明に係る監視カメラであって、前記基準軸は、前記撮像手段の撮像方向に沿った方向と異なる方向に沿うことを特徴とする。
The invention according to
また、請求項11の発明は、請求項1ないし10のいずれかの発明に係る監視カメラであって、前記基準軸は、前記撮像手段の撮像方向に直交する方向と異なる方向に沿うことを特徴とする。 An eleventh aspect of the present invention is the surveillance camera according to any one of the first to tenth aspects, wherein the reference axis is along a direction different from a direction orthogonal to the imaging direction of the imaging means. And
また、請求項12の発明は、異常の有無を監視する少なくとも1つの監視カメラと、前記監視カメラからの撮像情報を再生する映像再生装置とを備え、前記監視カメラは、撮像範囲に存在する被写体を撮像して撮像情報を取得する撮像手段と、基準軸に沿った方向の加速度を測定する加速度測定手段とを備え、前記撮像手段の基準姿勢における前記基準軸に沿った方向の加速度を基準値として記憶する記憶手段と、前記加速度測定手段により測定された前記基準軸に沿った方向の加速度と前記記憶手段に記憶されている前記基準値との差分を求めることにより、前記基準軸に沿った方向の加速度の変化量を求める変化量演算手段と、前記変化量演算手段により求められた変化量に応じて、前記撮像手段に対する異常の有無を判定する異常判定手段とをさらに備えることを特徴とする。 According to a twelfth aspect of the present invention, the surveillance camera includes at least one surveillance camera that monitors whether there is an abnormality, and a video reproduction device that reproduces imaging information from the surveillance camera. Imaging means for acquiring imaging information and acceleration measuring means for measuring acceleration in the direction along the reference axis, and the acceleration in the direction along the reference axis in the reference posture of the imaging means is a reference value As a difference between the acceleration in the direction along the reference axis measured by the acceleration measuring means and the reference value stored in the storage means. A change amount calculating means for determining a change amount of acceleration in the direction, and an abnormality determination for determining whether or not there is an abnormality in the imaging means according to the change amount obtained by the change amount calculating means And further comprising a stage.
また、請求項13の発明は、請求項12の発明に係る監視システムであって、前記映像再生装置は、前記異常判定手段が前記撮像手段に対する異常があったと判定した場合に、警報を出力するとともに、前記撮像手段により取得された撮像情報を再生する警報出力手段をさらに備えることを特徴とする。
The invention according to
また、請求項14の発明は、監視カメラによって異常の有無を監視する監視方法であって、前記監視カメラの撮像範囲に存在する被写体を撮像して撮像情報を取得する工程と、加速度センサによって基準軸に沿った方向の加速度を測定する工程と、前記監視カメラの基準姿勢における前記基準軸に沿った方向の加速度を基準値として記憶する工程と、前記加速度センサにより測定された前記基準軸に沿った方向の加速度と前記記憶手段に記憶されている前記基準値との差分を求めることにより、前記基準軸に沿った方向の加速度の変化量を求める工程と、求められた変化量に応じて、前記監視カメラに対する異常の有無を判定する工程とを有することを特徴とする。 Further, the invention of claim 14 is a monitoring method for monitoring the presence or absence of an abnormality by a monitoring camera, the step of imaging a subject existing in the imaging range of the monitoring camera and acquiring imaging information, and a reference by an acceleration sensor Measuring the acceleration in the direction along the axis, storing the acceleration in the direction along the reference axis in the reference posture of the monitoring camera as a reference value, and along the reference axis measured by the acceleration sensor In accordance with the step of determining the amount of change in the acceleration along the reference axis by determining the difference between the acceleration in the direction and the reference value stored in the storage means, And determining whether there is an abnormality in the monitoring camera.
請求項1ないし14に記載の発明は、基準軸に沿った方向の加速度を測定し、基準姿勢における基準軸に沿った方向の加速度を基準値として記憶し、測定された基準軸に沿った方向の加速度と基準値との差分を求めることにより、基準軸に沿った方向の加速度の変化量を求め、当該変化量に応じて、異常の有無を判定することにより、角速度センサを採用する場合に比べてコストを抑制できるとともに、画像処理を用いないので処理負荷を抑制できる。
The invention according to any one of
以下、本発明の好適な実施の形態について、添付の図面を参照しつつ、詳細に説明する。 DESCRIPTION OF EXEMPLARY EMBODIMENTS Hereinafter, preferred embodiments of the invention will be described in detail with reference to the accompanying drawings.
<1. 第1の実施の形態>
図1は、第1の実施の形態における監視システム1の構成を示す図である。監視システム1は、監視すべき現場に設置される監視カメラ2と、現場から離れた監視センターに設置される映像再生装置3とから構成されている。なお、監視システム1は、複数の監視カメラ2および複数の映像再生装置3から構成されていてもよい。あるいは、映像再生装置3が複数の監視カメラ2からの映像を同時にあるいは切り替えて再生できるように構成されていてもよい。
<1. First Embodiment>
FIG. 1 is a diagram illustrating a configuration of a
監視システム1において、監視カメラ2と映像再生装置3とは、データの送受信が可能な状態で接続されている。監視カメラ2と映像再生装置3との間の接続形態は、図1に示すような専用ケーブル10を用いるものであってもよいし、公衆網(例えばインターネット等)を介する形態であってもよい。また、一部、または、全部に無線通信が用いられてもよい。
In the
図2は、第1の実施の形態における監視カメラ2の構成を示す図である。監視カメラ2は、データの演算や監視カメラ2の備える各構成を制御するCPU20、CPU20の一時的なワーキングエリアとして使用されるとともに基準情報210を記憶するRAM21、および、CPU20によって実行されるプログラム220を格納する読み取り専用のROM22を備えている。また、監視カメラ2は、監視カメラ2に対して情報や指示を入力するために操作される操作部23、情報をランプやLEDにより表示する表示部24、および、警告音を出力するブザー25を備えている。さらに、監視カメラ2は、撮像範囲に存在する被写体を撮像して撮像情報9を取得する撮像部26、3つの基準軸(後述)に沿った方向の加速度をそれぞれ測定する加速度センサ27、および、映像再生装置3との間のデータ通信を行う通信部28を備える。
FIG. 2 is a diagram illustrating a configuration of the
いわゆる3軸(3つの基準軸)の加速度センサ27は、各基準軸に沿った方向の加速度を測定する機能を有している。
The so-called three-axis (three reference axes)
図3は、第1の実施の形態における監視カメラ2の基準軸を示す図である。第1の実施の形態における監視カメラ2では、基準軸となる第1基準軸81、第2基準軸82および第3基準軸83を、図3に示す相対関係を満たすように加速度センサ27を監視カメラ2内に内蔵する。
FIG. 3 is a diagram illustrating a reference axis of the
簡単に説明すると、監視カメラ2では、第1基準軸81を撮像部26の撮像方向に沿った方向の軸とする。このとき、監視カメラ2から被写体を望む向きを第1基準軸81の正方向とし、逆方向を負方向とする。また、第1基準軸81を水平面と平行に配置したときに当該第1基準軸81と直交し、かつ、水平面に平行となる軸を第2基準軸82とする。さらに、第1基準軸81と第2基準軸82との交点を通り、かつ、第1基準軸81および第2基準軸82のいずれとも直交する軸を第3基準軸83とする。なお、図3に示す各基準軸の矢印の方向を「正」とし、矢印の逆方向を「負」とする。
In brief, in the
加速度センサ27は、測定した加速度に応じて、測定情報270を作成し、RAM21に伝達する。図2に示すように、測定情報270には、測定値271,272,273が含まれている。本実施の形態では、第1基準軸81に沿った方向の加速度の測定値を測定値271、第2基準軸82に沿った方向の加速度の測定値を測定値272、第3基準軸83に沿った方向の加速度の測定値を測定値273とする。
The
また、加速度センサ27は、監視カメラ2(撮像部26)が基準姿勢となっているときに測定を行い、撮像部26の基準姿勢における基準軸に沿った方向の加速度を基準情報210(基準値211,212,213)として作成しRAM21に記憶させる。
The
監視カメラ2の基準姿勢とは、監視カメラ2の運用が開始されたときの姿勢(初期姿勢)であり、本実施の形態では、監視カメラ2と映像再生装置3とがデータ通信を開始したときの姿勢とする。すなわち、通信部28において通信が開始されたことを示す信号が伝達されると、加速度センサ27は当該タイミングで測定を行い、基準情報210を作成する。
The reference posture of the
ただし、加速度センサ27が基準情報210を作成するタイミングはこれに限定されるものではない。例えば、監視カメラ2を設置した作業員が、監視カメラ2の操作部23を操作して、基準情報210を取得するよう指示を入力してもよい。あるいは、監視員が映像再生装置3において映像を視認することにより、監視カメラ2によって所望の撮像範囲が撮影されている状態を確認し、映像再生装置3から監視カメラ2(加速度センサ27)に対して、その姿勢において基準情報210を作成するよう指示を与えてもよい。
However, the timing at which the
図4は、第1の実施の形態における監視カメラ2の機能ブロックをデータの流れとともに示す図である。図4に示す変化量演算部200、衝撃判定部201および姿勢判定部202は、CPU20がプログラム220を実行することにより実現される機能ブロックである。
FIG. 4 is a diagram illustrating the functional blocks of the
変化量演算部200は、加速度センサ27による測定が行われるたびに、測定された基準軸に沿った方向の加速度(測定情報270:測定値271,272,273)と、RAM21に記憶されている基準情報210(基準値211,212,213)との差分を求めることにより、基準軸に沿った方向の加速度の変化量を求める。
The change
より詳しくは、第1基準軸81に沿った方向の加速度の変化量(以下、「Δα1」と称する。)を、測定値271から基準値211を減算することにより求める。同様に、第2基準軸82に沿った方向の加速度の変化量(以下、「Δα2」と称する。)を、測定値272から基準値212を減算することにより求める。さらに、第3基準軸83に沿った方向の加速度の変化量(以下、「Δα3」と称する。)を、測定値273から基準値213を減算することにより求める。
More specifically, the amount of change in acceleration in the direction along the first reference axis 81 (hereinafter referred to as “Δα 1 ”) is obtained by subtracting the
変化量演算部200により求められたΔα1、Δα2、および、Δα3の値は、変化量情報214としてRAM21に記憶される。なお、Δα1、Δα2、および、Δα3の値は、「0」および「正の値」のみならず「負の値」となることもある。また、変化量情報214には少なくとも判定期間T(例えば10秒)の間に得られたΔα1、Δα2、および、Δα3の値が保存されており、変化量情報214を参照することにより少なくとも判定期間T中の変化量(過去および最新の変化量)を参照することが可能とされている。
The values of Δα 1 , Δα 2 , and Δα 3 obtained by the change
衝撃判定部201は、変化量情報214を参照し、Δα1、Δα2、および、Δα3の値に基づいて、式1を実行して判定値Q(第1判定値)を求める。
The
さらに、衝撃判定部201は、求めた判定値Qが第1閾値W1より大きいか否かを判定する。ただし、|Δα1|、|Δα2|、および|Δα3|は、それぞれΔα1、Δα2、および、Δα3の絶対値とする。
Further, the
すなわち、衝撃判定部201は、変化量演算部200により求められた変化量(変化量情報214)と第1閾値W1とに応じて、撮像部26に対する異常の有無を判定する機能を有している。
That is, the
より詳細には、衝撃判定部201は、変化量演算部200により求められた変化量から、当該変化量の絶対値を基準軸ごとに求め、基準軸ごとに求めた変化量の絶対値を加算する(式1)ことにより判定値Qを求め、判定値Qと第1閾値W1とを比較して、判定値Qが第1閾値W1より大きい場合に、撮像部26に対する異常があったと判定する。
More specifically, the
衝撃判定部201による判定は、最新のΔα1、Δα2、およびΔα3の値が測定されるだけで実行可能であり、比較的短時間で撮像部26に対する異常を検出できる。
The determination by the
衝撃判定部201は、撮像部26に対する異常があったと判定した場合、その旨を表示部24、ブザー25および通信部28(映像再生装置3)に伝達する。
When the
姿勢判定部202は、変化量情報214を参照し、判定期間T中のΔα1、Δα2、および、Δα3の値に基づいて、式2を実行して判定値R(第2判定値)を求める。
The
さらに、姿勢判定部202は、求めた判定値Rが第2閾値W2より大きいか否かを判定する。
Further, the
すなわち、姿勢判定部202は、変化量演算部200により求められた変化量を判定期間T中において積分することにより積分値を求め、当該積分値の絶対値を判定値R(第2判定値)とし、判定値Rと第2閾値W2とを比較して、撮像部26に対する異常の有無を判定する機能を有する。
That is, the
姿勢判定部202は、撮像部26に対する異常があったと判定した場合、その旨を表示部24、ブザー25および通信部28(映像再生装置3)に伝達する。
When it is determined that there is an abnormality with respect to the
図5は、映像再生装置3の構成を示す図である。映像再生装置3は、データの演算や映像再生装置3の備える各構成を制御するCPU30、CPU30の一時的なワーキングエリアとして使用されるとともに監視カメラ2から送信された警報情報310を記憶するRAM31、CPU30によって実行されるプログラム320を格納する読み取り専用のROM32、および、撮像情報9を記憶し保存しておくハードディスク33を備えている。これにより、映像再生装置3は、監視センターにおいて監視員により操作される、一般的なコンピュータとしての構成および機能を備えている。
FIG. 5 is a diagram showing the configuration of the
また、映像再生装置3は、映像再生装置3(監視システム1)に対する情報や指示を入力するために操作される操作部34、撮像情報9を再生して画面に表示する表示部35、警告音を出力するブザー36、監視カメラ2との間のデータ通信を行う通信部37を備えている。
The
以上が、第1の実施の形態における監視システム1の構成および機能の説明である。次に、監視システム1による監視方法について説明する。
The above is the description of the configuration and function of the
図6は、第1の実施の形態における監視方法を示す流れ図である。図6は、主に、監視カメラ2の動作に係る処理を示している。
FIG. 6 is a flowchart illustrating the monitoring method according to the first embodiment. FIG. 6 mainly shows processing related to the operation of the
監視カメラ2は、起動すると所定の初期設定(ステップS1)を実行した後、映像再生装置3との間の通信を開始するために、通信部28により映像再生装置3に対して応答要求を行う。このとき、監視カメラ2は、撮像部26の撮像領域が適切な範囲となるように、その姿勢が決定され、基準姿勢となっているものとする。
When the
監視カメラ2からの応答要求に対して映像再生装置3から応答が返信され、監視カメラ2と映像再生装置3との間の通信が開始されると(ステップS2においてYes)、通信部28から加速度センサ27に対して基準情報210を取得するよう指示が伝達される。これにより、加速度センサ27が測定(基準姿勢における測定)を行い、取得された測定値に基づいて基準情報210が作成される(ステップS3)。
When a response is returned from the
基準情報210がRAM21に記憶されると、監視カメラ2は監視処理(ステップS4)を開始する。
When the
図7は、第1の実施の形態における監視カメラ2の監視処理を示す流れ図である。監視処理とは、監視カメラ2の運用が開始され、監視カメラ2からの撮像情報9によって、監視員が異常の有無を監視している状態をいうものとする。
FIG. 7 is a flowchart showing the monitoring process of the
監視処理における監視カメラ2では、図7に示すように概ね4つのタスク(撮像タスク、測定タスク、衝撃監視タスクおよび姿勢変化監視タスク)が同時並行的に繰り返し実行されている。ただし、これらのタスク以外のタスクが実行されていてもよい。
In the
撮像タスクは、撮像部26が、撮像周期ごとに撮像を行い(ステップS11)、撮像により取得した撮像情報9を、一旦、RAM21に格納した後、映像再生装置3に向けて送信する(ステップS12)タスクである。送信された撮像情報9は、映像再生装置3において、必要に応じて表示部35に再生され、監視員によって異常な状況が撮像されていないかどうかの確認がされる。
In the imaging task, the
測定タスクは、加速度センサ27による加速度の測定を行うタスクである。より詳細には、加速度センサ27がセンシング周期ごとに加速度を測定することにより(ステップS13)、RAM21に測定情報270が作成される。
The measurement task is a task for measuring acceleration by the
次に、変化量演算部200が、基準情報210と測定情報270とに基づいて、各基準軸ごとに、加速度の変化量を演算する(ステップS14)。これにより、各基準軸ごとに、基準軸に沿った方向における基準姿勢に対する変化量(Δα1、Δα2、および、Δα3)が求まり、変化量情報214が作成される(ステップS15)。
Next, the change
図8は、監視処理が開始されてから充分に時間が経過した後の変化量情報214を例示する図である。ただし、図8では、現在の時間を「0」とし、過去(−τ)に姿勢変化が起きている例を示している。
FIG. 8 is a diagram illustrating
衝撃監視タスクは、変化量情報214に基づいて、衝撃判定部201が、撮像部26に対する異常の有無(衝撃が加えられたか否か)を判定するタスクである。
The impact monitoring task is a task in which the
監視カメラ2(撮像部26)に衝撃が加えられると、それによって撮像部26の姿勢が変化し、撮像範囲が変化して、所望の被写体を撮像することができなくなる可能性がある。一方、姿勢判定部202による判定は、判定期間Tにおける積分を用いるため、判定結果が得られるまでに比較的時間を要する場合がある。
When an impact is applied to the monitoring camera 2 (imaging unit 26), the posture of the
物体に強い衝撃が加えられると、物体の加速度は瞬間的に大きく変化し、基準姿勢に対する加速度の変化量も比較的大きく変化する。したがって、これを検出すれば、比較的短時間で撮像部26に対する異常を検出できる。そこで、衝撃判定部201は、先述の式1を実行して判定値Q(第1判定値)を求め(ステップS16)、判定値Qが予め実験等で求めた第1閾値W1(衝撃判定用閾値)より大きいか否かを判定する(ステップS17)。
When a strong impact is applied to the object, the acceleration of the object changes greatly instantaneously, and the amount of change in the acceleration with respect to the reference posture also changes relatively large. Therefore, if this is detected, an abnormality in the
図8に示す例では、姿勢変化が生じたときの変化量(時間「−τ」におけるΔα1、Δα2、および、Δα3の値)の絶対値の合計が第1閾値W1より大きければ、衝撃が加えられたことを、時間「−τ」の時点で判定できる。 In the example shown in FIG. 8, if the sum of the absolute values of the change amounts (the values of Δα 1 , Δα 2 , and Δα 3 at time “−τ”) when the posture change occurs is larger than the first threshold value W 1. It can be determined at time “−τ” that an impact has been applied.
判定値Qが第1閾値W1より大きい場合(ステップS17においてYes)、衝撃判定部201は、警報を表示部24、ブザー25および通信部28に伝達する。これにより、表示部24のLEDやパトライトが点灯することにより警報が出力されるとともに、ブザー25が警告音を発することによっても警報が出力される(ステップS18)。
If the determination value Q is larger than the first threshold value W 1 (Yes in step S17), the
また、ステップS18において、通信部28は映像再生装置3に向けて警報情報310を送信出力する。これを受信した映像再生装置3は、表示部35やブザー36に警報を出力する。このとき、映像再生装置3は、警報情報310を送信した監視カメラ2からの撮像情報9を、優先的に表示部35に再生する。このように、監視システム1では、警報情報310を受信した映像再生装置3が、警報を出力するとともに、当該警報情報310を送信した監視カメラ2の映像を再生することにより、効率よく、状況確認をすることができる。
In step S <b> 18, the
一方、判定値Qが第1閾値W1以下の場合(ステップS17においてNo)、衝撃判定部201は、衝撃が加えられていないと判定し、ステップS18をスキップし、監視処理を継続する。
On the other hand, the determination value Q is in the first threshold value W 1 or less (No in step S17), the
姿勢変化監視タスクは、姿勢判定部202が変化量情報214に応じて、撮像部26に対する異常の有無(基準姿勢から変化していないかどうか)を判定するタスクである。
The posture change monitoring task is a task in which the
上記のように、比較的大きな衝撃が加わることによって比較的大きな加速度変化が生じると、衝撃判定部201によって異常を検出することができる。しかし、比較的小さな加速度しか生じないように(第1閾値W1を超えないように)、ゆっくりと長時間かけて撮像部26の向きを動かすと、衝撃判定部201では異常を検出できない。
As described above, when a relatively large change in acceleration occurs due to a relatively large impact, the
しかし、衝撃判定部201の検出精度を向上させるために第1閾値W1を低くすると、外乱ノイズの影響により、誤検出が頻発するおそれがある。外乱ノイズとは、外部振動(地震、風、店舗シャッターの開閉等)により生じる一時的で比較的小さな動きである。外乱ノイズによって撮像部26の撮像範囲が大きく変化することは稀であり、しかもその変化は一時的なものである場合が多い。したがって、外乱ノイズによる加速度変化は「異常」として検出するべきではないが、第1閾値W1を低くすると、衝撃判定部201において、微小振動による加速度変化を異常として誤検出することになる。
However, if the first threshold value W 1 is lowered in order to improve the detection accuracy of the
したがって、監視カメラ2において、第1閾値W1を下げることには限界があり、悪意者が加速度の変化量を小さく抑えつつ監視カメラ2の向きを変化させると、衝撃判定部201に検出されることなく、撮像部26の姿勢を変化させて撮像範囲を変化させることが可能になる。
Therefore, there is a limit to lowering the first threshold value W 1 in the
しかし、姿勢が変化すれば、重力に起因する基準軸にかかる重力加速度が変化する。しかも、姿勢の変化が外乱ノイズによる一時的なものではなく、恒常的なものである場合、重力加速度の変化も恒常的なものとなる。 However, if the posture changes, the gravitational acceleration applied to the reference axis due to gravity changes. In addition, when the change in posture is not temporary due to disturbance noise but is constant, the change in gravitational acceleration is also constant.
そこで、姿勢判定部202は、式2を実行することにより判定値R(第3判定値)を求め(ステップS19)、判定値Rが予め実験等で求めた第2閾値W2(姿勢判定用閾値)より大きいか否かを判定する(ステップS20)。
Accordingly, the
判定値Rが第2閾値W2より大きい場合(ステップS20においてYes)、姿勢判定部202は、警報を表示部24、ブザー25および通信部28に伝達する。これにより、表示部24のLEDやパトライトが点灯することにより警報が出力されるとともに、ブザー25が警告音を発することによっても警報が出力される(ステップS21)。
When determination value R is greater than second threshold value W 2 (Yes in step S20),
また、ステップS21において、通信部28は映像再生装置3に向けて警報情報310を送信出力する。これを受信した映像再生装置3は、表示部35やブザー36に警報を出力する。このとき、映像再生装置3は、警報情報310を送信した監視カメラ2からの撮像情報9を、優先的に表示部35に再生する。このように、監視システム1では、警報情報310を受信した映像再生装置3が、警報を出力するとともに、当該警報情報310を送信した監視カメラ2の映像を再生することにより、効率よく、状況確認をすることができる。
In step S <b> 21, the
なお、衝撃判定部201による警報と、姿勢判定部202による警報とを区別するように構成してもよい。これにより、監視員は、比較的強い衝撃が監視カメラ2に加えられたのか、それとも監視カメラ2の姿勢が変化したのかを区別することができる。
In addition, you may comprise so that the warning by the
一方、判定値Rが第2閾値W2以下の場合(ステップS20においてNo)、姿勢判定部202は、姿勢が変化していないと判定し、ステップS21をスキップし、監視処理を継続する。
On the other hand, when determination value R is equal to or smaller than second threshold value W 2 (No in step S20),
図8に示す例では、姿勢変化が生じたときの変化量(時間「−τ」におけるΔα1、Δα2、および、Δα3の値)が、その後も変化せず、恒常的となっている。これは、基準姿勢にあった撮像部26が他の姿勢に変更(向きを変更)された場合に典型的な現象である。このような場合、変化量を判定期間Tにおいて積分した値の絶対値(図8において斜線で示す面積に相当する)は比較的大きな値になるため、判定値Rは比較的大きな値となる。したがって、姿勢判定部202は、図8に示すような例において、「異常」を検出することができる。
In the example shown in FIG. 8, the amount of change when the posture change occurs (values of Δα 1 , Δα 2 , and Δα 3 at time “−τ”) does not change after that and is constant. . This is a typical phenomenon when the
図9は、判定期間T中において、監視カメラ2が第1基準軸81に沿った方向に振動している状態における変化量Δα1の変化を示す図である。図9に示すように、外乱ノイズ(振動)によって監視カメラ2が振動している場合、Δα1(加速度の変化量)も振動する。
FIG. 9 is a diagram illustrating a change in the change amount Δα 1 in a state where the
しかし、振幅が比較的小さい外乱ノイズによる振動であれば、加速度の変化量の振幅も比較的小さいので、加速度の変化量の絶対値も大きな値とはならない。したがって、式1で求まる判定値Qの値も大きくならないので、衝撃判定部201による異常判定(ステップS17)において、外乱ノイズによる誤検出は抑制される。いいかえれば、外乱ノイズの振幅程度では、判定値Qが第1閾値W1を超えないように、第1閾値W1が設定されている。
However, if the vibration is caused by disturbance noise having a relatively small amplitude, the amplitude of the acceleration change amount is also relatively small, and the absolute value of the acceleration change amount does not become a large value. Therefore, since the value of the determination value Q obtained by
また、振動中の加速度の変化量は、正の値と負の値とを往復する。したがって、判定期間T中の変化量の積分値は振動の1周期ごとにほぼ相殺されるためにあまり大きな値とはならない。したがって、式2で求まる判定値Rの値も大きくならないので、姿勢判定部202による異常判定(ステップS20)において、外乱ノイズによる誤検出は抑制される。
Further, the amount of change in acceleration during vibration reciprocates between a positive value and a negative value. Therefore, the integrated value of the amount of change during the determination period T is almost not canceled out every vibration cycle, and thus does not become a large value. Therefore, since the value of the determination value R obtained by
一般的な振動は、一定期間経過後に収束する。そして収束後、監視カメラ2は、通常、基準姿勢に戻るため、加速度の変化量は「0」となる。したがって、振動が収束した後、監視カメラ2が基準姿勢に戻った場合、衝撃判定部201および姿勢判定部202のいずれも「異常」と判定することはない。
General vibrations converge after a certain period of time. After the convergence, the
このように、監視カメラ2は、監視カメラ2が外乱ノイズで振動している場合(振動中の場合)には、これを「異常」と検出することによる誤検出を抑制することができる。したがって、外乱ノイズによる誤報を抑制することができる。
Thus, when the
ただし、振動の収束後に、基準姿勢に戻らなかった場合(振動によりその後の姿勢が狂ってしまった場合)は、振動収束後の姿勢(変化した姿勢)が恒常的となり、積分値は相殺されず、判定値Rが比較的大きな値となる。したがって、姿勢判定部202によって「異常」と判定される。すなわち、振動が原因であったとしても、撮像領域が恒常的に変化してしまった場合には、所望の被写体が撮像されない状態(撮像範囲が不適切な状態)となっている可能性がある。このような場合、姿勢判定部202は「異常」として検出することができる。
However, if the position does not return to the reference position after the vibration has converged (if the subsequent position is distorted due to vibration), the position after the vibration has converged (changed position) becomes constant, and the integrated value is not canceled out. The determination value R is a relatively large value. Therefore, the
ところで、悪意者が撮像部26を人力により移動させて撮像範囲を変更しようとする状況において、姿勢判定部202に検出されないように姿勢を変化させることなく、かつ、衝撃判定部201に検出されないようにゆっくりと動かし続けるのは非常に困難といえる。特に、監視カメラ2は、壁や天井等に固設されるのが一般的であるため、回動部を動かして向きを変える(姿勢を変える)ことは比較的容易であっても、壁や天井等に固設された監視カメラ2の姿勢を変えずに移動させることは困難である。したがって、本実施の形態における監視カメラ2は充分に実用に耐えるものである。
By the way, in a situation where the Service-to-Self moves the
以上のように、第1の実施の形態における監視カメラ2は、撮像範囲に存在する被写体を撮像して撮像情報9を取得する撮像部26と、基準軸に沿った方向の加速度を測定する加速度センサ27と、撮像部26の基準姿勢における基準軸に沿った方向の加速度を基準情報210として記憶するRAM21と、加速度センサ27により測定された基準軸に沿った方向の加速度(測定情報270)と、RAM21に記憶されている基準情報210との差分を求めることにより、基準軸に沿った方向の加速度の変化量情報214を求める変化量演算部200と、変化量演算部200により求められた変化量情報214に応じて、撮像部26に対する異常の有無を判定する衝撃判定部201および姿勢判定部202とを備えることにより、角速度センサを採用する場合に比べてコストを抑制できる。また、異常判定において画像(撮像情報9)を用いる必要がないので、処理負荷が抑制される。
As described above, the
また、衝撃判定部201が、変化量演算部200により求められた変化量情報214と第1閾値W1とに応じて撮像部26に対する異常の有無を判定することにより、大きな衝撃が加えられたときには、比較的短時間で異常を検出できる。
Further, the
また、衝撃判定部201が、変化量演算部200により求められた変化量情報214の絶対値を、基準軸ごとに求め、基準軸ごとに求めた変化量情報214の絶対値を加算して判定値Qとし、判定値Qが第1閾値W1より大きい場合に、撮像部26に対する異常があったと判定することにより、容易に異常判定(衝撃検出)を行うことができる。
Further, the
また、姿勢判定部202が、変化量演算部200により求められた変化量を判定期間T中において積分することにより積分値を求め、当該積分値の絶対値を判定値Rとし、判定値Rと第2閾値W2とを比較して、撮像部26に対する異常の有無を判定することにより、加速度の変化量が小さい場合でも、姿勢が変化していれば検出できる。また、振動による一時的な姿勢変化による誤検出を抑制できる。
In addition, the
なお、監視カメラ2において実行した加速度センサ27の測定値(基準情報210および測定情報270)の記憶や、各種情報の演算および判定の一部を映像再生装置3において実行するように構成してもよい。例えば、監視カメラ2の基準姿勢における基準情報210を映像再生装置3に送信して映像再生装置3において記憶することも可能である。その場合は、変化量演算部200、衝撃判定部201および姿勢判定部202に相当する機能ブロックを映像再生装置3に設けて、撮像部26に対する異常の有無を判定するように構成してもよい。このように構成した場合には、監視カメラ2の負担を軽減することができるため、監視カメラ2の単価を抑制することができる。したがって、監視システム1が比較的多数の監視カメラ2で構成される場合などには、システム全体のコストを削減できる。
It should be noted that the
また、監視カメラ2が撮像部26をパン・チルト等させるための駆動部を備えている場合は、姿勢変化を検出した際に、基準姿勢に戻るように制御してもよい。
Further, when the
また、衝撃あるいは姿勢変化を検出したときに、当該衝撃あるいは姿勢変化を検出した監視カメラ2を、他の監視カメラ2によって撮像するように構成してもよい。
In addition, when an impact or a change in posture is detected, the
<2. 第2の実施の形態>
衝撃が加えられたか否かを判定するために求められる判定値は、第1の実施の形態における判定値Qに限定されるものではない。
<2. Second Embodiment>
The determination value obtained for determining whether or not an impact has been applied is not limited to the determination value Q in the first embodiment.
図10は、第2の実施の形態における監視カメラ4の機能ブロックをデータの流れとともに示す図である。第2の実施の形態における監視カメラ4は、衝撃判定部201の代わりに、衝撃判定部203を備えている点を除いて、第1の実施の形態における監視カメラ2と同様である。以下の説明では、第2の実施の形態における監視カメラ4について、第1の実施の形態における監視カメラ2と同様の構成については同符号を付すとともに、適宜、説明を省略する。
FIG. 10 is a diagram illustrating functional blocks of the monitoring camera 4 according to the second embodiment together with a data flow. The surveillance camera 4 in the second embodiment is the same as the
第2の実施の形態における衝撃判定部203は、変化量演算部200により求められた変化量情報214に基づいて合成加速度の変化量(以下、「変化量Δα」と称する。)を求め、当該合成加速度の変化量Δαの絶対値を判定値Sとし、判定値Sと第1閾値W1とを比較して、判定値Sが第1閾値W1より大きい場合に、撮像部26に対する異常があったと判定する。
The
図11は、第2の実施の形態における変化量Δαを示す図である。 FIG. 11 is a diagram illustrating the change amount Δα in the second embodiment.
第2の実施の形態における衝撃判定部203は、式1を実行する代わりに、式3を実行することにより、判定値Sを求める。
The
このような演算手法によっても、撮像部26に対して衝撃が加えられたことを検出することができる。
Also by such a calculation method, it can be detected that an impact has been applied to the
<3. 第3の実施の形態>
上記実施の形態では、撮像部26の姿勢変化を検出するために、加速度の変化量の判定期間T中における積分値を用いる例を説明したが、これに限定されるものではない。
<3. Third Embodiment>
In the above-described embodiment, an example in which the integral value during the determination period T of the change amount of acceleration is used to detect the posture change of the
図12は、第3の実施の形態における監視カメラ5の機能ブロックをデータの流れとともに示す図である。第3の実施の形態における監視カメラ5は、姿勢判定部202の代わりに姿勢判定部204を備える点と、機能ブロックとしての平均値演算部205を新たに備える点とを除いて、第1の実施の形態における監視カメラ2と同様である。以下の説明では、第3の実施の形態における監視カメラ5について、第1の実施の形態における監視カメラ2と同様の構成については同符号を付すとともに、適宜、説明を省略する。
FIG. 12 is a diagram illustrating functional blocks of the monitoring camera 5 according to the third embodiment together with a data flow. The surveillance camera 5 according to the third embodiment is the same as the first embodiment except that a
第3の実施の形態における姿勢判定部204は、後述する平均値演算部205によって作成される判定値情報215と第2閾値W2とを比較することにより、撮像部26の姿勢変化を検出し、撮像部26に対する異常の有無を判定する機能を有している。
第3の実施の形態における平均値演算部205は、変化量情報214に格納されている各基準軸に沿った方向における加速度の変化量(Δα1、Δα2、および、Δα3)を、各基準軸についてそれぞれ所定の周期(後述)ごとに取得し、判定値情報215を作成する機能を有する。
The average value calculation unit 205 in the third embodiment calculates the acceleration change amounts (Δα 1 , Δα 2 , and Δα 3 ) in the direction along each reference axis stored in the
図13は、外乱ノイズによる振動中に適切な第1サンプリング周期ST1ごとに加速度の変化量が取得される様子を示す図である。また、図14は、外乱ノイズによる振動中に不適切な第1サンプリング周期ST1ごとに加速度の変化量が取得される様子を示す図である。 FIG. 13 is a diagram illustrating a state in which the amount of change in acceleration is acquired for each appropriate first sampling period ST1 during vibration due to disturbance noise. FIG. 14 is a diagram illustrating a state in which the amount of change in acceleration is acquired for each inappropriate first sampling period ST1 during vibration due to disturbance noise.
図13および図14に示すように、振動中の加速度の変化量は正の値と負の値とを往復するが、その平均値はほぼ「0」となる。一方、既に図8に示したように、振動によらずに姿勢が変化した場合、加速度の変化量の平均値はほぼ一定であり、その値は姿勢変化の度合いに応じて大きくなる。したがって、判定期間Tにおいて加速度の変化量の平均値が小さければ、その間の姿勢変化は振動によるものであるか、あるいは、姿勢変化の度合いが小さいかのいずれかであると判定できる(いずれも異常として検出する必要がない。)。第3の実施の形態における姿勢判定部204は、このような原理を利用して、積分値を演算することなく、姿勢変化を検出するとともに、外乱ノイズによる誤検出を抑制するものである。
As shown in FIG. 13 and FIG. 14, the amount of change in acceleration during vibration reciprocates between a positive value and a negative value, but the average value is almost “0”. On the other hand, as already shown in FIG. 8, when the posture changes regardless of vibration, the average value of the amount of change in acceleration is substantially constant, and the value increases according to the degree of the posture change. Therefore, if the average value of the amount of change in acceleration during the determination period T is small, it can be determined that the posture change during that time is due to vibration or the degree of posture change is small (both abnormal No need to detect as.). The
ここで、図13に示すように、第1サンプリング周期ST1が、加速度の変化量の振動周期(外乱ノイズの振動周期)の1/2であれば、どのような位相で加速度の変化量が取得されたとしても、取得された加速度の変化量の平均値はほぼ「0」となる。すなわち、外乱ノイズの振動周期の1/2程度となるように、第1サンプリング周期ST1を決定できれば、位相にかかわらず、平均値は比較的小さな値となる。 Here, as shown in FIG. 13, if the first sampling period ST1 is ½ of the vibration period of the acceleration change amount (vibration cycle of disturbance noise), the acceleration change amount is acquired at any phase. Even if it is done, the average value of the obtained acceleration change amount is almost “0”. That is, if the first sampling period ST1 can be determined so as to be about 1/2 of the vibration period of disturbance noise, the average value becomes a relatively small value regardless of the phase.
一方で、図14に示すように、第1サンプリング周期ST1が、外乱ノイズの振動周期と一致する場合は、位相によっては、共振により、平均値が比較的大きな値となり、誤検出の可能性がでてくる。このような場合は、第1サンプリング周期ST1を変更する必要がある。 On the other hand, as shown in FIG. 14, when the first sampling period ST1 coincides with the vibration period of the disturbance noise, depending on the phase, the average value becomes relatively large due to resonance, and there is a possibility of erroneous detection. Come on. In such a case, it is necessary to change the first sampling period ST1.
図15は、第3の実施の形態における監視処理の姿勢変化監視タスクを示す流れ図である。 FIG. 15 is a flowchart illustrating an attitude change monitoring task of the monitoring process according to the third embodiment.
監視処理が開始され、姿勢変化監視タスクが開始されると、平均値演算部205は、変化量演算部200により求められた変化量情報214から、判定期間T中において第1のサンプリング周期ST1で加速度の変化量を取得する(ステップS31)。
When the monitoring process is started and the posture change monitoring task is started, the average value calculation unit 205 uses the
変化量を取得すると、平均値演算部205は、取得した変化量に応じて比率判定(ステップS32)を実行する。ステップS32に示す比率判定において、平均値演算部205は、ステップS31で取得した変化量のそれぞれについて正負を判定しつつ、取得された正の変化量の数と取得された負の変化量の数との比率C(正の変化量の数/負の変化量の数)を求める。 When the change amount is acquired, the average value calculation unit 205 performs ratio determination (step S32) according to the acquired change amount. In the ratio determination shown in step S <b> 32, the average value calculation unit 205 determines the positive / negative for each of the change amounts acquired in step S <b> 31, and acquires the number of acquired positive change amounts and the acquired negative change amounts. And the ratio C (number of positive changes / number of negative changes).
次に、平均値演算部205は、第3閾値W3(第1サンプリング周期ST1の適否を判定するための閾値)に応じて、比率Cが式4を満たすか否かを判定する。 Next, the average value calculation unit 205 determines whether the ratio C satisfies Expression 4 according to the third threshold value W 3 (threshold value for determining the suitability of the first sampling period ST1).
なお、本実施の形態では、第3閾値W3は「3/7」とするが、第3閾値W3の値はこれに限定されるものではない。 In the present embodiment, the third threshold W 3 is “3/7”, but the value of the third threshold W 3 is not limited to this.
式4が満たされないとき(ステップS32においてNo)、平均値演算部205は、第1サンプリング周期ST1を第2サンプリング周期ST2に変更して(ステップS33)、第2サンプリング周期ST2ごとの加速度の変化量を変化量情報214から取得する(ステップS34)。 When Expression 4 is not satisfied (No in step S32), the average value calculation unit 205 changes the first sampling period ST1 to the second sampling period ST2 (step S33), and changes in acceleration for each second sampling period ST2 The amount is acquired from the change amount information 214 (step S34).
なお、第3の実施の形態では、第2サンプリング周期ST2は、第1サンプリング周期ST1の2/3とするが、このような関係に限定されるものではない。例えば、第2サンプリング周期ST2は、第1サンプリング周期ST1の3/2であってもよい。 In the third embodiment, the second sampling period ST2 is 2/3 of the first sampling period ST1, but is not limited to such a relationship. For example, the second sampling period ST2 may be 3/2 of the first sampling period ST1.
さらに、平均値演算部205は、取得した加速度の変化量(第1サンプリング周期ST1または第2サンプリング周期ST2のいずれかの周期ごとに取得した加速度の変化量)の平均値を求める(ステップS35)。なお、本実施の形態では、基準軸が3つ存在するため、ステップS31ないしS35の処理は、各基準軸ごとに実行され、加速度の変化量の平均値は各基準軸ごとに求められる。 Furthermore, the average value calculation unit 205 obtains an average value of the acquired acceleration change amounts (acceleration change amounts acquired for each of the first sampling period ST1 or the second sampling period ST2) (step S35). . In the present embodiment, since there are three reference axes, the processes in steps S31 to S35 are executed for each reference axis, and the average value of the change in acceleration is obtained for each reference axis.
さらに、平均値演算部205は、ステップS35で求めた各基準軸ごとの平均値の絶対値を求めて、これらをすべて加算して判定値情報215としてRAM21に記憶させる。
Further, the average value calculation unit 205 calculates the absolute value of the average value for each reference axis obtained in step S35, adds all of them, and stores them in the
判定値情報215が作成されると、姿勢判定部204が、判定値情報215と第2閾値W2とに応じて撮像部26に対する異常の有無を判定する(ステップS36)。
Determining if the
判定値情報215が第2閾値W2よりも大きい場合(ステップS36においてYes)、姿勢判定部204は、警報を表示部24、ブザー25および通信部28に伝達する。これにより、表示部24のLEDが点灯することにより警報が出力されるとともに、ブザー25が警告音を発することによっても警報が出力される(ステップS37)。
When the
また、ステップS37において、通信部28は、第1の実施の形態と同様に、映像再生装置3に向けて警報情報310を送信出力する。これを受信した映像再生装置3は、表示部35やブザー36に警報を出力する。
In step S <b> 37, the
一方、判定値情報215が第2閾値W2以下の場合(ステップS36においてNo)、姿勢判定部204は、姿勢が変化していないと判定し、ステップS37を実行することなく、監視処理を継続する。
On the other hand, when the
以上のように、第3の実施の形態における監視カメラ5は、変化量演算部200により求められた変化量を判定期間T中において第1サンプリング周期ST1で取得しつつ、取得した変化量について、判定期間T中における平均値の絶対値を各基準軸ごとに求めるとともに、求めた各基準軸ごとの平均値の絶対値を加算して判定値情報215を求める平均値演算部205と、判定値情報215と第2閾値W2とに応じて撮像部26に対する異常の有無を判定する姿勢判定部204とを備えることにより、上記実施の形態と同様の効果を得ることができる。また、積分値を求める場合に比べて、演算負荷を軽減できる。
As described above, the monitoring camera 5 according to the third embodiment acquires the change amount obtained by the change
また、平均値演算部205は、判定期間T中において第1のサンプリング周期ST1で取得した複数の変化量に含まれる正の変化量と負の変化量との比に応じて、第1サンプリング周期ST1を第2サンプリング周期ST2に変更することにより、第1サンプリング周期ST1が不適切であるために生じる誤検出を抑制できる。 In addition, the average value calculation unit 205 performs the first sampling cycle according to the ratio of the positive change amount and the negative change amount included in the plurality of change amounts acquired in the first sampling cycle ST1 during the determination period T. By changing ST1 to the second sampling period ST2, it is possible to suppress erroneous detection that occurs because the first sampling period ST1 is inappropriate.
<4. 第4の実施の形態>
上記実施の形態では、3つの基準軸を有する加速度センサ27を用いる例で説明した。このように3つの基準軸を有する加速度センサ27を用いることによって、異常検出精度は向上するが、基準軸の数は3つに限定されるものではなく、1つまたは2つであってもよい。すなわち、基準軸が1つあるいは2つしか規定されていない加速度センサ27によっても衝撃および姿勢変化を検出することは可能である。
<4. Fourth Embodiment>
In the above-described embodiment, an example in which the
図16は、第4の実施の形態における監視カメラ6を示す図である。図16に示す方向84は、監視カメラ6(撮像部26)の撮像方向に沿った方向を示している。
FIG. 16 is a diagram illustrating the
第4の実施の形態における監視カメラ6では、基準軸としては第1基準軸85のみが規定されている。これにより、第4の実施の形態における加速度センサ27は、第1基準軸85に沿った方向の加速度について測定することは可能であるが、第1基準軸85に対して直交する方向に沿った方向の加速度については測定することができない。
In the
したがって、悪意者は、第1基準軸85に沿った方向の加速度のみ変化しないように、注意して監視カメラ6を移動させれば、「異常」と判定されることはない。すなわち、第1基準軸85しか規定されていない監視カメラ6では、上記実施の形態における監視カメラ2,4,5に比べて、検出精度が低下する場合が想定される。
Therefore, if the Service-to-Self carefully moves the
しかし、第4の実施の形態における第1基準軸85は、監視カメラ6の撮像方向に沿った方向84とは異なる方向に沿うとともに、方向84と直交する方向とも異なる方向に沿うように規定されている。すなわち、第1基準軸85と方向84との成す角θは、「0°<θ<90°」を満たすように規定されている。
However, the
加速度センサ27の基準軸(第1基準軸85)がどの方向に規定されているかは、外観上、知得することはできない。そして、第4の実施の形態における監視カメラ6では、基準軸の方向として比較的予測されやすい方向(撮像方向や撮像方向に直交する方向等)と異なる方向に沿うように第1基準軸85が規定されている。
In which direction the reference axis (first reference axis 85) of the
したがって、悪意者が、第1基準軸85に沿った方向の加速度が変化しないように、注意して監視カメラ6を移動させようとしても、そもそも第1基準軸85の方向が予測不能であるため、そのような移動が困難となる。
Therefore, even if the Service-to-Self carefully moves the
なお、例えば、第1の実施の形態における監視カメラ2では、図3に示すように、第1基準軸81が撮像方向と一致している。しかし、監視カメラ2は3つの基準軸を有しているため、結局、いかなる方向に加速度が変化した場合であっても、いずれかの基準軸(第1基準軸81、第2基準軸82または第3基準軸83)に沿った方向の加速度が変化する。したがって、3つの基準軸を有する場合には、比較的予測されやすい方向と基準軸が一致していたとしても、これによって検出精度が低下することはない。
For example, in the
また、予測しやすい方向としては、本実施の形態に示すものに限定されるものではなく、例えば、鉛直方向や水平方向等も比較的予測されやすいため、1つまたは2つの基準軸しか有さない加速度センサ27を用いる場合には、これらの方向に注意することが好ましい。
In addition, the directions that are easy to predict are not limited to those shown in the present embodiment, and for example, the vertical direction and the horizontal direction are relatively easy to predict, so only one or two reference axes are provided. When using a
<5. 変形例>
以上、本発明の実施の形態について説明してきたが、本発明は上記実施の形態に限定されるものではなく様々な変形が可能である。
<5. Modification>
Although the embodiments of the present invention have been described above, the present invention is not limited to the above embodiments, and various modifications can be made.
例えば、上記実施の形態に示した機能ブロックの一部または全部を、専用の論理回路で実現してもよい。すなわち、ソフトウェアによって実現されると説明した構成の一部または全部をハードウェアによって実現してもよい。 For example, part or all of the functional blocks described in the above embodiments may be realized by a dedicated logic circuit. That is, part or all of the configuration described as being realized by software may be realized by hardware.
また、上記実施の形態に示した各工程はあくまでも例示であって、このような順序、処理に限定されるものではない。同様の効果が得られるならば、適宜、各工程の順序や処理内容が変更されてもよい。 Moreover, each process shown in the said embodiment is an illustration to the last, Comprising: It is not limited to such an order and a process. If the same effect can be obtained, the order of the steps and the processing content may be changed as appropriate.
また、監視カメラ2,4,5,6の撮像情報9は、動画を表現したものであってもよいし、静止画であってもよい。また、白黒の映像を表現したものであってもよいし、カラーの映像を表現したものであってもよい。
In addition, the
1 監視システム
2,4,5,6 監視カメラ
20 CPU
200 変化量演算部
201,203 衝撃判定部
202,204 姿勢判定部
205 平均値演算部
21 RAM
210 基準情報
214 変化量情報
215 判定値情報
22 ROM
220 プログラム
23 操作部
24 表示部
25 ブザー
26 撮像部
27 加速度センサ
270 測定情報
28 通信部
3 映像再生装置
310 警報情報
32 ROM
320 プログラム
35 表示部
36 ブザー
37 通信部
81,85 第1基準軸
82 第2基準軸
83 第3基準軸
84 方向(撮像方向に沿った方向)
9 撮像情報
1
200 change
210
220
320
9 Imaging information
Claims (14)
撮像範囲に存在する被写体を撮像して撮像情報を取得する撮像手段と、
基準軸に沿った方向の加速度を測定する加速度測定手段と、
前記撮像手段の基準姿勢における前記基準軸に沿った方向の加速度を基準値として記憶する記憶手段と、
前記加速度測定手段により測定された前記基準軸に沿った方向の加速度と前記記憶手段に記憶されている前記基準値との差分を求めることにより、前記基準軸に沿った方向の加速度の変化量を求める変化量演算手段と、
前記変化量演算手段により求められた変化量に応じて、前記撮像手段に対する異常の有無を判定する異常判定手段と、
を備えることを特徴とする監視カメラ。 A surveillance camera that monitors for abnormalities,
An imaging unit that captures imaging information by imaging a subject existing in the imaging range;
Acceleration measuring means for measuring acceleration in a direction along the reference axis;
Storage means for storing acceleration in a direction along the reference axis in a reference posture of the imaging means as a reference value;
By calculating the difference between the acceleration in the direction along the reference axis measured by the acceleration measuring means and the reference value stored in the storage means, the amount of change in acceleration in the direction along the reference axis is obtained. A change amount calculation means to be obtained;
An abnormality determining means for determining the presence or absence of an abnormality with respect to the imaging means according to the amount of change obtained by the change amount calculating means;
A surveillance camera comprising:
前記異常判定手段は、前記変化量演算手段により求められた変化量と第1閾値とに応じて前記撮像手段に対する異常の有無を判定する第1判定手段を備えることを特徴とする監視カメラ。 The surveillance camera according to claim 1,
The monitoring camera, wherein the abnormality determination unit includes a first determination unit that determines whether there is an abnormality in the imaging unit according to a change amount obtained by the change amount calculation unit and a first threshold value.
前記第1判定手段は、前記変化量演算手段により求められた変化量の絶対値を前記基準軸ごとに求めて加算し前記第1閾値と比較することを特徴とする監視カメラ。 The surveillance camera according to claim 2,
The monitoring camera according to claim 1, wherein the first determination unit calculates and adds the absolute value of the change amount obtained by the change amount calculation unit for each reference axis and compares the absolute value with the first threshold value.
前記第1判定手段は、前記変化量演算手段により求められた変化量に基づいて合成加速度の変化量を求めて前記第1閾値と比較することを特徴とする監視カメラ。 The surveillance camera according to claim 2,
The monitoring camera according to claim 1, wherein the first determination unit obtains a change amount of the composite acceleration based on the change amount obtained by the change amount calculation unit and compares it with the first threshold value.
前記異常判定手段は、前記変化量演算手段により求められた変化量を判定期間中において積分することにより積分値を求め、前記積分値の絶対値と第2閾値とを比較することにより前記撮像手段に対する異常の有無を判定する第2判定手段をさらに備えることを特徴とする監視カメラ。 The surveillance camera according to any one of claims 1 to 4,
The abnormality determining means obtains an integral value by integrating the change amount obtained by the change amount computing means during a judgment period, and compares the absolute value of the integral value with a second threshold value to thereby obtain the imaging means. A surveillance camera, further comprising second determination means for determining whether or not there is an abnormality.
前記異常判定手段は、
前記変化量演算手段により求められた変化量を判定期間中において第1のサンプリング周期で取得しつつ、取得した前記変化量について、前記判定期間中における平均値の絶対値を前記基準軸ごとに求めるとともに、求めた前記基準軸ごとの前記平均値の絶対値を加算して判定値を求める平均値演算手段と、
前記平均値演算手段により求められた判定値と第2閾値とに応じて前記撮像手段に対する異常の有無を判定する第3判定手段と、
をさらに備えることを特徴とする監視カメラ。 The surveillance camera according to any one of claims 1 to 4,
The abnormality determining means includes
While obtaining the change amount obtained by the change amount calculation means at the first sampling period during the determination period, the absolute value of the average value during the determination period is obtained for each reference axis for the obtained change amount. In addition, an average value calculating means for obtaining a determination value by adding the absolute value of the average value for each of the determined reference axes,
Third determination means for determining presence or absence of abnormality with respect to the imaging means in accordance with the determination value obtained by the average value calculation means and a second threshold;
A surveillance camera further comprising:
前記平均値演算手段は、前記判定期間中において前記第1のサンプリング周期で取得した複数の変化量に含まれる正の変化量と負の変化量との比に応じて、前記第1のサンプリング周期を第2のサンプリング周期に変更することを特徴とする監視カメラ。 The surveillance camera according to claim 6,
The average value calculating means is configured to determine the first sampling cycle according to a ratio of a positive change amount and a negative change amount included in a plurality of change amounts acquired in the first sampling cycle during the determination period. Is changed to the second sampling period.
前記基準軸は、第1基準軸と前記第1基準軸に直交する第2基準軸とを含むことを特徴とする監視カメラ。 The surveillance camera according to any one of claims 1 to 7,
The surveillance camera, wherein the reference axis includes a first reference axis and a second reference axis orthogonal to the first reference axis.
前記基準軸は、前記第1基準軸および第2基準軸のいずれにも直交する第3基準軸をさらに含むことを特徴とする監視カメラ。 The surveillance camera according to claim 8,
The surveillance camera, wherein the reference axis further includes a third reference axis that is orthogonal to both the first reference axis and the second reference axis.
前記基準軸は、前記撮像手段の撮像方向に沿った方向と異なる方向に沿うことを特徴とする監視カメラ。 The surveillance camera according to any one of claims 1 to 9,
The surveillance camera according to claim 1, wherein the reference axis is along a direction different from a direction along an imaging direction of the imaging means.
前記基準軸は、前記撮像手段の撮像方向に直交する方向と異なる方向に沿うことを特徴とする監視カメラ。 The surveillance camera according to any one of claims 1 to 10,
The surveillance camera according to claim 1, wherein the reference axis is along a direction different from a direction orthogonal to an imaging direction of the imaging means.
前記監視カメラからの撮像情報を再生する映像再生装置と、
を備え、
前記監視カメラは、
撮像範囲に存在する被写体を撮像して撮像情報を取得する撮像手段と、
基準軸に沿った方向の加速度を測定する加速度測定手段と、
を備え、
前記撮像手段の基準姿勢における前記基準軸に沿った方向の加速度を基準値として記憶する記憶手段と、
前記加速度測定手段により測定された前記基準軸に沿った方向の加速度と前記記憶手段に記憶されている前記基準値との差分を求めることにより、前記基準軸に沿った方向の加速度の変化量を求める変化量演算手段と、
前記変化量演算手段により求められた変化量に応じて、前記撮像手段に対する異常の有無を判定する異常判定手段と、
をさらに備えることを特徴とする監視システム。 At least one surveillance camera for monitoring the presence or absence of abnormality;
A video playback device for playing back imaging information from the surveillance camera;
With
The surveillance camera is
An imaging unit that captures imaging information by imaging a subject existing in the imaging range;
Acceleration measuring means for measuring acceleration in a direction along the reference axis;
With
Storage means for storing acceleration in a direction along the reference axis in a reference posture of the imaging means as a reference value;
By calculating the difference between the acceleration in the direction along the reference axis measured by the acceleration measuring means and the reference value stored in the storage means, the amount of change in acceleration in the direction along the reference axis is obtained. A change amount calculation means to be obtained;
An abnormality determining means for determining the presence or absence of an abnormality with respect to the imaging means according to the amount of change obtained by the change amount calculating means;
A monitoring system further comprising:
前記映像再生装置は、
前記異常判定手段が前記撮像手段に対する異常があったと判定した場合に、警報を出力するとともに、前記撮像手段により取得された撮像情報を再生する警報出力手段をさらに備えることを特徴とする監視システム。 The monitoring system according to claim 12, comprising:
The video playback device
A monitoring system, further comprising an alarm output means for outputting an alarm and reproducing the imaging information acquired by the imaging means when the abnormality determining means determines that there is an abnormality in the imaging means.
前記監視カメラの撮像範囲に存在する被写体を撮像して撮像情報を取得する工程と、
加速度センサによって基準軸に沿った方向の加速度を測定する工程と、
前記監視カメラの基準姿勢における前記基準軸に沿った方向の加速度を基準値として記憶する工程と、
前記加速度センサにより測定された前記基準軸に沿った方向の加速度と前記記憶手段に記憶されている前記基準値との差分を求めることにより、前記基準軸に沿った方向の加速度の変化量を求める工程と、
求められた変化量に応じて、前記監視カメラに対する異常の有無を判定する工程と、
を有することを特徴とする監視方法。 A monitoring method for monitoring the presence or absence of an abnormality with a monitoring camera,
Imaging a subject existing in the imaging range of the surveillance camera to obtain imaging information;
Measuring acceleration in a direction along the reference axis by an acceleration sensor;
Storing the acceleration in the direction along the reference axis in the reference posture of the monitoring camera as a reference value;
By obtaining the difference between the acceleration in the direction along the reference axis measured by the acceleration sensor and the reference value stored in the storage means, the amount of change in the acceleration in the direction along the reference axis is obtained. Process,
Determining the presence or absence of an abnormality with respect to the monitoring camera according to the obtained change amount;
The monitoring method characterized by having.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2010213368A JP5546404B2 (en) | 2010-09-24 | 2010-09-24 | Surveillance camera, surveillance system, and surveillance method |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2010213368A JP5546404B2 (en) | 2010-09-24 | 2010-09-24 | Surveillance camera, surveillance system, and surveillance method |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2012070223A true JP2012070223A (en) | 2012-04-05 |
| JP5546404B2 JP5546404B2 (en) | 2014-07-09 |
Family
ID=46166953
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2010213368A Expired - Fee Related JP5546404B2 (en) | 2010-09-24 | 2010-09-24 | Surveillance camera, surveillance system, and surveillance method |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP5546404B2 (en) |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2015119335A (en) * | 2013-12-18 | 2015-06-25 | Kddi株式会社 | Terminal, system, program and method to thin out frame of photographed moving image in accordance with movement change amount |
| WO2015118953A1 (en) * | 2014-02-07 | 2015-08-13 | Nkワークス株式会社 | Information processing device, information processing method, and program |
| JP2018087792A (en) * | 2016-11-30 | 2018-06-07 | 日置電機株式会社 | Portable terminal device and processing program |
| JPWO2021240692A1 (en) * | 2020-05-27 | 2021-12-02 | ||
| JP2022043028A (en) * | 2015-06-09 | 2022-03-15 | オックスフォード メトリックス ピーエルシー | Motion capture system |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2000285328A (en) * | 1999-01-29 | 2000-10-13 | Secom Co Ltd | Surveillance camera device |
| JP2002090116A (en) * | 2000-09-12 | 2002-03-27 | Asahi Optical Co Ltd | 3D image detection device |
| JP2007293144A (en) * | 2006-04-27 | 2007-11-08 | Canon Inc | Optical equipment |
| JP2008010963A (en) * | 2006-06-27 | 2008-01-17 | Victor Co Of Japan Ltd | Video monitoring apparatus |
| JP2009098738A (en) * | 2007-10-12 | 2009-05-07 | Fujitsu Ten Ltd | Image record condition setting device, image record condition setting method, and drive recorder |
| JP2009267874A (en) * | 2008-04-25 | 2009-11-12 | Sanyo Electric Co Ltd | Vibration correction control circuit and imaging apparatus using the same |
-
2010
- 2010-09-24 JP JP2010213368A patent/JP5546404B2/en not_active Expired - Fee Related
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2000285328A (en) * | 1999-01-29 | 2000-10-13 | Secom Co Ltd | Surveillance camera device |
| JP2002090116A (en) * | 2000-09-12 | 2002-03-27 | Asahi Optical Co Ltd | 3D image detection device |
| JP2007293144A (en) * | 2006-04-27 | 2007-11-08 | Canon Inc | Optical equipment |
| JP2008010963A (en) * | 2006-06-27 | 2008-01-17 | Victor Co Of Japan Ltd | Video monitoring apparatus |
| JP2009098738A (en) * | 2007-10-12 | 2009-05-07 | Fujitsu Ten Ltd | Image record condition setting device, image record condition setting method, and drive recorder |
| JP2009267874A (en) * | 2008-04-25 | 2009-11-12 | Sanyo Electric Co Ltd | Vibration correction control circuit and imaging apparatus using the same |
Cited By (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2015119335A (en) * | 2013-12-18 | 2015-06-25 | Kddi株式会社 | Terminal, system, program and method to thin out frame of photographed moving image in accordance with movement change amount |
| WO2015118953A1 (en) * | 2014-02-07 | 2015-08-13 | Nkワークス株式会社 | Information processing device, information processing method, and program |
| CN105960664A (en) * | 2014-02-07 | 2016-09-21 | 诺日士精密株式会社 | Information processing device, information processing method, and program |
| JPWO2015118953A1 (en) * | 2014-02-07 | 2017-03-23 | ノーリツプレシジョン株式会社 | Information processing apparatus, information processing method, and program |
| JP2022043028A (en) * | 2015-06-09 | 2022-03-15 | オックスフォード メトリックス ピーエルシー | Motion capture system |
| JP7612556B2 (en) | 2015-06-09 | 2025-01-14 | オックスフォード メトリックス ピーエルシー | Motion Capture System |
| JP2018087792A (en) * | 2016-11-30 | 2018-06-07 | 日置電機株式会社 | Portable terminal device and processing program |
| JPWO2021240692A1 (en) * | 2020-05-27 | 2021-12-02 | ||
| WO2021240692A1 (en) * | 2020-05-27 | 2021-12-02 | 日本電信電話株式会社 | Monitoring system, monitoring method, and monitoring program |
| JP7485024B2 (en) | 2020-05-27 | 2024-05-16 | 日本電信電話株式会社 | Monitoring system, monitoring method, and monitoring program |
Also Published As
| Publication number | Publication date |
|---|---|
| JP5546404B2 (en) | 2014-07-09 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP5546404B2 (en) | Surveillance camera, surveillance system, and surveillance method | |
| US20090128632A1 (en) | Camera and image processor | |
| TWI466068B (en) | System and method for detecting monitoring video | |
| KR20160088129A (en) | Method and Apparatus for providing multi-video summaries | |
| KR20100117163A (en) | Control method of image photographing apparatus | |
| JP2009100454A (en) | Moving object tracking control device | |
| CN105592301B (en) | Picture pick-up device and its control method and supervision camera system | |
| JP5771039B2 (en) | Abandoned person detection device | |
| JP6910208B2 (en) | Information processing equipment, information processing methods and programs | |
| JP2008226109A (en) | Video image analysis system and method | |
| CN102843551A (en) | Mobile detection method and system and business server | |
| KR20120052864A (en) | Tansmission apparatus and transmission method | |
| JP6233721B2 (en) | Information processing system, information processing method, and program | |
| CN101207714B (en) | Image pickup device and imaging method | |
| JP2012099940A5 (en) | ||
| JP2011155461A (en) | Imaging device, and method and program for controlling the same | |
| CN204291178U (en) | A kind of imaging device and system | |
| KR101698864B1 (en) | Media Being Recorded with the Program Executing Method for Detecting Image Using Metadata | |
| JP4724888B2 (en) | Moving body detection apparatus, moving body imaging system, moving body imaging method, and moving body detection program | |
| KR101519405B1 (en) | Camera control method using digital video recorder and audio sensor | |
| JP7384601B2 (en) | Monitoring system | |
| JPH11284985A (en) | Equipment monitoring method and equipment | |
| JP2013066046A (en) | Imaging device | |
| JP2011205517A (en) | Image processing apparatus | |
| KR20070031079A (en) | Camera Impact Discrimination Device and Method in Digital Video Recorder |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20130319 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20131224 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20140107 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140219 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20140422 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20140513 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 5546404 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| LAPS | Cancellation because of no payment of annual fees |