JP2012212989A - Head-mounted camera and head-mounted display - Google Patents
Head-mounted camera and head-mounted display Download PDFInfo
- Publication number
- JP2012212989A JP2012212989A JP2011076761A JP2011076761A JP2012212989A JP 2012212989 A JP2012212989 A JP 2012212989A JP 2011076761 A JP2011076761 A JP 2011076761A JP 2011076761 A JP2011076761 A JP 2011076761A JP 2012212989 A JP2012212989 A JP 2012212989A
- Authority
- JP
- Japan
- Prior art keywords
- imaging
- unit
- camera
- head
- range
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
- 238000003384 imaging method Methods 0.000 claims abstract description 214
- 238000001514 detection method Methods 0.000 claims abstract description 22
- 230000007423 decrease Effects 0.000 claims description 4
- 238000012544 monitoring process Methods 0.000 claims description 3
- 230000000694 effects Effects 0.000 abstract description 4
- 238000000034 method Methods 0.000 description 19
- 230000006870 function Effects 0.000 description 17
- 210000003128 head Anatomy 0.000 description 16
- 238000012545 processing Methods 0.000 description 13
- 230000003287 optical effect Effects 0.000 description 10
- 230000001276 controlling effect Effects 0.000 description 6
- 230000020169 heat generation Effects 0.000 description 6
- 238000010586 diagram Methods 0.000 description 5
- 230000005540 biological transmission Effects 0.000 description 3
- 230000001105 regulatory effect Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 2
- 239000011521 glass Substances 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 230000015654 memory Effects 0.000 description 2
- 210000001525 retina Anatomy 0.000 description 2
- 239000002699 waste material Substances 0.000 description 2
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000002207 retinal effect Effects 0.000 description 1
Images
Landscapes
- Studio Devices (AREA)
Abstract
【課題】省エネ効果の高い頭部搭載型カメラを提供すること。
【解決手段】頭部搭載型カメラであって、撮像素子を有する撮像部と、前記撮像部の撮像方向を検出する撮像方向検出部と、前記撮像部に駆動電力を供給する電源部と、前記電源部の電力残量を監視するとともに、前記撮像部の動作を制御するカメラ制御部と、を備え、前記カメラ制御部は、前記撮像部に前記駆動電力の供給がなされているときに、前記撮像方向検出部により検出された前記撮像方向が、所定の角度範囲から出た場合に、前記撮像部への前記駆動電力の供給を停止することとした。
【選択図】図1A head mounted camera with high energy saving effect is provided.
An imaging unit including an imaging device, an imaging direction detection unit that detects an imaging direction of the imaging unit, a power supply unit that supplies driving power to the imaging unit, A camera control unit that monitors the remaining power of the power supply unit and controls the operation of the imaging unit, and the camera control unit, when the driving power is supplied to the imaging unit, When the imaging direction detected by the imaging direction detection unit is out of a predetermined angle range, the supply of the driving power to the imaging unit is stopped.
[Selection] Figure 1
Description
本発明は、頭部搭載型カメラ及びこれを搭載したヘッドマウントディスプレイに関する。 The present invention relates to a head mounted camera and a head mounted display equipped with the same.
従来、保持手段を介して頭部に装着し、ハンズフリーの状態で撮像可能とした頭部搭載型カメラが知られている。また、かかる頭部搭載型カメラを搭載したヘッドマウントディスプレイが提案されている(例えば、特許文献1を参照。)。 2. Description of the Related Art Conventionally, there is known a head mounted camera that is mounted on a head through a holding unit and can be imaged in a hands-free state. In addition, a head-mounted display equipped with such a head-mounted camera has been proposed (see, for example, Patent Document 1).
ヘッドマウントディスプレイは、眼鏡のように頭部に装着可能な支持部材に表示部を設けており、これを頭部に装着した観察者の眼に画像光を投射することにより、画像を視認させることができるようになっている。そして、かかるヘッドマウントディスプレイがカメラを備える構成とすることにより、撮像した画像についても表示部を介して視認することができるようになる。勿論、ヘッドマウントに通信機能を持たせたり、あるいはカメラに通信機能を持たせたりすることにより、カメラで撮像した撮像画像を遠く離れた場所へ送信したりすることも可能である。 The head-mounted display is provided with a display unit on a support member that can be worn on the head like glasses, and the image is projected by projecting image light onto the eyes of an observer wearing this on the head. Can be done. And when this head mounted display is set as the structure provided with a camera, it becomes possible to visually recognize the imaged image via a display part. Of course, by providing the head mount with a communication function or by providing the camera with a communication function, it is also possible to transmit a captured image captured by the camera to a remote place.
しかし、特許文献1の技術をはじめとする従来の頭部搭載型カメラは、単に、支持部材によって頭部に保持されているだけのものが多い。したがって、かかる頭部搭載型カメラを起動して撮像しようとすると、撮像対象の方向を向いていない場合でも、あるいは、作業状況を撮像しているのに、作業中断中であっても撮像動作が行われていた。 However, many conventional head mounted cameras including the technique of Patent Document 1 are simply held on the head by a support member. Therefore, when such a head-mounted camera is activated and an attempt is made to take an image, the imaging operation can be performed even when the work is being interrupted even when the direction of the imaging target is not directed or the work situation is being imaged. It was done.
これでは、電力や撮像データの記憶容量を無駄に使用していることが多く発生し、省エネの観点からは決して望ましいことではない。また、実際に必要な撮像タイミング以外でも、カメラをオフしない限り電力を消費していることになる。カメラは頭部に搭載されているため、電力消費に伴う発熱が常に生じるとなると、所謂低温火傷の虞も考慮しなければならない。 In this case, the power and the storage capacity of the image data are often used wastefully, which is not desirable from the viewpoint of energy saving. Further, power is consumed even when the imaging timing is not actually required unless the camera is turned off. Since the camera is mounted on the head, if heat generation due to power consumption always occurs, the risk of so-called low-temperature burns must also be considered.
本発明では、上述したような課題に鑑み、省エネ効果の高い頭部搭載型カメラ及びヘッドマウントディスプレイを提供することを目的とする。 In view of the above-described problems, an object of the present invention is to provide a head-mounted camera and a head-mounted display that have a high energy-saving effect.
請求項1に記載の本発明は、頭部搭載型カメラであって、撮像素子を有する撮像部と、前記撮像部の撮像方向を検出する撮像方向検出部と、前記撮像部に駆動電力を供給する電源部と、前記電源部の電力残量を監視するとともに、前記撮像部の動作を制御するカメラ制御部と、を備え、前記カメラ制御部は、前記撮像部に前記駆動電力の供給がなされているときに、前記撮像方向検出部により検出された前記撮像方向が、所定の角度範囲から出た場合に、前記撮像部への前記駆動電力の供給を停止することとした。 The present invention according to claim 1 is a head-mounted camera, wherein an imaging unit having an imaging device, an imaging direction detection unit that detects an imaging direction of the imaging unit, and driving power is supplied to the imaging unit And a camera control unit that controls the remaining power of the power supply unit and controls the operation of the imaging unit. The camera control unit supplies the driving power to the imaging unit. When the imaging direction detected by the imaging direction detection unit is out of a predetermined angle range, the supply of the driving power to the imaging unit is stopped.
請求項2記載の本発明は、上記請求項1記載の頭部搭載型カメラにおいて、前記カメラ制御部は、前記電力残量が少なくなるにしたがい、前記所定の角度範囲を狭くすることを特徴とする。 According to a second aspect of the present invention, in the head-mounted camera according to the first aspect, the camera control unit narrows the predetermined angle range as the remaining amount of power decreases. To do.
請求項3記載の本発明は、請求項1又は2に記載の頭部搭載型カメラにおいて、前記撮像方向が前記所定の角度範囲外で、前記撮像部への前記駆動電力の供給を停止した状態であって、前記撮像方向が前記所定の角度範囲に向かって移動しており、前記撮像方向が、前記所定の角度範囲の外側の所定の角度範囲内に入った場合、前記撮像部への前記駆動電力の供給を行うことを特徴とする。 A third aspect of the present invention is the head-mounted camera according to the first or second aspect, wherein the imaging direction is outside the predetermined angle range and the supply of the driving power to the imaging unit is stopped. When the imaging direction is moving toward the predetermined angle range and the imaging direction falls within a predetermined angle range outside the predetermined angle range, the imaging unit The driving power is supplied.
請求項4記載の本発明は、請求項1又は2に記載の頭部搭載型カメラにおいて、前記カメラ制御部は、前記撮像部のフレームレートを所定の値に設定しており、前記撮像方向検出部により検出された前記撮像方向が前記所定の角度範囲を外れ、前記駆動電力の消費が低下するように制御する場合、前記撮像部のフレームレートを、前記所定の値よりも下げることを特徴とする。 According to a fourth aspect of the present invention, in the head-mounted camera according to the first or second aspect, the camera control unit sets a frame rate of the imaging unit to a predetermined value, and the imaging direction detection A frame rate of the imaging unit is made lower than the predetermined value when controlling the imaging direction detected by the unit to be out of the predetermined angle range and reducing the driving power consumption. To do.
請求項5記載の本発明は、請求項1〜4のいずれか1項に記載の頭部搭載型カメラにおいて、撮像方向の移動速度を検出する移動速度検出部を備え、前記カメラ制御部は、前記移動速度検出部により検出された前記移動速度が、所定の速度以上の場合は、前記撮像部への前記駆動電力の供給を停止、または、前記撮像部のフレームレートを下げることを特徴とする。
The present invention according to
請求項6記載の本発明は、請求項1〜5のいずれか1項に記載の頭部搭載型カメラにおいて、前記カメラ制御部により前記撮像部への前記駆動電力の供給が停止された場合、前記駆動電力の供給が停止される直前の前記撮像部による撮像データを記憶する記憶部を備えたことを特徴とする。
The present invention according to
請求項7記載の本発明は、請求項6に記載の頭部搭載型カメラと、前記頭部搭載型カメラの前記撮像部により撮像された撮像画像と、所定のコンテンツに応じたコンテンツ画像とを表示可能とした表示部と、前記表示部の表示を制御する表示制御部と、を備え、前記表示制御部は、前記表示部に、前記記憶部に記憶された前記撮像データに基づく撮像画像を表示するヘッドマウントディスプレイとした。 According to a seventh aspect of the present invention, there is provided the head-mounted camera according to the sixth aspect, a captured image captured by the imaging unit of the head-mounted camera, and a content image corresponding to predetermined content. A display unit capable of displaying; and a display control unit that controls display of the display unit, wherein the display control unit displays a captured image based on the imaging data stored in the storage unit on the display unit. It was set as the head mounted display to display.
請求項8記載の本発明は、請求項7に記載のヘッドマウントディスプレイにおいて、前記表示制御部は、前記表示部に、前記所定の角度範囲を示す画像表示を行うことを特徴とする。 According to an eighth aspect of the present invention, in the head mounted display according to the seventh aspect, the display control unit performs image display indicating the predetermined angle range on the display unit.
請求項9記載の本発明は、請求項7又は8に記載のヘッドマウントディスプレイにおいて、前記表示部に表示される前記コンテンツ画像に応じて、前記所定の角度範囲を変更する撮像方向範囲規定手段をさらに備えることを特徴とする。 According to a ninth aspect of the present invention, in the head mounted display according to the seventh or eighth aspect, an imaging direction range defining means for changing the predetermined angle range according to the content image displayed on the display unit. It is further provided with the feature.
本発明によれば、撮像方向が所定の角度範囲から出た場合、撮像部への駆動電力の供給を停止するため、例えば、カメラが撮像対象の方向を向いていない場合やカメラの駆動が必要ではないような状況にあるような場合は電力の消費を可及的に抑えることができ、省エネルギ化が図れる。また、カメラを頭部に搭載してはいるが、電力消費に伴う発熱による低温火傷の虞を可及的に減じることができる。 According to the present invention, when the imaging direction is out of a predetermined angle range, the supply of driving power to the imaging unit is stopped. In such a situation, power consumption can be suppressed as much as possible, and energy saving can be achieved. Although the camera is mounted on the head, the risk of low-temperature burns due to heat generated by power consumption can be reduced as much as possible.
以下、本発明の実施形態について、図面を参照して具体的に説明する。図1は、本実施形態に係る頭部搭載型カメラと、これを搭載したヘッドマウントディスプレイ(以下、「HMD」とする)の概要を示す説明図である。 Embodiments of the present invention will be specifically described below with reference to the drawings. FIG. 1 is an explanatory diagram showing an overview of a head mounted camera according to the present embodiment and a head mounted display (hereinafter referred to as “HMD”) on which the head mounted camera is mounted.
すなわち、本実施形態においては、頭部搭載型カメラを、観察者が頭部に装着した状態で所定のコンテンツ画像を視認することができるHMDに搭載したものとしている。図1に示すように、本実施形態に係るHMDは、撮像素子を有する撮像部を有する頭部搭載型カメラとしてのカメラ本体と、コンテンツ画像を表示するHMD本体と、コントローラとを備えている。 That is, in the present embodiment, the head-mounted camera is mounted on the HMD that allows a viewer to visually recognize a predetermined content image while being mounted on the head. As shown in FIG. 1, the HMD according to the present embodiment includes a camera body as a head-mounted camera having an imaging unit having an image sensor, an HMD body that displays a content image, and a controller.
カメラ本体は、前記撮像部の撮像方向を検出する撮像方向検出部をさらに備えている。一方、HMD本体は、光学部と表示部とを備え、コントローラ内には、前記撮像部に駆動電力を供給する電源部と、前記電源部の電力残量を監視するとともに、前記撮像部の動作を制御する制御部とを備えている。 The camera body further includes an imaging direction detection unit that detects an imaging direction of the imaging unit. On the other hand, the HMD main body includes an optical unit and a display unit. In the controller, a power supply unit that supplies driving power to the imaging unit, a remaining power of the power supply unit, and an operation of the imaging unit are monitored. And a control unit for controlling.
そして、前記制御部は、前記撮像部に前記駆動電力の供給がなされているときに、前記撮像方向検出部により検出された前記撮像方向が、所定の角度範囲から出た場合に、前記撮像部への前記駆動電力の供給を停止するようにしている。 When the driving power is supplied to the imaging unit, the control unit detects the imaging unit when the imaging direction detected by the imaging direction detection unit is out of a predetermined angle range. The supply of the driving power to is stopped.
ところで、コントローラ内には、撮像部への駆動電力の供給が停止された場合、前記駆動電力の供給が停止される直前の前記撮像部による撮像データを記憶する記憶部を備えている。 By the way, the controller is provided with a storage unit that stores imaging data obtained by the imaging unit immediately before the supply of driving power is stopped when the supply of driving power to the imaging unit is stopped.
また、上述した制御部を、カメラ本体の撮像部の動作を制御するカメラ制御部として機能させるとともに、HMD本体の制御を行う表示制御部としても機能させている。特に、HMD本体が備える表示部の制御を行わせ、前記記憶部に記憶された撮像データに基づく撮像画像を表示部に表示させている。すなわち、駆動電力の供給が停止される直前の撮像部による撮像データに基づく撮像画像を表示する。これにより、観察者はどこまで撮像されていたかの確認が容易に行える。 In addition, the control unit described above functions as a camera control unit that controls the operation of the imaging unit of the camera body, and also functions as a display control unit that controls the HMD body. In particular, the display unit included in the HMD main body is controlled, and a captured image based on the imaging data stored in the storage unit is displayed on the display unit. That is, the captured image based on the imaging data obtained by the imaging unit immediately before the drive power supply is stopped is displayed. Thereby, the observer can easily confirm how far the image has been captured.
上述した構成とすることにより、本実施形態に係る頭部搭載型カメラ(HMD)では、カメラの省エネルギ化が図れるとともに、電力消費に伴う発熱が無用に発生しないように抑制し、発熱による低温火傷の虞を可及的に減じることができる。したがって、頭部搭載型カメラとしてばかりでなく、これを搭載するHMDの商品価値をも向上させることができる。 With the above-described configuration, the head mounted camera (HMD) according to the present embodiment can save energy of the camera, suppress heat generation due to power consumption from being unnecessarily generated, and reduce the temperature due to heat generation. The risk of burns can be reduced as much as possible. Therefore, it is possible to improve not only the head mounted camera but also the commercial value of the HMD equipped with the camera.
ところで、前記制御部は、前記撮像部のフレームレートを所定の値に設定しており、前記撮像方向検出部により検出された前記撮像方向が所定の角度範囲内にある場合には前記撮像部のフレームレートは所定の値であるが、前記撮像方向検出部により検出された前記撮像方向が、前記所定の角度範囲を外れた場合には、前記撮像部のフレームレートを、前記所定の値よりも下げるようにすることもできる。この場合でも、上述した効果と同等の効果を奏する。 By the way, the control unit sets the frame rate of the imaging unit to a predetermined value, and when the imaging direction detected by the imaging direction detection unit is within a predetermined angular range, Although the frame rate is a predetermined value, when the imaging direction detected by the imaging direction detection unit is out of the predetermined angle range, the frame rate of the imaging unit is set to be lower than the predetermined value. It can also be lowered. Even in this case, the same effect as described above can be obtained.
また、前記制御部は、前記表示部に表示される前記コンテンツ画像に応じて、前記所定の角度範囲を変更する撮像方向範囲規定手段としての機能を有するようにすることもできる。 Further, the control unit may have a function as an imaging direction range defining unit that changes the predetermined angle range in accordance with the content image displayed on the display unit.
かかる構成とすることにより、上述のカメラ本体を搭載したHMDでは、表示するコンテンツ画像に適した撮像方向の角度範囲が設定されることになり、HMDの用途に適した電力消費の抑制(省エネルギ化)を図ることができる。 With this configuration, in the HMD equipped with the above-described camera body, an angle range in the imaging direction suitable for the content image to be displayed is set, and power consumption suitable for the application of the HMD (energy saving) ).
[第1の実施形態]
以下、一実施形態に係る頭部搭載型カメラ及びHMDについて、図2〜図7を参照しながらより具体的に説明する。
[First Embodiment]
Hereinafter, the head-mounted camera and the HMD according to the embodiment will be described more specifically with reference to FIGS.
図2は頭部搭載型カメラを搭載した本実施形態に係るHMDの使用状態を示す説明図、図3は同HMDのブロック図であり、図2に示すように、本実施形態に係るHMDは、観察者1が頭部に装着した状態で使用することができる。 FIG. 2 is an explanatory view showing the usage state of the HMD according to the present embodiment equipped with a head-mounted camera, FIG. 3 is a block diagram of the HMD, and as shown in FIG. The observer 1 can be used while being worn on the head.
HMDは、観察者1の左眼に画像光を投射することにより各種コンテンツ情報をコンテンツ画像として当該観察者1に視認可能に表示するHMD本体2と、このHMD本体2に伝送ケーブル4を介して接続され、当該HMD本体2に対して画像信号を供給する処理を主に行うコントローラ3と、さらに、カメラ本体5とを備えて構成されている。なお、各種コンテンツ情報としては、例えば、動画ファイル、静止画ファイル、文章ファイル等があり、HMDの内部に記憶されていてもよいし、HMDの外部に記憶されているものであっても構わない。
The HMD projects various kinds of content information as content images so as to be visible to the viewer 1 by projecting image light onto the left eye of the viewer 1, and the HMD body 2 via the transmission cable 4. A
また、HMD本体2は、図2に示すように、略眼鏡形状とした支持部材2aの左側に取付けられ、観察者1の左眼に画像光が投射されるようになっている。
Further, as shown in FIG. 2, the HMD main body 2 is attached to the left side of the
すなわち、HMD本体2の内部には、液晶表示装置からなる画像表示部21と前記光学部となる光学系23(図3参照)が配設されており、画像表示部21にコントローラ3から電力や画像信号が供給されるようになっている。そして、画像信号に基づいて画像表示部21に表示される表示画像の光が、各種レンズなどを含む光学系23と、HMD本体2の先端側に設けられたハーフミラー22とを介して観察者1の左眼に画像光として投射される。
That is, the HMD main body 2 is provided with an
こうして、外光はハーフミラー22を透過して観察者1の眼に入射し、コンテンツ情報に応じた画像光はハーフミラー22で反射させて観察者1の眼に入射し、眼に入射した光が網膜上に結像されることにより、観察者1にコンテンツ情報に対応するコンテンツ画像(以下、単に「コンテンツ」という。)を視認させることができる。
Thus, the external light passes through the
そして、支持部材2aの略中央位置には、図示するようにカメラ本体5を取付けている。なお、ここでは、カメラ本体5は、CMOSセンサ51で構成された動画撮影用の撮像部を備えているが、撮像部としては、静止画を一定間隔毎に連続して撮像する構成としてもよい。また、CMOSセンサ51に代えて、例えばCCDを用いることもできる。
And the camera
このように、本実施形態に係るHMDは、ハンズフリーの状態で撮像可能としたカメラ本体5を備えており、コンテンツを視認できるとともに、カメラ本体5で撮像した撮像画像をも視認することができる。また、HMDとしては、外光を透過しつつ、コンテンツ情報に応じた画像光を観察者1の眼に反射させて投射するハーフミラー22を備えたシースルー型の構成となっている。
As described above, the HMD according to the present embodiment includes the
したがって、本実施形態に係るHMDでは、カメラ本体5を起動させておけば、当該カメラ本体5の撮像方向における所定の画角内を動画で撮影することができる。また、コンテンツを表示している最中であっても、観察者1の視野の中で、少なくともそのコンテンツを表示している領域以外の領域では、観察者1が外界(背景)を視認することができる。
Therefore, in the HMD according to the present embodiment, if the
なお、本実施形態では、HMDの使用態様として、HMD本体2により表示されるコンテンツを作業マニュアルとし、観察者1は、この作業マニュアルを見ながら、例えば、観察者1の略正面の対象物を組立てる作業を行うものとしている。そして、正面の対象物を組立てる作業を実行している間、その作業の様子がカメラ本体5により撮像され、その撮像データは記憶部に記憶されるようになっている。
In the present embodiment, as a usage mode of the HMD, the content displayed by the HMD main body 2 is used as a work manual, and the observer 1 looks at the work manual, for example, an object in front of the observer 1. The assembly work is to be performed. And while performing the operation | work which assembles the front object, the mode of the operation is imaged with the camera
コントローラ3は、ポケットなどに収容したり、腰などに保持したりして携行可能な構成となっており、矩形箱状のケーシング3a内に、HMD本体2の両方に対応可能としたCPU33や、ROM34,35、RAM36などのメモリからなる記憶部などを備えた制御部としての制御回路30が設けられている(図3参照)。
The
かかる制御回路30が、HMD本体2を制御する表示制御部及びカメラ本体5を制御するカメラ制御部として機能することになる。また、コントローラ3には、HMD本体2やカメラ本体5へ電力を供給する電源が備えられている。
The
このように、本実施形態では、制御回路30や電源を備えたコントローラ3とHMD本体2とでHMDが構成されるとともに、制御回路30や電源を備えたコントローラ3とカメラ本体2とで頭部搭載型カメラが構成されることになる。しかし、かかる構成に限定されるものではなく、例えば、カメラ本体2内に、あるいはその近傍に、HMDの表示制御部とは独立したカメラ制御部を備える構成とすることもできる。
Thus, in the present embodiment, the HMD is configured by the
また、コントローラ3のケーシング3aの一面には、電源スイッチ31、電源ランプ32が設けられている。このコントローラ3とHMD本体2とは、複数の信号線からなる伝送ケーブル4により接続している。符号4aは伝送ケーブル4の先端に設けたプラグであり、コントローラ3のケーシング3aの上端面に設けたジャックに接続可能としている。
A
ここで、図3を参照しながら、HMD本体2と、カメラ本体5と、コントローラ3とを具備するHMDの電気的構成について説明する。図示するように、HMD本体2には、表示部としての画像表示部21と、光学部としての光学系23とが内蔵されている。
Here, an electrical configuration of the HMD including the HMD main body 2, the camera
また、カメラ本体5は、撮像部としてのCMOSセンサ51と、撮像方向検出部としての角度センサ52と、撮像方向の移動側得御を検出する移動速度検出部としての速度センサ53を備えている。
The
角度センサ52により、カメラ本体5の撮像方向の角度を検出することができ、HMDを装着している観察者1が、例えば作業を休憩するために、正面を向いている状態から首を上方や下方に向けたり、あるいは左右にかしげたりした場合、カメラ本体5のCMOSセンサ51が水平方向あるいは垂直方向に対して何度の角度で傾いたかを検出することができる。
The
また、速度センサ53により、撮像方向の移動速度、つまりカメラ本体5の移動速度を検出することができる。例えば、HMDを装着している観察者1が、首や肩のコリをほぐすために首を振ったり、あるいは休憩のために席を立ったりした場合、カメラ本体5が所定速度以上で移動しているかを検出することができる。
The
そして、コントローラ3には、演算処理装置としてのCPU33と、このCPU33とバスを介してそれぞれ接続されたプログラムROM34、フラッシュROM35、RAM36、画像処理部37、ビデオRAM39などからなる制御回路30と、電源となる電池6と、インターフェイス(I/F)40,41などが設けられている。
The
制御回路30のプログラムROM34には、カメラ本体5を制御するためのカメラ駆動処理プログラムや、HMDとしての機能を実現させるためのプログラムなど、各種の処理プログラムが記憶されている。
The
そして、制御回路30のCPU33は、これらプログラムを実行することにより、HMDを構成する各種回路を動作させて、HMDが備える各種機能を実行させることにより、当該HMD全体の動作を統括制御する制御部として機能する。また、カメラ本体5のオン・オフ、すなわち、CMOSセンサ51への駆動電力の供給停止などを含むカメラの駆動制御を行うカメラ制御部として機能する。さらに、CPU33は、電池6の容量を監視する電源管理部としても機能している。
The
また、フラッシュROM35は、撮像部による撮像データを記憶する記憶部として機能し、制御回路30によりCMOSセンサ51への駆動電力の供給が停止された場合、この駆動電力の供給が停止された直前のCMOSセンサ51による撮像データを記憶するようにしている。また、このフラッシュROM35には、かかる撮像データの他、コンテンツ情報を含む画像データや、カメラ駆動処理に用いられる撮像方向規定テーブルなどを含む各種データが記憶されている。なお、RAM36は作業領域として用いられる。
The
フラッシュROM35に記憶されている撮像方向規定テーブルには、詳しくは後述するが、電力残量と、この電池残量に応じて規制される撮像可能なカメラ本体5の撮像方向の範囲を示す角度とが関連付けられている。なお、カメラ本体5の撮像方向の範囲は、CMOSセンサ51の撮像方向の範囲と同義である。
The imaging direction defining table stored in the
また、画像処理部37はビデオRAM39と協働してコンテンツを表示するための画像処理専用として機能する。
The
なお、インターフェイス(I/F)40,41としては、HMD本体2との接続機能を果たすHMD接続I/F40と、カメラ本体5や電池6、さらには電源スイッチ31及び電源ランプ32との接続機能を果たす周辺I/F41とがある。なお、画像処理部37により表示されるコンテンツに対応する画像データは、前述したようにフラッシュROM35に予め記憶されているが、逐次外部から入力されるものであってもよい。
As the interfaces (I / F) 40 and 41, a connection function between the HMD connection I /
ここで、制御回路30によって担われるカメラ制御部の機能について説明する。図4は電池残量に応じて規制される撮像可能な撮像方向の範囲を角度で示した説明図、図5はカメラの移動方向に応じて変化する撮像可能な撮像方向の範囲を角度で示した説明図、図6は画像表示部21に表示される電池残量と撮像方向の規制範囲とを関連付けた表示画像によるインジケータを示す説明図、図7は実施形態に係る頭部搭載型カメラのカメラ駆動メイン処理を示すフローチャートである。
Here, the function of the camera control unit carried by the
本実施形態では、電池6の残量を最も多い第1の残量から、使用に耐えうる最も少ない第3の残量まで3段階に分けるとともに、図4に示すように、カメラ本体5で撮像可能なカメラ撮像可能範囲を、前記電池6の残量に応じて、第1の撮像範囲X、第2の撮像範囲Y及び第3の撮像範囲Zの3段階に分けている。
In the present embodiment, the remaining amount of the
なお、本実施形態では、HMDを、表示される作業マニュアルを見ながら観察者1の略正面の対象物を組立てる作業に用いている。そのため、作業中であれば、少なくとも左右を向くことは無いと想定し、ここでは、カメラ本体5の光軸が水平線上にある場合を基準とし、撮像範囲を、基準から上下方向に所定の角度範囲内に定めている。
In the present embodiment, the HMD is used for assembling an object in front of the observer 1 while viewing the displayed operation manual. For this reason, it is assumed that the camera body will not turn at least to the left and right during the operation. Here, the imaging range is set to a predetermined angle in the vertical direction from the reference, based on the case where the optical axis of the
具体的には、図示するように、基準から上下方向へ第1の所定角度開いた角度で規定される範囲を第1の撮像範囲Xとし、さらにその内側に所定角度狭めた角度で規定される範囲を第2の撮像範囲Y、さらにその内側に所定角度狭めた角度で規定される範囲を第3の撮像範囲Zとしている。 Specifically, as shown in the drawing, a range defined by an angle that is opened by a first predetermined angle in the vertical direction from the reference is defined as a first imaging range X, and further defined by an angle narrowed by a predetermined angle inside. The range is defined as a second imaging range Y, and a range defined by an angle narrowed by a predetermined angle inside is defined as a third imaging range Z.
そして、電池容量が第1の残量以上の場合は第1の撮像範囲Xを、電池容量が第2の撮像範よりも少なく第3の残量以上であれば第2の撮像範囲Yを、電池残量が第3の残量以下であれば第3の撮像範囲Zを関連付けて撮像方向規定テーブルに設定している。 If the battery capacity is greater than or equal to the first remaining amount, the first imaging range X is set. If the battery capacity is less than the second imaging range and greater than or equal to the third remaining amount, the second imaging range Y is set. If the remaining battery level is less than or equal to the third remaining level, the third imaging range Z is associated and set in the imaging direction defining table.
したがって、観察者1は、作業している際に、電池容量が十分の場合は、カメラ撮像可能範囲は第1の撮像範囲X(図4)であるため、少々首を上下に振ってもカメラ本体5の光軸が第1の撮像範囲X内にある限り撮像は継続される。
Accordingly, when the observer 1 is working and the battery capacity is sufficient, the camera image pickup range is the first image pickup range X (FIG. 4). Imaging is continued as long as the optical axis of the
しかし、電池残量が少なくなり、例えば第3の残量となって、カメラ撮像可能範囲が第3の撮像範囲Z(図4)となると、撮像可能範囲が極めて狭くなるため、観察者1が略正面を向いて作業している場合は撮像されるが、首を上下に向けたりしてカメラ本体5の光軸が第3の撮像範囲Zからはみ出すと、カメラ本体5はオフになる。
However, when the remaining amount of the battery is reduced, for example, when the third remaining amount is reached and the camera image pickup range becomes the third image pickup range Z (FIG. 4), the image pickup range becomes extremely narrow. The
このように、電池容量に応じて撮像可能範囲を狭くしているため、電池容量が少なくなればなるほど、無駄な撮像を行わない傾向になり、少ない残量の電池6を有効利用して、電池6が要充電状態になるのを可及的に抑えることができる。また、電池6の限りある電力を無駄なく利用することが可能となる。
As described above, the imageable range is narrowed according to the battery capacity. Therefore, as the battery capacity becomes smaller, there is a tendency that wasteful imaging is not performed. It can suppress as much as possible that 6 will be in a charge required state. In addition, the limited electric power of the
また、カメラ制御部として機能する制御回路30は、カメラ本体5の撮像方向が所定の角度範囲外で(前述した第1の撮像範囲X〜第3の撮像範囲Zのいずれかで規定された角度範囲よりも外に位置しており)、カメラ本体5のCMOSセンサ51への駆動電力の供給が停止されている状態であって、撮像方向が前記所定の角度範囲に向かって移動しており、撮像方向が、前記所定の角度範囲の外側の所定の角度範囲内に入った場合、撮像部への駆動電力の供給を行うようにしている。
Further, the
すなわち、図5において、第1の所定範囲が前述した第1の撮像範囲X〜第3の撮像範囲Zのいずれかで規定された所定の角度範囲に相当し、第2の所定範囲が所定の角度範囲の外側の所定の角度範囲に相当する。 That is, in FIG. 5, the first predetermined range corresponds to a predetermined angle range defined by any one of the first imaging range X to the third imaging range Z described above, and the second predetermined range is predetermined. This corresponds to a predetermined angle range outside the angle range.
したがって、カメラ本体5のCMOSセンサ51への駆動電力の供給を停止した状態であって、角度センサ52により検出された撮像方向が前記第1の所定範囲(第1の撮像範囲X〜第3の撮像範囲Z)に対して一定の角度範囲を超えて外れている場合、角度センサ52により検出された前記撮像方向が前記第1の所定範囲に前記一定の角度範囲を加えた前記第2の所定範囲に入ることを条件に、CMOSセンサ51への駆動電力の供給を行う。
Therefore, the supply of driving power to the
このように、カメラ本体5の撮像方向が第1の所定範囲の外側にあって、なおかつCMOSセンサ51への駆動電力の供給が停止されている状態のときに、カメラ本体5の向き、すなわち撮像方向が前記第1の所定範囲に向かって移動している場合に、撮像方向が前記第1の所定範囲の外側の第2の所定範囲内に入ったらCMOSセンサ51への駆動電力の供給を行うようにしたため、カメラ本体5が所定の角度範囲内に入り、撮像すべき方向を向いたときには既に駆動電力が供給されて撮像動作が開始されていることになり、撮像すべきタイミングを逃す虞がない。
Thus, when the imaging direction of the
ところで、この電池容量と撮像範囲との関係は、観察者1が認識できるように、電池容量と撮像範囲との関係を示すインジケータ画像7を画像処理部37で生成するようにしている。そして、このインジケータ画像7を表示するための画像光が画像表示部21及び光学系23を介して観察者1の眼に投射され、図6に示すように表示される。
By the way, the
図6において、符号20は画像表示領域を示し、この画像表示領域20の左上に矩形枠状のスケール部71と、撮像範囲を帯状に示す表示部72とからなるインジケータ画像7が表示されている。ここでは、矩形枠状のスケール部71の左端部が電池容量のミニマムを示し、矩形枠状のスケール部71の右端部が電池容量のマキシムを示している。また、矩形枠状のスケール部71の左1/3が第3の撮像範囲Zに相当し、中1/3が第2の撮像範囲Yに相当し、右1/3が第3の撮像範囲Zに相当している。
In FIG. 6,
したがって、図6においては、スケール部71の2/3を示す位置に表示部72の終端が表示されているため、電池容量は2/3ほど残っており、撮像可能な範囲は、第2の撮像範囲Yに規定されていることが分かる。
Therefore, in FIG. 6, since the end of the
このように、本実施形態では、画像表示部21に、前記第1の所定範囲(所定の角度範囲)を示す画像表示を行うことが可能となっているため、観察者1は、電池容量及びそれに応じたカメラ本体5による撮像可能範囲を、視覚的に容易に認識することができる。
Thus, in this embodiment, since it is possible to perform image display indicating the first predetermined range (predetermined angle range) on the
また、本実施形態では、撮像方向検出部としての角度センサ52に加え、移動速度検出部としての速度センサ53を備えた構成としているため、首を上下方向に向ける他、左右方向にかしげたり、あるいは席を立ったりしてもCMOSセンサ51への駆動電力の供給が停止される。
In the present embodiment, in addition to the
すなわち、カメラ本体5の撮像方向が、前述した所定の角度範囲(電池残量に応じた範囲であれば、上記第1の撮像範囲X〜第3の撮像範囲Zのいずれかの範囲)内にあっても、例えば左右方向に首を振ったり、席を立ったりすると所定以上の移動速度が検出されるため、その場合、撮像方向が作業対象から外れたと判断されて、CMOSセンサ51への駆動電力の供給が停止されるのである。
That is, the imaging direction of the
このように、本実施形態によれば、カメラ本体5の撮像方向が撮像対象となる作業対象に向いているか否かにより、きめ細かく電源のオン・オフ制御がなされるため、無駄な電力消費をすることがなく、また、フラッシュROM35などの記憶部の記憶容量を無駄に使用することもない。さらには、発熱により、観察者1の頭部が低温火傷する虞もない。
As described above, according to this embodiment, the power supply is turned on and off finely depending on whether or not the imaging direction of the
ここで、カメラ本体5のカメラ駆動メイン処理について、図7を参照して説明する。カメラ制御部として機能する制御回路30のCPU33は、HMDに電源が投入されてコンテンツの表示が開始されると、プログラムROM34からカメラ駆動処理プログラムを読み出し、カメラ駆動メイン処理を開始する。そして、電池容量の監視を開始する(ステップ11)。
Here, the camera drive main process of the
次いで、CPU33は、電池残量Qが、3段階で最も多い第1の残量A以上か否かを判定する(ステップS12)。
Next, the
CPU33は、第1の残量A以上であると判定した場合(ステップS12:YES)、処理をステップS13に移し、カメラ撮像範囲を、3段階のうち最も広範囲であるX(図4参照)に設定する。一方、第1の残量Aよりも少ないと判定した場合(ステップS12:NO)、CPU33は、電池残量Qが、3段階で真ん中の第2の残量B以上であるか否かを判定する(ステップS14)。
If the
CPU33は、第2の残量B以上であると判定した場合(ステップS14:YES)、処理をステップS15に移し、カメラ撮像範囲を、3段階のうちの真ん中の範囲であるY(図4参照)に設定する。一方、第2の残量Bよりも少ないと判定した場合(ステップS14:NO)、CPU33は、電池残量Qが、3段階で最も少ない第3の残量C以上であるか否かを判定する(ステップS16)。
If the
そして、第3の残量C以上であると判定した場合(ステップS16:YES)、処理をステップS17に移し、3段階のうち最も狭範囲であるZ(図4参照)に設定する。一方、第3の残量Cよりも少ないと判定した場合(ステップS16:NO)、CPU33は、画像表示部21に「要充電」を示す表示をさせる指示信号を画像処理部37に送り、観察者1に電池6が要充電状態であることを報知し(ステップS26)、その後、カメラ本体5をオフにして(ステップS27)本カメラ駆動メイン処理を終了する。
And when it determines with it being more than 3rd residual amount C (step S16: YES), a process is moved to step S17 and is set to Z (refer FIG. 4) which is the narrowest range among three steps. On the other hand, when it is determined that the amount is less than the third remaining amount C (step S16: NO), the
ステップS13,S15,S17でカメラ撮像範囲を設定した後、CPU33は、カメラ本体5による撮像を開始する(ステップS18)。そして、角度センサ52を用いて撮像方向を検出する(ステップS19)。
After setting the camera imaging range in steps S13, S15, and S17, the
次いで、CPU33は、検出した撮像方向が第1の所定範囲(図5参照)内であるか否かを判定する(ステップS20)。
Next, the
検出した撮像方向が第1の所定範囲内であると判定した場合(ステップS20:YES)、CPUは処理をステップS21に移し、カメラ本体5の移動速度が所定速度以下であるか否かを判定する。そして、撮像方向が第1の所定範囲内でないと判定した場合(ステップS20:NO)、また、カメラ本体5の移動速度が所定速度以下でないと判定した場合(ステップS21:NO)、CPU33は、処理をステップS22に移す。一方、ステップS21において、カメラ本体5の移動速度が所定速度以下であると判定した場合(ステップS21:YES)、CPU33は処理をステップS12に移す。
When it is determined that the detected imaging direction is within the first predetermined range (step S20: YES), the CPU moves the process to step S21 and determines whether or not the moving speed of the
ステップS22において、CPU33は、現時点の撮像データをフラッシュROM35に記憶する。これにより、駆動電力の供給が停止される直前の撮像データが記憶されることになる。
In step S <b> 22, the
次いで、記憶した撮像データに基づく画像を画像表示部21により表示させる(ステップS23)。かかる制御を実行することにより、観察者1は、カメラ本体5がオフになっても、どこまで撮像されていたのかを容易に確認することができる。
Next, an image based on the stored imaging data is displayed by the image display unit 21 (step S23). By executing such control, the observer 1 can easily confirm how far the image has been captured even when the
その後、CPU33は、CMOSセンサ51への駆動電力の供給を停止する。すなわち、カメラ本体5をオフにする(ステップS24)。
Thereafter, the
そして、駆動電力の供給が停止されている状態のカメラ本体5の撮像方向が、第2の所定範囲に入ったか否かを検出し(ステップS25)、入ったと判定すると(ステップS25:YES)処理をステップS12に戻す。
Then, it is detected whether or not the imaging direction of the
一方、ステップS25において、カメラ本体5の撮像方向が、第2の所定範囲に入っていないと判定すると(ステップS25:NO)、カメラ本体5をオフにして(ステップS27)本カメラ駆動メイン処理を終了する。
On the other hand, if it is determined in step S25 that the imaging direction of the
[他の実施形態]
ところで、上述した制御では、カメラ本体5の撮像方向が、所定の角度範囲から出た場合、CMOSセンサ51への駆動電力の供給を停止するようにしていた。しかし、制御回路30は、角度センサ52により検出された撮像方向が、所定の角度範囲内にある場合を含めてCMOSセンサ51のフレームレートを所定の値に設定し、角度センサ52により検出された撮像方向が、前記所定の角度範囲を外れた場合には、CMOSセンサ51のフレームレートを、前記所定の値よりも下げる制御を実行するようにしてもよい。
[Other Embodiments]
By the way, in the control described above, the supply of drive power to the
なお、この場合も、速度センサ53により検出された撮像方向の移動速度、つまりカメラ本体5の移動速度が所定の速度以上の場合は、CMOSセンサ51のフレームレートを下げるようにしてもよい。
Also in this case, the frame rate of the
図8に他の実施形態に係るカメラ駆動メイン処理を示す。図8において、ステップS31〜ステップS39までの処理は、図7におけるステップS11〜ステップS19までの処理と全く同じであるため、ここでの説明は省略する。また、図8のステップS44の処理は、図7のステップS26の処理と同じである。 FIG. 8 shows camera drive main processing according to another embodiment. In FIG. 8, the processing from step S31 to step S39 is exactly the same as the processing from step S11 to step S19 in FIG. Moreover, the process of step S44 of FIG. 8 is the same as the process of step S26 of FIG.
図8のステップS40において、検出した撮像方向が第1の所定範囲内であると判定した場合(ステップS40:YES)、CPUは処理をステップS41に移し、カメラ本体5の移動速度が所定速度以下であるか否かを判定する。そして、ステップS41において、カメラ本体5の移動速度が所定速度以下であると判定した場合(ステップS41:YES)、CPU33はCMOSセンサ51のフレームレートを所定値に設定する(ステップS42)。
If it is determined in step S40 of FIG. 8 that the detected imaging direction is within the first predetermined range (step S40: YES), the CPU moves the process to step S41, and the moving speed of the
また、ステップS40で撮像方向が第1の所定範囲内でないと判定した場合(ステップS40:NO)、また、ステップS41でカメラ本体5の移動速度が所定速度以下でないと判定した場合(ステップS41:NO)、CPU33は、処理をステップS43に移す。そして、CMOSセンサ51のフレームレートを所定値以下に設定し、その後、カメラ本体5をオフにして(ステップS45)、本カメラ駆動メイン処理を終了する。
If it is determined in step S40 that the imaging direction is not within the first predetermined range (step S40: NO), or if it is determined in step S41 that the moving speed of the
[さらなる他の実施形態]
ところで、上述してきた実施形態では、CMOSセンサ51の撮像方向の角度範囲を、水平方向を基準としてきた。これは、水平方向を基準とすることが予め設定されており、自動的に、水平方向を基準とした第1の所定範囲が設定されるようになっているのである。
[Another embodiment]
Incidentally, in the embodiment described above, the angle range in the imaging direction of the
しかし、他の実施形態として、画像表示部21に表示されるコンテンツに応じて、前記第1の所定範囲を変更する撮像方向範囲規定手段を設けることができる。
However, as another embodiment, an imaging direction range defining unit that changes the first predetermined range according to the content displayed on the
この場合、例えば、外部から所望する角度などを設定入力できる操作部などを別途設けてもよいし、前記制御回路30に撮像方向範囲規定手段としての機能をもたせることもできる。
In this case, for example, an operation unit that can set and input a desired angle or the like from the outside may be provided separately, or the
かかる構成とすれば、例えば、机上方向を見て作業をするような場合に用いるコンテンツであれば、第1の所定範囲として、観察者1の前方かつ少し下方が所定の角度範囲に設定される。あるは、例えば、テレビ会議に用いられる表示コンテンツのように、互いが対面して使用するような場合は、略正面(水平)方向が所定の角度範囲に設定されるのである。 With such a configuration, for example, if the content is used when working while looking at the desktop direction, the first predetermined range is set to a predetermined angle range in front of the observer 1 and slightly below. . For example, when the display contents used in a video conference are used facing each other, the substantially front (horizontal) direction is set within a predetermined angle range.
このように、本実施形態によれば、表示コンテンツ毎に適した撮像方向の角度範囲が設定されるため、HMDの用途に適した電力消費の抑制(省エネルギ化)を図ることができる。 As described above, according to the present embodiment, since the angle range in the imaging direction suitable for each display content is set, it is possible to suppress power consumption (energy saving) suitable for the application of the HMD.
上述してきた実施形態より、以下の頭部搭載型カメラ及びHMDが実現される。 From the above-described embodiments, the following head mounted camera and HMD are realized.
(1)撮像素子を有するCMOSセンサ51(撮像部)と、CMOSセンサ51の撮像方向を検出する角度センサ52(撮像方向検出部)と、CMOSセンサ51に駆動電力を供給する電池6(電源部)と、電池6の電力残量を監視するとともに、CMOSセンサ51の動作を制御する制御回路30(カメラ制御部)とを備え、制御回路30は、CMOSセンサ51に前記駆動電力の供給がなされているときに、角度センサ52により検出された前記撮像方向が、第一の所定範囲(所定の角度範囲)から出た場合に、CMOSセンサ51への前記駆動電力の供給を停止するようにした頭部搭載型カメラ。
(1) A CMOS sensor 51 (imaging unit) having an imaging element, an angle sensor 52 (imaging direction detection unit) that detects an imaging direction of the
かかる構成によれば、CMOSセンサ51が撮像対象の方向を向いていない場合やCMOSセンサ51の駆動が必要ではないような状況にあるような場合は電力の消費を可及的に抑えることができ、省エネルギ化が図れる。また、頭部搭載型カメラである以上、CMOSセンサ51を頭部に搭載することになるが、電力消費に伴う発熱も減少するため、低温火傷の虞を可及的に減じることができる。
According to such a configuration, it is possible to suppress power consumption as much as possible when the
(2)上記(1)において、前記制御回路30(カメラ制御部)は、前記電力残量が少なくなるにしたがい、前記第1の所定範囲(所定の角度範囲)を狭くするようにした頭部搭載型カメラ。 (2) In the above (1), the control circuit 30 (camera control unit) narrows the first predetermined range (predetermined angle range) as the power remaining amount decreases. On-board camera.
かかる構成によれば、電池容量が少なくなるにしたがい、無駄な撮像を行わない傾向になるため、少ない残量の電池6を有効利用して、電池6が要充電状態になるのを可及的に抑えることができる。また、電池6の限りある電力を無駄なく利用することが可能となる。
According to such a configuration, as the battery capacity is reduced, there is a tendency not to perform useless imaging, so it is possible to effectively use the
(3)上記(1)又は(2)において、前記制御回路30(カメラ制御部)は、前記撮像方向が前記所定の角度範囲外で、前記CMOSセンサ51への前記駆動電力の供給を停止した状態であって、前記撮像方向が前記所定の角度範囲に向かって移動しており、前記撮像方向が、前記第2の所定範囲(所定の角度範囲の外側の所定の角度範囲)内に入った場合、前記CMOSセンサ51への前記駆動電力の供給を行うようにした頭部搭載型カメラ。
(3) In the above (1) or (2), the control circuit 30 (camera control unit) stops supplying the driving power to the
かかる構成によれば、カメラ本体5が所定の角度範囲内に入り、撮像すべき方向を向いたときには既に駆動電力が供給されて撮像動作が開始されていることになり、撮像すべきタイミングを逃す虞がない。
According to such a configuration, when the
(4)上記(1)又は(2)において、前記制御回路30(カメラ制御部)は、前記CMOSセンサ51(撮像部)のフレームレートを所定の値に設定しており、前記角度センサ52(撮像方向検出部)により検出された前記撮像方向が、前記第一の所定範囲(所定の角度範囲)を外れ、前記駆動電力の消費が低下するように制御する場合、CMOSセンサ51のフレームレートを、前記所定の値よりも下げるようにした頭部搭載型カメラ。
(4) In the above (1) or (2), the control circuit 30 (camera control unit) sets the frame rate of the CMOS sensor 51 (imaging unit) to a predetermined value, and the angle sensor 52 ( When the imaging direction detected by the imaging direction detection unit) is controlled to be out of the first predetermined range (predetermined angle range) and the consumption of the driving power is reduced, the frame rate of the
かかる構成によれば、CMOSセンサ51が撮像対象の方向を向いていない場合やCMOSセンサ51の駆動が必要ではないような状況にあるような場合は電力の消費を抑制することができ、省エネルギ化が図れる。また、頭部搭載型カメラである以上、CMOSセンサ51を頭部に搭載することになるが、電力消費に伴う発熱も減少するため、低温火傷の虞を可及的に減じることができる。
According to such a configuration, when the
(5)上記(1)〜(4)のいずれかにおいて、撮像方向の移動速度を検出する速度センサ53(移動速度検出部)を備え、前記制御回路30(カメラ制御部)は、速度センサ53により検出された前記移動速度が、所定の速度以上の場合は、前記CMOSセンサ51への前記駆動電力の供給を停止、または、前記CMOSセンサ51のフレームレートを下げるようにした頭部搭載型カメラ。
(5) In any one of the above (1) to (4), a speed sensor 53 (moving speed detecting unit) that detects a moving speed in the imaging direction is provided, and the control circuit 30 (camera control unit) includes the
かかる構成によれば、例えば、首のコリなどを防ぐために、首を上下方向に向ける他、左右方向にかしげたり、あるいは休憩のために席を立ったりしてもCMOSセンサ51への駆動電力の供給が停止されるので、省エネ効果をより高めることができる。
According to this configuration, for example, in order to prevent the neck from colliding, the driving power to the
(6)上記(1)〜(5)のいずれかにおいて、前記制御回路30(カメラ制御部)により前記CMOSセンサ51への前記駆動電力の供給が停止された場合、前記駆動電力の供給が停止される直前の前記CMOSセンサ51による撮像データを記憶するフラッシュROM35(記憶部)を備えた頭部搭載型カメラ。
(6) In any one of (1) to (5), when the supply of the drive power to the
かかる構成によれば、観察者1は、カメラ本体5がオフになっても、どこまで撮像されていたのかを、後からいつでも容易に確認することができる。
According to such a configuration, the observer 1 can easily confirm how much the image has been captured at any time later even when the
(7)上記(6)の頭部搭載型カメラと、前記CMOSセンサ51(撮像部)により撮像された撮像画像と、所定のコンテンツに応じたコンテンツ画像とを表示する画像表示部21(表示部)と、この画像表示部21の表示を制御する制御回路30(表示制御部)とを備え、制御回路30は、画像表示部21に、前記フラッシュROM35に記憶された前記撮像データに基づく撮像画像を表示するHMD。
(7) An image display unit 21 (display unit) that displays a captured image captured by the head-mounted camera of (6), the CMOS sensor 51 (imaging unit), and a content image corresponding to a predetermined content. ) And a control circuit 30 (display control unit) for controlling the display of the
かかる構成によれば、画像表示部21を介して、いつでも撮像画像を確認することができるため、例えば、カメラ本体5がオフになった後、画像表示部21において、カメラ本体5がオフになる直前の撮像画像を即座に確認することができる。
According to such a configuration, the captured image can be confirmed at any time via the
(8)上記(7)において、前記制御回路30(表示制御部)は、前記画像表示部21に、前記第1の所定範囲(所定の角度範囲)を示す画像表示を行うHMD。
(8) In said (7), said control circuit 30 (display control part) is HMD which performs the image display which shows the said 1st predetermined range (predetermined angle range) on the said
かかる構成によれば、観察者1は、電池容量及びそれに応じたカメラ本体5による撮像可能範囲を、視覚的に容易に認識することができる。
According to such a configuration, the observer 1 can easily visually recognize the battery capacity and the imageable range by the
(9)上記(7)又は(8)において、前記画像表示部21(表示部)に表示される前記コンテンツ画像に応じて、前記第1の所定範囲(所定の角度範囲)を変更する撮像方向範囲規定手段をさらに備えるHMD。 (9) The imaging direction in which the first predetermined range (predetermined angle range) is changed according to the content image displayed on the image display unit 21 (display unit) in (7) or (8) above. An HMD further comprising range defining means.
かかる構成によれば、表示コンテンツ毎に適した撮像方向の角度範囲が設定されることになり、HMDの用途に適した電力消費の抑制(省エネルギ化)を図ることができる。 According to such a configuration, an angle range in the imaging direction suitable for each display content is set, and it is possible to suppress power consumption (energy saving) suitable for HMD applications.
以上、本発明の実施の形態を図面に基づいて詳細に説明したが、これらは例示であり、発明の概要の欄に記載の態様を始めとして、当業者の知識に基づいて種々の変形、改良を施した他の形態で本発明を実施することが可能である。 Although the embodiments of the present invention have been described in detail with reference to the drawings, these are merely examples, and various modifications and improvements can be made based on the knowledge of those skilled in the art, including the aspects described in the summary section of the invention. It is possible to implement this invention in the other form which gave.
例えば、本発明に係るHMDは、例えば、シースルー型HMDとしたが、必ずしもシースルー型でなくても構わない。また、コンテンツを表示する表示装置としては液晶表示装置を用いているが、例えば、画像に関する画像信号に応じて変調された光を走査させて出射させることで、ユーザの少なくとも一方の眼の網膜に画像を投影し、画像を表示する網膜走査型のHMDであってもよい。 For example, the HMD according to the present invention is, for example, a see-through type HMD, but may not necessarily be a see-through type. In addition, a liquid crystal display device is used as a display device for displaying content. For example, by scanning and emitting light modulated according to an image signal related to an image, the retina of at least one eye of the user is emitted. It may be a retinal scanning HMD that projects an image and displays the image.
また、頭部搭載型カメラとしては必ずしもHMDに搭載する形態でなくてもよく、単に、CMOSセンサ51や角度センサ52や速度センサ53などを備えるカメラ本体5を、何らかの支持部材を介して頭部に保持可能なものであってもよい。
Further, the head-mounted camera does not necessarily have to be mounted on the HMD. The
1 観察者
2 HMD本体
3 コントローラ
5 カメラ本体
6 電池(電源部)
30 制御回路(カメラ制御部、表示制御部)
21 画像表示部
51 CMOSセンサ
52 角度センサ(撮像方向検出部)
53 速度センサ(移動速度検出部)
1 observer 2 HMD
30 Control circuit (camera control unit, display control unit)
21
53 Speed sensor (movement speed detector)
Claims (9)
撮像素子を有する撮像部と、
前記撮像部の撮像方向を検出する撮像方向検出部と、
前記撮像部に駆動電力を供給する電源部と、
前記電源部の電力残量を監視するとともに、前記撮像部の動作を制御するカメラ制御部と、を備え、
前記カメラ制御部は、
前記撮像部に前記駆動電力の供給がなされているときに、前記撮像方向検出部により検出された前記撮像方向が、所定の角度範囲から出た場合に、前記撮像部での前記駆動電力の消費が低下するように、または前記駆動電力の供給を停止するように制御することを特徴とする頭部搭載型カメラ。 A head mounted camera,
An imaging unit having an imaging element;
An imaging direction detection unit for detecting an imaging direction of the imaging unit;
A power supply unit for supplying driving power to the imaging unit;
A power control unit for monitoring a remaining power level of the power source unit and a camera control unit for controlling the operation of the imaging unit;
The camera control unit
When the driving power is supplied to the imaging unit, if the imaging direction detected by the imaging direction detection unit is out of a predetermined angle range, the driving power consumption in the imaging unit is consumed. The head-mounted camera is controlled so as to decrease or to stop the supply of the driving power.
前記撮像方向が前記所定の角度範囲外で、前記撮像部への前記駆動電力の供給を停止した状態であって、前記撮像方向が前記所定の角度範囲に向かって移動しており、前記撮像方向が、前記所定の角度範囲の外側の所定の角度範囲内に入った場合、前記撮像部への前記駆動電力の供給を行うことを特徴とする請求項1又は2に記載の頭部搭載型カメラ。 The camera control unit
The imaging direction is outside the predetermined angle range, the supply of the driving power to the imaging unit is stopped, the imaging direction is moving toward the predetermined angle range, and the imaging direction 3. The head-mounted camera according to claim 1, wherein the driving power is supplied to the imaging unit when the angle falls within a predetermined angle range outside the predetermined angle range. .
前記撮像部のフレームレートを所定の値に設定しており、前記撮像方向検出部により検出された前記撮像方向が前記所定の角度範囲を外れ、前記駆動電力の消費が低下するように制御する場合、前記撮像部のフレームレートを、前記所定の値よりも下げることを特徴とする請求項1又は2に記載の頭部搭載型カメラ。 The camera control unit
When the frame rate of the imaging unit is set to a predetermined value, and the imaging direction detected by the imaging direction detection unit is out of the predetermined angular range, and control is performed so that consumption of the driving power is reduced. The head-mounted camera according to claim 1, wherein a frame rate of the imaging unit is lower than the predetermined value.
前記カメラ制御部は、
前記移動速度検出部により検出された前記移動速度が、所定の速度以上の場合は、前記撮像部への前記駆動電力の供給を停止、または、前記撮像部のフレームレートを下げることを特徴とする請求項1〜4のいずれか1項に記載の頭部搭載型カメラ。 Provided with a moving speed detector that detects the moving speed in the imaging direction,
The camera control unit
When the movement speed detected by the movement speed detection unit is equal to or higher than a predetermined speed, supply of the driving power to the imaging unit is stopped or the frame rate of the imaging unit is reduced. The head mounted camera of any one of Claims 1-4.
前記頭部搭載型カメラの前記撮像部により撮像された撮像画像と、所定のコンテンツに応じたコンテンツ画像とを表示可能とした表示部と、
前記表示部の表示を制御する表示制御部と、を備え、
前記表示制御部は、
前記表示部に、前記記憶部に記憶された前記撮像データに基づく撮像画像を表示することを特徴とするヘッドマウントディスプレイ。 A head-mounted camera according to claim 6;
A display unit capable of displaying a captured image captured by the imaging unit of the head-mounted camera and a content image corresponding to a predetermined content;
A display control unit for controlling the display of the display unit,
The display control unit
A head-mounted display that displays a captured image based on the imaging data stored in the storage unit on the display unit.
前記表示部に、前記所定の角度範囲を示す画像表示を行うことを特徴とする請求項7に記載のヘッドマウントディスプレイ。 The display control unit
The head mounted display according to claim 7, wherein an image showing the predetermined angle range is displayed on the display unit.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2011076761A JP2012212989A (en) | 2011-03-30 | 2011-03-30 | Head-mounted camera and head-mounted display |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2011076761A JP2012212989A (en) | 2011-03-30 | 2011-03-30 | Head-mounted camera and head-mounted display |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2012212989A true JP2012212989A (en) | 2012-11-01 |
Family
ID=47266615
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2011076761A Withdrawn JP2012212989A (en) | 2011-03-30 | 2011-03-30 | Head-mounted camera and head-mounted display |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2012212989A (en) |
Cited By (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP5273323B1 (en) * | 2013-03-13 | 2013-08-28 | パナソニック株式会社 | Head mounted display device |
| JP2014143595A (en) * | 2013-01-24 | 2014-08-07 | Nikon Corp | Image recorder |
| KR20150110299A (en) * | 2014-03-21 | 2015-10-02 | 삼성전자주식회사 | Wearable device and operating method thereof |
| JP2017069984A (en) * | 2017-01-13 | 2017-04-06 | ソニー株式会社 | Wearable device, wearable device control method, and program |
| US10609279B2 (en) | 2013-11-01 | 2020-03-31 | Sony Corporation | Image processing apparatus and information processing method for reducing a captured image based on an action state, transmitting the image depending on blur, and displaying related information |
| US10834326B2 (en) | 2018-05-30 | 2020-11-10 | Canon Kabushiki Kaisha | Interchangeable lens apparatus, its control method, and imaging apparatus |
| TWI772880B (en) * | 2019-09-09 | 2022-08-01 | 日商芝浦機械電子裝置股份有限公司 | Plasma processing apparatus |
| WO2023048409A1 (en) * | 2021-09-27 | 2023-03-30 | 삼성전자주식회사 | Wearable device comprising camera, and control method therefor |
| US11979671B2 (en) | 2021-09-27 | 2024-05-07 | Samsung Electronics Co., Ltd. | Wearable device including camera and method of controlling the same |
| KR102927272B1 (en) | 2021-09-27 | 2026-02-13 | 삼성전자주식회사 | Wearable apparatus including a camera and method for controlling the same |
-
2011
- 2011-03-30 JP JP2011076761A patent/JP2012212989A/en not_active Withdrawn
Cited By (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2014143595A (en) * | 2013-01-24 | 2014-08-07 | Nikon Corp | Image recorder |
| JP5273323B1 (en) * | 2013-03-13 | 2013-08-28 | パナソニック株式会社 | Head mounted display device |
| US10609279B2 (en) | 2013-11-01 | 2020-03-31 | Sony Corporation | Image processing apparatus and information processing method for reducing a captured image based on an action state, transmitting the image depending on blur, and displaying related information |
| KR20150110299A (en) * | 2014-03-21 | 2015-10-02 | 삼성전자주식회사 | Wearable device and operating method thereof |
| KR102390875B1 (en) | 2014-03-21 | 2022-04-26 | 삼성전자주식회사 | Wearable device and operating method thereof |
| JP2017069984A (en) * | 2017-01-13 | 2017-04-06 | ソニー株式会社 | Wearable device, wearable device control method, and program |
| US10834326B2 (en) | 2018-05-30 | 2020-11-10 | Canon Kabushiki Kaisha | Interchangeable lens apparatus, its control method, and imaging apparatus |
| TWI772880B (en) * | 2019-09-09 | 2022-08-01 | 日商芝浦機械電子裝置股份有限公司 | Plasma processing apparatus |
| WO2023048409A1 (en) * | 2021-09-27 | 2023-03-30 | 삼성전자주식회사 | Wearable device comprising camera, and control method therefor |
| US11979671B2 (en) | 2021-09-27 | 2024-05-07 | Samsung Electronics Co., Ltd. | Wearable device including camera and method of controlling the same |
| KR102927272B1 (en) | 2021-09-27 | 2026-02-13 | 삼성전자주식회사 | Wearable apparatus including a camera and method for controlling the same |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP2012212989A (en) | Head-mounted camera and head-mounted display | |
| US10025103B2 (en) | Eyeglass-type wearable device and front part of eyglass-type wearable device | |
| US10288888B2 (en) | Eyeglass-type wearable device, and front part and temple part of eyeglass-type wearable device | |
| US10606077B2 (en) | Display switching device, switching method, wearable display device and displaying method | |
| JP6459711B2 (en) | Display device and control method of display device | |
| US20110037866A1 (en) | Mobile apparatus | |
| JP6094305B2 (en) | Head-mounted display device and method for controlling head-mounted display device | |
| JP2011091789A (en) | Head-mounted display | |
| JP5411380B1 (en) | Medical imaging and recording device | |
| CN205049814U (en) | On -vehicle new line display terminal | |
| JP2012211959A (en) | Head-mounted display | |
| JP4689029B2 (en) | Head-mounted display device, control method thereof, and control program | |
| JP2010056661A (en) | Head mounting type video acquiring and displaying device | |
| JP5341054B2 (en) | Electronic glasses | |
| JP2010139901A (en) | Head mount display | |
| JP2013206412A (en) | Head-mounted display and computer program | |
| WO2013055562A1 (en) | Surgical telescope with dual virtual-image screens | |
| CN101764929A (en) | camera | |
| US20220299763A1 (en) | Display system and display device | |
| JP2014150343A (en) | Work assisting system and working device | |
| WO2017033992A1 (en) | Head-mounted image display device | |
| US11531508B2 (en) | Data processing device, display system, and data processing method that controls the output of data based on a connection state | |
| US11475866B2 (en) | Head-mounted display apparatus, input method switching method, and input method switching program | |
| JP2004304296A (en) | Head mounted display | |
| JP2016059607A (en) | Visual aid system and visual aid device |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A300 | Application deemed to be withdrawn because no request for examination was validly filed |
Free format text: JAPANESE INTERMEDIATE CODE: A300 Effective date: 20140603 |