JP2012159994A - Remote input device - Google Patents
Remote input device Download PDFInfo
- Publication number
- JP2012159994A JP2012159994A JP2011018934A JP2011018934A JP2012159994A JP 2012159994 A JP2012159994 A JP 2012159994A JP 2011018934 A JP2011018934 A JP 2011018934A JP 2011018934 A JP2011018934 A JP 2011018934A JP 2012159994 A JP2012159994 A JP 2012159994A
- Authority
- JP
- Japan
- Prior art keywords
- light emitter
- light
- camera
- input device
- operation screen
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000004397 blinking Effects 0.000 claims abstract description 20
- 238000012544 monitoring process Methods 0.000 claims description 18
- 238000002955 isolation Methods 0.000 claims description 3
- 230000008033 biological extinction Effects 0.000 abstract 1
- 238000000034 method Methods 0.000 description 37
- 238000005452 bending Methods 0.000 description 8
- 210000003811 finger Anatomy 0.000 description 8
- 238000010586 diagram Methods 0.000 description 7
- 210000004247 hand Anatomy 0.000 description 7
- 230000009471 action Effects 0.000 description 3
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000007257 malfunction Effects 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- 238000005282 brightening Methods 0.000 description 1
- 239000002131 composite material Substances 0.000 description 1
- 239000005357 flat glass Substances 0.000 description 1
- 210000005224 forefinger Anatomy 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000010187 selection method Methods 0.000 description 1
- 210000003813 thumb Anatomy 0.000 description 1
Images
Landscapes
- Position Input By Displaying (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
Description
本発明は、PCなどにより制御される装置や所謂メディア端末等の操作画面のスイッチ機能や描画機能を用いて入力操作を行う入力装置に関し、タッチパネルやマウスを用いることなく非接触で操作画面上のスイッチ機能や描画機能を活用して入力操作を行える様にするものである。
The present invention relates to an input device that performs an input operation by using a switch function or a drawing function of an operation screen of a device controlled by a PC or the like or a so-called media terminal, and the like on the operation screen without using a touch panel or a mouse. The switch function and drawing function are used to enable input operations.
旧来のパソコンなどで制御される装置では、運転条件などは操作画面を見ながらマウスやキーボードを操作し入力している。この際多くの場合は、操作画面上に機能選択を行うスイッチが表示されており、操作者は希望のスイッチをマウスでクリックすることにより、制御される装置の機能や運転条件を設定する。また、操作画面を用いた装置の運転条件などは、操作画面上のスイッチ操作のみではなく、描画機能を用いて操作画面上にエリアや線分を表示させることで入力する場合もある。
更に、装置の運転中も必要に応じ操作画面上のスイッチを操作し、装置の運転動作の設定や指示を行うこともある。
In a device controlled by a conventional personal computer or the like, operating conditions and the like are input by operating a mouse and a keyboard while looking at an operation screen. In this case, in many cases, a switch for selecting a function is displayed on the operation screen, and the operator clicks a desired switch with the mouse to set the function and operating condition of the device to be controlled. In addition, the operating conditions of the apparatus using the operation screen may be input not only by the switch operation on the operation screen but also by displaying an area or a line segment on the operation screen using a drawing function.
Further, during operation of the apparatus, a switch on the operation screen may be operated as necessary to set or instruct operation of the apparatus.
以上操作画面とマウスを用いた入力方法を述べたが、マウスの代わりに操作画面がタッチパネルになっている場合は、このタッチパネルに触れることでも同様の操作が可能である。
Although the input method using the operation screen and the mouse has been described above, when the operation screen is a touch panel instead of the mouse, the same operation can be performed by touching the touch panel.
操作画面とマウスを用いて入力操作をする場合でも、タッチパネルになっている操作画面を用いて入力操作をする場合でも、操作者はこの操作画面の近傍にいなくてはならないことや、また少なくとも片方の手は入力操作に使う必要があり両手作業が一時中断することなど、入力操作に起因する作業効率の低下などの不都合がある。
更にタッチパネルの場合は、タッチパネル上に表示するスイッチはその面積を小さくし極力多くのスイッチを配置することを望まれる場面もあるが、操作者が指で触れ操作することから、小さくするには自ずと限界があると云う不都合もある。このことはタッチパネル自身の面積が小さい所謂メディア端末などでは特に切実な問題である。
Whether performing an input operation using an operation screen and a mouse, or an input operation using an operation screen that is a touch panel, the operator must be in the vicinity of this operation screen, and at least One hand needs to be used for the input operation, and there are disadvantages such as a reduction in work efficiency due to the input operation, such as a temporary interruption of the work of both hands.
Furthermore, in the case of a touch panel, there are some scenes where it is desirable to reduce the area of the switches displayed on the touch panel and arrange as many switches as possible. There is also a disadvantage that there is a limit. This is a particularly serious problem in a so-called media terminal having a small touch panel area.
これらの不都合を改善する方法として、例えば特許4438351号では、発光体をカメラで監視し移動する速度や加速度を検出し、これらが予め定められた動きと合致した場合は、この動きに対応する入力処理をすることにより、遠隔操作、両手をフリーにするなどを実現している。
しかし、この方法では、遠隔入力装置は複雑になり費用がかさむこと、及び多くの種類の入力操作を行おうとしたときには発光体の操作が複雑になり、多くの動作パターンを記憶しておく必要があったり、誤動作の可能性が増すなど操作性を損なう不都合もある。
そこで、本発明は、簡単安易な仕組みで且つ操作性に優れた遠隔入力装置を提供するものである。
As a method for improving these inconveniences, for example, in Japanese Patent No. 4443351, the speed and acceleration of the illuminant monitored by the camera are detected, and if these match a predetermined movement, the input corresponding to this movement is detected. By processing, remote control, freeing both hands, etc. are realized.
However, in this method, the remote input device is complicated and expensive, and when many types of input operations are to be performed, the operation of the light emitter is complicated, and it is necessary to store many operation patterns. There are also inconveniences that impair the operability such as increasing the possibility of malfunction.
Therefore, the present invention provides a remote input device having a simple and easy mechanism and excellent operability.
操作画面のスイッチ機能や描画機能を用いて入力操作を行う機器において、操作者が保持する発光体をカメラで捉え操作画面上に映し出すことで、操作画面上のスイッチ機能や描画機能を用いて入力操作用ができる様にしたものである。
ここで、発光体がただ移動している状態なのか、クリック動作を意味しているのか、ドラック動作を意味しているのかなどは、発光体の発行状態(点灯か点滅か、点滅の周期、点滅の点灯/消灯の時間比、点滅のパターン、明暗、波長、発光体の移動スピード、発光体の停止時間など)で識別することができる。
また、この発光体を指サックなどに装着すれば、操作者は発光体を握る必要がなく、両手をフリーにすることができる。
For devices that perform input operations using the switch function and drawing function of the operation screen, the light source that the operator holds is captured by the camera and displayed on the operation screen, allowing input using the switch function and drawing function on the operation screen. It can be used for operation.
Here, whether the illuminator is just moving, meaning a click action, or a drag action, etc., depends on the issue status of the illuminant (lighted or blinking, blinking cycle, The time ratio of blinking on / off, blinking pattern, brightness / darkness, wavelength, moving speed of light emitter, stop time of light emitter, etc.) can be identified.
Further, if this light emitter is attached to a finger sack or the like, the operator does not need to hold the light emitter and both hands can be made free.
以上の様に構成することにより、簡易な遠隔入力装置で且つ操作性良く、遠隔操作や両手をフリーにした入力操作を実現できる。更に、1ページに多くのスイッチが配置できるため、タッチパネルが小さな所謂メディア端末などのでは、ページめくりの回数を省略できるなどの操作性の向上が可能となる。
By configuring as described above, it is possible to realize a remote operation or an input operation with both hands free with a simple remote input device and good operability. Furthermore, since many switches can be arranged on one page, it is possible to improve operability such as so-called media terminals having a small touch panel, such as omitting the number of page turning times.
(第1の実施形態)
第1の実施形態として、例えば生産設備などの装置への活用を例に図1〜図9を用いて説明する。
図1は本発明に係る実施形態の全体の概念図で、1は操作画面、2はカメラ、3は処理部、4はLEDを光源とした発光体、5は操作者である。
該操作画面1はスイッチ機能や描画機能を有し、且つ該処理部3の作用により該カメラ2で撮像された映像の内該発光体4のみを映し出す様になっている。該カメラ2で撮像された映像の内該発光体4と背景の映像を切り分けるには、該発光体4と背景の輝度や発光波長や動いているかどうかなどの差異を識別するとよい。
該操作者5は手に持った該発光体4を該カメラ2の視野内で移動させ、発光を区別する手段(後述)を用いて該操作画面1のスイッチ機能や描画機能を操作し、該操作画面1に運転指示入力や運転条件入力などを行う。尚図示しないが、該操作画面1は制御される装置に繋がっており、該装置は該操作画面1から送られた入力内容に従い動作する。
(First embodiment)
The first embodiment will be described with reference to FIGS. 1 to 9, taking as an example the utilization to an apparatus such as a production facility.
FIG. 1 is an overall conceptual diagram of an embodiment according to the present invention, in which 1 is an operation screen, 2 is a camera, 3 is a processing unit, 4 is a light emitter using an LED as a light source, and 5 is an operator.
The
The
図2は該操作画面1のスイッチ機能や描画機能の説明図である。
スイッチ機能とは、該操作画面1に配置されたスイッチ類1-1を選択することにより、例えば選択された文字の入力や「スタート」スイッチなどの動作の実行など、制御される装置がそれぞれに設定された機能を実施する様になっているものである。
描画機能とは、画面上に1-2の様に線分(該発光体4が動いた軌跡であったり、始点と終点を指定して線で結んだりして作成)を用いて入力をしたり、1-3の様に指定したい面積を囲んで入力をしたり、図形を入力したりすること(図示せず)が出来るものである。
当然このための仕組みや処理機能は必要であるが、このための技術は当該分野では公知のものであり、ここでの詳細説明は省略する。
FIG. 2 is an explanatory diagram of the switch function and drawing function of the
The switch function refers to the devices to be controlled by selecting the switches 1-1 arranged on the
The drawing function is input using a line segment (created by connecting the line by specifying the start point and end point) as shown in 1-2 on the screen. You can enter the area you want to specify or enter a figure (not shown).
Naturally, a mechanism and a processing function for this are necessary, but the technology for this is well known in the art, and detailed description thereof is omitted here.
点灯/点滅
上記のままでは、該操作画面1にはスイッチ類などと共に該発光体4が映し出されているだけで、例えば該発光体4がとあるスイッチ上を単に移動しているだけなのか、或いはそのスイッチを選択しようとしているのか区別は付かず、該処理部3は該操作者5の意図を理解できない。
この区別をする手段として、該発光体4の発光状態の差異を活用するのが有効である。
図2の1-4は該発光体4が点滅状態にあることを示し、1-5は該発光体4が点灯状態にあることを示すが、この差異を該処理部3が識別することにより該操作者5の意図する入力を実行する方法である。該操作者5は、該発光体4を点滅状態1-4にしたまま該発光体4の点滅が選びたいスイッチ1-1上に来る様に該発光体4を移動し、選びたいスイッチ1-1上に該発光体4の点滅が来た時に該発光体4を点滅状態1-4から点灯状態1-5に切替ることにより、選びたいスイッチ1-1を選択できる。
また、ここではスイッチ機能を例に挙げ説明したが、描画機能でも同様に行うことが可能である。つまり、例えば線分を引きたい時は、その始点までは点滅状態1-4で移動し、線分の始点から終点までは点灯状態1-5に切替ることにより、線分の入力が可能となる。
lighting blinking
In the above state, only the
As a means for making this distinction, it is effective to utilize the difference in the light emission state of the
In FIG. 2, 1-4 indicates that the
Although the switch function has been described as an example here, the drawing function can be similarly performed. In other words, for example, when you want to draw a line segment, you can enter the line segment by moving in the blinking state 1-4 until the start point and switching to the lighting state 1-5 from the start point to the end point of the line segment. Become.
周期
発光状態の区別方法は上記以外に、該発光体4を点滅させその周期の差異を該処理部3が識別することにより該操作者5の意図する入力を実行する方法もある。図3において、発光モードaの周期Taは発光モードbの周期Tbの2倍あり、この差異を該処理部3で識別することにより該操作者5の意識の区別をするものである。例えば発光モードaの状態で目的の位置まで移動し、発光モードbに切替ることで選びたいスイッチ1-1を選択することができる。
period
In addition to the above method for distinguishing the light emission state, there is also a method for executing the input intended by the
Duty
発光状態の区別方法は上記以外に、該発光体4を点滅させ点灯時間と消灯時間の比(デューティー)の差異を該処理部3が識別することにより該操作者5の意図する入力を実行する方法もある。図4において、発光モードcのデューティーDcは25%、発光モードdのデューティーDdは75%と異なり、この差異を該処理部3で識別することにより該操作者5の意識の区別をするものである。例えば発光モードcの状態で目的の位置まで移動し、発光モードdに切替ることで選びたいスイッチ1-1を選択することができる。
Duty
In addition to the above, the method of distinguishing the light emission state performs the input intended by the
発光モード
発光状態の区別方法は上記以外に、該発光体4を点滅させ点滅するパターンの差異を該処理部3が識別することにより該操作者5の意図する入力を実行する方法もある。図5では例えば8bitのパターン例を示すが、発光モードeの発光モードでは“10101100(発光が「短、短、長」)”を、発光モードfの発光モードでは“11110100(発光が「長×2、短」)” を1サイクルとしこれを繰り返し発光する様にしており、この差異を該処理部3で識別することにより該操作者5の意識の区別をするものである。例えば発光モードeの状態で目的の位置まで移動し、発光モードfに切替ることで選びたいスイッチ1-1を選択することができる。
ここで、該操作者5が発光モードをどのタイミングで切替るかは不定であるため、発光モードの設定に当たっては、両者が識別しやすいパターンにするなど、1サイクルの始点や終点が分かりやすくする(図5の例では発光モードe、発光モードfとも終点を“100”とした)などの配慮が必要である。
Flash mode
In addition to the above, there is a method for executing the input intended by the
Here, since it is uncertain at which timing the
輝度
発光状態の区別方法は上記以外に、該発光体4の輝度の差異を該処理部3が識別することにより該操作者5の意図する入力を実行する方法もある。例えば該発光体4の輝度を落とした状態(暗くする)で目的の位置まで移動し、輝度を上げる(明るくする)ことで選びたいスイッチ1-1を選択することができる。
Luminance
In addition to the above method for distinguishing the light emission state, there is also a method for executing the input intended by the
波長
発光状態の区別方法は上記以外に、該発光体4の発光波長の差異を該処理部3が識別することにより該操作者5の意図する入力を実行する方法もある。例えば該発光体4を赤色の状態で目的の位置まで移動し、白色に切替ることで選びたいスイッチ1-1を選択することができる。(波長域は可視光に限定するものではなく、赤外光など幅広く利用してもよい。)
wavelength
In addition to the above method for distinguishing the light emission state, there is also a method for executing the input intended by the
速度
発光状態の区別方法は上記以外に、該発光体4の移動速度の差異を該処理部3が識別することにより該操作者5の意図する入力を実行する方法もある。移動状態を定義した速度Vmよりも速い速度で該発光体4が移動している場合を移動状態とし、停止状態を定義した速度Vsよりも遅い速度で該発光体4が移動している場合を停止状態と設定しておき、該操作者5は目的の位置ではVmよりも速い速度で該発光体4を移動させ、目的の位置では停止させる(実際には手振れ分の移動があるがVs以下であればよい)ことで、選びたいスイッチ1-1を選択することができる。
speed
In addition to the above method for distinguishing the light emission state, there is also a method for executing the input intended by the
終点(停止時間)
発光状態の区別方法は上記以外に、該発光体4が該操作画面1のスイッチ上に停止している時間の差異を該処理部3が識別することにより該操作者5の意図する入力を実行する方法もある。つまり、該発光体4が該操作画面1のスイッチに予め設定された閾値となる時間以上停止していた場合には、当該スイッチが選択されたと判断するものである。該操作者5は該発光体4の軌跡の始点位置は無視し、終点位置のみを目的のスイッチ上に移動させ、ここで所定時間停止することで、選びたいスイッチ1-1を選択することができる。
閾値となる時間は、通常の移動速度と比較し誤動作を起こさない最短時間を設定するとよい。また、停止位置においても手振れの影響があるため、停止状態であると判定するには、停止位置範囲や速度や加速度などの設定には許容範囲を設けるとよい。
End point (stop time)
In addition to the above, the method of distinguishing the light emission state executes the input intended by the
The threshold time may be set to the shortest time that does not cause a malfunction as compared with the normal moving speed. Further, since there is an influence of camera shake even at the stop position, in order to determine the stop state, it is preferable to provide an allowable range for setting the stop position range, speed, acceleration, and the like.
軌跡
発光状態の区別方法は上記以外に、該発光体4が移動した軌跡を該処理部3が識別することにより該操作者5の意図する入力を実行する方法もある。図6を用いて、該発光体4の軌跡を認識し該操作画面1上の「スタート」スイッチを選択する幾つかの例を示す。
第1の方法は、該発光体4が移動した軌跡の終点を認識する方法である。つまり、該操作画面1上に任意の位置X1から始まる該発光体4の軌跡を映し出し、選びたいスイッチ1-1(図6では「スタート」スイッチ)上に軌跡が達した処で、該発光体4の発光を止めるかまたは光を遮断して該発光体4の軌跡を止め、この軌跡の終点(Y1)に位置しているスイッチ(「スタート」スイッチ)を選択するものである(1-6)。
第2の方法は、該発光体4が移動した軌跡が横切るスイッチを選択する方法である。つまり、該操作画面1上に任意の位置X2から始まる該発光体4の軌跡を映し出し、選びたいスイッチ1-1(図6では「スタート」スイッチ)上に軌跡が横切った後の任意の位置(Y2)で、該発光体4の発光を止めるかまたは光を遮断して該発光体4の軌跡を止め、この軌跡が横切ったスイッチ(「スタート」スイッチ)を選択するものである(1-7)。
第3の方法は、該発光体4が移動した軌跡が屈曲した位置にあるスイッチを選択する方法である。つまり、該操作画面1上に任意の位置X3から始まる該発光体4の軌跡を映し出し、選びたいスイッチ1-1(図6では「スタート」スイッチ)上で屈曲点(Z)を設け、任意の位置(Y3)で該発光体4の発光を止めるかまたは光を遮断して該発光体4の軌跡を止め、この軌跡の屈曲点(Z)の位置にあるスイッチを選択するものである(1-8)。ここで屈曲点(Z)は、該操作者5の手の動きで作り出してもよいし、後述の該発光体4に設けられている屈曲点を指示する「屈曲点スイッチ」を用いてもよい。また、屈曲点Zを決定するための屈曲角θや、屈曲角θを算出するために参照する線分長さは、場合に応じて許容範囲を設定する必要がある。
第4の方法は、該発光体4が移動した軌跡が閉じた図形を描いた位置にあるスイッチを選択する方法である。つまり、該操作画面1上に任意の位置X4から始まる該発光体4の軌跡を映し出し、選びたいスイッチ1-1(「スタート」スイッチ)上で閉じた図形を描き、任意の位置(Y4)で該発光体4の発光を止めるかまたは光を遮断して該発光体4の軌跡を止め、この軌跡の閉じた図形が描かれた位置にあるスイッチ(「スタート」スイッチ)を選択するものである(1-9)。ここで、閉じた図形は必ずしも元来た軌跡を横切るものばかりではなく、概略閉じた状態でも良い様に設定すると操作性が向上する。また、閉じた図形の形状は円形でも多角形でも良いとしてもよいし、円形や多角形を識別しそれぞれに異なる機能を設定してもよい。
Trajectory
In addition to the above method for distinguishing the light emission state, there is also a method for executing the input intended by the
The first method is a method of recognizing the end point of the locus on which the
The second method is a method of selecting a switch that a trajectory traveled by the
The third method is a method of selecting a switch in which the locus of movement of the
The fourth method is a method of selecting the switch at the position where the locus on which the light-emitting
複合化
以上該発光体4の発光状態を識別することにより、該操作画面1のスイッチ機能や描画機能を操作し、運転指示入力や運転条件入力を行う9つの方法を述べたが、これらは単独で機能するのは勿論であるが、これらを組み合わせることにより複雑な設定をすることも可能となる。例えば請求項2で示す点灯/点滅のみの区別ではPCのマウスに当てはめるとクリックとドラッグの2値であるが、これに請求項6で示す輝度の差異も加えれば例えばページアップ/ダウンを加えた4値の操作が可能となり、更に請求項7で示す発光波長の差異も加えれば8値の区別が可能となる。
また、該操作画面1上に線分を引く場合、上述の様に該発光体4の軌跡を表示する方法と、線分の始点と終点を入力する方法があるが、どちらを用いるかは実際に使われる状況によって決定するか、或いは該操作者5が都度選択できる様にする(具体の説明は省略)とよい。
Composite
As described above, nine methods for operating the switch function and drawing function of the
In addition, when drawing a line segment on the
発光体
該発光体4の概要を、図7を用いて説明する。
4-1は本体、4-2は例えばLEDなどの光源、4-3は電源、4-4は回路基板、4-5は電源スイッチ、4-6は発光モード切替スイッチである。これを動作させるには、該発光モード切替スイッチ4-6を用いたい発光モードに設定し、該電源スイッチ4-5により回路を閉じ、該光源4-2を発光させる。
ここで該光源4-2、該電源スイッチ4-5、該発光モード切替スイッチ4-6は用いる場面に応じた構成にするとよい。例えば該電源スイッチ4-5は、発光モードを切替ることにより識別を行いたい場合は発光を維持し続けるのに便利なトグルスイッチを、請求項10の様に点灯/消灯により識別したい場合は押しボタンスイッチを用いるとよい。多くの発光モードを駆使したいときは、該電源スイッチ4-5はロータリースイッチを用いたり複数のトグルスイッチにし、該切替スイッチ4-6を、切替やすいスイッチにしたりするとよい。該光源4-2は図7では1個で表しているが、例えば請求項7の場合は波長に応じたLEDを複数個配置させると実現が容易である。
Luminous body
An outline of the
4-1 is a main body, 4-2 is a light source such as an LED, 4-3 is a power source, 4-4 is a circuit board, 4-5 is a power switch, and 4-6 is a light emission mode changeover switch. In order to operate this, the light emission mode selector switch 4-6 is set to the desired light emission mode, the circuit is closed by the power switch 4-5, and the light source 4-2 is caused to emit light.
Here, the light source 4-2, the power switch 4-5, and the light emission mode change-over switch 4-6 may be configured in accordance with the scene to be used. For example, the power switch 4-5 is a toggle switch that is convenient for maintaining the light emission when it is desired to identify by switching the light emission mode. A button switch should be used. When it is desired to make full use of many light emission modes, the power switch 4-5 may be a rotary switch or a plurality of toggle switches, and the selector switch 4-6 may be a switch that can be easily switched. FIG. 7 shows one light source 4-2. For example, in the case of
図8は、図7とは異なるもうひとつの発光体6の例で、図7の該発光体4との差異は、発光部が独立しているかどうかである。本体6-1から分離した光源6-2が指サック6-4に配置され該操作者5の指に装着されており、該本体6-1は例えば該操作者5の胸ポケットに入れあり、該発光体6とは該ケーブル線6-3で接続されている。この様に構成することにより、該操作者5は該本体6-1を手に持つ必要がなくなり、両手に作業する部品や工具を持つなど本来行いたい作業に両手を使うことが可能となる。
図8では指サック6-4を例に挙げ説明したが、これは指輪の様なものでもよいし、該光源6-2を両面テープなどで固定してもよい(図示せず)。
FIG. 8 shows another example of the light emitter 6 different from that in FIG. 7. The difference from the
Although the finger sack 6-4 has been described as an example in FIG. 8, this may be a ring or the light source 6-2 may be fixed with a double-sided tape or the like (not shown).
複数発光体
以上該発光体4が1個の場合を説明したが、該発光体4は1個に限ることなく、それぞれが異なる発光モードを有する複数の該発光体4を用いてより複雑な入力操作も可能である。
Multiple light emitters
Although the case where there is one
自動画面切替
更に、該発光体4の発光モードごとに該操作画面1の表示内容を自動的に切替る様にすることにより、条件入力画面と運転用画面の切替の手間が省けたり、該操作者5それぞれが異なる発光モードの該発光体4を用いれば、1セットの該操作画面1、カメラ2、該処理部3で複数人の該操作者5(該発光体4は複数個)が使用できたりするメリットも得られる。
Automatic screen switching
Furthermore, by automatically switching the display content of the
エリアのプリ設定
また、該操作画面1の内に、該発光体4がそのエリア内に映し出されているときのみ操作ができる様な有効エリア(図9の7)を予め設定しておくことで、該操作者5が操作しやすい空間範囲を設定したり、外乱光の影響を阻止したり、同一発光モードの該発光体4を複数同時に使用することができる。
更に発光モード毎に有効エリアを設定すれば、各有効エリアに割り当てられた発光モードのみを識別すれば良いため、複数個の該発光体4を用いた場合の該処理部3の負担を軽減できる。
有効エリアの設定に当たっては、上記の様に該操作画面1の内の設定した有効エリアのみが機能する様に設定してもよし、設定した有効エリアの面積が該操作画面1全体の面積に拡大される様に設定してもよい。
Area pre-setting
In addition, an effective area (7 in FIG. 9) that can be operated only when the
Furthermore, if an effective area is set for each light emission mode, it is only necessary to identify the light emission mode assigned to each effective area, so the burden on the
In setting the effective area, it may be set so that only the effective area set in the
隔離環境
また、該発光体4は該カメラ2のほぼ正面に位置し、該発光体4の発光は直接該カメラ2に入射する前提で説明をしてきたが、反射鏡や光ファイバなどを用いて該発光体4を該カメラ2の視野から外した位置に配置にしてもよし、隔離された部屋の窓ガラスなど透明部材を透過させて該発光体4の発光を該カメラ2に入射してもよい。
Isolation environment
In addition, the
以上第1の実施形態を用い、現行のタッチパネルなどのスイッチ機能や描画機能を活用し、遠隔操作や入力操作時の両手フリー化や操作画面上のスイッチの面積を小型化が、簡易な方法且つ操作性良く実現することができると云う本発明の根幹を説明した。
As described above, using the first embodiment, utilizing the switch function and drawing function of the current touch panel, etc., freeing both hands at the time of remote operation and input operation, and reducing the area of the switch on the operation screen, a simple method and The basis of the present invention that it can be realized with good operability has been described.
携帯
(第2の実施形態)
第2の実施形態を、図10を用いて説明する。
旧来のメディア端末においては、表示画面上の選びたいスイッチを選択するには、一般的には選びたいスイッチを指で触れること(タッチパネル)になるが、スイッチには最低限指が隣のスイッチに触れない分だけの面積やスイッチ間の間隔が必要なことから、表示画面上に配置できるスイッチの数には制限があると云う不都合がある。
Mobile phone
(Second embodiment)
A second embodiment will be described with reference to FIG.
In traditional media terminals, to select the switch you want to select on the display screen, you generally touch the switch you want to select with your finger (touch panel). Since an area that is not touched and an interval between switches are necessary, there is a disadvantage that the number of switches that can be arranged on the display screen is limited.
図10は、メディア端末の具体例としての所謂スマートフォン8の概念図で、8-1は表示画面であるタッチパネル、8-2はカメラ、8-3は該表示画面8-1上に設けられたスイッチ、4は操作者5(図示せず)が保持する発光体である。
スマートフォン8は、該カメラ8-2で撮像された映像の内該発光体4のみを該表示画面8-3に映し出す様になっており、且つ上述した発光を区別する機能を有している。該操作者5が該発光体4を該カメラ2の視野内で移動させ、希望する該スイッチ8-3を選択する方法は上述の第1の実施形態と同様である。
FIG. 10 is a conceptual diagram of a so-called smartphone 8 as a specific example of a media terminal, in which 8-1 is a touch panel which is a display screen, 8-2 is a camera, and 8-3 is provided on the display screen 8-1. A
The smartphone 8 is configured to display only the
ここで、同じ距離だけ該発光体4を移動させても、該発光体4を該カメラ8-2に近い位置で移動させるか遠くで移動させるかで、該表示画面8-2に写し出されている該発光体4の移動距離や移動速度は異なるため、該操作者5はその場面に適した距離で該発光体4を操作することで、たとえ該表示画面8-1上のスイッチ8-3が指では選択できないほど小さなスイッチであっても、快適に入力操作することが可能となる。
Here, even if the
また、スマートフォン8では画面拡大などタッチパネルに親指と人指し指で触れ入力方法もあるが、これを本発明の発光体を用いた手段で実現するには、図8に示す様な指サック6-4に本体6-1から分離させた光源6-2を設置した発光体6を2セット用いると実現できる。
In addition, the smartphone 8 has an input method such as screen enlargement by touching the touch panel with the thumb and forefinger, but in order to realize this by means using the light emitter of the present invention, a finger sack 6-4 as shown in FIG. 8 is used. This can be realized by using two sets of the light emitters 6 provided with the light source 6-2 separated from the main body 6-1.
i-Pod
上記説明ではスマートフォンを例に挙げたが、ゲーム器や電子書籍やアイパッド(アップル社登録商標)などの操作画面がタッチパネルで構成されているものには有効であるし、またこれら機器で用いるスクロール機能(タッチパネルに接触させた指を任意の方向にずらし画面を移動させる)を始めとする、操作画面を用いた入力を行うものにも有効である。
i-Pod
In the above description, a smartphone has been taken as an example. However, it is effective for operation screens such as game consoles, electronic books, and eyepads (registered trademark of Apple Inc.) that are composed of touch panels, and scrolls used with these devices. It is also effective for a device that performs input using an operation screen such as a function (moving a screen by moving a finger touching a touch panel in an arbitrary direction).
以上本発明の主旨である発光体を用いた入力方法について述べたが、制御される装置自身のスイッチや付属するパソコンのキーボードやマウスなどを、場面により併用できる様にしておくと入力作業がよりしやすくなる。
The input method using the illuminant that is the gist of the present invention has been described above. However, if the switch of the controlled device itself or the keyboard or mouse of the attached personal computer can be used together depending on the situation, the input work will be more efficient. It becomes easy to do.
プロジュクタ
(第3の実施形態)
さらに、操作画面をパソコンとすれば、発光体からの光を操作画面上に映し出す技術はそのまま、プロジュクタにおけるポインタとして用いることも可能である。
図11は本発明に係る第3の実施形態全体の概念図で、2はカメラ、3は処理部、4はLEDを光源とした発光体、5はプレゼンテータである操作者、9は操作画面であるパソコン、10はプロジェクタ本体、11はスクリーン、1-10は該パソコン9上に映し出された該発光体4である。(図11では便宜上該スクリーン11と該パソコン9をほぼ同一方向に向いて描いたが、実際には該スクリーン11と該操作者5は観客側を、該カメラ2と該パソコン9は該操作者5側(観客に背を向ける方向)を向いている。)
該パソコン9にはプレゼンテーション資料と共に、該カメラ2で撮像された映像の内該発光体4のみを映し出す様に該処理部3により処理され該発光体4が映し出され、この該パソコン9の画面が該プロジェクタ本体10によって該スクリーン11に拡大して映し出される様になっている。
この様に構成することにより、該発光体4を該スクリーン11のプレゼンテーション資料を指し示すポインタとして用いることができる。つまり、プレゼンテータである操作者5は手に持った該発光体4を該カメラ2の視野内で移動させ、前述の発光を区別する手段を用いて、ポインタの機能を切替ることにより、旧来のレーザポインタでは実現できなかった機能(後述)を使いながらプレゼンテーションを行うことができる。
発光を区別する手段や該カメラ2で撮像された映像の内該発光体4と背景の映像を切り分ける手段など細部については、第1の実施携帯で説明した通りである。
該カメラ2で撮像された映像の内該発光体4と背景の映像を切り分けるには、該発光体4と背景の輝度や発光波長や動いているかどうかなどの差異を識別するとよい。
Projector
(Third embodiment)
Furthermore, if the operation screen is a personal computer, the technology for projecting light from the light emitter onto the operation screen can be used as it is as a pointer in the projector.
FIG. 11 is a conceptual diagram of the entire third embodiment according to the present invention, 2 is a camera, 3 is a processing unit, 4 is a light emitter using an LED as a light source, 5 is an operator who is a presenter, and 9 is an operation screen. A personal computer, 10 is a projector main body, 11 is a screen, and 1-10 is the
The
With this configuration, the
Details such as the means for distinguishing light emission and the means for separating the light-emitting
In order to separate the light-emitting
従来のプレゼンテーションでは、レーザポインタはそれ単独に使用されており、単にポイントを指し示すだけものとなっている。該発光体4を該パソコン9と連動させる本発明のプロジュクタ(レーザポインタ)を用いれば、該パソコン9上にポインタの記しが表示され、この画面が該プロジェクタ本体10により映し出されるため、明るく且つサイズや形状や色が自由に選択でき、大きな会場でも見易いポインタが実現できること。該発光体4の軌跡を残すことにより線分やエリアを表示できること。該パソコン9の画面上に上述した操作画面1上のスイッチを設けておくことにより該発光体4で例えばページめくりなど該パソコン9を直接操作できること。旧来の様なポインタを持つ手の震えがスクリーン上で拡大されてしまうことがなく見易くなること。該パソコン9の画面でポインタの位置が確認できるため、プレゼンテータはポインタを動かすときも含めパソコン(プレゼンテータ用の机)の傍から離れることができ、且つ常に観客の方向に向いていられることなど旧来にはないメリットが得られる。
In conventional presentations, the laser pointer is used alone and simply points to the point. If the projector (laser pointer) of the present invention for interlocking the
監視カメラ
(第4の実施形態)
カメラで撮像した画像を元に監視域を自動で監視する自動監視カメラでは、例えばその施設の管理者など本来警報を出す必要が無い人(否監視対象者)であっても、監視域に立ち入ると警報が出てしまうという利便性上の問題がある。
そこで、本発明を用いれば、発光体と一緒に移動する物体は、監視域に立ち入っても警報を出さない様にすることができる。つまり、否監視対象者である操作者5が、発光体4を自動監視カメラであるカメラ2に向けながら監視域に立ち入った場合は、「侵入者ではない」と処理部3が判断する様にしておけばよい。
ここで、該処理部3には本発明の該発光体4からの信号を読み込む機能の他に、自動監視の機能や該発光体4と一緒に移動する物体を識別する機能が組み込まれているが、これらは当該技術分野においては公知の技術であるためここでの詳細説明は省略する。
これにより、否監視対象者を自動で識別することができ、自動監視カメラの利便性を向上することができる。
Surveillance camera
(Fourth embodiment)
In an automatic monitoring camera that automatically monitors a monitoring area based on an image captured by the camera, even a person who does not need to issue a warning (such as a person who is not monitored), such as a manager of the facility, enters the monitoring area. There is a problem in convenience that an alarm is issued.
Therefore, by using the present invention, it is possible to prevent an object that moves together with the light emitter from issuing an alarm even if it enters the monitoring area. In other words, if the
Here, in addition to the function of reading the signal from the
Thereby, the person to be monitored can be automatically identified, and the convenience of the automatic monitoring camera can be improved.
更に、該発光体4の発光モード毎に指示内容を割り当てておけば、該操作者5は監視したい現場(該カメラ2の視野内、つまり監視域及びその周辺)にいながら自動監視カメラの遠隔入力操作を行うことも可能となる。例えば、デューティー25%の時は否監視対象者であるので監視域に立ち入っても警報は鳴らさない、50%の時は自動監視を停止、75%の時は自動監視を再開などが、監視したい現場にいながら自動監視カメラの遠隔入力操作が可能となる。
ここで、発光状態の区別方法は第1の実施形態で説明した発光モードの差異を利用する方法の他に、該発光体4の軌跡が描く図形(縦線/横線、円形、矩形、三角形、波模様など)を利用する方法もある。
Further, if the instruction content is assigned for each light emission mode of the
Here, in addition to the method of using the difference in the light emission mode described in the first embodiment, the method of distinguishing the light emission state is a figure drawn by the locus of the light emitter 4 (vertical line / horizontal line, circle, rectangle, triangle, There is also a method using wave patterns).
1:操作画面
2:カメラ
3:処理部
4:発光体
5:操作者
6:(もうひとつの)発光体
7:有効エリア
8:メディア端末(スマートフォン)
9:パソコン
10:プロジェクタ本体
11:スクリーン
1: Operation screen
2: Camera
3: Processing section
4: Luminescent body
5: Operator
6: (Another) luminous body
7: Effective area
8: Media terminal (smartphone)
9: PC
10: Projector body
11: Screen
Claims (17)
操作画面を用いて入力操作を行う機器において、
スイッチ機能や描画機能を有する操作画面と、
該操作画面と概略同一方向に向けられたカメラと、
操作者が入力操作の手段として該カメラの視野内で動かす発光体と、
該カメラで撮像された映像の内該発光体のみを該操作画面上に反映させ、該発光体の発光モードを識別し、該発光モード毎に予め設定された入力処理を行う処理部からなることを特徴とする遠隔入力装置。
In devices that perform input operations using the operation screen,
An operation screen having a switch function and a drawing function;
A camera that is oriented substantially in the same direction as the operation screen;
A light emitter that the operator moves within the field of view of the camera as a means of input operation;
It comprises a processing unit that reflects only the illuminant in the image captured by the camera on the operation screen, identifies the illuminating mode of the illuminant, and performs input processing preset for each illuminating mode. Remote input device characterized by.
上記請求項1において、
該発光体が点灯している状態であるのか、点滅している状態であるのかで、該発光体が指示する内容を識別することにより、入力操作を行うことを特徴とする遠隔入力装置。
In claim 1 above,
A remote input device that performs an input operation by identifying contents instructed by the light emitter, depending on whether the light emitter is lit or blinking.
上記請求項1において、
該発光体の発光は点滅光であり、この点滅する周期の差異を判断要素として、該発光体が指示する内容を識別することにより、入力操作を行うことを特徴とする遠隔入力装置。
In claim 1 above,
The remote input device is characterized in that the light emission of the light emitter is a flashing light, and an input operation is performed by identifying the contents designated by the light emitter using the difference in the flashing cycle as a determination factor.
上記請求項1において、
該発光体の発光は点滅光であり、点灯している時間と消灯している時間の比の差異を判断要素として、該発光体が指示する内容を識別することにより、入力操作を行うことを特徴とする遠隔入力装置。
In claim 1 above,
The light emission of the light emitter is a flashing light, and an input operation is performed by identifying the content indicated by the light emitter using the difference in the ratio between the time when the light is on and the time when the light is off as a determination factor. Features remote input device.
上記請求項1において
該発光体の発光は点滅光であり、この点滅するパターンの差異を判断要素として、該発光体が指示する内容を識別することにより、入力操作を行うことを特徴とする遠隔入力装置。
In claim 1 above
The remote input device is characterized in that light emission of the light emitter is blinking light, and an input operation is performed by identifying contents designated by the light emitter using a difference in the blinking pattern as a determination element.
上記請求項1において、
該発光体の発光輝度の差異を判断要素として、該発光体が指示する内容を識別することにより、入力操作を行うことを特徴とする遠隔入力装置。
In claim 1 above,
A remote input device that performs an input operation by identifying a content instructed by the light emitter using a difference in light emission luminance of the light emitter as a determination factor.
上記請求項1において、
該発光体の発光波長の差異を判断要素として、該発光体が指示する内容を識別することにより、入力操作を行うことを特徴とする遠隔入力装置。
In claim 1 above,
A remote input device that performs an input operation by identifying contents instructed by the light emitter using the difference in light emission wavelength of the light emitter as a determination factor.
上記請求項1において、
該発光体が移動している速度の差異を判断要素として、該発光体が指示する内容を識別することにより、入力操作を行うことを特徴とする遠隔入力装置。
In claim 1 above,
A remote input device that performs an input operation by identifying contents instructed by the light emitter using a difference in speed at which the light emitter is moving as a determination factor.
上記請求項1において、
該発光体が移動した軌跡を判断要素として、該発光体が指示する内容を識別することにより、入力操作を行うことを特徴とする遠隔入力装置。
In claim 1 above,
A remote input device that performs an input operation by identifying a content instructed by the light emitter using a trajectory of movement of the light emitter as a determination element.
上記請求項1において、
該発光体が該操作画面上のスイッチ上で停止している時間の差異を判断要素として、該発光体が指示する内容を識別することにより、入力操作を行うことを特徴とする遠隔入力装置。
In claim 1 above,
A remote input device that performs an input operation by identifying contents instructed by the light emitter, using a difference in time when the light emitter is stopped on a switch on the operation screen as a determination factor.
上記請求項1において、
該発光体が複数の該発光体からなることを特徴とする遠隔入力装置。
In claim 1 above,
The remote input device, wherein the light emitter comprises a plurality of the light emitters.
上記請求項1において、
該発光体の発光モードを識別することにより、該操作画面の内容を自動で切替ることを特徴とする遠隔入力装置。
In claim 1 above,
A remote input device that automatically switches the contents of the operation screen by identifying a light emission mode of the light emitter.
上記請求項1において、
該操作画面の内に有効エリアを設定し、該発光体が該有効エリア内にある時のみ操作ができる様にしたことを特徴とする遠隔入力装置。
In claim 1 above,
A remote input device characterized in that an effective area is set in the operation screen, and the operation can be performed only when the light emitter is in the effective area.
上記請求項1において、
該カメラと該発光体が隔離壁で隔離された場所に設置され、該発光体から出射された光が該隔離壁に設けられた光透過部材を透過して、該カメラに入射することを特徴とする遠隔入力装置。
In claim 1 above,
The camera and the light emitter are installed at a place separated by an isolation wall, and light emitted from the light emitter is transmitted through a light transmitting member provided on the isolation wall and is incident on the camera. Remote input device.
操作画面を用いて入力操作を行うメディア端末において、
タッチパネルで構成された操作画面である表示画面と、
該操作画面と概略同一方向に向けられたカメラと、
操作者が入力操作の手段として該カメラの視野内で動かす発光体と、
該カメラで撮像された映像の内該発光体のみを該表示画面上に反映させ、該発光体の発光モードを識別し、該発光モード毎に予め設定された入力処理を行うことを特徴とするメディア端末。
In a media terminal that performs input operations using the operation screen,
A display screen that is an operation screen composed of a touch panel;
A camera that is oriented substantially in the same direction as the operation screen;
A light emitter that the operator moves within the field of view of the camera as a means of input operation;
Only the illuminant of the image captured by the camera is reflected on the display screen, the illuminating mode of the illuminant is identified, and preset input processing is performed for each illuminating mode. Media terminal.
操作画面であるパソコン画面をスクリーンに映し出すプロジェクタにおいて、
該パソコン画面と概略同一方向に向けられたカメラと、
操作者が入力操作の手段として該カメラの視野内で動かす発光体と、
該カメラで撮像された映像の内該発光体のみを該操作画面上に反映させ、該発光体の発光モードを識別し、該発光モード毎に予め設定された入力処理を行う処理部からなる遠隔入力装置を備えたことを特徴とするプロジェクタ。
In the projector that displays the computer screen, which is the operation screen, on the screen,
A camera oriented in the same direction as the personal computer screen;
A light emitter that the operator moves within the field of view of the camera as a means of input operation;
A remote unit comprising a processing unit that reflects only the light emitter of the image captured by the camera on the operation screen, identifies the light emission mode of the light emitter, and performs input processing preset for each light emission mode. A projector comprising an input device.
監視域を自動監視する自動監視カメラにおいて、
監視用のカメラと、
操作者が保持する発光体と、
自動監視の機能が組み込まれ、且つ該カメラで撮像された映像の内該発光体を識別し、該発光体から発信される指示を実行する処理部からなる遠隔入力装置を備えたことを特徴とする自動監視カメラ。
In an automatic monitoring camera that automatically monitors the monitoring area,
A surveillance camera,
A light emitter held by the operator;
A remote input device including a processing unit that incorporates an automatic monitoring function and that identifies the light emitter in the image captured by the camera and executes an instruction transmitted from the light emitter is provided. Automatic surveillance camera.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2011018934A JP2012159994A (en) | 2011-01-31 | 2011-01-31 | Remote input device |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2011018934A JP2012159994A (en) | 2011-01-31 | 2011-01-31 | Remote input device |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2012159994A true JP2012159994A (en) | 2012-08-23 |
Family
ID=46840483
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2011018934A Pending JP2012159994A (en) | 2011-01-31 | 2011-01-31 | Remote input device |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2012159994A (en) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2014137676A (en) * | 2013-01-16 | 2014-07-28 | Ricoh Co Ltd | Position information acquisition device and image display system |
-
2011
- 2011-01-31 JP JP2011018934A patent/JP2012159994A/en active Pending
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2014137676A (en) * | 2013-01-16 | 2014-07-28 | Ricoh Co Ltd | Position information acquisition device and image display system |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6752848B2 (en) | Lighting device | |
| JP6854859B2 (en) | Lighting device | |
| JP2014056670A (en) | Lighting control system | |
| CN106327817A (en) | Projection device remote controller, and button reuse method and apparatus thereof | |
| US20180350122A1 (en) | Display device, display control method and display system | |
| JP2012234382A (en) | Image display system and image display method | |
| JP2012053584A (en) | Information display system and program | |
| JP2017122983A (en) | Control method, and information terminal | |
| JPWO2017056147A1 (en) | Lighting device | |
| JP2017182109A (en) | Display system, information processing apparatus, projector, and information processing method | |
| TW201937348A (en) | mouse | |
| JP2012159994A (en) | Remote input device | |
| CN104603723B (en) | Information equipment | |
| TWI634458B (en) | Computer input apparatus, pointing device and setting method thereof | |
| WO2018180635A1 (en) | Operation device and apparatus control system | |
| JP2015197587A (en) | Bidirectional display method and bidirectional display device | |
| JP2014222661A5 (en) | ||
| JP2002116878A (en) | Picture generation system and presentation system and information storage medium | |
| JP2010200223A (en) | Electronic apparatus, method of controlling electronic apparatus, remote controller, method of controlling remote controller and program | |
| JP2018028965A (en) | Lighting device | |
| JP2592743B2 (en) | Pointer for inputting coordinates and cursor moving method using the same | |
| KR20160107684A (en) | Electric board system | |
| CN108241441B (en) | Computer input device, pointer input device and setting method thereof | |
| KR20100104108A (en) | Mouse for computer |