[go: up one dir, main page]

JP2004349915A - Remote control device - Google Patents

Remote control device Download PDF

Info

Publication number
JP2004349915A
JP2004349915A JP2003143002A JP2003143002A JP2004349915A JP 2004349915 A JP2004349915 A JP 2004349915A JP 2003143002 A JP2003143002 A JP 2003143002A JP 2003143002 A JP2003143002 A JP 2003143002A JP 2004349915 A JP2004349915 A JP 2004349915A
Authority
JP
Japan
Prior art keywords
remote control
human body
shape
control device
hand
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2003143002A
Other languages
Japanese (ja)
Inventor
Masato Yamada
正人 山田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Priority to JP2003143002A priority Critical patent/JP2004349915A/en
Publication of JP2004349915A publication Critical patent/JP2004349915A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Details Of Television Systems (AREA)
  • User Interface Of Digital Computer (AREA)
  • Selective Calling Equipment (AREA)

Abstract

【課題】リモコン送信機など専用の装置を使うのではなく、人体を認識して制御を行うリモート制御装置で、形状や前後関係の認識を向上させる。
【解決手段】室内などの様子をビデオカメラ102において撮影しておき、階調のある信号を画像処理装置103へ送る。画像処理装置103では人体の形状を抽出する。次に動き認識装置104に送り、人体などの動きのあるものを認識する。ここで動きの具体例としては、手の形、眼球の向き、手の指示方向などである。また手の形の例としては、指を1本だけ立てた場合は、テレビの1チャンネルを受信し、2本立てた場合はテレビの2チャンネルを受信したりする。なお、ビデオカメラを複数台用意することで、認識精度を向上させることを可能とする。
【選択図】 図1
A remote control device that recognizes and controls a human body without using a dedicated device such as a remote control transmitter, and improves recognition of a shape and a context.
An image of a room or the like is captured by a video camera, and a signal with gradation is sent to an image processing device. The image processing device 103 extracts the shape of the human body. Next, the moving object is sent to the motion recognizing device 104 to recognize a moving object such as a human body. Here, specific examples of the movement include the shape of the hand, the direction of the eyeball, and the pointing direction of the hand. Further, as an example of a hand shape, when only one finger stands, one channel of the television is received, and when two fingers stand, two channels of the television are received. By providing a plurality of video cameras, it is possible to improve recognition accuracy.
[Selection diagram] Fig. 1

Description

【0001】
【発明の属する技術分野】
本発明は、従来リモコン送信機を利用して制御していた機器など、リモートコントロールされる機器に関するものである。
【0002】
【従来の技術】
従来のリモートコントロール装置としては、赤外線を利用しているものがあった(例えば、特許文献1参照)。
【0003】
本願の図5は、前記特許文献1に記載された従来のリモートコントロール装置を示すものである。図5において、検知装置502は人体501から放射される赤外線を受け、赤外線有無の2値信号に変換した後、特徴抽出装置503で人体の形状を抽出し、動作認識装置504で動作を認識し、制御信号を生成している。
【0004】
【特許文献1】
特開平7−288875号公報
【0005】
【発明が解決しようとする課題】
しかしながら、前記従来の構成では、赤外線で認識するために形状の認識が不十分なものであった。また、平面でしか捉えられないために、人体の前面で手を動かした場合など手と人体の区別がつかず、動きを認識することが困難であった。
【0006】
【課題を解決するための手段】
上記課題を解決するために、本発明のリモートコントロール装置は、機器を操作するにあたり、リモコン送信機など専用の送信装置を使うのではなく、ビデオカメラなどの撮像機器により人体の動きや指の形などを認識することにより所望の操作を行えるようにしたものである。
【0007】
【発明の実施の形態】
以下本発明の実施の形態について、図面を参照しながら説明する。
【0008】
(実施の形態1)
図1は、本発明の実施の形態1におけるリモートコントロール装置のブロック図である。
【0009】
図1において、室内などの様子をビデオカメラ102において撮影しておき、階調のある信号を画像処理装置103へ送る。画像処理装置103では人体の形状を抽出する。次に動き認識装置104に送り、人体などの動きのあるものを認識する。
【0010】
動きの具体例としては、手の形、眼球の向き、手の指示方向などである。例えば手の形の例としては、指を1本だけ立てた場合は、テレビの1チャンネルを受信し、2本立てた場合はテレビの2チャンネルを受信したりする。
【0011】
(実施の形態2)
図2は、本発明の実施の形態2におけるリモートコントロール装置のブロック図である。
【0012】
ビデオカメラ102に加えビデオカメラ201のようにビデオカメラを複数台用意することで、認識の対象となる人体を立体的に認識することが出来、より正確に動きを把握することが出来る。
【0013】
(実施の形態3)
図3は、本発明の実施の形態3におけるリモートコントロール装置のブロック図である。
【0014】
眼球の向きや手の指示方向を利用する場合は、テレビなどの表示装置301にオンスクリーンディスプレイなどで選択肢を表示し、一定時間以上眼球が向いた場合や手を指した場合、その位置にある選択肢を選ばれたこととする。
【0015】
これらの結果得られた利用者が所望する操作を操作される機器へ送る。
【0016】
オンスクリーンディスプレイに選択肢を表示する動作の開始時点はビデオカメラやある特定の点を見つめたり指で指したりした場合などとする。
【0017】
(実施の形態4)
図4は、本発明の実施の形態4におけるリモートコントロール装置のブロック図である。
【0018】
ビデオカメラを通常時に動作させておくことは消費電力の点から好ましくないため、通常はテレビカメラの動作を停止しておく。手拍子などの特定の音声をマイク401などで電気信号に変換し、音声検知装置402で指定時間間隔の手拍子などを認識する。その結果に基づき電源制御装置403により各部へ電源を供給する。この場合、動作が一定時間以上ない場合にビデオカメラの動作を停止する。この手拍子などの音声認識は、オンスクリーンディスプレイによる選択肢の動作の開始時点を決めることに使うことも出来る。
【0019】
【発明の効果】
以上のように、本発明によれば、リモコン送信機を必要としなくなるため、リモコン送信機を取りに機器の前まで行くようなこと必要がなくなり、利用者の利便性が著しく向上する。
【図面の簡単な説明】
【図1】本発明の実施の形態1におけるリモート制御装置のブロック図
【図2】本発明の実施の形態2におけるリモート制御装置のブロック図
【図3】本発明の実施の形態3におけるリモート制御装置のブロック図
【図4】本発明の実施の形態4におけるリモート制御装置のブロック図
【図5】従来の技術における動き認識によるリモート制御装置のブロック図
【符号の説明】
101 人体
102 ビデオカメラ
103 画像処理装置
104 動き検出装置
105 制御信号発生装置
201 ビデオカメラ
301 表示装置
401 マイク
402 音声検知装置
403 電源制御装置
501 人体
502 検知装置
503 特徴抽出装置
504 動作認識装置
[0001]
TECHNICAL FIELD OF THE INVENTION
The present invention relates to a device that is remotely controlled, such as a device that has been conventionally controlled using a remote control transmitter.
[0002]
[Prior art]
As a conventional remote control device, there has been one using infrared rays (for example, see Patent Document 1).
[0003]
FIG. 5 of the present application shows a conventional remote control device described in Patent Document 1. In FIG. 5, a detection device 502 receives infrared rays radiated from a human body 501, converts the infrared signals into binary signals indicating the presence or absence of infrared rays, extracts a human body shape with a feature extraction device 503, and recognizes an operation with a motion recognition device 504. , And generates a control signal.
[0004]
[Patent Document 1]
JP-A-7-288875
[Problems to be solved by the invention]
However, in the above-described conventional configuration, the recognition of the shape was insufficient because it was recognized by infrared rays. In addition, since it can only be captured on a flat surface, it is difficult to recognize the movement because the hand and the human body cannot be distinguished, for example, when the hand is moved in front of the human body.
[0006]
[Means for Solving the Problems]
In order to solve the above-mentioned problems, the remote control device of the present invention does not use a dedicated transmission device such as a remote control transmitter to operate the device, but uses an imaging device such as a video camera to move the human body or the shape of a finger. A desired operation can be performed by recognizing the user.
[0007]
BEST MODE FOR CARRYING OUT THE INVENTION
Hereinafter, embodiments of the present invention will be described with reference to the drawings.
[0008]
(Embodiment 1)
FIG. 1 is a block diagram of a remote control device according to Embodiment 1 of the present invention.
[0009]
In FIG. 1, an image of a room or the like is taken by a video camera 102, and a signal with gradation is sent to an image processing device 103. The image processing device 103 extracts the shape of the human body. Next, the moving object is sent to the motion recognizing device 104 to recognize a moving object such as a human body.
[0010]
Specific examples of the movement include the shape of the hand, the direction of the eyeball, and the pointing direction of the hand. For example, as an example of a hand shape, when only one finger stands, one channel of the television is received, and when two fingers stand, two channels of the television are received.
[0011]
(Embodiment 2)
FIG. 2 is a block diagram of a remote control device according to Embodiment 2 of the present invention.
[0012]
By preparing a plurality of video cameras like the video camera 201 in addition to the video camera 102, a human body to be recognized can be three-dimensionally recognized, and the movement can be grasped more accurately.
[0013]
(Embodiment 3)
FIG. 3 is a block diagram of a remote control device according to Embodiment 3 of the present invention.
[0014]
When the direction of the eyeball or the pointing direction of the hand is used, options are displayed on an on-screen display or the like on the display device 301 such as a television, and when the eyeball is turned for a certain period of time or when the hand is pointed, it is in that position. It is assumed that the option has been selected.
[0015]
The operation desired by the user obtained as a result is transmitted to the operated device.
[0016]
It is assumed that the operation for displaying the option on the on-screen display is started when a video camera or a specific point is stared or pointed with a finger.
[0017]
(Embodiment 4)
FIG. 4 is a block diagram of a remote control device according to Embodiment 4 of the present invention.
[0018]
Since it is not preferable from the viewpoint of power consumption to operate the video camera at normal times, the operation of the television camera is normally stopped. A specific sound such as clapping is converted into an electric signal by the microphone 401 or the like, and the clapping at specified time intervals is recognized by the sound detecting device 402. Based on the result, power is supplied to each unit by the power supply control device 403. In this case, the operation of the video camera is stopped when the operation has not been performed for a predetermined time or more. The voice recognition such as clapping can also be used to determine the start time of the operation of the option on the on-screen display.
[0019]
【The invention's effect】
As described above, according to the present invention, since a remote control transmitter is not required, it is not necessary to go to the front of the device to obtain the remote control transmitter, and the convenience of the user is significantly improved.
[Brief description of the drawings]
FIG. 1 is a block diagram of a remote control device according to Embodiment 1 of the present invention. FIG. 2 is a block diagram of a remote control device according to Embodiment 2 of the present invention. FIG. 3 is a remote control according to Embodiment 3 of the present invention. FIG. 4 is a block diagram of a remote control device according to a fourth embodiment of the present invention. FIG. 5 is a block diagram of a remote control device based on motion recognition in the related art.
101 human body 102 video camera 103 image processing device 104 motion detection device 105 control signal generation device 201 video camera 301 display device 401 microphone 402 voice detection device 403 power supply control device 501 human body 502 detection device 503 feature extraction device 504 action recognition device

Claims (4)

機器を操作するにあたり、リモコン送信機など専用の送信装置を使うのではなく、ビデオカメラなどの撮像機器により人体の動きや指の形などを認識することにより所望の操作を行えるようにしたリモートコントロール装置。A remote control that allows the user to perform desired operations by recognizing the movement of the human body and the shape of a finger with an imaging device such as a video camera instead of using a dedicated transmission device such as a remote control transmitter to operate the device. apparatus. 撮像機器を複数用い、より確実な操作を行えるようにした、請求項1に記載のリモートコントロール装置。The remote control device according to claim 1, wherein more reliable operation can be performed using a plurality of imaging devices. 表示装置と組み合わせることにより多彩な制御を実現できるようにした、請求項1に記載のリモートコントロール装置。2. The remote control device according to claim 1, wherein a variety of controls can be realized by combining with a display device. 手拍子などの音声による起動装置を設け、通常時は電源を切ることで低消費電力を実現した、請求項1に記載のリモートコントロール装置。2. The remote control device according to claim 1, wherein an activation device using a sound such as clapping is provided, and power is normally turned off to realize low power consumption.
JP2003143002A 2003-05-21 2003-05-21 Remote control device Pending JP2004349915A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2003143002A JP2004349915A (en) 2003-05-21 2003-05-21 Remote control device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2003143002A JP2004349915A (en) 2003-05-21 2003-05-21 Remote control device

Publications (1)

Publication Number Publication Date
JP2004349915A true JP2004349915A (en) 2004-12-09

Family

ID=33530900

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2003143002A Pending JP2004349915A (en) 2003-05-21 2003-05-21 Remote control device

Country Status (1)

Country Link
JP (1) JP2004349915A (en)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100687737B1 (en) 2005-03-19 2007-02-27 한국전자통신연구원 Virtual Mouse Device and Method Based on Two-Hand Gesture
US20100073312A1 (en) * 2008-09-19 2010-03-25 Samsung Electronics Co., Ltd. Display apparatus and control method thereof
JP2013522751A (en) * 2010-03-15 2013-06-13 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ Method and system for controlling at least one device
JP2013164658A (en) * 2012-02-09 2013-08-22 Ricoh Co Ltd Image display device
JP2013196047A (en) * 2012-03-15 2013-09-30 Omron Corp Gesture input apparatus, control program, computer-readable recording medium, electronic device, gesture input system, and control method of gesture input apparatus
JP2014503085A (en) * 2010-09-20 2014-02-06 コピン コーポレーション Wireless interface such as Bluetooth (registered trademark) with power management function for head mounted display
US9965039B2 (en) 2013-12-23 2018-05-08 Samsung Electronics Co., Ltd. Device and method for displaying user interface of virtual input device based on motion recognition

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100687737B1 (en) 2005-03-19 2007-02-27 한국전자통신연구원 Virtual Mouse Device and Method Based on Two-Hand Gesture
US20100073312A1 (en) * 2008-09-19 2010-03-25 Samsung Electronics Co., Ltd. Display apparatus and control method thereof
JP2013522751A (en) * 2010-03-15 2013-06-13 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ Method and system for controlling at least one device
JP2014503085A (en) * 2010-09-20 2014-02-06 コピン コーポレーション Wireless interface such as Bluetooth (registered trademark) with power management function for head mounted display
JP2013164658A (en) * 2012-02-09 2013-08-22 Ricoh Co Ltd Image display device
JP2013196047A (en) * 2012-03-15 2013-09-30 Omron Corp Gesture input apparatus, control program, computer-readable recording medium, electronic device, gesture input system, and control method of gesture input apparatus
US9965039B2 (en) 2013-12-23 2018-05-08 Samsung Electronics Co., Ltd. Device and method for displaying user interface of virtual input device based on motion recognition

Similar Documents

Publication Publication Date Title
US11561519B2 (en) Systems and methods of gestural interaction in a pervasive computing environment
US8555171B2 (en) Portable virtual human-machine interaction device and operation method thereof
CN104410883B (en) The mobile wearable contactless interactive system of one kind and method
KR101966127B1 (en) robot cleaner system and a control method of the same
EP2723089B1 (en) Apparatus and method of controlling display device
US10528796B2 (en) Body information analysis apparatus with augmented reality and eyebrow shape preview method thereof
CN114578951B (en) Display device and control method thereof
US20100134411A1 (en) Information processing apparatus and information processing method
WO2016155361A1 (en) Remote exposure control apparatus, digital x-ray imaging system, and exposure method therefor
WO2013149586A1 (en) Wrist-mounting gesture control system and method
KR101444858B1 (en) Telepresence apparatus
JP2000347692A (en) Person detecting method, person detecting device, and control system using it
US11144751B2 (en) Information processing apparatus and non-transitory computer readable medium to allow operation without contact
JPWO2017145787A1 (en) Remote control device, remote control method, remote control system, and program
CN104207760A (en) Portable electronic device
WO2012119371A1 (en) User interaction system and method
JP2001117684A (en) Touch panel device
JP2004349915A (en) Remote control device
US20160182860A1 (en) Methods for performing image capture and real-time image display on physically separated or separable devices and apparatus therefor
JP2019220145A (en) Operation terminal, voice input method, and program
CN105468139B (en) Position detection device, projector, and position detection method
EP1775689A3 (en) Remote control device, image processing apparatus having the same and method of driving the same
JP4458284B2 (en) Remote control device
JP2005250233A (en) Robot device
KR20160024898A (en) remote controller for a robot cleaner and a control method of the same