JP2013140578A - 電子装置及びその制御方法 - Google Patents

Abstract

【課題】 本発明の目的とするところは、モーション入力部を介して入力されたユーザモーション、ディスプレイ画面にディスプレイされた複数のアイコン及びポインタを用いて電子装置の機能を実行する電子装置及びその制御方法を提供することにある。
【解決手段】 電子装置及びその制御方法が提供される。本電子装置の制御方法は、モーション開始命令が入力されると、モーションタスクモードを行うためのアイコン及びポインタをディスプレイし、ユーザの第１モーションに沿ってポインタを移動させ、ポインタがアイコンに位置した状態でユーザの第２モーションが入力されると、アイコンに対応する機能を実行する。それにより、ユーザはモーションを用いて電子装置をより便利かつ直観的に制御することができるようになる。
【選択図】 図１０

Description

本発明は、電子装置及びその制御方法に関し、より詳細には、モーション入力部を介して入力されたモーションに応じて制御される電子装置及びその制御方法に関する。

電子技術の発展により、多様な種類の電子装置が開発され普及されている。特に、最近はテレビをはじめとする多様な類型の電子装置が一般家庭でも使われている。これらの電子装置は、ユーザの要求に応じてより多様な機能を備えるようになっている。特に、テレビの場合、最近はインターネットと接続されてインターネットサービスまでサポートしている。なお、ユーザはテレビを通じて数多くのデジタル放送チャネルも視聴できるようになっている。

よって、電子装置の多様な機能を効率的に使うための多様な入力方法が要求されている。例えば、リモコンを用いた入力方法、マウスを用いた入力方法、及びタッチパッドを用いた入力方法等が電子装置に適用されている。

ところが、このような単純な入力方法だけでは、電子装置の多様な機能を効果的に使いこなすことが困難であった。仮に、電子装置のすべての機能をリモコンだけで制御するように実現できると、リモコンのボタン数を増やさざるを得なかった。この場合、一般のユーザがリモコンの使用法を習得することは決して容易なことではない。なお、多様なメニューを画面上に表示してユーザが当該メニューを探し出して選択する方法の場合、ユーザが複雑なメニューツリーを一々確認し、自分の望むメニューを選択しなければならないため、不便であった。

従って、電子装置をより便利かつ効果的に制御するための技術が求められるようになった。

韓国特開第２００７−００５５２１０号公報 韓国特開第２０１０−０１０２３５４号公報 韓国特開第２００６−００８４２５１号公報

そこで、本発明は、上記問題に鑑みてなされたものであり、本発明の目的とするところは、モーション入力部を介して入力されたユーザモーション、ディスプレイ画面にディスプレイされた複数のアイコン及びポインタを用いて電子装置の機能を実行する電子装置及びその制御方法を提供することにある。

前記目的を達成するための本発明の一実施形態に係る電子装置の制御方法は、モーション開始命令（Ｔｒｉｇｇｅｒ Ｍｏｔｉｏｎ）が入力されると、モーションタスクモードを行うためのアイコン及びポインタをディスプレイするステップと、ユーザの第１モーションに沿って前記ポインタを移動させるステップと、前記ポインタが前記アイコンに位置した状態でユーザの第２モーションが入力されると、前記アイコンに対応する機能を実行するステップとを含む。

そして、前記アイコンに位置した前記ポインタは、前記ユーザの第２モーションが入力される間、動かされずに固定されてよい。

なお、前記実行するステップは、前記ポインタが前記アイコンに位置しながら前記第２モーションの入力が保持されると、前記ポインタの位置するアイコンの機能を連続して実行してよい。

そして、前記ユーザの第１モーションは、ユーザの手を開いたスプレッド（Ｓｐｒｅａｄ）モーションであり、前記ユーザの第２モーションは、前記ユーザの手を握ったグラブ（Ｇｒａｂ）モーションであってよい。

なお、前記アイコンは、音量アップのアイコン、音量ダウンのアイコン、チャネルアップのアイコン及びチャネルダウンのアイコンのうち、少なくとも一つを含んでよい。

そして、前記アイコンは、ディスプレイ画面の左側領域及び右側領域の何れか一方にディスプレイされる前記音量アップのアイコン及び前記音量ダウンのアイコンと、前記ディスプレイ画面の左側領域及び右側領域の何れか一方にディスプレイされる前記チャネルアップのアイコン及び前記チャネルダウンのアイコンとを含んでよい。

なお、前記音量アップのアイコン及び前記音量ダウンのアイコンがディスプレイされる領域には、前記電子装置の現在設定された音量レベル情報がディスプレイされ、前記チャネルアップのアイコン及び前記チャネルダウンのアイコンがディスプレイされる領域には、前記電子装置の現在設定されたチャネル情報がディスプレイされてよい。

そして、モーション終了モーションが入力されると、前記ディスプレイされた複数のアイコン及びポインタをディスプレイ画面から除去するステップを更に含んでよい。

一方、前記目的を達成するための本発明の一実施形態に係る電子装置は、ユーザのモーションが入力されるモーション入力部と、ディスプレイ部と、前記モーション入力部を介してモーション開始命令（Ｔｒｉｇｇｅｒ Ｍｏｔｉｏｎ）が入力されると、モーションタスクモードを行うためのアイコン及びポインタをディスプレイし、前記モーション入力部に入力されたユーザの第１モーションに沿って前記ポインタを移動させるように前記ディスプレイ部を制御し、前記ポインタが前記アイコンに位置した状態で前記モーション入力部にユーザの第２モーションが入力されると、前記アイコンに対応する機能を実行する制御部とを具備する。

そして、前記制御部は、前記ユーザの第２モーションが入力される間、前記ポインタの位置を動かさずに固定してよい。

なお、前記制御部は、前記ポインタが前記アイコンに位置しながら前記第２モーションの入力が保持されると、前記ポインタの位置するアイコンの機能を連続して実行してよい。

そして、前記ユーザの第１モーションは、ユーザの手を開いたスプレッド（Ｓｐｒｅａｄ）モーションであり、前記ユーザの第２モーションは、前記ユーザの手を握ったグラブ（Ｇｒａｂ）モーションであってよい。

なお、前記アイコンは、音量アップのアイコン、音量ダウンのアイコン、チャネルアップのアイコン及びチャネルダウンのアイコンのうち、少なくとも一つを含んでよい。

そして、前記アイコンは、ディスプレイ画面の左側領域及び右側領域の何れか一方にディスプレイされる前記音量アップのアイコン及び前記音量ダウンのアイコンと、前記ディスプレイ画面の左側領域及び右側領域の何れか一方にディスプレイされる前記チャネルアップのアイコン及び前記チャネルダウンのアイコンとを含んでよい。

なお、前記音量アップのアイコン及び前記音量ダウンのアイコンがディスプレイされる領域には、前記電子装置の現在設定された音量レベル情報がディスプレイされ、前記チャネルアップのアイコン及び前記チャネルダウンのアイコンがディスプレイされる領域には、前記電子装置の現在設定されたチャネル情報がディスプレイされてよい。

そして、前記制御部は、前記モーション入力部を介してモーション終了モーションが入力されると、前記ディスプレイされた複数のアイコン及びポインタを前記ディスプレイ部のディスプレイ画面から除去してよい。

以上説明したように、本発明によれば、ユーザはユーザモーションを用いてより便利かつ直観的に電子装置を制御することができるようになる。

本発明の多様な実施形態に係る電子装置の構成を説明するためのブロック図である。 本発明の多様な実施形態に係る電子装置の構成を説明するためのブロック図である。 本発明の多様な実施形態に係る電子装置の構成を説明するためのブロック図である。 本発明の多様な実施形態に係るユーザモーションを用いたチャネル制御及び音量制御を行う方法を説明するための図である。 本発明の多様な実施形態に係るユーザモーションを用いたチャネル制御及び音量制御を行う方法を説明するための図である。 本発明の多様な実施形態に係るユーザモーションを用いたチャネル制御及び音量制御を行う方法を説明するための図である。 本発明の多様な実施形態に係るユーザモーションを用いたチャネル制御及び音量制御を行う方法を説明するための図である。 本発明の多様な実施形態に係るユーザモーションを用いたチャネル制御及び音量制御を行う方法を説明するための図である。 本発明の多様な実施形態に係るユーザモーションを用いたチャネル制御及び音量制御を行う方法を説明するための図である。 本発明の一実施形態に係るユーザモーションを用いて電子装置の制御方法を説明するためのフローチャートである。

以下に添付図面を参照しながら、本発明の好適な実施形態について詳細に説明する。

図１は、本発明の実施形態に係る電子装置を示す概略的なブロック図である。

図１を参照すると、電子装置１００は、モーション入力部１２０と、保存部１３０と、制御部１４０及びディスプレイ部１９３を含む。電子装置１００は、外部のネットワークと接続可能なスマートテレビ、セットトップボックス、ＰＣであって、又はデジタルテレビや携帯電話等で実現されてよいが、これらに限られるものではない。

モーション入力部１２０は、ユーザのモーションを撮像した映像信号（例えば、連続するフレーム）を受信して制御部１４０に提供する。例えば、モーション入力部１２０は、レンズ及びイメージセンサで構成されるカメラユニットで実現されてよい。なお、モーション入力部１２０は、電子装置１００と一体型だけでなく、分離した形で実現されてよい。分離されたモーション入力部１２０は、電子装置１００と有線または無線ネットワークを通じて接続されてよい。

保存部１３０は、電子装置１００を駆動して制御するための多様なデータ及びプログラムを保存する。保存部１３０は、音声入力部を介して入力された音声を認識するための音声認識モジュール及びモーション入力部１２０を介して入力されたモーションを認識するためのモーション認識モジュールを保存する。

保存部１３０は、音声データベース及びモーションデータベースを含んでよい。音声データベースは、予め設定された音声及び予め設定された音声にマッチする音声タスクが記録されたデータベースのことを意味する。モーションデータベースは、予め設定されたモーション及び予め設定されたモーションにマッチするモーションタスクが記録されたデータバースのことを意味する。

ディスプレイ部１９３は、放送受信部を介して受信された放送信号に対応する映像を表示する。ディスプレイ部１９３は、外部端子入力部を介して入力される映像データ（例えば、動画）を表示することができる。ディスプレイ部１９３は、制御部１４０の制御に応じて音声タスクを行うための音声ガイド情報及びモーションタスクを行うためのモーションガイド情報を表示することができる。

制御部１４０は、モーション入力部１２０と、保存部１３０及びディスプレイ部１９３を制御する。制御部１４０は、ＣＰＵ（Ｃｅｎｔｒａｌ ＰｒｏｃｅｓｓｉｎｇＵｎｉｔ）及び電子装置１００を制御するためのモジュール及びデータを保存するＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）及びＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）を含んでよい。

制御部１４０は、モーション入力部１２０を介してモーションが入力される場合、モーション検知モジュール及びモーションデータベースを用いてモーションを認識する。モーション認識（Ｍｏｔｉｏｎ Ｒｅｃｏｇｎｉｔｉｏｎ）はモーション入力部１２０を介して入力されるユーザのモーションに対応する映像（例えば、連続するフレーム）をモーション認識モジュールを用いて周囲の背景と手（例えば、指を伸ばしたり指を曲げて拳を作る）領域に分離し、連続する手の動きを認識することができる。ユーザモーションが入力される場合、制御部１４０は受信された映像をフレーム単位で保存し、保存されたフレームを用いてユーザモーションの対象であるオブジェクト（例えば、ユーザの手）を検知する。制御部１４０は、フレームに含まれたオブジェクトの形、色、動きのうち、少なくともいずれか一つを検知してオブジェクトを検出する。制御部１４０は、複数のフレームに含まれた各々のオブジェクトの位置を用いて検出されたオブジェクトの動きを追跡することができる。

制御部１４０は、追跡されたオブジェクトの形及び動きに応じてモーションを判断する。例えば、制御部１４０は、オブジェクトの形の変化、速度、位置、方向のうち、少なくともいずれか一つを用いてユーザのモーションを判断する。ユーザのモーションは、手を握るモーションであるグラブ（Ｇｒａｂ）、表示されたカーソルを手で移動させるモーションであるポインティング移動（Ｐｏｉｎｔｉｎｇ ｍｏｖｅ）、手を一定速度以上に一方向に動かすモーションであるスラップ（Ｓｌａｐ）、手を左／右又は上／下に振るモーションであるシェイク（Ｓｈａｋｅ）及び手を回転させるモーションである回転を含む。上述の実施形態以外の他のモーションにも本発明の技術的思想が適用されてよい。例えば、握られた手を開くスプレッド（Ｓｐｒｅａｄ）モーション等が更に含まれてよい。

制御部１４０は、ユーザのモーションがポインティング移動であるか、スラップであるかを判断するために、オブジェクトが決定された時間（例えば、８００ｍｓ）内に決定された領域（例えば、４０ｃｍ×４０ｃｍの四角形）から外れているかを判断する。オブジェクトが決定された時間内に決定された領域から外れていない場合、制御部１４０はユーザのモーションをポインティング移動と判断してよい。オブジェクトが決定された時間内に決定された領域から外れている場合、制御部１４０はユーザのモーションをスラップと判断してよい。別の一例として、オブジェクトの速度が予め設定された速度（例えば、３０ｃｍ／ｓ）以下であると判断された場合、制御部１４０はユーザのモーションをポインティング移動と判断する。オブジェクトの速度が予め設定された速度超過であると判断される場合、制御部１４０はユーザのモーションをスラップと判断する。

制御部１４０は、上述のように、認識された音声を用いて、電子装置１００のタスク（Ｔａｓｋ）を行う。電子装置１００のタスクは、チャネル変更、音量調節、コンテンツ（例えば、動画や音楽、写真等）の再生又はインターネットブラウジング等のように、電子装置１００によって実行可能な機能の少なくとも一つを含む。

特に、モーション入力部１２０を介してモーション開始命令（Ｔｒｉｇｇｅｒ Ｍｏｔｉｏｎ）が入力されると、制御部１４０は、電子装置１００のモードをモーションタスクモードに切り替える。このとき、モーション開始命令は、ユーザの片手を左右に複数回振るモーションであってよい。そして、モーションタスクモードは、電子装置１００がモーション入力部１２０を介して入力されたユーザのモーションに応じて制御されるモードである。

モーションタスクモードに切り替えられると、制御部１４０は、モーションタスクモードを行うためのアイコン及びポインタをディスプレイ１９３にディスプレイする。このとき、ディスプレイされるアイコンは、電子装置１００の機能（例えば、音量調節やチャネル変更）を制御するためのアイコンである。そして、アイコンは、ディスプレイ画面の左側領域及び右側領域にディスプレイされてよい。なお、ポインタはディスプレイ画面の中央領域にディスプレイされてよい。

そして、制御部１４０は、モーション入力部１２０を介して入力されたユーザの第１モーションに沿ってポインタを移動させる。このとき、ユーザの第１モーションは、ユーザの手を開いた状態であるスプレッド（Ｓｐｒｅａｄ）モーションをいう。即ち、モーション入力部１２０を介してユーザの手が開いた状態で移動されるモーションが入力されると、制御部１４０は、ユーザの手の移動に沿ってポインタを移動させることができる。

そして、ポインタがアイコンに位置した状態でモーション入力部１２０を介してユーザの第２モーションが入力されると、制御部１４０は、アイコンに対応する機能を実行する。このとき、ユーザの第２モーションは、手を握るグラブ（Ｇｒａｂ）モーションであってよい。例えば、ポインタが音量アップのアイコンに位置した状態でモーション入力部１２０を介してユーザのグラブモーションが入力されると、制御部１４は、現在の音量レベルから音量レベルを“１”上げてよい。

ここで、制御部１４０は、ユーザの第２モーションが入力される間ポインタの位置が動かされずに固定されるように制御する。それは、ユーザの第２モーションを入力する際、ユーザの手が動いたと判断されてポインタの位置が変更されると、ユーザは電子装置１００を正確に制御することができないためである。

なお、ポインタがアイコンに位置しながら第２モーションの入力が保持されると、制御部１４０は、ポインタの位置するアイコンの機能を連続して実行することができる。例えば、ポインタが音量ダウンのアイコンに位置しながら第２モーションの入力が保持されると、制御部１４０は音量レベルを更に下げることができる。このとき、第２モーションの入力が保持されると、制御部１４０はポインタの位置するアイコンの機能をより素早く実行することができる。例えば、ポインタが音量ダウンのアイコンに位置しながら第２モーションの入力が保持されると、制御部１４０は音量レベルを次第に早く下げることができる。

そして、モーション入力部１２０を介してモーション終了モーションが入力されると、制御部１４０は、ディスプレイされた複数のアイコン及びポインタをディスプレイ部１９３のディスプレイ画面から除去することができる。このとき、モーション終了モーションとモーション開始モーションとが同様のモーションであってよい。

ユーザのモーション、複数のアイコン及びポインタを用いて電子装置１００を制御する方法に対しても、図４ないし図９を参照して詳細に説明する。

図２は、本発明の別の実施形態に係る電子装置１００の構成を示すブロック図である。図２を参照すると、電子装置１００は、音声入力部１１０と、モーション入力部１２０と、保存部１３０と、制御部１４０と、放送受信部１５０と、外部端子入力部１６０と、リモコン信号受信部１７０と、ネットワークインターフェース部１８０及び映像出力部１９０を含む。図２に示す電子装置１００は、セットトップボックス（Ｓｅｔ Ｔｏｐ Ｂｏｘ）で実現されてよい。

一方、図２に示すモーション入力部１２０と、保存部１３０及び制御部１４０に対する説明は、図１において説明したモーション入力部１２０と、保存部１３０及び制御部１４０に対する説明と同様であるため、詳細な説明は省略する。

音声入力部１１０には、ユーザの発話（Ｕｔｔｅｒａｎｃｅ）した音声命令が入力される。音声入力部１１０は、入力された音声信号を電気信号に変換して制御部１４０に出力する。例えば、音声入力部１１０は、マイクで実現されてよい。なお、音声入力部１１０は、電子装置１００と一体型（Ａｌｌ−ｉｎ−ｏｎｅ）だけでなく、分離した形で実現されてよい。分離された音声入力部１１０は、電子装置１００と有線又は無線ネットワークを通じて接続されてよい。

放送受信部１５０は、有／無線で外部から放送信号を受信する。放送信号は、映像（Ｖｉｄｅｏ）、オーディオ（Ａｕｄｉｏ）及び付加データ（例えば、ＥＰＧ）を含む。放送受信部１５０は、地上波放送、ケーブル放送、衛星放送、インターネット放送等のような多様なソースから放送信号を受信することができる。

外部端子入力部１６０は、電子装置１００の外部から映像データ（例えば、動画や写真等）、オーディオデータ（例えば、音楽等）等を受信する。外部端子入力部１６０は、ＨＤＭＩ入力端子（Ｈｉｇｈ−Ｄｅｆｉｎｉｔｉｏｎ Ｍｕｌｔｉｍｅｄｉａ Ｉｎｔｅｒｆａｃｅ Ｉｎｐｕｔ）、コンポーネント入力端子、ＰＣ入力端子、又はＵＳＢ入力端子の少なくとも一つを含んでよい。リモコン信号受信部１７０は、外部のリモコンから入力されるリモコン信号を受信する。リモコン信号受信部１７０は、電子装置１００が音声タスクモードか、モーションタスクモードでも、リモコン信号を受信することができる。

ネットワークインターフェース部１８０は、制御部１４０の制御によって電子装置１００と外部装置（例えば、サーバ）を接続することができる。制御部１４０は、ネットワークインターフェース部１８０を介して接続された外部装置からアプリケーションをダウンロードしたり、ウェブブラウジングをすることができる。ネットワークインターフェース部１８０は、イーサネット（登録商標）（Ｅｔｈｅｒｎｅｔ（登録商標））、無線ＬＡＮ及びブルートゥース（登録商標）（Ｂｌｕｅｔｏｏｔｈ（登録商標））の少なくとも一つを提供することができる。

映像出力部１９０は、放送受信部１５０を介して受信される外部の放送信号、又は外部端子入力部１６０で入力される映像データ、又は保存部１３０に保存された映像データを外部のディスプレイ装置（例えば、モニタやテレビ）に出力する。

制御部１４０は、音声入力部１１０からユーザ音声が入力される場合、音声認識モジュール及び音声データベースを用いて音声を認識する。音声認識（Ｖｏｉｃｅ Ｒｅｃｏｇｎｉｔｉｏｎ）は入力される音声の形態によって、各々の単語を区分して発話した音声を認識する孤立単語認識（Ｉｓｏｌａｔｅｄ Ｗｏｒｄ Ｒｅｃｏｇｎｉｔｉｏｎ）、連続単語、連続文章及び会話体音声を認識する連続音声認識（Ｃｏｎｔｉｎｕｏｕｓ ｓｐｅｅｃｈ Ｒｅｃｏｇｎｉｔｉｏｎ）及び孤立単語認識と連続音声認識との中間形態で、予め定められたキーワードを検出して認識するキーワード検出（Ｋｅｙｗｏｒｄ Ｓｐｏｔｔｉｎｇ）で区分されてよい。

ユーザ音声が入力される場合、制御部１４０は入力された音声信号内でユーザが発話した音声の始めと終わりを検出して音声区間を判断する。制御部１４０は、入力された音声信号のエネルギーを計算し、計算されたエネルギーに応じて音声信号のエネルギーレベルを分類し、動的プログラミングを通じて音声区間を検出することができる。制御部１４０は、検出された音声区間内の音声信号から、音響モデル（Ａｃｏｕｓｔｉｃ Ｍｏｄｅｌ）に基づいて、音声の最小単位である音素を検出して音素データを生成する。制御部１４０は、生成された音素データにＨＭＭ（Ｈｉｄｄｅｎ Ｍａｒｋｏｖ Ｍｏｄｅｌ）確率モデルを適用してテキスト情報を生成する。しかし、上述のように、ユーザの音声を認識する方法は一実施形態に過ぎず、他の方法を用いてユーザ音声を認識することができる。それにより、制御部１４０は、音声信号の中に含まれたユーザの音声を認識することができる。

図３は、本発明の更に別の実施形態に係る電子装置１００のブロック図を示す図である。図３に示すように、電子装置１００は、音声入力部１１０と、モーション入力部１２０と、保存部１３０と、制御部１４０と、放送受信部１５０と、外部端子入力部１６０と、リモコン信号受信部１７０と、ネットワークインターフェース部１８０と、ディスプレイ部１９３及びオーディオ出力部１９６を含む。このとき、電子装置１００は、デジタルテレビであってよいが、これに限られるものではない。

一方、図３において、音声入力部１１０と、モーション入力部１２０と、保存部１３０と、制御部１４０と、放送受信部１５０と、外部端子入力部１６０と、リモコン信号受信部１７０と、ネットワークインターフェース部１８０及びディスプレイ部１９３に対する説明は、図１及び図２で同じ参照番号を有する構成に対する説明と同様であるため、詳細な説明は省略する。

オーディオ出力部１９６は、制御部１４０の制御によって放送信号に対応する音声を出力する。オーディオ出力部１９６は、スピーカ１９６ａ、ヘッドホン出力端子１９６ｂ又はＳ／ＰＤＩＦ出力端子１６３ｃの少なくともいずれか一つを含んでよい。

一方、保存部１３０は、図３に示すように、電源制御モジュール１３０ａ、チャネル制御モジュール１３０ｂ、音量制御モジュール１３０ｃ、外部入力制御モジュール１３０ｄ、画面制御モジュール１３０ｅ、オーディオ制御モジュール１３０ｆ、インターネット制御モジュール１３０ｇ、アプリケーションモジュール１３０ｈ、検索制御モジュール１３０ｉ、ＵＩ処理モジュール１３０ｊ、音声認識モジュール１３０ｋ、モーション認識モジュール１３０ｌ、音声データベース１３０ｍ及びモーションデータベース１３０ｎを含む。これらのモジュール（１３０ａないし１３０ｎ）は、それぞれ、電源制御機能、チャネル制御機能、音量制御機能、外部入力制御機能、画面制御機能、オーディオ制御機能、インターネット制御機能、アプリケーション実行機能、検索制御機能、ＵＩ処理機能を行うためにソフトウェアで実現されてよい。制御部１４０は、保存部１３０に保存されたこれらのソフトウェアを実行させて当該機能を行うことができる。

以下では、図４ないし図９を参照して、本発明の多様な実施形態について説明する。

制御部１４０は、放送受信部１５０を介して受信された放送信号を信号処理して、図４に示すように、放送映像４００をディスプレイ画面にディスプレイする。

このとき、モーション入力部１２０を介してモーション開始命令が入力されると、制御部１４０は、電子装置１００のモードをモーションタスクモードに切り替える。このとき、モーションタスクモードとは、電子装置１００をモーション入力部１２０を介してユーザのモーションによって制御するモードである。

モーションタスクモードに切り替えられると、制御部１４０は、電子装置１００の特定機能を行うための複数のアイコン５１０、５３０、５４０、５６０及びポインタがディスプレイ５７０される。具体的には、図５に示すように、制御部１４０はディスプレイ画面の左側領域に音量レベル制御のための音量アップのアイコン５１０及び音量ダウンのアイコン５３０をディスプレイし、ディスプレイ画面の右側領域にチャネル制御のためのチャネルアップのアイコン５４０及びチャネルダウンのアイコン５６０をディスプレイし、ディスプレイ画面の中央部分にポインタ５７０をディスプレイする。

このとき、音量アップのアイコン５１０及び音量ダウンのアイコン５３０の間に現在の電子装置１００に設定された音量レベル情報５２０がディスプレイされる。そして、チャネルアップのアイコン５４０及びチャネルダウンのアイコン５６０の間には現在の電子装置１００に設定されたチャネル情報（例えば、チャネル名やチャネル番号）５５０がディスプレイされる。従って、ユーザは現在設定されたチャネル情報及び音量レベル情報を容易に確認することができるようになる。

一方、上述の実施形態においては、音量レベル制御のためのアイコン５１０、５３０が左側領域にディスプレイされ、チャネル制御のためのアイコン５４０、５６０が右側領域にディスプレイされるものとして説明したが、それは一実施形態に過ぎず、他の領域にディスプレイされてよい。

なお、上述の実施形態においては、音量レベル制御のためのアイコン５１０、５３０及びチャネル制御のためのアイコン５４０、５６０がディスプレイされるものとして説明したが、電子装置１００の別の機能を制御するためのアイコン（例えば、消音や電源オフ等）のためのアイコンがディスプレイされてよい。

複数のアイコン５１０、５３０、５４０、５６０及びポインタ５７０がディスプレイされた状態で、モーション入力部１２０を介してユーザの手が開いた状態で移動されるモーションが入力されると、制御部１４０は移動モーションに沿ってポインタ５７０を移動させる。

そして、ポインタ５７０が複数のアイコン５１０、５３０、５４０、５６０のうちの一つのアイコン上に位置した状態で、モーション入力部１２０を介してユーザのグラブモーションが入力されると、制御部１４０はポインタ５７０の位置したアイコンに対応する機能を実行させることができる。

例えば、モーション入力部１２０を介してユーザの手が開いた状態で左側に移動されるモーションが入力されると、制御部１４０は移動モーションに沿ってポインタ５７０を左側に移動させる。そして、図６に示すように、ポインタ５７０が音量ダウンのアイコン５３０上に位置した状態で、モーション入力部１２０を介してユーザのグラブモーションが一回入力されると、制御部１４０は現在の電子装置１００に設定された音量レベルを“１”下げる。即ち、現在の電子装置１００に設定された音量レベルが“２１”である場合、ポインタ５７０が音量ダウンのアイコン５３０上に位置した状態でモーション入力部１２０を介してユーザのグラブモーションが一回入力されると、制御部１４０は現在の電子装置１００の音量レベルを“２０”に設定する。そして、制御部１４０は、電子装置１００の音量レベルを調節するだけでなく、図７に示すように、音量レベル情報５２０も変更されるようにする。

このとき、制御部１４０は、モーション入力部１２０を介してグラブモーションが入力される場合、ユーザの手が動いたとしても、ポインタ５７０の位置を変更させることなく、固定することができる。

なお、ポインタ５７０が音量ダウンのアイコン５３０上に位置した状態でモーション入力部１２０を介してユーザのグラブモーションが入力され続けると、制御部１４０は現在の電子装置１００の音量レベルを更に下げることができる。

更に、別の実施形態として、モーション入力部１２０を介してユーザの手が開いた状態で右側に移動されるモーションが入力されると、制御部１４０は移動モーションに応じてポインタ５７０を右側に移動させる。そして、図８に示すように、ポインタ５７０がチャネルダウンのアイコン５６０上に位置した状態でモーション入力部１２０を介してユーザのグラブモーションが二回入力されると、制御部１４０は現在の電子装置１００に設定されたチャネル番号から“２”下げた放送映像を受信してディスプレイする。即ち、現在の電子装置１００に設定されたチャネル番号が“１１”である場合、ポインタ５７０がチャネルダウンのアイコン５６０上に位置した状態でモーション入力部１２０を介してユーザのグラブモーションが二回入力されると、制御部１４０は現在の電子装置１００のチャネル番号が“９”の放送映像を受信してディスプレイすることができる。そして、制御部１４０は、電子装置１００のチャネルを制御するだけでなく、図９に示すように、チャネル情報５５０も変更されるようにする。

なお、ポインタ５７０がチャネルダウンのアイコン５６０上に位置した状態でモーション入力部１２０を介してユーザのグラブモーションが入力され続けると、制御部１４０は、現在の電子装置１００のチャネル番号を更に下げることができる。

上述のように、電子装置１００によって、ユーザはモーションを用いて便利かつ直観的にディスプレイ装置を制御することができるようになる。

以下では、図１０を参照して、ユーザモーションを用いた電子装置１００の制御方法についてより詳細に説明する。

まず、電子装置１００は、モーション入力部１２０を介してモーション開始命令が入力されたか否かを判断する（Ｓ１０１０）。このとき、モーション開始命令はユーザの手を左右に複数回振るモーションであってよい。

モーション開始命令が入力されると（１０１０−Ｙ）、電子装置１００は、電子装置１００のモードをモーションタスクモードに切り替える（Ｓ１０２０）。このとき、モーションタスクモードは、電子装置１００をユーザモーションによって制御するモードである。

モーションタスクモードに切り替えられると、電子装置１００はディスプレイ画面に複数のアイコン及びポインタをディスプレイする（Ｓ１０３０）。このとき、複数のアイコンは、ディスプレイ画面の左側領域又は右側領域にディスプレイされ、ポインタはディスプレイ画面の中央領域にディスプレイされてよい。なお、複数のアイコンには、チャネル設定のためのアイコン及び音量レベル設定のためのアイコンが含まれてよい。しかし、電子装置の他の機能を制御するために、ディスプレイスクリーンに別のアイコンがディスプレイされてよく、このようなアイコンは上述したように、ユーザの手を垂直に複数回振るモーションに対応してディスプレイされてよく、ユーザの別のモーションに応じてディスプレイされてよい。例えば、別のアイコンは、ユーザの別のモーションによって生成されてよい。

そして、電子装置１００は、モーション入力部１２０を介してユーザの第１モーションが入力されたか否かを判断する（Ｓ１０４０）。このとき、ユーザモーションは、ユーザの手を開いた状態で移動するモーションであってよい。

第１モーションが入力されたと判断されると（Ｓ１０４０−Ｙ）、電子装置１００は、第１モーションに応じてディスプレイ画面のポインタを移動させる（Ｓ１０５０）。

そして、電子装置１００は、モーション入力部１２０を介してユーザの第２モーションが入力された否かを判断する（Ｓ１０６０）。このとき、ユーザモーションはユーザの手を握るグラブモーションであってよい。

第２モーションが入力されたと判断されると（Ｓ１０６０−Ｙ）、電子装置１００は、ポインタの位置するアイコンに対応する機能を実行させる（Ｓ１０７０）。例えば、ポインタが音量アップのアイコンに位置し、第２モーションが入力されたと判断されると、電子装置１００は現在の電子装置１００に設定された音量レベルを上げる。なお、ポインタが特定アイコンに位置した状態で第２モーションが入力され続けると、電子装置１００はポインタの位置するアイコンの機能を引き続き実行させることができる。

そして、電子装置１００は、第２モーションが入力される場合、ユーザの手が動いたとしても、ポインタを動かさずに固定することができる。

上述のように、電子装置の制御方法によって、ユーザはユーザモーションを用いてより便利かつ直観的に電子装置１００を制御することができるようになる。

なお、以上のような多様な実施形態に係る制御方法を行うためのプログラムコードは、多様な類型の記録媒体に保存されてよい。具体的には、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）、フラッシュメモリ、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、ＥＰＲＯＭ（Ｅｒａｓａｂｌｅ Ｐｒｏｇｒａｍｍａｂｌｅ ＲＯＭ）、ＥＥＰＲＯＭ（Ｅｌｅｃｔｒｏｎｉｃａｌｌｙ Ｅｒａｓａｂｌｅ ａｎｄ Ｐｒｏｇｒａｍｍａｂｌｅ ＲＯＭ）、レジスタ、ハードディスク、リムーバブルディスク、メモリカード、ＵＳＢメモリ、ＣＤ−ＲＯＭ等のように、端末機で読み取り可能な多様な類型の記録媒体に保存されていてよい。

以上、添付図面を参照しながら本発明の好適な実施形態について詳細に説明したが、本発明は以上の実施形態に限定されない。本発明の属する技術の分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的趣旨の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本発明の技術的範囲に属するものと了解される。

１１０ 音声入力部
１２０ モーション入力部
１３０ 保存部
１３０ａ 電源制御モジュール
１３０ｂ チャネル制御モジュール
１３０ｃ 音量制御モジュール
１３０ｄ 外部入力制御モジュール
１３０ｅ 画面制御モジュール
１３０ｆ オーディオ制御モジュール
１３０ｇ インターネット制御モジュール
１３０ｈ アプリケーションモジュール
１３０ｉ 検索制御モジュール
１３０ｊ ＵＩ処理モジュール
１３０ｋ 音声認識モジュール
１３０ｌ モーション認識モジュール
１３０ｍ 音声データベース
１３０ｎ モーションデータベース
１４０ 制御部
１５０ 放送受信部
１６０ 外部端子入力部
１６１ ＨＤＭＩ端子
１６２ コンポーネント端子
１６３ ＰＣ端子
１６４ ＵＳＢ端子
１７０ リモコン信号受信部
１８０ ネットワークインターフェース部
１８２ 無線ＬＡＮ
１８３ ブルートゥース
１９０ 映像出力部
１９３ ディスプレイ部
１９６ オーディオ出力部
１９６ａ スピーカ
１９６ｂ ヘッドホン

Claims (15)

1. 電子装置の制御方法において、
   モーション開始命令（Ｔｒｉｇｇｅｒ Ｍｏｔｉｏｎ）が入力されると、モーションタスクモードを行うためのアイコン及びポインタをディスプレイするステップと、
   ユーザの第１モーションに沿って前記ポインタを移動させるステップと、
   前記ポインタが前記アイコンに位置した状態で前記ユーザの第２モーションが入力されると、前記アイコンに対応する機能を実行するステップと
   を含む制御方法。
2. 前記アイコンに位置した前記ポインタは、
   前記ユーザの第２モーションが入力される間、動かされずに固定されることを特徴とする請求項１に記載の制御方法。
3. 前記実行するステップは、
   前記ポインタが前記アイコンに位置しながら前記第２モーションの入力が保持されると、前記ポインタの位置するアイコンの機能を連続して実行することを特徴とする請求項１に記載の制御方法。
4. 前記ユーザの第１モーションは、
   ユーザの手を開いたスプレッド（Ｓｐｒｅａｄ）モーションであり、
   前記ユーザの第２モーションは、
   前記ユーザの手を握ったグラブ（Ｇｒａｂ）モーションであることを特徴とする請求項１に記載の制御方法。
5. 前記アイコンは、
   音量アップのアイコン、音量ダウンのアイコン、チャネルアップのアイコン及びチャネルダウンのアイコンのうち、少なくとも一つを含むことを特徴とする請求項１に記載の制御方法。
6. 前記アイコンは、
   ディスプレイ画面の左側領域及び右側領域の何れか一方にディスプレイされる前記音量アップのアイコン及び前記音量ダウンのアイコンと、
   前記ディスプレイ画面の左側領域及び右側領域の何れか一方にディスプレイされる前記チャネルアップのアイコン及び前記チャネルダウンのアイコンとを含むことを特徴とする請求項１に記載の制御方法。
7. 前記音量アップのアイコン及び前記音量ダウンのアイコンがディスプレイされる領域には、前記電子装置の現在設定された音量レベル情報がディスプレイされ、
   前記チャネルアップのアイコン及び前記チャネルダウンのアイコンがディスプレイされる領域には、前記電子装置の現在設定されたチャネル情報がディスプレイされることを特徴とする請求項６に記載の制御方法。
8. モーション終了モーションが入力されると、前記ディスプレイされた複数のアイコン及びポインタをディスプレイ画面から除去するステップを更に含むことを特徴とする請求項１に記載の制御方法。
9. 電子装置において、
   ユーザのモーションを入力されるモーション入力部と、
   ディスプレイ部と、
   前記モーション入力部を介してモーション開始命令（Ｔｒｉｇｇｅｒ Ｍｏｔｉｏｎ）が入力されると、モーションタスクモードを行うためのアイコン及びポインタをディスプレイし、前記モーション入力部に入力されたユーザの第１モーションに沿って前記ポインタを移動させるように前記ディスプレイ部を制御し、前記ポインタが前記アイコンに位置した状態で前記モーション入力部にユーザの第２モーションが入力されると、前記アイコンに対応する機能を実行する制御部と
   を具備する電子装置。
10. 前記制御部は、
    前記ユーザの第２モーションが入力される間、前記ポインタの位置を動かさずに固定することを特徴とする請求項９に記載の電子装置。
11. 前記制御部は、
    前記ポインタが前記アイコンに位置しながら前記第２モーションの入力が保持されると、前記ポインタの位置するアイコンの機能を連続して実行することを特徴とする請求項９に記載の電子装置。
12. 前記ユーザの第１モーションは、
    ユーザの手を開いたスプレッド（Ｓｐｒｅａｄ）モーションであり、
    前記ユーザの第２モーションは、
    前記ユーザの手を握ったグラブ（Ｇｒａｂ）モーションであることを特徴とする請求項９に記載の電子装置。
13. 前記アイコンは、
    音量アップのアイコン、音量ダウンのアイコン、チャネルアップのアイコン及びチャネルダウンのアイコンのうち、少なくとも一つを含むことを特徴とする請求項９に記載の電子装置。
14. 前記アイコンは、
    ディスプレイ画面の左側領域及び右側領域の何れか一方にディスプレイされる前記音量アップのアイコン及び前記音量ダウンのアイコンと、
    前記ディスプレイ画面の左側領域及び右側領域の何れか一方にディスプレイされる前記チャネルアップのアイコン及び前記チャネルダウンのアイコンとを含むことを特徴とする請求項９に記載の電子装置。
15. 前記音量アップのアイコン及び前記音量ダウンのアイコンがディスプレイされる領域には、前記電子装置の現在設定された音量レベル情報がディスプレイされ、
    前記チャネルアップのアイコン及び前記チャネルダウンのアイコンがディスプレイされる領域には、前記電子装置の現在設定されたチャネル情報がディスプレイされることを特徴とする請求項１４に記載の電子装置。

Images