JP2011039765A - 機能起動装置および機能起動方法 - Google Patents

Abstract

【課題】割り当てることが可能な機能数を増加させる。
【解決手段】操作画像表示部３に表示される各種のキーに対する操作者の指の位置および動きを検知する検知センサ４−１を設ける。処理部１に操作情報判別部１−１、音声情報認識部１−２および機能起動部１−４を設ける。操作情報判別部１−１は、検知センサ４−１からの指の位置および動きから、操作者が指をスライドさせて指定したキー群およびそのキー群に対する指の移動方向を操作情報として判別する。音声情報認識部１−２は操作者が発する音声を音声情報として認識する。機能起動部１−４は、操作情報判別部１−１が判別した操作情報と音声情報認識部１−２が認識した音声情報とに基づいて、その操作情報と音声情報との組み合わせに対応して定められている機能を選択して起動する。
【選択図】 図１

Description

この発明は、携帯電話機やＰＤＡ（Personal Digital Assistant）などの無線携帯端末に用いて好適な機能起動装置および機能起動方法に関するものである。

携帯電話機やＰＤＡなどの無線携帯端末には、テンキーなど各種のキーが設けられている。このキーには、ショートカットキーとして各種機能が割り当てられるが、原則的に各キーに対して１つの機能しか割り当てることができない。

これに対して、例えば特許文献１には、１つのキーのキートップ上で操作者の指が滑る方向を検出することによって、すなわち１つのキーにおける操作者の上下左右方向への指の動きを検出することによって、１つのキーで複数の文字を入力する技術について記載されている。例えば、「あ」行のキーについて、上方向に指を滑られせると「あ」が入力され、右方向に指を滑らせると「い」が入力される。この技術を利用すれば、１つのキーに複数の機能を割り当てるようにして、割り当てることが可能な機能数を増加させることが可能となる。

また、例えば特許文献２には、タッチパネル上でスライド操作が行われた際、そのスライド操作の起点で表示されていた文字を、同じ「段」のまま、スライド操作の終点のキーに対応する「行」の文字に変更させて表示する技術について記載されている。例えば、「あ」行のキーを１回押下して「い」を表示させた際に、指をスライドさせて「か」行のキーまで移動させると、文字が「い」から「き」に変化する。この技術を利用すれば、複数キーの操作（指をスライドさせて指定するキー群）に対して１つの機能を割り当てるようにして、割り当てることが可能な機能数を増加させることが可能となる。

特開２００５−４４３３９号公報 特開２００９−８６９８７号公報

しかしながら、上述した特許文献１や２に記載された技術を利用した場合でも、割り当てることが可能な機能数の限界はあり、さらなる機能数の増加が望まれるものであった。

本発明は、このような課題を解決するためになされたもので、その目的とするところは、割り当てることが可能な機能数をさらに増加させることができる機能起動装置および機能起動方法を提供することにある。

このような目的を達成するために本発明は、複数のキーと、複数のキーに対する操作者の指の位置および動きを検知する検知手段と、検知された指の位置および動きから操作情報を判別する操作情報判別手段と、操作者が発する音声を音声情報として認識する音声情報認識手段と、判別された操作情報と認識された音声情報とに基づいて、その操作情報と音声情報との組み合わせに対応して定められている機能を選択して起動する機能起動手段とを設けたものである。

また、複数のキーを備えた装置の各種機能を起動する機能起動方法において、複数のキーに対する操作者の指の位置および動きを検知する検知ステップと、検知された指の位置および動きから操作情報を判別する操作情報判別ステップと、操作者が発する音声を音声情報として認識する音声情報認識ステップと、判別された操作情報と認識された音声情報とに基づいて、その操作情報と音声情報との組み合わせに対応して定められている機能を選択して起動する機能起動ステップとを設けたものである。

本発明によれば、複数のキーに対する操作者の指の位置および動きから操作情報が判別され、操作者が発する音声が音声情報として認識され、この判別された操作情報と認識された音声情報とに基づいて、その操作情報と音声情報との組み合わせに対応して定められている機能が選択されて起動される。これにより、操作情報と音声情報とを組み合わせての機能の割り当てが可能となり、操作情報にだけ機能を割り当てる方法と比較し、割り当てることが可能な機能数をさらに増加させることができるようになる。

本発明に係る機能起動装置を用いた無線携帯端末の一実施例の要部を示すブロック図である。 この無線携帯端末における機能起動時の操作例を説明する図である。

以下、本発明の実施例を図面に基づいて詳細に説明する。図１はこの発明に係る機能起動装置を用いた無線携帯端末の一実施例の要部を示すブロック図である。

この無線携帯端末１００は、処理部（ＣＰＵ）１と、文字情報やカメラ画像など各種の情報を表示する画像表示部２と、テンキーなど各種のキーを描画してこれらの配列（キー配置）などを表示する操作画像表示部３と、操作画像表示部３に表示される各種のキーに対する操作者の指の位置および動きを検知する検知センサ部４と、記憶部５と、無線部６と、マイク７と、スピーカ８と、電源部９とを備えている。なお、無線携帯端末１００は、その他一般的端末に装備されている機能を有しているが、それらの機能を示すブロックについては省略している。

画像表示部２は、液晶ディスプレイ（ＬＣＤ）２−１を有し、ＬＣＤ２−１の前面にタッチパネル２−２を備えている。また、操作画像表示部３も画像表示部２と同様、液晶ディスプレイ（ＬＣＤ）３−１を有し、ＬＣＤ３−１の前面にタッチパネル３−２を備えている。検知センサ部４は、操作画像表示部３に付設して設けられた検知センサ４−１を有し、検知センサ４−１が操作画像表示部３に表示される各種のキーに対する操作者の指の位置および動きを検知する。

処理部１は、検知センサ４−１が検知する操作者の指の位置および動きから操作情報を判別する操作情報判別部１−１と、マイク７から入力される操作者が発する音声を音声情報として認識する音声情報認識部１−２と、画像表示部２および操作画像表示部３における表示を制御する表示制御部１−３と、操作情報判別部１−１で判別される操作情報と音声情報認識部１−２で認識される音声情報とに基づいて、その操作情報と音声情報との組み合わせに対応して定められている機能を選択して起動する機能起動部１−４とを備えている。なお、本実施例において、操作情報判別部１−１は、操作者が指をスライドさせて指定したキー群およびそのキー群に対する指の移動方向を操作情報として判別する。

処理部１は、操作情報判別部１−１，音声情報認識部１−２，表示制御部１−３および機能起動部１−４での処理を記憶部５に格納されているプログラムＰＧ１に従う処理動作として実行する。また、記憶部５には、そのデータベース部ＤＢ１に、機能起動部１−４で起動する機能の選択に際して参照される操作情報と音声情報との組み合わせに対応する機能が起動機能情報として格納されている。本実施例では、操作情報に対して「カメラ撮影」，「動画撮影」などのメイン機能が起動機能情報として定められ、音声情報に対して「夜景モード」，「人物モード」などの補助機能が起動機能情報として定められている。

〔動作〕
以下、プログラムＰＧ１に従う処理部１における本実施例特有の処理動作について説明する。

処理部１において、表示制御部１−３は、テンキーなど各種のキーのキー配置などを操作画像表示部３に表示する（図２（ａ）参照）。この場合、表示制御部１−３は、操作画像表示部３に表示される所定のキー群に対し、そのキー群に割り当てられている機能を表示する。

例えば、この例では、「１」，「２」，「３」の横方向への一並びのキー群に対して「カメラ撮影」を表示し、「４」，「５」，「６」の横方向への一並びのキー群に対して「動画撮影」を表示する。また、「１」，「４」，「７」，「＊」の縦方向への一並びのキー群に対して「ブラウザ起動」を表示する。なお、「カメラ撮影」，「動画撮影」，「ブラウザ起動」はメイン機能の１つである。

ここで、操作者は、カメラの撮影を行いたい場合、「１」キーに指を接触させ、その接触させた指を「１」キー、「２」キー、「３」キーの順にスライドさせる。この操作者の指の位置および動きは検知センサ４−１を介して操作情報判別部１−１へ送られる。

操作情報判別部１−１は、検知センサ４−１からの指の位置および動きから、操作者が指をスライドさせて指定したキー群が「１」，「２」，「３」であることを認識し、またそのキー群に対する指の移動方向が「１」キーから「３」キーの方向であることを認識し、この指をスライドさせて指定したキー群およびこのキー群に対する指の移動方向を操作情報として判別する。

また、操作者は、「１」キーから「３」キーへの指のスライドと同時に、所望の撮影モードを音声で発する。例えば、夜景モードで撮影したければ、「夜景」と音声で発する。この音声はマイク７から音声認識部１−２へ送られる。音声認識部１−２はマイク７から送られてくる音声を音声情報として認識する。

操作情報判別部１−１で判別された操作情報および音声認識部１−２で認識された音声情報は機能起動部１−４へ送られる。機能起動部１−４は、操作情報判別部１−１で判別された操作情報と音声情報認識部１−２で認識された音声情報とに基づいて、記憶部５内のデータベース部ＤＢ１に定められている起動機能情報を参照とし、その操作情報と音声情報との組み合わせに対応して定められている機能を選択して起動する。

ここで、操作情報判別部１−１で判別された操作情報がキー群「１」，「２」，「３」、移動方向「１」→「３」であり、音声情報認識部１−２で認識される音声情報が「夜景」であったとすると、機能起動部１−４は、操作情報のキー群「１」，「２」，「３」（移動方向「１」→「３」）に対して定められているメイン機能を「カメラ撮影」として取得し、音声情報の「夜景」に対して定められている補助機能を「夜景モード」として取得し、この取得したメイン機能と補助機能とを同時に立ち上げる。すなわち、「夜景モード」で「カメラ撮影」を起動する（図２（ｂ）参照）。

なお、この例では、音声情報認識部１−２で認識される音声情報を「夜景」としたが、音声情報認識部１−２で認識される音声情報が「人物」であれば、「人物モード」で「カメラ撮影」が起動される。また、操作情報判別部１−１で判別された操作情報がキー群「４」，「５」，「６」（移動方向「４」→「６」）であり、音声情報認識部１−２で認識される音声情報が「夜景」であれば、「夜景モード」で「動画撮影」が起動される。なお、音声情報認識部１−２で音声情報が認識されない場合には、操作情報判別部１−１で判別された操作情報に基づいて、その操作情報に対応して定められている機能のみが起動される。

このように、本実施例では、スライド操作に対して音声連動を行い、そのスライド操作に割り当てられているメイン機能の補助機能を同時に起動させることで、同一のスライド方向に対して複数の機能を割り当てることができ、スライド操作にだけ機能を割り当てる方法と比較し、割り当てることが可能な機能数をさらに増加させることができるようになる。また、同一方向のスライド操作に対して、そのスライド操作に割り当てられているメイン機能の補助機能を含めて起動させることが可能となり、操作者の手間を軽減することができる。

なお、この実施例において、操作者が発する音声については、事前に登録されているものとするが、操作者が任意に登録することも可能である。
また、この実施例において、キー群に対する機能の割り当ては固定であるが、操作者側で事前に自由に設定することも可能である。

また、上述した説明では、例えばキー群「１」，「２」，「３」に対して「１」キーから「３」キーへのスライドに対して「カメラ撮影」を割り当てているが、「３」キーから「１」キーへのスライドに対して同じ機能を割り当てるようにしたり、別の機能を割り当てるようにしたりしてもよい。別の機能を割り当てる場合には、そのスライド方向を含めて、割り当てる機能を表示するようにすればよい。

また、図２（ｂ）は、「夜景モード」で「カメラ撮影」を起動させた状態を示したが、この状態で例えば「１」，「４」，「７」，「＊」キーについて、「１」キーから「＊」キーの方向へ指をスライドさせれば、「夜景モード」で「カメラ撮影」を起動させた状態でブラウザを起動させることが可能である（図２（ｃ）参照）。

また、上述した実施例では、操作者が指をスライドさせて指定したキー群およびそのキー群に対する指の移動方向を操作情報として判別するようにしたが、操作者が指を置いて指定する１つのキーおよびそのキーに対する指の移動方向を操作情報として判別し、音声情報と組み合わせるようにしてもよい。

本発明の機能起動装置および機能起動方法は、携帯電話機やＰＤＡなど複数のキーを備えた端末における機能を起動する装置および方法として、各種の分野で利用することが可能である。

１…処理部（ＣＰＵ）、２…画像表示部、３…操作画像表示部、４…検知センサ部、５…記憶部、６…無線部、７…マイク、８…スピーカ、９…電源、１−１…操作情報判別部、１−２…音声情報認識部、１−３…表示制御部、１−４…機能起動部、２−１，２−２…液晶ディスプレイ（ＬＣＤ）、３−１，３−２…タッチパネル、４−１…検知センサ、ＰＧ１…プログラム、ＤＢ１…データベース部、１００…無線携帯端末。

Claims (6)

1. 複数のキーと、
   前記複数のキーに対する操作者の指の位置および動きを検知する検知手段と、
   前記検知された指の位置および動きから操作情報を判別する操作情報判別手段と、
   前記操作者が発する音声を音声情報として認識する音声情報認識手段と、
   前記判別された操作情報と前記認識された音声情報とに基づいて、その操作情報と音声情報との組み合わせに対応して定められている機能を選択して起動する機能起動手段と
   を備えることを特徴とする機能起動装置。
2. 請求項１に記載された機能起動装置において、
   前記操作情報判別手段は、
   前記操作者が指をスライドさせて指定したキー群およびそのキー群に対する指の移動方向を前記操作情報として判別する
   ことを特徴とする機能起動装置。
3. 請求項２に記載された機能起動装置において、
   前記キー群に対しそのキー群に割り当てられている機能を表示する手段
   を備えることを特徴とする機能起動装置。
4. 複数のキーを備えた装置の各種機能を起動する機能起動方法において、
   前記複数のキーに対する操作者の指の位置および動きを検知する検知ステップと、
   前記検知された指の位置および動きから操作情報を判別する操作情報判別ステップと、
   前記操作者が発する音声を音声情報として認識する音声情報認識ステップと、
   前記判別された操作情報と前記認識された音声情報とに基づいて、その操作情報と音声情報との組み合わせに対応して定められている機能を選択して起動する機能起動ステップと
   を備えることを特徴とする機能起動方法。
5. 請求項４に記載された機能起動方法において、
   前記操作情報判別ステップは、
   前記操作者が指をスライドさせて指定したキー群およびそのキー群に対する指の移動方向を前記操作情報として判別する
   ことを特徴とする機能起動方法。
6. 請求項５に記載された機能起動方法において、
   前記キー群に対しそのキー群に割り当てられている機能を表示するステップ
   を備えることを特徴とする機能起動方法。

Images