JP7630021B2 - 触覚提示装置 - Google Patents

Description

本開示は、触覚提示装置に関する。

近年、スマートフォン及びカーナビゲーション等、タッチパネルを搭載する電子機器が普及している。ユーザが、タッチパネルを介して表示されるユーザインタフェースに含まれるアイコン等のオブジェクトを操作した場合、電子機器は、当該オブジェクトに対応する機能を作動させる。

タッチパネルの表面は一様に硬いため、ユーザの指がタッチパネルのどの部分に触れても同じ触覚を与える。そのため、オブジェクトの存在を知覚させる、又は、オブジェクトに対応する機能が作動した場合そのための操作を受け付けたことを知覚させる、フィードバックを、ユーザに提供する技術が知られている。当該技術は、タッチパネルの面内方向においてタッチパネルを振動させることで、タッチしている指に触覚を提示する。

米国特許出願公開第２０１２／０２６２３９４号 特開２０１３－９７４３８号公報

発明者らは、振動面の面内振動の向きとタッチしている指の軸との関係に応じてユーザが知覚する刺激の強さが変化することを、発見した。具体的には、指の長軸（指が延びる方向に沿った軸）方向と垂直な方向における振動は、平行な方向における同一の振動よりも弱い刺激しかユーザに知覚させることができないことが分かった。指に与えられる刺激が弱まると、ユーザが所定の触覚（例えばクリック感）を知覚しづらくなる。

本開示の一態様の触覚提示装置は、向きが固定されたタッチ面と、前記タッチ面を面内の一軸に沿って振動させるアクチュエータと、前記アクチュエータの前記一軸に沿った振動を制御して、前記タッチ面に接触している指に対する触覚を提示する、制御装置と、を含む。前記制御装置は、前記指に対する触覚を提示するための振動の開始方向が、鉛直方向を前記タッチ面に射影した方向又はその反対方向に対して、マイナス４３°からプラス４３°の範囲内にあるように、前記アクチュエータを制御する。

本開示の他の一態様の触覚提示装置は、タッチ面と、前記タッチ面を面内の一軸に沿って振動させるアクチュエータと、前記アクチュエータの前記一軸に沿った振動を制御して、前記タッチ面に接触している指に対する触覚を提示する、制御装置と、を含む。前記制御装置は、前記タッチ面に接触している前記指を前記タッチ面に射影した向きを推定し、前記射影した向きに応じて前記振動の強度を変化させるように前記アクチュエータを制御する。

本開示のさらに他の一態様の触覚提示装置は、タッチ面と、前記タッチ面に対して相対的位置が固定された表示装置と、前記タッチ面を面内の一軸に沿って振動させるアクチュエータと、前記アクチュエータの前記一軸に沿った振動を制御して、前記タッチ面に接触している指に対する触覚を提示する、制御装置と、を含む。前記制御装置は、前記指に対する触覚を提示するための振動の開始方向が、表示装置に表示された画像の上下方向に対して、マイナス４３°からプラス４３°の範囲内にあるように、前記アクチュエータを制御する。

本開示のさらに他の一態様の触覚提示装置は、タッチ面と、前記タッチ面を面内の一軸に沿って振動させるアクチュエータと、前記タッチ面の振動の中立の位置を規定するバネと、前記アクチュエータの前記一軸に沿った振動を制御して、前記タッチ面に接触している指に対する触覚を提示する、制御装置と、を含む。前記アクチュエータはソレノイドであり、前記制御装置は前記ソレノイドに第１及び第２の駆動パルスを印加し、前記第１及び第２の駆動パルスの電圧振幅は等しく、前記第２の駆動パルスの幅は前記第１の駆動パルスの幅より狭い。

本開示のさらに他の一態様の触覚提示装置は、向きが固定されたタッチ面と、前記タッチ面を面内の一軸に沿って振動させるアクチュエータと、前記アクチュエータの前記一軸に沿った振動を制御して、前記タッチ面に接触している指に対する触覚を提示する、制御装置と、を含み、前記制御装置は、前記指に対する触覚を提示するための振動の開始方向が、前記指の先端から根元への方向をタッチ面に射影した方向又はその反対方向に対して、マイナス４３°からプラス４３°の範囲内にあるように、前記アクチュエータを制御する、触覚提示装置。

本開示の一態様の触覚提示装置は、振動面にタッチしているユーザの指に対して適切な触覚を提示することができる。

実施形態１の電子機器の構成の一例を示す図である。 実施形態１において、ユーザの指がタッチパネルのタッチ面において、オブジェクト画像に対応する領域をタッチする様子を示す。 実施形態１において、電子機器が実行する処理例を説明するフローチャートである。 実施形態１において、指の長軸と振動方向（振動軸）とが略平行である状態を示す。 実施形態１において、指の長軸と振動方向（振動軸）とが略垂直である状態を示す。 実施形態１において、測定においてリニアソレノイドアクチュエータに加えられた駆動電圧及び振動子の振動を模式的に示す。 測定で使用されたアクチュエータの振動の方向を示す。 実施形態１において、測定における主観評価結果を示す。 実施形態１において、図７に示す評価結果の分散分析表を示す。 実施形態１において、四つの振動方向それぞれの心理尺度値及びヤードスティックＹ_0.01の関係を示す。 実施形態１において、測定結果のグラフを示し、振動が「一番強い」と感じられた振動方向の度数分布及び振動が「一番弱い」と感じられた振動方向の度数分布を示す。 実施形態１において、測定結果のグラフを示し、振動が「一番強い」と感じられた振動方向の度数分布及び度数分布にフィッティングした正規分布曲線を示す。 実施形態２の電子機器の構成の一例を示す図である。 実施形態３の制御装置の論理構成例を模式的に示す。 実施形態３において、指の長軸と面内振動方向との間の角度に応じて触覚制御部により制御される、ラテラルアクチュエータの加速度の例を示す。 実施形態３において、指の長軸と面内振動方向との間の角度に応じて触覚制御部により制御される、ラテラルアクチュエータの加速度の例を示す。 実施形態３において、指の長軸と面内振動方向との間の角度に応じて触覚制御部により制御される、ラテラルアクチュエータの加速度の例を示す。 実施形態３において、実施形態１で説明した測定結果の他のグラフを示す。 実施形態３において、タッチ面に接触している指及びその接触領域を示す。 実施形態３において、指の接触領域及び接触領域にフィッティングされた楕円の長径に平行な軸を示す。 実施形態３において、タッチ面と鉛直方向（重力の方向）との関係を示す。 実施形態３において、電子機器の内蔵カメラにより撮像されたユーザの顔画像と、タッチ面との間の関係を模式的に示す。

以下、添付図面を参照して本開示の実施形態を説明する。本実施形態は本開示を実現するための一例に過ぎず、技術的範囲を限定するものではないことに注意すべきである。
＜実施形態１＞
図１は、実施形態１の電子機器１０の構成の一例を示す図である。電子機器１０（触覚提示装置）は、触覚提示パネル１００及び制御装置１１０を備える。触覚提示パネル１００及び制御装置１１０は接続線を介して接続されている。

触覚提示パネル１００は、ユーザに対して、少なくとも一つのオブジェクト（画像）を含むＵＩ（ユーザインタフェース）を提示し、ＵＩを介した操作を受け付ける。また、触覚提示パネル１００は、ＵＩに含まれるオブジェクトの操作を知覚させるための触覚をユーザに提供する。

触覚提示パネル１００は、タッチパネル１０１、液晶ディスプレイ１０３、キャリア１０４、ベース１０５、ラテラルアクチュエータ１０６、及び板バネ１０７を含んで構成されている。触覚提示パネル１００の構成要素は、例えば、任意の筐体内に格納されてよい。タッチパネル１０１及び液晶ディスプレイ１０３は、ＵＩを表示する表示画面を実現する構成であり、キャリア１０４、ラテラルアクチュエータ１０６、及び板バネ１０７は機械振動を実現する構成である。

ベース１０５は、触覚提示パネル１００の土台となる部材である。ベース１０５には、ラテラルアクチュエータ１０６及び板バネ１０７が設置される。また、ベース１０５上には、ラテラルアクチュエータ１０６及び板バネ１０７による動作によって振動するキャリア１０４が設けられる。キャリア１０４は、ラテラルアクチュエータ１０６によって、ベース１０５に対して特定の一軸に沿って振動する（ｌａｔｅｒａｌ ｍｏｔｉｏｎとも呼ぶ）。ラテラルアクチュエータ１０６及び板バネ１０７によって実現されるキャリア１０４の振動は機械振動である。以下の説明において、触覚提示のための振動は、一回以上の往復運動である。

ラテラルアクチュエータ１０６は、触覚提示パネル１００のタッチ面に平行な一軸に沿った動きを発生させる装置である。タッチ面は、指が接触するタッチパネル１０１の主面であって、指に触覚を提示する（フィードバックする）触覚提示面である。板バネ１０７は、ラテラルアクチュエータ１０６の動きに合わせて振動を発生させるための機構として用いられる。板バネ１０７は、タッチ面の振動の中立の位置を規定する。キャリア１０４は、表示画面を構成する部材を積層する土台となる部材である。キャリア１０４上には、液晶ディスプレイ１０３及びタッチパネル１０１が設けられる。図１は、触覚提示パネル１００の構成の一例を示し、触覚提示パネル１００は他の構成を有してもよい。例えばキャリア１０４は省略されてよく、液晶ディスプレイ１０３がラテラルアクチュエータ１０６や板バネ１０７と直接に接続されてもよい。

液晶ディスプレイ１０３及びタッチパネル１０１は、ベース１０５と略平行となるように設置される。液晶ディスプレイ１０３の前側にタッチパネル１０１が配置されている。以下において、触覚提示パネル１００を使用するユーザが位置する側を、前側と呼ぶ。前側の反対側を、後側と呼ぶ。

タッチパネル１０１は、その前面であるタッチ面にタッチしたユーザの指の位置を検知する。タッチパネル１０１は任意タイプのタッチパネルを使用することができ、例えば、抵抗膜タイプ、表面静電容量タイプ又は投影静電容量タイプのタッチパネルを使用することができる。また、タッチパネルの機能と静電気により触覚を提示する機能とを併せ持つパネルが使用されてもよい。

液晶ディスプレイ１０３は、オブジェクトを含むＵＩ画像を表示する。液晶ディスプレイと異なる任意のタイプのディスプレイ、例えば、ＯＬＥＤ（Ｏｒｇａｎｉｃ Ｌｉｇｈｔ Ｅｍｉｔｔｉｎｇ Ｄｉｏｄｅ）ディスプレイやマイクロＬＥＤディスプレイを使用することができる。

制御装置１１０は、プログラムを実行する１以上の演算装置と１以上の記憶装置を含むことができる。演算装置は、例えば、プロセッサ、ＧＰＵ（Ｇｒａｐｈｉｃｓ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）、及びＦＰＧＡ（Ｆｉｅｌｄ Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ）等を含むことができる。記憶装置は、制御装置１１０が使用するプログラム及びデータを格納する。記憶装置は、揮発性又は不揮発性メモリを含むことができる。記憶装置は、プログラムが使用するワークエリアを含む。

制御装置１１０は、触覚提示パネル１００を制御するための機能部（モジュール）として動作する。具体的には、制御装置１１０は、表示制御部１１１及び触覚制御部として動作する。表示制御部１１１は、表示画面へのＵＩの表示を制御する。具体的には、表示制御部１１１は、ＵＩの設定情報を記憶装置から取得し、当該情報に基づいて、少なくとも一つのオブジェクトを含むＵＩが表示されるように液晶ディスプレイ１０３を制御する。

タッチ検知部１１５は、タッチパネル１０１からの出力に基づいてタッチパネル１０１へのユーザの指の接触を検知し、また、タッチパネル１０１上のユーザの指のタッチ位置を特定する。タッチ検知部１１５は、例えば、特定のオブジェクト画像と対応する位置におけるタッチを検知した場合、機械振動の発生要求を触覚制御部１１３に出力する。触覚制御部１１３は、タッチ検知部１１５に応答して、機械振動を発生させるためにラテラルアクチュエータ１０６を制御する。

ラテラルアクチュエータ１０６に印加される駆動パルスは、第一パルスと第二パルスからなり、第一パルスと第二パルスは同一の電圧振幅を持つ。ラテラルアクチュエータは、第一パルスの印加によってタッチ面を初期状態から一方向にシフトさせた後、第一パルスの印加終了によって、逆方向へのシフトを開始し往復運動を始める。

続いて、所定の無印加時間の後に第二パルス印加することによって、タッチ面が初期状態に戻ったところでシフトを停止させる。ユーザに対してクリック感など歯切れのよい触覚を提示するために、ラテラルアクチュエータが初期状態から一往復のみのシフトで停止するように、無印加時間と第二パルス幅を設定してもよい。また、ラテラルアクチュエータが初期状態から複数回往復したところで停止するように、前述の一往復のみの場合より無印加時間を長く設定してもよい。こうすれば、振動の継続時間が長い触覚を提示することができる。

触覚提示パネル１００は、さらに、力センサを含んでもよい。力センサは、触覚提示パネル１００（タッチパネル１０１）の主面に垂直な方向に対してユーザに加えられた力を検知する。触覚制御部１１３は、例えば、タッチパネル１０１上で特定領域がタッチされ、かつ、力センサにより検知された値が閾値を超える場合に、ラテラルアクチュエータ１０６を振動させる。なお、制御装置１１０が有する各機能部については、複数の機能部を一つの機能部にまとめてもよいし、一つの機能部を機能毎に複数の機能部に分けてもよい。

次に、電子機器１０が実行する処理例について説明する。図２は、ユーザの指２０５がタッチパネル１０１のタッチ面１５０において、オブジェクト画像２０１に対応する領域をタッチする様子を示す。電子機器１０は、ユーザの指２０５（他の指示体でも同様）が特定のオブジェクト画像２０１の領域にタッチすると、振動方向（互いに反対の２方向）１６１において、タッチパネル１０１（触覚提示パネル１００）を振動させる。これにより、ユーザの指２０５に対して、例えば、クリック感を与えることができる。

図３は、電子機器１０が実行する処理例を説明するフローチャートである。表示制御部１１１は、操作状態等に基づいてＵＩ画像を選択し、液晶ディスプレイ１０３を制御して新たなＵＩ画像を表示させる（ステップＳ１０１）。表示制御部１１１は、タッチパネル１０１の面内振動によって触覚を与えるオブジェクト画像の領域の位置情報を、記憶装置に格納する。

タッチ検知部１１５は、検知処理を実行する（ステップＳ１０２）。検知処理は、タッチパネル１０１へのユーザの指のタッチを検知し、タッチパネル１０１におけるタッチ領域の位置を特定する。具体的には、タッチ検知部１１５は、タッチパネル１０１から、ユーザの指の接触を示す信号を検知する。例えば、タッチ検知部１１５は、タッチパネル１０１の静電容量の変化を信号として検知する。

タッチ検知部１１５は、タッチパネル１０１上のユーザの指の接触位置を示す座標を算出する。例えば、静電容量の変化が検知された電極の位置に基づいて座標が算出される。タッチ検知部１１５は、記憶装置に算出された座標を格納する。タッチ検知部１１５は、触覚制御部１１３に、タッチパネル１０１がタッチされたことを通知する。

触覚制御部１１３は、触覚提示のオブジェクトがタッチされている場合（Ｓ１０３：ＹＥＳ）、触覚提示処理を実行する（Ｓ１０４）。具体的には、タッチ検知部１１５からの通知を受けると、触覚制御部１１３は、記憶装置から触覚を提示するオブジェクト画像の位置情報と、タッチ領域の位置情報とを取得し、これらを比較する。タッチ領域が、オブジェクト画像の領域と少なくとも部分的に重なっている場合、触覚制御部１１３は、触覚提示パネル１００（タッチパネル１０１）を面内の一軸に沿って振動させ、ユーザに機械振動によるフィードバックを提供する。

具体的には、触覚制御部１１３は、ラテラルアクチュエータ１０６を制御することによって機械振動を発生させる。これによって、キャリア１０４が、特定の一軸に沿って（特定の方向に）振動する。キャリア１０４の上に、液晶ディスプレイ１０３及びタッチパネル１０１が設置されており、キャリア１０４と共に、液晶ディスプレイ１０３及びタッチパネル１０１が振動する。

タッチ検知部１１５は、表示制御部１１１に、タッチパネル１０１がタッチされたことを通知する。表示制御部１１１は、記憶装置からタッチ領域の位置情報を取得し、タッチ領域の位置と、現在表示されているＵＩ画像との関係を特定する。ＵＩ画像切り替えのオブジェクトが選択されている場合（Ｓ１０５：ＹＥＳ）、表示制御部１１１は、新たなＵＩ画像に切り替える（Ｓ１０１）。

次に、触覚制御部１１３及びラテラルアクチュエータ１０６による、触覚の提示についついて説明する。触覚制御部１１３は、タッチパネル１０１（触覚提示パネル１００）を、タッチ面（主面）に沿った一軸に沿って振動させることで、タッチしている指に触覚（例えばクリック感）を与える。発明者らの検討から、タッチ面の面内振動方向と指の長軸（延びる指に沿った軸）との間の、タッチ面の法線方向において見た角度に応じて、ユーザが感じる触覚強度が変化することがわかった。なお、以下の説明において、指の軸と面内振動方向（面内振動軸）との角度についての説明は、タッチ面の法線方向において見た角度、つまり、タッチ面に射影された指の軸と振動方向（振動軸）との間の角度を意味する。

例えば、図４Ａは、指２０５の長軸と振動方向１６１Ａ（振動軸）とが略平行である状態、つまり、指２０５が延びる方向に沿った長軸と振動方向１６１Ａとの角度が略０°又は１８０°である状態を示す。図４Ｂは、指２０５の長軸と振動方向（振動軸）１６１Ｂとが略垂直である状態、つまり、指２０５が延びる方向に沿った長軸と振動方向１６１Ｂとの角度が略９０°又は２７０°である状態を示す。発明者らの研究によれば、同一の振動に対して、ユーザは、図４Ａが示す状態において、図４Ｂが示す状態よりも強い触覚を感じることが分かった。

発明者らは、触覚提示パネルの振動軸と指の長軸との間の角度に応じてユーザが感じる触覚強度についての測定を行った。以下において、その測定結果を説明する。測定に使用した装置は、ラテラルアクチュエータとして、リニアソレノイドアクチュエータを使用した。図５は、測定においてリニアソレノイドアクチュエータに加えられた駆動電圧及びタッチ面の水平方向の変位を模式的に示す。振動子は、一回の触覚提示のために、一回の往復運動を行った。

測定は、指がタッチ面にタッチしている状態で、図５に示すような駆動電圧をリニアソレノイドアクチュエータに加えた。リニアソレノイドアクチュエータは、一回の往復運動によって触覚（クリック感）を評価者に与えた。具体的には、リニアソレノイドアクチュエータは、駆動電圧に従って、タッチ面を初期状態から一方向にシフトさせた後、初期状態に戻すように逆方向にシフトさせる。

さらに具体的には、測定に用いた駆動電圧は、電圧を１３Ｖとした二つの矩形波パルスであり、まず１０．０ｍｓ幅の第一パルスを印加した後、４．１ｍｓの無印加時間をおいて、第一パルスよりも短い、２．１ｍｓ幅の第二パルスを印加した。リニアソレノイドアクチュエータは、第一パルスの印加によって、タッチ面を初期状態から一方向にシフトさせた後、第一パルスの印加終了によって、逆方向へのシフトを開始する。続く第二パルスの印加によって、タッチ面が初期状態に戻ったところでシフトを停止させる。

つまり、一回の触覚提示動作において、タッチ面は、初期状態から一方向にシフトした後、逆方向にシフトして初期状態に戻る。測定は、この一回の触覚提示動作によってユーザが感じた強度を評価した。なお、以下に説明する測定結果は、同様の振動を与えることができる任意タイプのラテラルアクチュエータによっても得ることができる。

図６は、測定で使用されたアクチュエータの振動の方向を示す。測定は、図６に示すように、指２０５の先端から根元に向かう方向を基準として、振動（往復運動）を開始する方向が、時計回りに、０°、９０°、１８０°及び２７０°の振動を与えた。複数の評価者が、それぞれ、各角度の振動における強度を主観で評価した。評価は、シェッフェの一対比較法を使用し、先の角度における振動の強度に対する、後の角度における振動の強度を評価した。

図７は、測定による主観評価結果を示す。評点は、先の角度における振動よりも後の角度における振動が強い場合に２、後の振動がわずかに強い場合に１、差がない場合０、後の振動がわずかに弱い場合に－１、後の振動が弱い場合に－２とした。心理尺度値は、（平均評価値（先）－平均評価値（後））／２で与えられる。図８は、図７に示す評価結果の分散分析表を示す。本実験結果から、「残差Ｅ」に対して、「対象の主効果α」は、危険率１％で有意差があることが分かる。

図９は、四つの振動方向それぞれの心理尺度値及びヤードスティックＹ_0.01の関係を示す。ヤードスティックＹ_0.01は、下記数式で表わされる。下記式において、ｑはスチューデント化された範囲、Ｖ_Eは残差Ｅの不偏分散、ｍは評価対象数（＝４）、ｒは評価者数である。本実験の評価者の数である。

上記の測定による評価結果から、指の長軸方向の変位の振動（０°及び１８０°）と、指の短軸方向（長軸に垂直な方向）の変位の振動（９０°及び２７０°）との間に、危険率１％で有意差が認められた。つまり、指の長軸方向の変位の振動が、指の短軸方向の変位の振動よりも強いと知覚されることが分かった。一方、０°での振動と１８０°での振動との間において、知覚強度の有意差は認められなかった。

さらに、発明者らは、ユーザが振動をより強く感じる振動方向について検討を行った。評価者は、振動が「一番強い」と感じられる振動方向、及び、振動が「一番弱い」と感じられる振動方向を主観評価により決定した。測定は、各評価者が決定した最も強い振動方向及び最も弱い振動方向と、タッチされた指の長軸方向との間の関係を測定した。

図１０は、測定結果のグラフを示し、振動が「一番強い」と感じられた振動方向の度数分布及び振動が「一番弱い」と感じられた振動方向の度数分布を示す。グラフは、さらにそれぞれの度数分布にフィッティングした正規分布曲線を示す。図１０のグラフにおいて、確率密度が逆転する（正規分布曲線が交差する）振動方向の角度は、４３°である。指の長軸に沿って先端から根元への向かう方向に対して、往復運動（振動）の開始方向がなす角度が、０°±４３°の範囲において、振動刺激が強いと感じられる場合が相対的に多いことが分かった。また、上述のように、０°での振動と１８０°での振動との間において、知覚強度の有意差は認められないことから、１８０°±４３°の範囲において、同様であると言える。

図１１は、測定結果のグラフを示し、振動が「一番強い」と感じられた振動方向の度数分布及び度数分布にフィッティングした正規分布曲線を示す。正規分布曲線が示す分布の中央５０％の範囲は、０°±１９°の範囲である。指の長軸に沿って先端から根元への向かう方向に対して、往復運動の開始方向がなす角度が、０°±１９°の範囲において、振動刺激が強いと感じられる場合がより多いことが分かった。上述のように、０°での振動と１８０°での振動との間において、知覚強度の有意差は認められないことから、１８０°±１９°の範囲において、同様であると言える。

上記測定結果から、触覚フィードバックのための往復運動（振動）の開始方向と、指の長軸に沿った一方向との間の角度が所定の角度範囲内にある場合、好適な触覚フィードバックを指に与えることができることが分かる。タッチパネルを含む多くの電子機器が使用されている中で、タッチ面の向きが固定されて設置されており、ユーザがタッチ面に正対して使用することが前提となっている電子機器が存在する。ＡＴＭ（Ａｕｔｏｍａｔｉｃ Ｔｅｌｌｅｒ Ｍａｃｈｉｎｅ）や駅に設置された切符券売機等は、このような電子機器の例である。

ユーザが正対して使用することを前提とする電子機器においては、ユーザは一般的に人差し指か中指でタッチ面にタッチする。また、タッチ面に接触している指の先端は、一般的に、タッチ面の上辺を向いて、つまり、指の先端から根元への方向をタッチ面に射影した方向は、鉛直方向をタッチ面に射影した方向に略一致する。

従って、ＡＴＭや発券機のように、固定されており、正対するユーザの指によるタッチが想定されているタッチ面（触覚提示面）を有する触覚提示装置の例において、触覚提示のための振動の開始方向は、鉛直方向をタッチ面に射影した方向（０°）又はその反対方向（１８０°）に対して、マイナス４３°からプラス４３°の範囲内にある。つまり、振動軸は、鉛直軸をタッチ面に射影した軸からマイナス４３°からプラス４３°の範囲内にある。

より好ましい例において、触覚提示のための振動の開始方向は、鉛直方向をタッチ面に射影した方向（０°）又はその反対方向（１８０°）に対して、マイナス１９°からプラス１９°の範囲にある。つまり、振動軸は、鉛直軸をタッチ面に射影した軸からマイナス１９°からプラス１９°の範囲内にある。このような振動により、上述のように、より多くのユーザに対して適切な触覚を提示することができる。

上述のように、触覚提示装置である電子機器１０は、向きが固定されたタッチ面１５０と、タッチ面１５０を面内の一軸に沿って振動させるラテラルアクチュエータ１０６と、ラテラルアクチュエータ１０６の一軸に沿った振動を制御して、タッチ面に接触している指に対する触覚を提示する、制御装置１１０と、を含むことができる。

制御装置１１０は、指に対する触覚を提示するための振動の開始方向が、鉛直方向をタッチ面に射影した方向又はその反対方向に対して、マイナス４３°からプラス４３°の範囲内にあるように、ラテラルアクチュエータを制御してもよい。また、制御装置１１０は、指に対する触覚を提示するための振動の開始方向が、鉛直方向をタッチ面に射影した方向又はその反対方向に対して、マイナス１９°からプラス１９°の範囲内にあるように、ラテラルアクチュエータを制御してもよい。

上記構成は、携帯端末のようにタッチ面の向きが固定されていないが、表示画面及びその表示画像の向きが、タッチ面に対して固定されている装置に適用することができる。表示画像の表示画面に対する向きは、例えば、常に又は初期設定において、固定され得る。鉛直方向をタッチ面に射影した方向及びその反対方向は、それぞれ、表示画像（表示画面）の上から下に向かう方向及びその反対方向と、言い換えることができる。装置の一般的な使用において、表示画像の上から下へ向かう方向は、鉛直方向を表示画面に射影した方向と略平行である。したがって、本構成は、ユーザに適切な触覚を提示できる。

＜実施形態２＞
図１２は、実施形態２の電子機器１０の構成の一例を示す図である。実施形態１と同じ構成に関しては説明を省略する。触覚提示パネル１００は、タッチパネル１０１、液晶ディスプレイ１０３、キャリア１０４、ベース１０５、ラテラルアクチュエータ１０６、及び板バネ１０７を含んで構成されている。

キャリア１０４上には、液晶ディスプレイ１０３及びタッチパネル１０１が設けられる。図１２は、触覚提示パネル１００の構成の一例を示し、触覚提示パネル１００は他の構成を有してもよい。例えば、キャリア１０４は省略されてよく、液晶ディスプレイ１０３がラテラルアクチュエータ１０６や板バネ１０７と直接に接続されてもよい。

液晶ディスプレイ１０３及びタッチパネル１０１は、ベース１０５と略並行となるように設置される。液晶ディスプレイ１０３の前側にタッチパネル１０１が配置されている。以下において、触覚提示パネル１００のＵＩが提示される側を、前側と呼ぶ。前側の反対側を、後側と呼ぶ。

タッチパネル１０１は、液晶ディスプレイ１０３に接着剤（ＯＣＡやＯＣＲ）で固定され、液晶ディスプレイ１０３と一緒にタッチパネル１０１が変位する構成でもよく、タッチパネル１０１と液晶ディスプレイ１０３が分離され、タッチパネル１０１のみが変位する構成でもよい。

液晶ディスプレイ１０３は、オブジェクトを含むＵＩ画像を表示する。液晶ディスプレイ１０３は、実施形態１のように液晶ディスプレイを使用してもよく、液晶ディスプレイと異なる任意のタイプのディスプレイ、例えば、ＯＬＥＤディスプレイやマイクロＬＥＤディスプレイを使用してもよい。

制御装置１１０は、実施形態１の構成要素に追加して、表示方向判定部１１６を有している。表示方向判定部１１６は、電子機器１０の傾きを検出し、表示画面に対するＵＩ画像（表示）の上下方向を判定する。表示方向判定部１１６が表示の上下方向を判定する方法は、例えば３軸方向の加速度を感知するの３軸加速度センサを使用する従来技術を用いることができる。表示制御部１１１は、表示方向判定部１１６の判定結果に基づいて、液晶ディスプレイ１０３を制御して、表示画面にＵＩ画像を表示させる。

実施形態２のような、タッチパネルを含み、表示画面に表示したＵＩを介した操作を受け付ける電子機器を使用する場合、ユーザは一般的に指の先端を表示画像の上方向に向けてタッチ面に接触する。すなわち、指の先端から根元への方向をタッチ面に射影した方向は、表示の上下方向に略一致する。

従って、実施形態１で説明した測定結果から、好適な触覚フィードバックをユーザの指に与えるとき、表示画面に表示したＵＩに対してユーザのタッチ操作が想定されているタッチ面（触覚提示面）を有する触覚提示装置の例において、触覚提示のための振動の開始方向は、表示画像の上から下に向かう方向（０°）又はその反対方向（１８０°）に対して、マイナス４３°からプラス４３°の範囲内にある。つまり、振動軸は、表示の上下方向の軸１０２からマイナス４３°からプラス４３°の範囲内にある。

より好ましい例において、触覚提示のための振動の開始方向は、表示画像の上から下に向かう方向（０°）又はその反対方向（１８０°）に対して、マイナス１９°からプラス１９°の範囲内にある。つまり、振動軸は、表示の上下方向の軸１０２からマイナス１９°からプラス１９°の範囲内にある。このような振動により、実施形態１と同様に、より多くのユーザに対して適切な触覚を提示することができる。

上述のように、触覚提示装置である電子機器１０は、タッチ面と、タッチ面に対して相対的位置が固定された液晶ディスプレイ１０３と、タッチ面を面内の一軸に沿って振動させるラテラルアクチュエータ１０６と、ラテラルアクチュエータ１０６の一軸に沿った振動を制御して、タッチ面に接触している指に対する触覚を提示する、制御装置１１０と、を含むことができる。

制御装置１１０は、指に対する触覚を提示するための振動の開始方向が、表示画像の上から下に向かう方向又はその反対方向に対して、マイナス４３°からプラス４３°の範囲内にあるように、ラテラルアクチュエータを制御してもよい。また、制御装置１１０は、指に対する触覚を提示するための振動の開始方向が、表示画像の上から下に向かう方向又はその反対方向に対して、マイナス１９°からプラス１９°の範囲内にあるように、ラテラルアクチュエータを制御してもよい。

なお、本実施形態の表示装置は、電子機器１０の傾きが可変であり、表示の上下方向が変化する構成となっている。この場合は、表示方向の変化に応じて、振動方向も変化させることになる。これを実現するには、例えば、特許第６４８９１２０号に記載の従来技術を用いて、タッチ面と平行な複数の軸に沿って可動部（キャリア）が振動する構成とすることができる。または、図１２において、ベース１０５の前側または後側に、ラテラルアクチュエータ１０６の振動方向と直交する方向に振動するようにアクチュエータを備えた第２のベースを追加することでも実現できる。

＜実施形態３＞
実施形態１において説明したように、触覚提示パネルの面内振動方向と指の長軸との間の角度によって、感じられる触覚強度が変化する。具体的には、触覚強度は、振動方向が指の長軸と平行な場合に強く、振動方向が指の長軸とが垂直な場合に弱い。また、振動方向が指の長軸と平行な方向から垂直な方向に変化するに応じて、触覚強度が減少する。

本実施形態の触覚提示装置は、タッチ面に接触している指をタッチ面に射影した向きを推定し、推定した向きに基づいて面内振動（ｌａｔｅｒａｌ ｍｏｔｉｏｎ）の強度を制御する。面内振動の強度が増加すると、指の角度が固定されている場合に、当該指からユーザが知覚する触覚（刺激）の強度が増加する。触覚提示装置は、例えば、振動の変位（振幅）、速度及び／又は加速度を増減することで、振動強度を増減することができる。

図１２は、本実施形態の制御装置１１０の論理構成例を模式的に示す。実施形態１の構成要素に追加して、指方向推定部１１７が含まれている。指方向推定部１１７は、タッチ面に接触している指の長軸の方向又は面内振動軸と指の長軸との間の角度を検出し、指の方向を推定する。指方向推定部１１７が指の長軸の方向を検出する方法の例は後述する。触覚制御部１１３は、指方向推定部１１７が検出した指の長軸の方向に基づいて、ラテラルアクチュエータ１０６を制御する。

図１４Ａ、１４Ｂ及び１４Ｃは、それぞれ、指の長軸と面内振動方向との間の角度に応じて触覚制御部１１３により制御される、ラテラルアクチュエータ１０６の加速度の例を示す。図１４Ａ、１３Ｂ及び１３Ｃのグラフにおいて、それぞれ、横軸は指の長軸と面内振動軸との間の角度を示す。縦軸は加速度を示す。したがって、０°及び１８０°以外の各角度に対して、指の長軸の二つの方向が対応する。指方向推定部１１７は、実施形態１で説明したように、振動開始方向と指の先から根元への方向との間の角度を検出し、触覚制御部１１３が検出された角度（０°～３６０°）に応じてラテラルアクチュエータ１０６の振動強度を制御してもよい。

図１４Ａに示す制御例は、刺激を知覚しやすい０°及び１８０°のときに最小の加速度を与え、刺激を知覚しにくい９０°のときに最大の加速度を与える。加速度は、０°から９０°まで比例増加し、９０°から０°まで比例減少する。図１４Ａの例において、増減の比例定数は同一であるが、これらは異なってもよい。

図１４Ｂに示す制御例は、刺激を知覚しやすい０°及び１８０°のときに最小の加速度を与え、刺激を知覚しにくい９０°のときに最大の加速度を与える。加速度は、０°から１９°まで一定であり、１９°から６９°まで比例増加し、６９°から９０°ま・BR>ナ一定である。また、加速度は、９０°から１１１°まで一定であり、１１１°から１６１°まで比例減少し、１６１°から１８０°まで一定である。図１４Ｂの例において、加速度の変化は、９０°を中心として対称である。なお、増減の比例係数は異なっていてもよい。

角度１９°及び１６１°は、実施形態１で説明した、振動刺激が他の角度よりも強いと感じられる範囲を規定した値に対応する。角度６９°及び１１１°は、以下のように決められている。図１５は、実施形態１で説明した測定結果の他のグラフを示す。グラフは、振動が「一番弱い」と感じられた振動開始方向の度数分布及び度数分布にフィッティングした正規分布曲線を示す。正規分布曲線が示す分布の中央５０％の範囲は、９０°±２１°の範囲である。この範囲において、振動の刺激が弱いと感じられる場合がより多い。そのため、当該範囲で最も高い加速度が与えられている。９０°での振動と２７０°での振動との間において、知覚強度の有意差は認められないことから同様のことが、－９０°±２１°についても言える。

図１４Ｃに示す制御例は、刺激を知覚しやすい０°及び１８０°のときに最小の加速度を与え、刺激を知覚しにくい９０°のときに最大の加速度を与える。加速度は０°から９０°まで増加し、９０°から１８０°まで減少する。加速度の増減率は一定ではなく、所定の関数に従っている。図１４Ｃの例において、加速度の変化は曲線で示されている。図１４Ｃの例において、加速度の変化は、９０°を中心として対称であるが、非対称であってもよい。

上述のように、制御装置１１０は、指をタッチ面に射影した向きがラテラルアクチュエータ１０６の振動軸と垂直である場合に、平行である場合よりも振動強度が強くなるように、ラテラルアクチュエータ１０６を制御することができる。また、図１４Ａ、１４Ｂ、１４Ｃの例のように、制御装置１１０は特定の方向の範囲において、振動に水平な方向から垂直な方向に向かって振動強度を漸増するようにラテラルアクチュエータ１０６を制御してもよい。

次に、指の長軸の方向を検出する方法の例を説明する。一つの公知の方法は、タッチパネル１０１のタッチ面１５０における指の接触面から、指の向きを推定する。例えば、タッチパネル１０１は、静電容量タイプのタッチパネルである。図１６Ａは、タッチ面１５０に接触している指２０５及びその接触領域２２０を示す。タッチ検知部１１５は、指２０５の接触領域２２０の形状の情報を記憶装置に格納する。

指方向推定部１１７は、記憶装置から接触領域２２０の情報を取得し、接触領域２２０に対して楕円をフィッティングする。指方向推定部１１７は、フィッティングされた楕円の長径が、指の長軸と平行であると推定する。図１６Ｂは、指２０５の接触領域２２０及び接触領域２２０にフィッティングされた楕円の長径に平行な軸２２５を示す。指方向推定部１１７は、タッチ面１５０における、軸２２５の角度の情報を記憶装置に格納する。触覚制御部１１３は、タッチ面１５０における振動軸１６５と上記推定された指の長軸２２５との間の角度θに基づいて、ラテラルアクチュエータ１０６を制御する。

指方向推定部１１７は、軸２２５において、指の先端から根元に向かう方向を判定してもよい。例えば、実施形態１で説明したＡＴＭ機や券売機のように、タッチ面１５０が固定されている場合、タッチ面１５０で予め定義されている基準方向、例えば、タッチ面１５０の上辺から下辺へ向かう方向、を参照して、指の先端から根元に向かう方向を決定してもよい。また、後述するように、電子機器１０が可搬型であり、鉛直方向を基準とするタッチ面１５０（の基準方向）の向きが判定可能である場合、指方向推定部１１７は、これらの方向に基づき、指の先端から根元に向かう方向を決定できる。

指の長軸の方向を検出する他の方法は、電子機器１０に実装されている３軸加速度センサ（重力センサ）の出力に基づいて指をタッチ面１５０に射影した向きを推定する。図１７は、タッチ面１５０と鉛直方向（重力の方向）との関係を示す。電子機器１０は、携帯端末であり、ユーザが自由にその向きを変えることができる。

図１７に示すように、タッチ面１５０をｘｙ平面、タッチ面１５０の法線がｚ軸と定義されている。本例において、ラテラルアクチュエータ１０６の振動方向１６１（振動軸）は、ｙ軸に平行である。電子機器１０に搭載された加速度センサにより検出される重力は、ベクトルｇで表わされている。指方向推定部１１７は、３軸それぞれの加速度の値から、ベクトルｇに対するタッチ面１５０の向きを推定することができる。指方向推定部１１７は、ベクトルｇのｘｙ平面成分ｇ_xyを、タッチされる指の先端から根元への方向と推定する。

触覚制御部１１３は、ｘｙ平面成分ｇ_xyとｙ軸との間の角度θ（０°～１８０°）に基づいて、ラテラルアクチュエータ１０６を制御する。触覚制御部１１３は、実施形態１で説明したように、ｘｙ平面成分ｇ_xyとｙ軸に沿った振動開始方向との間の角度を、０°～３６０°の範囲置いて特定し、その角度に基づいて、ラテラルアクチュエータ１０６を制御してもよい。

指の長軸の方向を検出する他の方法は、電子機器１０に実装されたカメラで撮像したユーザの顔の向きに基づき、タッチ面に射影された指の向きを推定する。図１８は、電子機器１０の内蔵カメラ１０８により撮像されたユーザの顔画像２３０と、タッチ面１５０との間の関係を模式的に示す。

指方向推定部１１７は、カメラ１０８で撮像したユーザの顔画像２３０の認識処理を行い、顔画像２３０の上下方向の軸２３５を決定する。軸２３５は、例えば、顔画像２３０における二つの目の位置から特定できる。また軸２３５に沿った顔画像２３０上下は、顔画像２３０の目とそれら以外のパーツとの関係から特定できる。指方向推定部１１７は、軸２３５の角度の情報を記憶装置に格納する。また、必要であれば、軸２３５に沿った顔の上下の情報が格納される。

触覚制御部１１３は、タッチ面１５０における振動軸１６５と顔画像２３０の軸２３５との間の角度θ（０°～１８０°）に基づいて、ラテラルアクチュエータ１０６を制御する。触覚制御部１１３は、実施形態１で説明したように、顔画像２３０の軸２３５において下に向かう方向と、振動軸１６５に沿った振動開始方向との間の角度を、０°～３６０°の範囲置いて特定し、その角度に基づいて、ラテラルアクチュエータ１０６を制御してもよい。

以上、本願の実施形態を説明したが、本開示が上記の実施形態に限定されるものではない。当業者であれば、上記の実施形態の各要素を、本開示の範囲において容易に変更、追加、変換することが可能である。ある実施形態の構成の一部を他の実施形態の構成に置き換えることが可能であり、ある実施形態の構成に他の実施形態の構成を加えることも可能である。

１０ 電子機器、１００ 触覚提示パネル、１０１ タッチパネル、１０３ 液晶ディスプレイ、１０４ キャリア、１０５ ベース、１０６ ラテラルアクチュエータ、１０７ 板バネ、１０８ カメラ、１１０ 制御装置、１１１ 表示制御部、１１３ 触覚制御部、１１５ タッチ検知部、１１７ 指方向推定部、１５０ タッチ面、１６１、１６１Ａ、１６１Ｂ 振動方向、１６５ 振動軸、２０１ オブジェクト画像、２０５ 指、２２０ 接触領域、２２５ 長軸、２３０ 顔画像、２３５ 顔画像の上下方向軸

Claims (3)

1. タッチ面と、
   前記タッチ面を面内の一軸に沿って振動させるアクチュエータと、
   前記アクチュエータの前記一軸に沿った振動を制御して、前記タッチ面に表示されたオブジェクトの選択操作時に前記タッチ面に接触している指に対する触覚を提示する、制御装置と、
   を含み、
   前記制御装置は、
   前記タッチ面に接触している前記指を前記タッチ面に射影した向きを推定し、前記射影した向きが前記一軸と垂直である場合に、前記射影した向きが前記一軸と平行である場合よりも、前記振動の強度が強くなるように前記アクチュエータを制御する、
   触覚提示装置。
2. 請求項１に記載の触覚提示装置であって、
   前記制御装置は、前記射影した向きの特定の範囲において、前記一軸に水平な方向から前記一軸に垂直な方向に向かって前記振動の強度を漸増するように前記アクチュエータを制御する、
   触覚提示装置。
3. タッチ面と、
   前記タッチ面を面内の一軸に沿って振動させるアクチュエータと、
   前記アクチュエータの前記一軸に沿った振動を制御して、前記タッチ面に表示されたオブジェクトの選択操作時に前記タッチ面に接触している指に対する触覚を提示する、制御装置と、
   前記指を有するユーザの顔を撮像するカメラと、
   を含み、
   前記制御装置は、
   前記顔の向きに基づいて前記タッチ面に接触している前記指を前記タッチ面に射影した向きを推定し、前記射影した向きに応じて前記振動の強度を変化させるように前記アクチュエータを制御する、
   触覚提示装置。

Images