[go: up one dir, main page]

JP2004537118A - コンピュータ化ポータブル携帯型手段 - Google Patents

コンピュータ化ポータブル携帯型手段 Download PDF

Info

Publication number
JP2004537118A
JP2004537118A JP2003515961A JP2003515961A JP2004537118A JP 2004537118 A JP2004537118 A JP 2004537118A JP 2003515961 A JP2003515961 A JP 2003515961A JP 2003515961 A JP2003515961 A JP 2003515961A JP 2004537118 A JP2004537118 A JP 2004537118A
Authority
JP
Japan
Prior art keywords
portable
screen
manipulating
degree
manipulation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2003515961A
Other languages
English (en)
Other versions
JP4058406B2 (ja
Inventor
トマー・シャリト
アンデシュ・ヘッゲスタッド
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
TOMER SHALIT AB
Original Assignee
TOMER SHALIT AB
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by TOMER SHALIT AB filed Critical TOMER SHALIT AB
Publication of JP2004537118A publication Critical patent/JP2004537118A/ja
Application granted granted Critical
Publication of JP4058406B2 publication Critical patent/JP4058406B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016Input arrangements with force or tactile feedback as computer generated output to the user
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1626Constructional details or arrangements for portable computers with a single-body enclosure integrating a flat display, e.g. Personal Digital Assistants [PDAs]
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1637Details related to the display arrangement, including those related to the mounting of the display in the housing
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1684Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1684Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
    • G06F1/1694Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675 the I/O peripheral being a single or a set of motion sensors for pointer control or gesture input obtained by sensing movements of the portable computer
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03545Pens or stylus
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04815Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2200/00Indexing scheme relating to G06F1/04 - G06F1/32
    • G06F2200/16Indexing scheme relating to G06F1/16 - G06F1/18
    • G06F2200/163Indexing scheme relating to constructional details of the computer
    • G06F2200/1637Sensing arrangement for detection of housing movement or orientation, e.g. for controlling scrolling or cursor movement on the display of an handheld computer

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Position Input By Displaying (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

この発明は、操作されるべきオブジェクト(19)の表示用のスクリーン(16)を有するコンピュータ化携帯型手段(10)およびそのための方法に関係する。操作のために二つのタイプの手段を有し、一つは、それを手で携帯した時のもので、そして一つは、それを別の面に置いた時のものである。触覚を与える手段は、オブジェクト(19)を操作している時にポインティング手段(20)を保治している手に触覚の帰還を与える。その結果、視覚および感覚の少なくとも二つの人間の感覚の使用により、利用できるオブジェクト(19)の強化された閲覧を提供する。

Description

【技術分野】
【0001】
この発明は、操作されるべきオブジェクトの表示用スクリーンを備えるコンピュータ化したポータブル携帯型手段に関し、操作されるべきオブジェクトは、その操作により実行されるべきサブのオブジェクトまたは機能へのリンクを与える。この発明はまた、そのための方法を提供する。特定の実施例では、操作されるべきオブジェクトの3次元のための立体スクリーンを提供する。
【背景技術】
【0002】
パームトップコンピュータ、PDA(パーソナルデジタルアシスタンス)およびセラーフォンのごとき、コンピュータ化した携帯型装置は、表示用の比較的小さいスクリーンのためにオブジェクトの表示に欠点を有する。このことは、このようなデバイスのユーザーは、例えば、携帯型デバイスがユーザーに役に立つことを可能にする、利用可能なメニューを通じて表示するために多数のボタンを押したりアクティブにしなければならないことを意味する。このようなメニューを通じて見ることは、従って非常に時間がかかり、多くの選択メニューを迅速に表示する能力が制限された。
【0003】
現在のポータブル携帯型装置の別の欠点は、スクリーン上で仕掛けを操作する時、触覚の帰還に関係し、例えば、人間の手のひら以外の面に設置した時、スクリーン上の仕掛けを操作するために、このような装置を傾けることは現実的に行えない。従って、仕掛けを操作する時、少なくとも二つの手順が必要である。つまり、一つは、手のひらに置かれた時の装置に対するもので、他の一つは別の表面に置かれた装置に対するものである。
【0004】
さらに、携帯コンピュータデバイスのユーザーに選択の指示を提供できるように、例えばメニューの選択を検証できることが認識されるべきである。
【0005】
Filesその他による特許文献US-A-5657054は、2次元表示装置、例えば、コンピュータスクリーン上の圧電性のポイントデバイスを通じたペン位置の決定を開示している。
【0006】
Kobayashiその他による特許文献US-A-5500492は、振動ペンからの入力振動を検知するための座標入力装置を開示している。座表は二次元内でのみ決定される。
【0007】
Korthによる米国特許文献US-A-5813424では、空間データの取得のためのロッド形状のデバイスが開示されている。デバイスの3次元の位置は光学システムを通じて決定される。
【0008】
Romeinによる特許文献US-A-4246439は、書き込みタブレットに関連した鉄筆を含む音波書き込みの結合を開示している。その鉄筆には、パルス信号を発する超音波の音源を備え、そのパルスは書き込みテーブル上に配置された少なくとも二つのマイクでピックアップされ、鉄筆の2次元の位置が決定される。
【0009】
この発明の利点を有する実施例は、独立クレームを通じて説明される。更に、実施例および利点は、添付された従属クレームを通じて述べる。
【発明の概要】
【0010】
この発明の主題は、2次元または3次元表示のための立体スクリーンを備え、二つの操作用手段での操作を有するコンピュータ化携帯型手段を提供することである。その一つは、その手段を手のひらで保持している時に使用され、他の一つは、テーブルのような他の面にそれを置いた時の使用である。
【0011】
この発明の目的および主題を達成するため、操作されるべきオブジェクトのイメージを表示するスクリーンを備え、これにより、オブジェクトの操作は、実行されるべきサブのオブジェクトまたは機能へのリンクを結ぶ、コンピュータ化ポータブル携帯型手段を開示し、そのコンピュータ化ポータブル携帯型手段は、
前記オブジェクトのための第1の操作手段であって、前記操作手段を手で握っての移動により、前記オブジェクトの操作を制御する第1の操作手段と、
手以外の他の面に置かれた時に、ポインティングデバイスにより、前記オブジェクトの操作を制御する、前記オブジェクトのための第2の操作手段と、および
前記オブジェクトの各連続する可能な操作のために前記手段に対する触覚の帰還を与えるための手段とを備え、
これにより、プッシュボタンを用いないオブジェクトの操作および、操作のための感覚を与え、その結果、視覚および感覚の少なくとも二つの検知を含むことにより、操作の速度を増し、そして、前記第1および第2の手段に基づき、スクリーン上のオブジェクトを操作する少なくとも二つの機能を与える。
【0012】
この発明の一つの実施例では、ジャイロを備え、それの傾きの程度が、オブジェクトの操作の程度を制御する前記第1および第2の操作手段への入力信号を構築する。
【0013】
別の実施例は、操作のためのゼロの基点が、本手段の携帯人により与えられた合意行為により与えられ、前記行為が与えられた時は、保持している向きまたは角度は重要でない。
【0014】
ポータブルの携帯手段の長軸に対する垂直面の傾きは、一つの実施例では、オブジェクトの操作の程度を決定し、その軸のまわりの回転は、操作の承認を決定する。
【0015】
この発明の別の実施例では、前記ポインターデバイスの鉄筆位置の3次元の空間決定のための位置検知手段は、超音波の受信/送信手段である。
【0016】
別の実施例では、位置検知手段は、小型化された手段である。
【0017】
別の実施例では、3次元イメージは、皮膚層にメニューを与える。触覚の帰還が与えられた時、操作手段は皮膚層に固定され、これにより、操作手段は皮膚表面層上で表示するために用いられ、その結果、接近した皮膚層へのスリップを防止する。
【0018】
この発明の更に別の実施例は、セルラーフォンであることを含む。
【0019】
更に別の実施例は、パームトップコンピュータまたは同様なものである。
【0020】
別の実施例は、スクリーンが自動立体タイプである。
【0021】
この発明は、操作されるべきオブジェクトのイメージを表示するスクリーンを備えた、コンピュータ化ポータブルの携帯型手段のための方法をも述べており、
前記オブジェクトのための第1の操作手段を備え、携帯している前記操作手段の動きによって、前記オブジェクトの操作を制御し、
前記オブジェクトのために第2の操作手段を備え、携帯型手段を手のひら以外の別の表面に置いた時、ポインティングデバイスにより、前記オブジェクトの操作を制御し、そして
前記オブジェクトの各々の首尾よい可能な操作のために、前記手への触覚の帰還のための手段を備え、これにより、プッシュ釦なしでオブジェクトの操作および操作の感触を提供し、その結果、視覚および感覚の少なくとも二つの検知を含むことにより、操作の速度を増し、そして、前記第1および第2の手段に基づき、スクリーン上のオブジェクトを操作する少なくとも二つの機能を与える。
【0022】
この発明の方法は、携帯手段の実施例、特に方法の付記したサブクレームの組に従って、実施例を実行できる。実施例および例を有するこの発明のよりよい理解のために、図面およびそれに伴う文章を添付した。
【発明を実施するための最良の形態】
【0023】
手のひらで保持する装置、例えばセルラーフォン、パーソナルデジタルアシスタンス(PDA)、またはスクリーンを有するハンドヘルドデバイスのごとき比較的小型の電子装置の表示データに関する問題を解決する必要がある。従ってこの発明は、2次元および/または3次元空間を、オブジェクト、機能または他の特徴の選択/操作のために、スクリーン上にグラフィックを表示する、コンピュータソフトウエアを通じて操作し、表示し、またはスクロールするためのスクリーンにそれぞれ導入するポータブル携帯型手段を提供する。スクリーン上に表示されたこれらのグラフィックスは通常、コンピュータ分野では装置としてアドレスが付される。
【0024】
この発明で導入される有利な特徴は、上述したようにポータブルの携帯型手段に関し、その手段が手のひらではなく、テーブルや他のいずれかの休止エリアのような表面に置かれた時やその上に持ち上げられた時に、装置、メニューなどを操作するためにポインティングデバイスを使用する機能を有する。
【0025】
この発明の別の目的は、スクリーンに表示されたオブジェクトを操作または選択している時に、ペン形状のポインターである鉄筆のようなポインティングデバイスで、このような携帯型装置のユーザーに触覚の帰還を提供することである。
【0026】
この発明による3次元空間は、一つの実施例において、自動立体技術の使用で生成される。立体スクリーンは、同じオブジェクトを左右の眼に異なる絵として与え、これにより、その絵を3次元として体験して見ることができる。立体スクリーンは、通常、例えば、赤−緑のガラスまたは偏向ガラスまたはシャッタ付のガラスの補助具が備えられる。
【0027】
図1はPDA10または同様な装置の概略を示し、ファンクションまたは入力のキー12およびスクリーン16を有する。これらのキー12は、タッチパッド、スクリーンタッチパッド技術のキーまたは同様なもののごとき商業利用できるいずれかのタイプであってもよい。図1において、ポータブルの携帯型手段10が平らな面に置かれた時、ポインティングデバイス20を使用する機能は、この発明に基づき図示されている。これは、携帯型装置10を使用している時、大きな利点を与える。携帯装置10は、手のひらの上ではなく、例えばテーブルのような面に置かれた時か、あるいはこれとは逆に手のひらに置かれた時のいずれかで使用できる。図2下部には、手のひら内で、仕掛け19を操作する機能が述べられており、それはこの発明の第2の利点である。
【0028】
仕掛けをいかにして操作するか、またはこの発明によってメニューを表示することが達成されるかについて述べられた二つの状況または機能がある。一つは、手段10が例えばテーブルの上に置かれた図1であり、一つは、図2のように、歩行時、立ってる時、座っている時などで、手段10を手のひらに置いている時である。タッチパッドまたは同種のような他の操作手段が同様に使用されることを排除しない。
【0029】
図1中の14はマイクで、従来技術で述べたように、超音波送信機(不図示)から送信された超音波をピックアップして超音波を受信するが、以下更に述べる。そのマイクは、3次元空間でのポインティングデバイス20の鉄筆の位置をピンポイントで検出するために、鉄筆からの音波をピックアップする。発光し、その反射光を収集する光学手段またはCCDを用いたカメラタイプのような、3次元で位置決めするための他の公知のデバイスを使用できる。
【0030】
この発明の一つの実施例に基づくポータブルの携帯型手段10のスクリーン16上に表示された、仕掛け19(ここではシリンダ)を操作するためのポインターデバイス20の使用は、図1中の矢印で示されている。図1に記された矢印は、スクリーン上で生成された3次元空間内でのコンピュータポインティングデバイス19の移動を示している。この移動は、仕掛け19に伝えられる結果、周知のソフトウエアの原理または技術に基づき、ポインティングデバイス20の動きに基づき操作される。
【0031】
この発明の一つの実施例では、ポインティグデバイスの鉄筆は、例えばカーソルとして、スクリーン16上の仮想の突起物として示されている。
【0032】
スクリーン16上で3次元環境を達成する一つの方法は、自動立体スクリーンを用いることである。図1中の自動立体空間18を点線で示す。自動立体スクリーンは、いかなるガラスをも使用せずに同じオブジェクト/仕掛けを左右の眼に異なる絵にとして供給する。ケンブリッジ自動立体ディスプレイは、観察者に真の3次元の絵を見ることを可能にする。観察者の眼の各々は表示されたシーンの異なるイメージを本物のように見る。そして、観察者は、シーン中のオブジェクトの概略および詳細を“見回し”、または把握するために、その手を移動することができる。このことは、自動の立体視覚が得られ、それにより、いかなる特種なガラスや他のヘッドギァーの必要性がないので、完全な自然感が得られる。
【0033】
複数観察用の自動立体表示器は、異なる観察位置で見たオブジェクトの複数の異なる絵を要求する。これらの複数の絵は、極めて迅速に、例えばカソードレイ管(CRT)上で次々と、映し出される。一つの絵が表示されている瞬間に、液晶シャッタの1組が開にされ、表示器の前面エリアに絵を見ることができる。そのシャッタは、各々の絵を見ることのできる場所を決定する。このプロセスは、毎秒6回、極めて高速に繰り返される。観察者の各々の眼は、一連の極めて短く、極めて明るい絵の一つのイメージを見る。その眼は、これらの瞬間的な短い絵を積分して、連続的に表示される絵の効果を与える。各々の眼が異なる絵を見るので、観察者は、重要な3次元の奥行の暗示の一つ:立体視差を受け取る。更に、観察者はその頭が動いている間に異なる絵を観察するので、別の重要な3次元の奥行の暗示:移動視差を与える。これらの二つの奥行きの暗示は結びついて、3次元イメージのリアルな奥行きの効果的な錯覚を与える。
【0034】
別の実施例では、直視液晶表示器(LCD)およびホログラフィック光学エレメント(HOE)に基づく比較的新しい自動立体表示システムが考慮されている。この表示器は、通常のLCDの画素の可視性を制御するために、コンポジットHOEを用いる。述べられた一つの構成は、自動立体表示器を容易に見られるように(つまりガラスなしのリアルな3次元)、水平ラインにインタレースされた空間的にマルチプレックス化されたLCD上に表示された立体イメージを用いる。これは、いわゆる、シャッタシステムに結合したフィールドシーケンシャル方法(例えばLCDシャッター化ガラス)を用いたガラス存在の立体システムと互換性がある。
【0035】
この発明は、3次元空間でのコンピュータ化ポンティングデバイスの位置決定のための公知の手段も提供する。そのような手段のひとつは、超音波による位置検出を含む。ポインティングデバイスは、この発明に基づき、携帯コンピュータデバイス上の異なる位置に取り付けられた多数の超音波送信器から発振されたバースト波の音波を収集するマイクを備える。超音波による位置決めは、確立した技術(少なくとも3つのスピーカから飛来時間)に基づくバース音波の三角測量を通じて達成される。
【0036】
さらに、この位置検出手段は、従来技術で述べたように、小型化されたカメラの手段であってもよい。
【0037】
この発明の利点は、この分野で既知ではなく、ポータブルの携帯コンピュータスクリーン上に仕掛けやメニュー等のごとき3次元オブジェクトを表示する、表示器上のオブジェクトを操作している時、触覚の帰還の特徴である。触覚の帰還は、振動又は押し、衝撃などを生成する、例えば、圧電アクチュエータまたは、同様なアクチュエータであってもよい。触覚は、少なくともコンピュータイメージを扱う当業者の間でしばしば用いられる用語であり、ボタン、アイコンおよび他の設計された形状のごとき、コンピュータのポインティングまたは選択デバイスで操作できるいずれかの種類のオブジェクトに関する。
【0038】
この発明は、一つの実施例では、携帯型手段自身から、および/または、図1のように、たとえばPDAまたはセルラー/モービルフォンで用いられる鉄筆のペンのごときポインターデバイスから発せられた振動または衝撃のいずれかによって触覚の帰還を提供する。
【0039】
この発明の一つの実施例では、触覚の帰還は、弾性体またはスプリングのムーブメント手段に取り付けられたスクリーン16に文字を表示することにより、人の目に見えるようにしてもよい。これにより、触覚の帰還がアクティブにされた時、スクリーン16は、突き出るか振動する。
【0040】
図2は、図1と同じ携帯型手段を概略的に示し、可能な6つの傾きを図2では矢印で記入している。記入した矢印は、この発明に基づく手段10の可能な傾きのステップの程度を示す。傾けた時の各々のステップの程度は、この発明の一つの実施例では、触覚の帰還により、追跡される。ポータブルの携帯型手段10自身が、ポインティング手段である。つまり、例えばカーソルが2次元または3次元空間内でどこに位置するかを、携帯型手段16の傾きまたは変位が決定する。
【0041】
図2中のスクリーン16上の、記入していない白の矢印は仕掛け19の可能な操作を示す。
【0042】
例として、前述したように傾けるために、ポインティングデバイス20を使用することからの変更は、プッシュ釦12を通じて実行できる。この分野で公知なように、傾く時、選択は、別のプッシュ釦12または他の方法を通じて行われる。
【0043】
この発明の一つの実施例では、手段10の低いまたは遅い傾き、表示速度または操作は、ゆっくりに、かつ一定のペースで実行される。このことは、スクロールの最後に、PDA10のユーザーが選択することに支援する。
【0044】
傾斜機能の適用例は、プルダウンのメニューである。左へのメニューはそのためマークされ、マークされたメニューの領域は、図2中の二つの水平方向の矢印で示したように、携帯手段10の水平方向の傾きで示される。
【0045】
別の適用例は、電話帳に関し、傾斜機能は、電話番号のリストを迅速に閲覧するために用いられ、これにより、そのリストは、実際の歯車のように構築され、“歯車”の回転がこの結果、直接的に携帯型手段10の傾きにリンクする。
【0046】
この発明によるコンピュータ化のポータブルの携帯型手段が、上述したように、操作されるべきオブジェクトの立体3次元イメージを与えるスクリーン16を有する時、オブジェクトの操作は、サブオブジェクトまたは実行されるべき機能へのリンクを結合する。機能の例として、それはどんな種類の3次元のオブジェクトおよびどんな既知の操作も回転できることである。サブオブジェクトは、メインのオブジェクトにリンクされる新しいオブジェクトであってもよく、たとえば、釦として仕掛け19を押すことで新しいオブジェクトに接続し、この新しいオブジェクトは、機能を表示、選択するためのメニューである。このことはスクリーン16上の2次元の投影に対しても言える。
【0047】
従って、この発明のポータブルの携帯型手段10は、2次元または3次元のオブジェクトのための操作用手段を備え、これにより、操作用手段を保治している手の動きにより、これらのオブジェクトの操作を制御する。この操作用手段は、一つの実施例では、POA、自動車電話などのような携帯手段のハウジングである。この実施例では、携帯手段は、例えばソフトウエア(これは、例えば前述したような手段を与える触覚の帰還を制御するために設計)へのジャイロ情報を決定するための手段を装備する。一つの実施例では、触覚の帰還は、所定の大きさのジャイロ情報が与えられる毎に与えられる。携帯型手段の動きがオブジェクトの変化を次々と表示する時、例えばメニュー間で変更する時も、触覚の帰還が与えられる。
【0048】
ポータブルの携帯型手段10は、この携帯型手段10が手のひら以外の表面に置かれた時に用いられるペンに似たポインティング/操作用のデバイスのようなコンピュータのポインティング手段である、この発明に基づく操作用手段も有する。
【0049】
この発明の携帯型手段は従って、プッシュ釦なしでオブジェクトの操作を与え、そして、操作のための感覚を与える。決定に含まれるより多くの人間の感覚、より高速の決定が達成される。決定が仕掛け19を操作するためである場合、多くのケースで、このことが真実である。従って、この発明は、視覚および感覚の少なくとも二つの感覚を含むことにより、操作速度を増す。
【0050】
触覚の帰還は、帰還を与える時に、例えばクリックのような音を生成することによっても強めることができ、これにより、第3の感覚である聴覚を導入できる。
【0051】
ポータブルの携帯型装置は、一つの実施例でジャイロ(圧電体、水銀スイッチ、または同種)を備え、装置の傾きの程度が、オブジェクトの操作の程度を制御する、操作用手段への入力信号を構築する。ジャイロのための0基準を確立するため、それの利用者により与えられた同意の行為による操作が与えられ、行為が与えられた時、それを保治している向きまたは角度は重要でない。このような行為は、例えばプッシュ/タッチ釦を形成する仕掛けの押動により達成される。それの長軸に対する垂直面での傾きは、オブジェクトの操作の程度を決定し、そして、一つの実施例では、その軸の周りの回転は、操作の承認を決定する。傾き動作に似た他のものも、この発明の範囲に基づき提供できる。
【0052】
この発明の好ましい実施例では、3次元イメージが皮膚層の方法でメニューから形成される。コンピュータグラフィックディスプレイでは、皮膚層は、例えばメニューのスタック/積み重ねを与え、これにより、スクリーン上の3次元空間がほぼ無限のメニューの積み重ねを提供でき、3次元表示の解像度によってのみ制限される。操作用手段は、一つの実施例では、触覚の帰還または/および他の同意の行為が与えられた時、皮膚層にロックされ、これにより、操作用手段は、皮膚層表面上で表示するために用いられ、その結果、接近した皮膚層へのスリップを防止する。
【0053】
この発明は、この発明の範囲を限定しない実施例および例を通じて述べたきた。付記した組のクレームが当業者に対し発明の範囲を述べている。
【図面の簡単な説明】
【0054】
【図1】この発明に基づくポータブルの携帯型手段のスクリーン上に表示されたオブジェクトの操作のためのポインターデバイスの使用を例示した図である。
【図2】この発明に基づくポータブルの携帯型手段のスクリーン上に表示されたオブジェクトの操作のための手段の、示した矢印方向に傾けるための使用を例示した図である。
【符号の説明】
【0055】
10 ポータブルの携帯型手段
12 キー
16 スクリーン
19 仕掛け
20 ポインターデバイス

Claims (22)

  1. 操作されるべきオブジェクトのイメージを表示するスクリーン(16)を備え、これにより、オブジェクト(19)の操作は、実行されるべきサブのオブジェクトまたは機能へのリンクを結ぶ、コンピュータ化ポータブル携帯型手段(10)であって、
    前記オブジェクトのための第1の操作手段であって、前記操作手段を手で握っての移動により、前記オブジェクトの操作を制御する第1の操作手段と、
    手以外の他の面に置かれた時に、ポインティングデバイス(20)により、前記オブジェクトの操作を制御する、前記オブジェクトのための第2の操作手段と、および
    前記オブジェクトの各連続する可能な操作のために前記手に対する触感の帰還を与えるための手段とを備え、
    これにより、プッシュボタンを用いないオブジェクトの操作および、操作のための感覚を与え、その結果、視覚および感覚の少なくとも二つの検知を含むことにより、操作の速度を増し、そして、前記第1および第2の手段に基づき、スクリーン上のオブジェクト(19)を操作する少なくとも二つの機能を与えるコンピュータ化ポータブル携帯型手段。
  2. ジャイロを備え、それの傾きの程度が、オブジェクト(19)の操作の程度を制御する前記第1および第2の操作手段への入力信号を構築する請求項1記載の携帯型手段。
  3. 操作のためのゼロ基点が、本手段の携帯人により与えられた合意行為により与えられ、前記行為が与えられた時は、保持している向きまたは角度は重要でない請求項1または2に記載の携帯型手段。
  4. 本手段の長軸に対する垂直面からの傾きが、オブジェクトの操作の程度を決定し、その軸のまわりの回転が、操作の承認を決定する請求項2または3に記載の携帯型手段。
  5. 前記ポインターデバイス(20)の鉄筆位置の3次元の空間決定のための位置検知手段は、超音波の受信/送信手段(14)である請求項1〜4のいずれかに記載の携帯型手段。
  6. 前記ポインターデバイスの鉄筆位置の3次元の空間決定のための位置検知手段は、小型化されたカメラ手段である請求項1〜4のいずれかに記載の携帯型手段。
  7. 3次元イメージは、皮膚層にメニューを与える請求項1〜6のいずれかに記載の携帯型手段。
  8. 触覚の帰還が与えられた時、操作用手段は皮膚層に固定され、これにより、操作用手段は皮膚表面層上で表示するために用いられ、その結果、接近した皮膚層へのスリップを防止する請求項7記載の携帯型手段。
  9. 本手段はセルラーフォンである請求項1〜8のいずれかに記載の携帯型手段。
  10. 本手段は、パームトップコンピュータまたは同様なものである請求項1〜8のいずれかに記載の携帯型手段。
  11. 前記スクリーンが自動立体タイプである請求項1〜11のいずれかに記載の携帯型手段。
  12. 操作されるべきオブジェクト(19)のイメージを表示するスクリーン(16)を備えた、コンピュータ化ポータブルの携帯型手段(10)のための方法であって、
    前記オブジェクトのための第1の操作手段を備え、携帯している前記操作手段の動きによって、前記オブジェクトの操作を制御し、
    前記オブジェクトのために第2の操作手段を備え、携帯型手段を手のひら以外の別の表面に置いた時、ポインティングデバイス(20)により、前記オブジェクトの操作を制御し、そして、
    前記オブジェクトの各々の首尾よい可能な操作のために、前記手への触覚の帰還のための手段を備え、これにより、プッシュ釦なしでオブジェクトの操作および操作の感触を提供し、その結果、視覚および感覚の少なくとも二つの検知を含むことにより、操作の速度を増し、そして、前記第1および第2の手段に基づき、スクリーン上のオブジェクトを操作する少なくとも二つの機能を与えるンピュータ化ポータブルの携帯型手段(10)のための方法。
  13. ジャイロを備え、それの傾きの程度が、オブジェクトの操作の程度を制御する前記第1および第2の操作手段への入力信号を構築する請求項12記載の方法。
  14. 操作のためのゼロ基点が、本手段の携帯人により与えられた合意行為により与えられ、前記行為が与えられた時は、保持している向きまたは角度は重要でない請求項12または13に記載の方法。
  15. 本手段の長軸に対する垂直面からの傾きが、オブジェクトの操作の程度を決定し、その軸のまわりの回転が、操作の承認を決定する請求項13または14に記載の方法。
  16. 前記ポインターデバイス(20)の鉄筆位置の3次元の空間決定のための位置検知手段は、超音波の受信/送信手段(14)である請求項12〜15のいずれかに記載の方法。
  17. 前記ポインターデバイス(20)の鉄筆位置の3次元の空間決定のための位置検知手段は、小型化されたカメラ手段である請求項12〜15のいずれかに記載の方法。
  18. 3次元イメージは、皮膚層にメニューを与える請求項12〜17のいずれかに記載の方法。
  19. 触覚の帰還が与えられた時、操作用手段は皮膚層に固定され、これにより、操作用手段は皮膚表面層上で表示するために用いられ、その結果、接近した皮膚層へのスリップを防止する請求項18記載の方法。
  20. 本手段はセルラーフォンである請求項12〜19のいずれかに記載の方法。
  21. 本手段は、パームトップコンピュータまたは同様なものである請求項12〜19のいずれかに記載の方法。
  22. 前記スクリーンが自動立体タイプである請求項12〜21のいずれかに記載の方法。
JP2003515961A 2001-07-22 2002-07-03 手で持つコンピュータ化携帯型装置 Expired - Fee Related JP4058406B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
SE0102583A SE523636C2 (sv) 2001-07-22 2001-07-22 Portabelt datoriserat handhållet organ och förfarande för hantering av ett på en skärm visat objekt
PCT/SE2002/001329 WO2003010653A1 (en) 2001-07-22 2002-07-03 A computerized portable handheld means

Publications (2)

Publication Number Publication Date
JP2004537118A true JP2004537118A (ja) 2004-12-09
JP4058406B2 JP4058406B2 (ja) 2008-03-12

Family

ID=20284913

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2003515961A Expired - Fee Related JP4058406B2 (ja) 2001-07-22 2002-07-03 手で持つコンピュータ化携帯型装置

Country Status (6)

Country Link
US (1) US20050083314A1 (ja)
EP (1) EP1417562A1 (ja)
JP (1) JP4058406B2 (ja)
CN (1) CN1278211C (ja)
SE (1) SE523636C2 (ja)
WO (1) WO2003010653A1 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101119781B1 (ko) * 2009-04-22 2012-05-07 제이 터치 코퍼레이션 스테레오 영상화 터치 장치
WO2012102026A1 (ja) * 2011-01-26 2012-08-02 Necカシオモバイルコミュニケーションズ株式会社 入力装置

Families Citing this family (54)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2004021285A1 (ja) * 2002-08-27 2004-03-11 Sharp Kabushiki Kaisha 最適な再生モードでコンテンツを再生できるコンテンツ再生装置
US9182937B2 (en) 2010-10-01 2015-11-10 Z124 Desktop reveal by moving a logical display stack with gestures
KR100415161B1 (ko) * 2003-07-01 2004-01-13 (주)두모션 기울기 센서를 이용한 3차원 이미지 조망 기능을 갖는핸드헬드 장치 및 이를 이용한 3차원 이미지 디스플레이시스템
US7600201B2 (en) * 2004-04-07 2009-10-06 Sony Corporation Methods and apparatuses for viewing choices and making selections
US7787009B2 (en) * 2004-05-10 2010-08-31 University Of Southern California Three dimensional interaction with autostereoscopic displays
KR100641182B1 (ko) * 2004-12-30 2006-11-02 엘지전자 주식회사 휴대단말기에서의 가상화면 이동장치 및 방법
JP2006295272A (ja) * 2005-04-06 2006-10-26 Sony Corp 撮像装置
US8279168B2 (en) 2005-12-09 2012-10-02 Edge 3 Technologies Llc Three-dimensional virtual-touch human-machine interface system and method therefor
US20080012822A1 (en) * 2006-07-11 2008-01-17 Ketul Sakhpara Motion Browser
JP2010521015A (ja) * 2006-10-05 2010-06-17 ペガサス テクノロジーズ リミテッド デジタルペンシステム、トランスミッターデバイス、レシーバーデバイス、ならびに、それらの製造方法および使用方法
KR101145921B1 (ko) * 2006-12-13 2012-05-15 엘지전자 주식회사 이동 단말기, 이동통신 단말기 및 이를 이용한 사용자인터페이스 제공 방법
US20090309854A1 (en) * 2008-06-13 2009-12-17 Polyvision Corporation Input devices with multiple operating modes
KR20100041006A (ko) 2008-10-13 2010-04-22 엘지전자 주식회사 3차원 멀티 터치를 이용한 사용자 인터페이스 제어방법
KR20100050103A (ko) 2008-11-05 2010-05-13 엘지전자 주식회사 맵 상에서의 3차원 개체 제어방법과 이를 이용한 이동 단말기
US9417700B2 (en) 2009-05-21 2016-08-16 Edge3 Technologies Gesture recognition systems and related methods
US8271898B1 (en) 2009-06-04 2012-09-18 Mellmo Inc. Predictive scrolling
US20100309228A1 (en) * 2009-06-04 2010-12-09 Camilo Mattos Displaying Multi-Dimensional Data Using a Rotatable Object
US9542010B2 (en) * 2009-09-15 2017-01-10 Palo Alto Research Center Incorporated System for interacting with objects in a virtual environment
KR101627214B1 (ko) 2009-11-12 2016-06-03 엘지전자 주식회사 영상표시장치 및 그 동작방법
US20110115751A1 (en) * 2009-11-19 2011-05-19 Sony Ericsson Mobile Communications Ab Hand-held input device, system comprising the input device and an electronic device and method for controlling the same
US9535493B2 (en) 2010-04-13 2017-01-03 Nokia Technologies Oy Apparatus, method, computer program and user interface
US8396252B2 (en) 2010-05-20 2013-03-12 Edge 3 Technologies Systems and related methods for three dimensional gesture recognition in vehicles
US8655093B2 (en) 2010-09-02 2014-02-18 Edge 3 Technologies, Inc. Method and apparatus for performing segmentation of an image
US8582866B2 (en) 2011-02-10 2013-11-12 Edge 3 Technologies, Inc. Method and apparatus for disparity computation in stereo images
US8467599B2 (en) 2010-09-02 2013-06-18 Edge 3 Technologies, Inc. Method and apparatus for confusion learning
US8666144B2 (en) 2010-09-02 2014-03-04 Edge 3 Technologies, Inc. Method and apparatus for determining disparity of texture
US9052800B2 (en) 2010-10-01 2015-06-09 Z124 User interface with stacked application management
CN108681424B (zh) * 2010-10-01 2021-08-31 Z124 用户界面上的拖移手势
US8564535B2 (en) * 2010-10-05 2013-10-22 Immersion Corporation Physical model based gesture recognition
EP2482164B1 (en) * 2011-01-27 2013-05-22 Research In Motion Limited Portable electronic device and method therefor
US9417696B2 (en) * 2011-01-27 2016-08-16 Blackberry Limited Portable electronic device and method therefor
US8970589B2 (en) 2011-02-10 2015-03-03 Edge 3 Technologies, Inc. Near-touch interaction with a stereo camera grid structured tessellations
EP2515201A1 (en) * 2011-04-18 2012-10-24 Research In Motion Limited Portable electronic device and method of controlling the same
JP5840427B2 (ja) * 2011-09-09 2016-01-06 アルプス電気株式会社 振動発生装置
KR101830966B1 (ko) * 2011-09-21 2018-02-22 엘지전자 주식회사 전자 기기 및 전자 기기의 컨텐츠 생성 방법
US9672609B1 (en) 2011-11-11 2017-06-06 Edge 3 Technologies, Inc. Method and apparatus for improved depth-map estimation
EP2687950A1 (en) * 2012-07-20 2014-01-22 BlackBerry Limited Orientation sensing stylus
USD753656S1 (en) 2013-01-29 2016-04-12 Aquifi, Inc. Display device with cameras
USD752585S1 (en) 2013-01-29 2016-03-29 Aquifi, Inc. Display device with cameras
USD753658S1 (en) 2013-01-29 2016-04-12 Aquifi, Inc. Display device with cameras
USD753655S1 (en) 2013-01-29 2016-04-12 Aquifi, Inc Display device with cameras
USD752048S1 (en) 2013-01-29 2016-03-22 Aquifi, Inc. Display device with cameras
USD753657S1 (en) 2013-01-29 2016-04-12 Aquifi, Inc. Display device with cameras
US10721448B2 (en) 2013-03-15 2020-07-21 Edge 3 Technologies, Inc. Method and apparatus for adaptive exposure bracketing, segmentation and scene organization
WO2014165976A1 (en) * 2013-04-10 2014-10-16 Berryman Jeremy Multitasking and screen sharing on portable computing devices
US9817489B2 (en) * 2014-01-27 2017-11-14 Apple Inc. Texture capture stylus and method
US9635069B2 (en) * 2014-08-06 2017-04-25 Verizon Patent And Licensing Inc. User feedback systems and methods
KR101601951B1 (ko) * 2014-09-29 2016-03-09 주식회사 토비스 공간 터치 입력이 수행되는 곡면디스플레이 장치
US9400570B2 (en) 2014-11-14 2016-07-26 Apple Inc. Stylus with inertial sensor
US9575573B2 (en) 2014-12-18 2017-02-21 Apple Inc. Stylus with touch sensor
CN108268056B (zh) * 2016-12-30 2020-12-15 昊翔电能运动科技(昆山)有限公司 手持云台校准方法、装置和系统
US10528159B2 (en) * 2017-01-19 2020-01-07 Hewlett-Packard Development Company, L.P. Input pen gesture-based display control
CN118981271A (zh) 2019-06-01 2024-11-19 苹果公司 用于在2d屏幕上操纵3d对象的设备、方法和图形用户界面
CN115188621A (zh) * 2021-04-07 2022-10-14 群创光电股份有限公司 显示装置

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
NL7803764A (nl) * 1978-04-10 1979-10-12 Philips Nv Akoestische schrijfcombinatie, bevattende een schrijf- instrument met een bijbehorend schrijftablet.
IL92220A (en) * 1989-11-06 1993-02-21 Ibm Israel Three-dimensional computer input device
US5296871A (en) * 1992-07-27 1994-03-22 Paley W Bradford Three-dimensional mouse with tactile feedback
US5657054A (en) * 1995-04-26 1997-08-12 Texas Instruments Incorporated Determination of pen location on display apparatus using piezoelectric point elements
US5818424A (en) * 1995-10-19 1998-10-06 International Business Machines Corporation Rod shaped device and data acquisition apparatus for determining the position and orientation of an object in space
US6115028A (en) * 1996-08-22 2000-09-05 Silicon Graphics, Inc. Three dimensional input system using tilt
US6009210A (en) * 1997-03-05 1999-12-28 Digital Equipment Corporation Hands-free interface to a virtual reality environment using head tracking
US6720949B1 (en) * 1997-08-22 2004-04-13 Timothy R. Pryor Man machine interfaces and applications
US6297838B1 (en) * 1997-08-29 2001-10-02 Xerox Corporation Spinning as a morpheme for a physical manipulatory grammar
US6268857B1 (en) * 1997-08-29 2001-07-31 Xerox Corporation Computer user interface using a physical manipulatory grammar
US5916181A (en) * 1997-10-24 1999-06-29 Creative Sports Designs, Inc. Head gear for detecting head motion and providing an indication of head movement
US6414673B1 (en) * 1998-11-10 2002-07-02 Tidenet, Inc. Transmitter pen location system
US6288704B1 (en) * 1999-06-08 2001-09-11 Vega, Vista, Inc. Motion detection and tracking system to control navigation and display of object viewers
US6466198B1 (en) * 1999-11-05 2002-10-15 Innoventions, Inc. View navigation and magnification of a hand-held device with a display
US6834249B2 (en) * 2001-03-29 2004-12-21 Arraycomm, Inc. Method and apparatus for controlling a computing system
US6727891B2 (en) * 2001-07-03 2004-04-27 Netmor, Ltd. Input device for personal digital assistants
US6961912B2 (en) * 2001-07-18 2005-11-01 Xerox Corporation Feedback mechanism for use with visual selection methods
US20040095317A1 (en) * 2002-11-20 2004-05-20 Jingxi Zhang Method and apparatus of universal remote pointing control for home entertainment system and computer

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101119781B1 (ko) * 2009-04-22 2012-05-07 제이 터치 코퍼레이션 스테레오 영상화 터치 장치
WO2012102026A1 (ja) * 2011-01-26 2012-08-02 Necカシオモバイルコミュニケーションズ株式会社 入力装置
JP2012155526A (ja) * 2011-01-26 2012-08-16 Nec Casio Mobile Communications Ltd 入力装置
US9348442B2 (en) 2011-01-26 2016-05-24 Nec Corporation Input apparatus

Also Published As

Publication number Publication date
WO2003010653A1 (en) 2003-02-06
JP4058406B2 (ja) 2008-03-12
CN1278211C (zh) 2006-10-04
SE523636C2 (sv) 2004-05-04
SE0102583L (sv) 2003-01-23
EP1417562A1 (en) 2004-05-12
SE0102583D0 (sv) 2001-07-22
CN1543599A (zh) 2004-11-03
US20050083314A1 (en) 2005-04-21

Similar Documents

Publication Publication Date Title
JP4058406B2 (ja) 手で持つコンピュータ化携帯型装置
EP3997552B1 (en) Virtual user interface using a peripheral device in artificial reality environments
CN104407667B (zh) 用于解释与图形用户界面的物理交互的系统和方法
US9983676B2 (en) Simulation of tangible user interface interactions and gestures using array of haptic cells
US8384718B2 (en) System and method for navigating a 3D graphical user interface
CN101730874B (zh) 基于免接触的手势的输入
Blaskó et al. Exploring interaction with a simulated wrist-worn projection display
US20110310048A1 (en) Mobile terminal and method for controlling the same
US20090256809A1 (en) Three-dimensional touch interface
US20100053151A1 (en) In-line mediation for manipulating three-dimensional content on a display device
CN112136096B (zh) 将物理输入设备显示为虚拟对象
JPWO2020105606A1 (ja) 表示制御装置、表示装置、表示制御方法及びプログラム
EP2558924B1 (en) Apparatus, method and computer program for user input using a camera
KR101873746B1 (ko) 이동 단말기 및 그 제어방법
Alcañiz et al. Technological background of VR
Perry et al. An investigation of current virtual reality interfaces
LaViola Jr Input and output devices
JPH08315172A (ja) 仮想物体表示装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20050630

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20070619

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070919

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20070919

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20070919

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20071120

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20071217

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20101221

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20101221

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111221

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111221

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121221

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121221

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131221

Year of fee payment: 6

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees