[go: up one dir, main page]

JP4168221B2 - 身体装着型表示システム - Google Patents

身体装着型表示システム Download PDF

Info

Publication number
JP4168221B2
JP4168221B2 JP25230199A JP25230199A JP4168221B2 JP 4168221 B2 JP4168221 B2 JP 4168221B2 JP 25230199 A JP25230199 A JP 25230199A JP 25230199 A JP25230199 A JP 25230199A JP 4168221 B2 JP4168221 B2 JP 4168221B2
Authority
JP
Japan
Prior art keywords
signal
computer
output
input
transmission circuit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP25230199A
Other languages
English (en)
Other versions
JP2001078177A (ja
Inventor
竜太郎 那須
英文 斎藤
久 天藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shimadzu Corp
Original Assignee
Shimadzu Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shimadzu Corp filed Critical Shimadzu Corp
Priority to JP25230199A priority Critical patent/JP4168221B2/ja
Priority to US09/644,797 priority patent/US8188937B1/en
Publication of JP2001078177A publication Critical patent/JP2001078177A/ja
Application granted granted Critical
Publication of JP4168221B2 publication Critical patent/JP4168221B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/183Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00Aspects of data communication
    • G09G2370/14Use of low voltage differential signaling [LVDS] for display data communication
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00Aspects of data communication
    • G09G2370/16Use of wireless transmission of display information

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Digital Computer Display Output (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Controls And Circuits For Display Device (AREA)

Description

【0001】
【発明の属する技術分野】
本発明は身体装着型表示システムに関し、一般的なデスク上では行えない作業、例えば大型の装置や設備などの点検、保守、修理、調整、手術などの医療行為、受付案内や商品説明などの接客行為、建機、クレーン、工場設備などの運転操作などの各種作業を行う場合において、その作業に関わる情報を提供するのに利用できる。
【0002】
【従来の技術】
例えば大型装置や設備では、点検、保守、修理、調整などの作業の際に、作業者の身体に装着されるコンピュータと、頭部等に装着される身体装着型表示装置とを用いることで、電子ファイル化されたメンテナンスマニュアルの情報を作業者に提示することが検討されている。この場合、映像信号専用の信号出力ポートをコンピュータに設け、その信号出力ポートに接続されるケーブルを介して映像信号を身体装着型表示装置に出力していた。
【0003】
しかし、そのような作業を行う空間的な範囲は一般的に限定される場合が多いため、表示装置を身体に装着して作業時にハンズフリーで情報を得ることは必要であるが、コンピュータやコンピュータを動作させるバッテリなどは必ずしも身体に装着する必要はない。むしろ、装着者とのインターフェース以外のユニットを身につけないことによって作業時の動作性を優先させることが重要になる。
【0004】
そのため、例えば医療現場ではX線CTやMRI等の診断機器の画像を確認しながら手術を行うために、その診断機器に設けた映像信号出力ポートから引き出した映像信号に基づき、執刀医が装着する頭部装着型表示装置に画像を表示させることが試みられている。また、クレーン等の建設機器に設けたカメラの撮影画像を確認しながら建設機器を操作するために、その建設機器の運転席に設けた映像信号出力ポートから引き出した映像信号に基づき、操作者が装着する頭部装着型表示装置に画像を表示させることが試みられている。
【0005】
【発明が解決しようとする課題】
従来は、身体から離れた画像ソースから出力される映像信号により身体装着型表示装置に画像を表示させるために、映像信号専用の信号出力ポートを画像ソースに設けていた。そのため、そのような映像信号専用の信号出力ポートのない既に装置の付属として機能している従来から存在しているコンピュータや機動性を考慮して採用したブック型などのコンピュータにより身体装着型表示システムを構成するには、その信号出力ポートを追加するための改造が必要であり、そのような改造が困難な場合もあった。そのため、身体装着型表示システムの広範な分野における活用が制限されるという問題があった。
【0006】
また、身体装着型表示装置を装着して作業を行う場合、画像を確認するだけでなく、作業者によりポインティングデバイスやマイクを用いてコンピュータに入力を行うことで、画像切り変えやメニュー選択等が通常は必要になる。また、作業者に装着したカメラによる作業箇所の撮影画像をコンピュータに入力し、離れた場所にいる熟練作業者に送って指導を仰ぐ場合もある。このような場合、そのポインティングデバイス、マイク、カメラ等の入力装置との接続用インターフェースをコンピュータに設け、そのインターフェースを介してコンピュータと入力装置とをケーブルを介して接続する必要がある。一方では、作業者が装着するスピーカやイヤホン等の出力装置にコンピュータから出力信号を送ることで、情報を作業者に提供する場合がある。このような場合、そのスピーカ等の出力装置との接続用インターフェースをコンピュータに設け、そのインターフェースを介してコンピュータと出力装置とをケーブルを介して接続する必要がある。これらのような場合、コンピュータと身体に装着される入出力装置とを接続する配線数が多くなり、多数の配線や太い配線が邪魔になって作業を行う際の動作に支障を来し、身体装着型表示装置を装着することでハンズフリーになった効果が薄れてしまう。
【0007】
本発明は、上記問題を解決することのできる身体装着型表示システムを提供することを目的とする。
【0008】
【課題を解決するための手段】
本発明の身体装着型表示システムは、身体に装着される表示装置と、少なくとも表示用データに対応する信号を出力するコンピュータと、その表示装置とコンピュータとの間に介在する信号伝送装置とを備え、その信号伝送装置は、そのコンピュータのバスラインに接続されるコンピュータ側出力用伝送回路と、その表示装置に映像出力インターフェースを介して接続される身体側出力用伝送回路とを有し、そのコンピュータ側出力用伝送回路は、前記バスラインを介して出力される前記信号に対応するデータを前記コンピュータの中央処理装置により書き込まれるバッファメモリと、そのバッファメモリに記憶されたデータを読み出して通信信号に変換する手段と、その通信信号を送信する手段とを有し、その身体側出力用伝送回路は、そのコンピュータ側出力用伝送回路から送信された通信信号を受信する手段と、その受信された通信信号を前記バスラインを介して出力された信号と同等のものに復元する手段とを有し、前記映像出力インターフェースは、その復元された信号の前記表示用データに基づき、その表示装置を動作させる信号を生成する。
本発明の構成によれば、少なくとも表示用データに対応する信号はコンピュータのバスラインを介してコンピュータ側出力用伝送回路に出力され、この出力された信号に対応するデータは、そのコンピュータの中央処理装置によりコンピュータ側出力用伝送回路におけるバッファメモリに書き込まれる。そのバッファメモリに書き込まれたデータは読み出されて通信信号に変換され、所定の通信速度で身体側出力用伝送回路に送信される。その身体側出力用伝送回路において受信された通信信号は、そのバスラインを介して出力された信号に復元される。その身体側出力用伝送回路に接続される表示装置の映像出力インターフェースは、その復元された信号の中の前記表示用データに対応する信号に基づき、その表示装置を動作させる信号を生成する。
これにより、一般的なバスラインを備えたコンピュータを用い、そのコンピュータに映像信号専用の信号出力ポートを設けることなく、そのコンピュータから出力される表示用データに対応する画像を、身体に装着される表示装置により表示することができる。
また、表示装置用インターフェースを備えていた従前のコンピュータを、本発明のコンピュータとして使用する場合、従前の表示装置用インターフェースのアドレスをコンピュータ側出力用伝送回路のバッファメモリに付与することで、コンピュータの中央処理装置から見た場合のインターフェースのアドレスに変化はないので、従前のコンピュータの制御に用いていたプログラムで、本発明の表示装置の動作が可能になる。
【0009】
本発明の身体装着型表示システムにおいて、入力装置を備え、前記信号伝送装置は、前記コンピュータのバスラインに接続されるコンピュータ側入力用伝送回路と、その入力装置に入力インターフェースを介して接続される身体側入力用伝送回路とを有し、その入力インターフェースにより、その入力装置により生成される入力信号が前記コンピュータのバスラインにより伝送可能な信号に変換され、その身体側入力用伝送回路は、その入力インターフェースから伝送される信号を通信信号に変換する手段と、その通信信号を送信する手段とを有し、そのコンピュータ側入力用伝送回路は、その身体側入力用伝送回路から送信された通信信号を受信する手段と、その受信された通信信号を前記入力インターフェースから伝送される信号に復元する手段と、その復元された入力インターフェースから伝送される信号に対応する入力データを書き込まれるバッファメモリとを有し、そのバッファメモリに記憶された入力データが前記バスラインを介して前記コンピュータの中央処理装置により読み出し可能とされているのが好ましい。
その入力装置により生成される入力信号は、入力インターフェースにより前記コンピュータのバスラインにより伝送可能な信号に変換され、身体側入力用伝送回路により通信信号に変換されてコンピュータ側入力用伝送回路に送信される。そのコンピュータ側入力用伝送回路により受信された通信信号は入力インターフェースから伝送される信号に復元され、その復元された信号に対応する入力データはバッファメモリに書き込まれる。そのバッファメモリに記憶された入力データはバスラインを介してコンピュータにより読み出される。
これにより、身体装着型表示装置を装着して作業を行う場合、画像を確認するだけでなく、装着者により入力装置を用いてコンピュータに入力を行うことが可能になる。しかも、入力装置をコンピュータに直接に接続する必要がなく、コンピュータのバスラインにコンピュータ側出力用伝送回路とコンピュータ側入力用伝送回路とを接続し、表示装置の映像出力インターフェースを身体側出力用伝送回路に接続し、入力装置の入力インターフェースを身体側入力用伝送回路に接続するだけでよい。
よって、通信信号を有線で送信する場合に必要な配線は、コンピュータ側出力用伝送回路と身体側出力用伝送回路との間の配線と、コンピュータ側入力用伝送回路と身体側入力伝送装置との間の配線に集約され、太い配線や多くの配線が不要になる。また、通信信号を無線で送信する場合は配線をなくすことができ、装着者の動作に支障を与えない。
また、表示装置用インターフェースと入力装置用インターフェースを備えていた従前のコンピュータを、本発明のコンピュータとして使用する場合、従前の表示装置用インターフェースのアドレスをコンピュータ側出力用伝送回路のバッファメモリに付与し、従前の入力装置用インターフェースのアドレスをコンピュータ側入力用伝送回路のバッファメモリに付与することで、コンピュータの中央処理装置から見た場合の各インターフェースのアドレスに変化はないので、従前のコンピュータの制御に用いていたプログラムで、本発明の表示装置と入力装置の動作が可能になる。
【0010】
前記表示装置とは別の身体に装着される出力装置が、前記身体側出力用伝送回路に出力インターフェースを介して接続され、前記コンピュータは、前記バスラインを介して出力する信号として、その出力装置による出力内容に対応する信号を出力可能とされ、その出力インターフェースは、その身体側出力用伝送回路により復元された信号の中の前記出力内容に対応する信号に基づき、その出力装置を動作させる信号を生成するのが好ましい。
これにより、出力装置による出力内容に対応する信号はコンピュータのバスラインを介してコンピュータ側出力用伝送回路に出力され、この出力された信号に対応するデータは、そのコンピュータによりコンピュータ側出力用伝送回路におけるバッファメモリに書き込まれる。そのバッファメモリに書き込まれたデータは読み出されて通信信号に変換され、所定の通信速度で身体側出力用伝送回路に送信される。その身体側出力用伝送回路において受信された通信信号は、そのバスラインを介して出力された信号(バスラインを介して書き込まれた内容を直接読み出した信号と同じ信号を含む)に変換される。その身体側出力用伝送回路に接続される出力装置の出力インターフェースは、その復元された信号の中の前記出力内容に対応する信号に基づき、その出力装置を動作させる信号を生成する。
これにより、身体装着型表示装置を装着して作業を行う場合、画像を確認するだけでなく、装着者に出力装置を用いて情報を出力することが可能になる。しかも、出力装置をコンピュータに直接に接続する必要がなく、出力装置の出力インターフェースを身体側出力用伝送回路に接続するだけでよい。
また、表示装置用インターフェースと入出力装置用インターフェースを備えていた従前のコンピュータを、本発明のコンピュータとして使用する場合、従前の表示装置用インターフェースと出力装置用インターフェースのアドレスをコンピュータ側出力用伝送回路のバッファメモリに付与し、従前の入力装置用インターフェースをコンピュータ側入力用伝送回路のバッファメモリに付与することで、コンピュータの中央処理装置から見た場合の各インターフェースのアドレスに変化はないので、従前のコンピュータの制御に用いていたプログラムで、本発明の表示装置と入出力装置の動作が可能になる。
【0011】
前記通信信号は無線により送信側から受信側に伝送されるのが好ましい。
その通信信号を無線により送信側から受信側に伝送することで、表示装置、入出力装置とコンピュータとの間の配線をなくし、表示装置の装着者の動きが配線により邪魔されるのを防止することが可能になる。
【0012】
【発明の実施の形態】
以下、図面を参照して本発明の実施形態を説明する。
図1に示す身体装着型表示システム1は、作業者2の頭部に装着される頭部装着型表示装置(HMD)3と、作業者2の身体から離れて存在するコンピュータ4と、その頭部装着型表示装置3とコンピュータ4との間に介在する信号伝送装置5と、その頭部装着型表示装置3に取り付けられることで作業者2に装着されるマイク(入力装置)6、スピーカ又はイヤホン(出力装置)7およびカメラ(入力装置)8と、その作業者2により操作されるマウス(入力装置)9とを備える。そのマウス9は作業者2が手に把持してもよいし、腕等の身体にバンド等で取り付けられてもよい。
【0013】
図2に示すように、そのコンピュータ4は、キャッシュメモリ11とチップセット12にバスライン13を介して接続される中央処理装置(CPU)14を有し、そのチップセット12はバスライン15を介してメインメモリ16に接続され、そのチップセット12にハードディスクインターフェース17を介してハードディスク18が接続されている。このコンピュータ4、その中央処理装置14がメインメモリ16及びハードディスク18に記憶された実行命令やデータに従った処理を行うことで、頭部装着型表示装置3による表示用データに対応する信号とスピーカ7による音声出力の内容に対応する信号を出力する。
【0014】
その信号伝送装置5は、コンピュータ側出力用伝送回路21、コンピュータ側入力用伝送回路22、身体側出力用伝送回路23、および身体側入力用伝送回路24を有する。
【0015】
図1に示すように、そのコンピュータ側出力用伝送回路21とコンピュータ側入力用伝送回路22は、共通の基板上にホスト回路ユニットHとして設けられ、コンピュータ4のバスライン19にバスラインコネクタ19″を介して接続されている。そのバスライン19はデータ用、アドレス用、制御用に複数本あり、本実施形態では、そのバスライン19はISAバスとされている。そのISAバスのような汎用バス規格に合致するバスラインに、コンピュータ側出力用伝送回路21とコンピュータ側入力用伝送回路22とをコネクタを介して着脱可能とすることで、現存の殆どのシステムに本システム1を容易に組み込むことができる。
【0016】
その身体側出力用伝送回路23と身体側入力用伝送回路24は、スレーブ回路ユニットSとして作業者2の頭部に頭部装着型表示装置3を介して装着される。
その身体側出力用伝送回路23は頭部装着型表示装置3に映像出力インターフェース36を介して接続され、スピーカ7に音声出力インターフェース37を介して接続される。その身体側入力用伝送回路24はマイク6に音声入力インターフェース38を介して接続され、カメラ8に映像入力インターフェース39を介して接続され、マウス9にマウス入力インターフェース40を介して接続される。各インターフェース36、37、38、39、40はスレーブ回路ユニットSのケーシング内に配置されることで作業者2の頭部に頭部装着型表示装置3を介して装着される。各インターフェース36、37、38、39、40はスレーブ回路ユニットSに、コンピュータ4のバスライン19と同じISAバス規格と同じ動作機能を持つバスライン19′を介して接続されている。
【0017】
そのコンピュータ側出力用伝送回路21は、バッファメモリ31と、シリアライザ32と、送信回路33とを有する。
そのバッファメモリ31に、そのコンピュータ4のバスライン19を介して出力される上記頭部装着型表示装置3による表示用データに対応する信号とスピーカ7による音声出力の内容に対応する信号に対応するデータが、上記中央処理装置14によりチップセット12を介して書き込まれる。
そのシリアライザ32は、そのバッファメモリ31に記憶されたデータを読み出して通信信号に変換する。本実施形態では、そのシリアライザ32によりバッファメモリ31から読み出されたデータは高速のシリアル信号に変換され、必要な伝送速度が確保される。
その送信回路33は、そのシリアライザ32から出力される複数チャンネルのシリアル通信信号をモジュレータ33aによって変調し、この際、各チャンネルのシリアル通信信号の周波数を一定周波数間隔で互いに異なる値とすることで、各チャンネルのシリアル通信信号それぞえに1チャンネルの周波数を割り当て、これら複数チャンネルの変調波をアンプ33bにてミキシング、増幅を行い、ホストアンテナ50を介して電磁波に変換して無線により送信する。
【0018】
その身体側出力用伝送回路23は、受信回路34と、デシリアライザ35とを有する。
その受信回路34は、そのコンピュータ側出力用伝送回路21から送信された通信信号を受信する。すなわち受信回路34は、スレーブアンテナ51にて受信した電磁波を、アンプ34aにて増幅した後、元のシリアル通信信号の各チャンネル毎にデモジュレータ34bにて復調し、デシリアライザ35に送る。
そのデシリアライザ35は、その受信された通信信号を上記コンピュータ4のバスライン19を介して出力された元のバス幅のパラレルデータ信号に復元する。その復元された信号は、上記各インターフェース36、37、38、39、40にアクセスされる。
【0019】
図1に示すように、その頭部装着型表示装置3は、作業者2の目に導かれる画像表示光を出射する表示素子3aと、この表示素子3aを作業者2の頭部に装着するためのヘッドセット等の装着部3bとを有する。その表示素子3aは、例えばバックライト付き液晶表示素子により構成される。なお、頭部装着型表示装置として、例えば全反射ミラーあるいはハーフミラーやホログラム素子等のコンバイナにより構成される光学素子により、表示素子から出射される画像表示光を作業者の目に導くタイプのものを用いてもよい。また、頭部装着型表示装置に代えて、頭部以外の身体部分に取り付けられる表示装置を用いてもよい。
【0020】
上記映像出力インターフェース36は、その身体側出力用伝送回路23のデシリアライザ35により復元された信号の中の上記表示用データに対応する信号に基づき、その頭部装着型表示装置3の表示素子3aを動作させる信号を生成する。これにより、その表示用データに対応する画像が作業者2により視認される。
また、上記音声出力インターフェース37は、その身体側出力用伝送回路23のデシリアライザ35により復元された信号の中の上記音声出力内容に対応する信号に基づき、そのスピーカ7を動作させる信号を生成する。これにより、その音声出力内容に対応する音声が作業者2により聴取される。
【0021】
上記音声入力インターフェース38により、マイク6により生成される音声入力信号がコンピュータ4のバスライン19により伝送可能な信号に変換され、映像入力インターフェース39により、カメラ8により生成される映像入力信号がコンピュータ4のバスライン19により伝送可能な信号に変換され、マウス入力インターフェース40より、マウス9により生成される入力信号がコンピュータ4のバスライン19により伝送可能な信号に変換される。
【0022】
上記身体側入力用伝送回路24は、シリアライザ41と送信回路42とを有する。
そのシリアライザ41は、各入力インターフェース38、39、40から伝送される信号を通信信号に変換する。本実施形態では、そのシリアライザ42により各入力インターフェース38、39、40から伝送されたデータは高速のシリアル信号に変換され、必要な伝送速度が確保される。
その送信回路42は、そのシリアライザ41から出力される複数チャンネルのシリアル通信信号をモジュレータ42aによって変調し、この際、各チャンネルのシリアル通信信号の周波数を一定周波数間隔で互いに異なった値とすることで、各チャンネルのシリアル通信信号それぞれに1チャンネルの周波数を割り当て、これら複数チャンネルの変調波をアンプ42bにてミキシング、増幅を行い、スレーブアンテナ51を介して電磁波に変換して無線により送信する。
【0023】
その信号伝送装置5による無線通信に際しては要求される通信速度を確保するため800MHz以上の周波数帯の電磁波を利用するのが好ましい。例えば2.4GHz帯域の周波数を用いる場合、1MHz毎にチャンネルを設定することとなり、2.402GHzから2.480GHzの間の計79チャンネルを使用することができる。コンピュータ4のバスライン19がISAバスの場合、この中の任意の12チャンネルを選択して用いることとなる。また、この場合において伝送距離を10m程度とすると、一般的に100mW程度の送信電力にて実現できるため、無線伝送により消費される電力は携帯電話機と同等或いはそれ以下とすることができる。このため、身体に装着される側に必要な電源容量は、CPUやこの周辺回路を動作させるに必要な電源容量と比べると格段に小さくなり、小型のバッテリをヘッドセット等に組み込むことが可能になる。
【0024】
そのコンピュータ側入力用伝送回路22は、受信回路43と、デシリアライザ44と、バッファメモリ45とを有する。
その受信回路43は、その身体側入力用伝送回路24から送信された通信信号を受信する。すなわち受信回路43は、ホストアンテナ50にて受信した電磁波を、アンプ43aにて増幅した後、元のシリアル通信信号の各チャンネル毎にデモジュレータ43bにて復調し、デシリアライザ44に送る。
そのデシリアライザ44は、その受信された通信信号を入力インターフェース38、39、40から伝送される元のバス幅のパラレルデータ信号に復元する。
そのバッファメモリ45に、その復元された入力インターフェース38、39、40から伝送される信号に対応する入力データが書き込まれる。
そのバッファメモリ45に記憶された入力データがコンピュータ4の中央処理装置14により読み出し可能とされている。
【0025】
図3は本発明の変形例を示す。上記実施形態との相違は、通信信号の伝送手段としてLVDS(Low Voltage Differential Signaling)方式を採用した点にある。すなわち、上記実施形態におけるコンピュータ側出力用伝送回路21の送信回路33と、身体側入力用伝送回路24の送信回路42に代えて、LVDSトランスミッタ33′、42′を用い、上記実施形態における身体側出力用伝送回路23の受信回路34とコンピュータ側入力用伝送回路22の受信回路43に代えて、LVDSレシーバ34′、43′を用いている。そのLVDSトランスミッタ33′、42′によりシリアル通信信号を小電圧振幅のディファレンシャル信号とし、ケーブルによりLVDSレシーバ34′、43′に送信する。例えばISAバスは、基本的には20ビットのシステムアドレスバス、7ビットのコントロールバスを兼用するアドレスバス、16ビットのシステムデータバスが、8.3MHzの基本クロックにて動作する。これらバスを介して出力される計43ビットの情報を、10 bit to 1 bitのシリアライザと1 bit to 10 bitのデシリアライザにてシリアル伝送する場合、送信、受信にそれぞれ5チャンネル、計10チャンネルの信号ラインにて伝送できることとなる。
他は上記実施形態と同様で同一部分は同一符号で示す。
【0026】
上記構成によれば、表示用データと音声出力内容に対応する信号はコンピュータ4のバスライン19を介してコンピュータ側出力用伝送回路21に出力され、この出力された信号に対応するデータは中央処理装置14によりバッファメモリ31に書き込まれる。そのバッファメモリ31に書き込まれたデータは読み出されて通信信号に変換されて送信され、身体側出力用伝送回路23において受信されてバスライン19を介して出力された信号に復元される。映像出力インターフェース36は、その復元された信号の中の表示用データに対応する信号に基づき頭部装着型表示装置3を動作させる信号を生成し、音声出力インターフェース37は、その復元された信号の中の音声出力内容に対応する信号に基づきスピーカ7を動作させる信号を生成する。これにより、一般的なバスライン19を備えたコンピュータ4を用い、そのコンピュータ4に映像信号専用の信号出力ポートを設けることなく、そのコンピュータ4から出力される表示用データに対応する画像を頭部装着型表示装置3により表示することができる。また、作業者2にスピーカ7を用いて情報を出力することが可能になり、しかも、そのスピーカ7をコンピュータ4に直接に接続する必要がなく、音声出力インターフェース37を身体側出力用伝送回路23に接続するだけでよい。
【0027】
また、上記構成によれば、マイク6、カメラ8、マウス9により生成される入力信号は、入力インターフェース38、39、40によりコンピュータ4のバスライン19により伝送可能な信号に変換され、身体側入力用伝送回路24により通信信号に変換されて送信され、コンピュータ側入力用伝送回路22により受信された通信信号は入力インターフェース38、39、40から伝送される信号に復元される。その復元された信号に対応する入力データはバッファメモリ45に書き込まれる。そのバッファメモリ45に記憶された入力データがコンピュータ4により読み出される。これにより、頭部装着型表示装置3を装着して作業を行う場合、画像を確認するだけでなく、作業者2により入力装置6、8、9を用いてコンピュータ4に入力を行うことが可能になる。しかも、入力装置6、8、9をコンピュータ4に直接に接続する必要がなく、コンピュータ4のバスラインにコンピュータ側出力用伝送回路21とコンピュータ側入力用伝送回路22とを接続し、映像出力インターフェース36を身体側出力用伝送回路23に接続し、入力インターフェース38、39、40を身体側入力用伝送回路24に接続するだけでよい。よって、通信信号を有線で送信する場合に必要な配線は、コンピュータ側出力用伝送回路21と身体側出力用伝送回路23との間の配線と、コンピュータ側入力用伝送回路22と身体側入力用伝送回路24との間の配線に集約され、太い配線や多くの配線が不要になる。また、通信信号を無線で送信する場合は配線をなくすことができる。
【0028】
また、その通信信号を無線により送信側から受信側に伝送することで、表示装置、入出力装置とコンピュータとの間の配線をなくし、表示装置の装着者の動きが配線により邪魔されるのを防止することが可能になる。
【0029】
なお、表示装置用インターフェースと入出力装置用インターフェースを備えていた従前のコンピュータを上記コンピュータ4として使用する場合、従前の表示装置用インターフェースと出力装置用インターフェースのアドレスをコンピュータ側出力用伝送回路21のバッファメモリ31に付与し、従前の入力装置用インターフェースのアドレスをコンピュータ側入力用伝送回路22のバッファメモリ45に付与することで、中央処理装置14から見た場合の各インターフェースのアドレスに変化はないので、従前のコンピュータの制御に用いていたプログラムで、頭部装着型表示装置3と入出力装置6、7、8、9の動作が可能になる。
【0030】
本発明は上記実施形態に限定されない。例えば、身体側出力用伝送回路にてコンピュータからバスラインを介して出力された信号に復元された信号は、そのバスラインを介して出力された信号のままで出力インターフェースに伝送されるものに限定されず、例えばシリアル信号として伝送されるようにしてもよい。また、入力装置や出力装置の種類は特に限定されず、マウス以外のポインティングデバイスやパッド状キーボード等を用いてもよい。また、頭部装着型表示装置、マイク、カメラ、ポインティングデバイス、キーパッド、イヤホン等のインターフェースをASIC化して小型軽量化を図ってもよい。また、ポインティングデバイスやパッド状キーボードのような頭部装着型表示装置から離れた位置で使用される入出力装置を用いず、頭部装着型表示装置、マイク、イヤホン、カメラ等の入出力装置と、これら入出力装置のインターフェース、身体側入出力用伝送回路を、頭部装着型表示装置を頭部に装着するためのヘッドセット等の構成部位に組み込み、通信信号の伝送を無線方式とすることで、ケーブルが外に出ない形態にできる。
【0031】
【発明の効果】
本発明によれば、ハンズフリーで作業を行う者にコンピュータから情報を提供するのに適した身体装着型表示システムの広範な分野における活用に貢献できる。
【図面の簡単な説明】
【図1】本発明の実施形態の身体装着型表示システムの斜視図
【図2】本発明の実施形態の身体装着型表示システムの構成説明図
【図3】本発明の変形例の身体装着型表示システムの構成説明図
【符号の説明】
3 頭部装着型表示装置
4 コンピュータ
5 信号伝送装置
6、8、9 入力装置
7 出力装置
14 中央処理装置
19 バスライン
21 コンピュータ側出力用伝送回路
22 コンピュータ側入力用伝送回路
23 身体側出力用伝送回路
24 身体側入力用伝送回路
31、45 バッファメモリ
32、41 シリアライザ
33、42 送信回路
34、43 受信回路
35、44 デシリアライザ
36 映像出力インターフェース
37 音声出力インターフェース
38 音声入力インターフェース
39 映像入力インターフェース
40 マウス入力インターフェース

Claims (4)

  1. 身体に装着される表示装置と、
    少なくとも表示用データに対応する信号を出力するコンピュータと、
    その表示装置とコンピュータとの間に介在する信号伝送装置とを備え、
    その信号伝送装置は、そのコンピュータのバスラインに接続されるコンピュータ側出力用伝送回路と、その表示装置に映像出力インターフェースを介して接続される身体側出力用伝送回路とを有し、
    そのコンピュータ側出力用伝送回路は、前記バスラインを介して出力される前記信号に対応するデータを前記コンピュータの中央処理装置により書き込まれるバッファメモリと、そのバッファメモリに記憶されたデータを読み出して通信信号に変換する手段と、その通信信号を送信する手段とを有し、
    その身体側出力用伝送回路は、そのコンピュータ側出力用伝送回路から送信された通信信号を受信する手段と、その受信された通信信号を前記バスラインを介して出力された信号に復元する手段とを有し、
    前記映像出力インターフェースは、その復元された信号の前記表示用データに基づき、その表示装置を動作させる信号を生成する身体装着型表示システム。
  2. 入力装置を備え、
    前記信号伝送装置は、前記コンピュータのバスラインに接続されるコンピュータ側入力用伝送回路と、その入力装置に入力インターフェースを介して接続される身体側入力用伝送回路とを有し、
    その入力インターフェースにより、その入力装置により生成される入力信号が前記コンピュータのバスラインにより伝送可能な信号に変換され、
    その身体側入力用伝送回路は、その入力インターフェースから伝送される信号を通信信号に変換する手段と、その通信信号を送信する手段とを有し、
    そのコンピュータ側入力用伝送回路は、その身体側入力用伝送回路から送信された通信信号を受信する手段と、その受信された通信信号を前記入力インターフェースから伝送される信号に復元する手段と、その復元された入力インターフェースから伝送される信号に対応する入力データを書き込まれるバッファメモリとを有し、
    そのバッファメモリに記憶された入力データが前記バスラインを介して前記コンピュータの中央処理装置により読み出し可能とされている請求項1に記載の身体装着型表示システム。
  3. 前記表示装置とは別の身体に装着される出力装置が、前記身体側出力用伝送回路に出力インターフェースを介して接続され、
    前記コンピュータは、前記バスラインを介して出力する信号として、その出力装置による出力内容に対応する信号を出力可能とされ、
    その出力インターフェースは、その身体側出力用伝送回路により復元された信号の中の前記出力内容に対応する信号に基づき、その出力装置を動作させる信号を生成する請求項1または2に記載の身体装着型表示システム。
  4. 前記通信信号は無線により送信側から受信側に伝送される請求項1〜3の中の何れかに記載の身体装着型表示システム。
JP25230199A 1999-09-06 1999-09-06 身体装着型表示システム Expired - Fee Related JP4168221B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP25230199A JP4168221B2 (ja) 1999-09-06 1999-09-06 身体装着型表示システム
US09/644,797 US8188937B1 (en) 1999-09-06 2000-08-24 Body mounting type display system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP25230199A JP4168221B2 (ja) 1999-09-06 1999-09-06 身体装着型表示システム

Publications (2)

Publication Number Publication Date
JP2001078177A JP2001078177A (ja) 2001-03-23
JP4168221B2 true JP4168221B2 (ja) 2008-10-22

Family

ID=17235354

Family Applications (1)

Application Number Title Priority Date Filing Date
JP25230199A Expired - Fee Related JP4168221B2 (ja) 1999-09-06 1999-09-06 身体装着型表示システム

Country Status (2)

Country Link
US (1) US8188937B1 (ja)
JP (1) JP4168221B2 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8091399B2 (en) 2004-10-28 2012-01-10 Sumitomo Metal Industries, Ltd. Process for manufacturing a seamless tube

Families Citing this family (58)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8773361B2 (en) * 2007-11-20 2014-07-08 Samsung Electronics Co., Ltd. Device identification method and apparatus, device information provision method and apparatus, and computer-readable recording mediums having recorded thereon programs for executing the device identification method and the device information provision method
US8917247B2 (en) 2007-11-20 2014-12-23 Samsung Electronics Co., Ltd. External device identification method and apparatus in a device including a touch spot, and computer-readable recording mediums having recorded thereon programs for executing the external device identification method in a device including a touch spot
CN105027206A (zh) * 2012-11-29 2015-11-04 斯蒂芬·蔡斯 视频耳机、系统、平台、方法、设备和媒体
US20140198034A1 (en) 2013-01-14 2014-07-17 Thalmic Labs Inc. Muscle interface device and method for interacting with content displayed on wearable head mounted displays
US10152082B2 (en) 2013-05-13 2018-12-11 North Inc. Systems, articles and methods for wearable electronic devices that accommodate different user forms
US10042422B2 (en) 2013-11-12 2018-08-07 Thalmic Labs Inc. Systems, articles, and methods for capacitive electromyography sensors
US10188309B2 (en) 2013-11-27 2019-01-29 North Inc. Systems, articles, and methods for electromyography sensors
US11426123B2 (en) 2013-08-16 2022-08-30 Meta Platforms Technologies, Llc Systems, articles and methods for signal routing in wearable electronic devices that detect muscle activity of a user using a set of discrete and separately enclosed pod structures
US11921471B2 (en) 2013-08-16 2024-03-05 Meta Platforms Technologies, Llc Systems, articles, and methods for wearable devices having secondary power sources in links of a band for providing secondary power in addition to a primary power source
US20150124566A1 (en) 2013-10-04 2015-05-07 Thalmic Labs Inc. Systems, articles and methods for wearable electronic devices employing contact sensors
US12504816B2 (en) 2013-08-16 2025-12-23 Meta Platforms Technologies, Llc Wearable devices and associated band structures for sensing neuromuscular signals using sensor pairs in respective pods with communicative pathways to a common processor
US9788789B2 (en) 2013-08-30 2017-10-17 Thalmic Labs Inc. Systems, articles, and methods for stretchable printed circuit boards
EP3104737A4 (en) 2014-02-14 2017-10-11 Thalmic Labs Inc. Systems, articles, and methods for elastic electrical cables and wearable electronic devices employing same
US10199008B2 (en) 2014-03-27 2019-02-05 North Inc. Systems, devices, and methods for wearable electronic devices as state machines
US20150325202A1 (en) * 2014-05-07 2015-11-12 Thalmic Labs Inc. Systems, devices, and methods for wearable computers with heads-up displays
US9880632B2 (en) 2014-06-19 2018-01-30 Thalmic Labs Inc. Systems, devices, and methods for gesture identification
US9874744B2 (en) 2014-06-25 2018-01-23 Thalmic Labs Inc. Systems, devices, and methods for wearable heads-up displays
US9807221B2 (en) 2014-11-28 2017-10-31 Thalmic Labs Inc. Systems, devices, and methods effected in response to establishing and/or terminating a physical communications link
US10031338B2 (en) 2015-02-17 2018-07-24 Thalmic Labs Inc. Systems, devices, and methods for eyebox expansion in wearable heads-up displays
US9958682B1 (en) 2015-02-17 2018-05-01 Thalmic Labs Inc. Systems, devices, and methods for splitter optics in wearable heads-up displays
US10078435B2 (en) 2015-04-24 2018-09-18 Thalmic Labs Inc. Systems, methods, and computer program products for interacting with electronically displayed presentation materials
US10175488B2 (en) 2015-05-04 2019-01-08 North Inc. Systems, devices, and methods for spatially-multiplexed holographic optical elements
AU2016267275B2 (en) 2015-05-28 2021-07-01 Google Llc Systems, devices, and methods that integrate eye tracking and scanning laser projection in wearable heads-up displays
CN108474873A (zh) 2015-09-04 2018-08-31 赛尔米克实验室公司 用于将全息光学元件与眼镜镜片整合在一起的系统、制品和方法
CA3007196A1 (en) 2015-10-01 2017-04-06 Thalmic Labs Inc. Systems, devices, and methods for interacting with content displayed on head-mounted displays
US9904051B2 (en) 2015-10-23 2018-02-27 Thalmic Labs Inc. Systems, devices, and methods for laser eye tracking
US10802190B2 (en) 2015-12-17 2020-10-13 Covestro Llc Systems, devices, and methods for curved holographic optical elements
US10303246B2 (en) 2016-01-20 2019-05-28 North Inc. Systems, devices, and methods for proximity-based eye tracking
US10151926B2 (en) 2016-01-29 2018-12-11 North Inc. Systems, devices, and methods for preventing eyebox degradation in a wearable heads-up display
CA3020631A1 (en) 2016-04-13 2017-10-19 Thalmic Labs Inc. Systems, devices, and methods for focusing laser projectors
US11216069B2 (en) 2018-05-08 2022-01-04 Facebook Technologies, Llc Systems and methods for improved speech recognition using neuromuscular information
CN110300542A (zh) 2016-07-25 2019-10-01 开创拉布斯公司 使用可穿戴的自动传感器预测肌肉骨骼位置信息的方法和装置
US10277874B2 (en) 2016-07-27 2019-04-30 North Inc. Systems, devices, and methods for laser projectors
WO2018027326A1 (en) 2016-08-12 2018-02-15 Thalmic Labs Inc. Systems, devices, and methods for variable luminance in wearable heads-up displays
US10215987B2 (en) 2016-11-10 2019-02-26 North Inc. Systems, devices, and methods for astigmatism compensation in a wearable heads-up display
WO2018098579A1 (en) 2016-11-30 2018-06-07 Thalmic Labs Inc. Systems, devices, and methods for laser eye tracking in wearable heads-up displays
US10365492B2 (en) 2016-12-23 2019-07-30 North Inc. Systems, devices, and methods for beam combining in wearable heads-up displays
US10437073B2 (en) 2017-01-25 2019-10-08 North Inc. Systems, devices, and methods for beam combining in laser projectors
WO2019079757A1 (en) 2017-10-19 2019-04-25 Ctrl-Labs Corporation SYSTEMS AND METHODS FOR IDENTIFYING BIOLOGICAL STRUCTURES ASSOCIATED WITH NEUROMUSCULAR SOURCE SIGNALS
US20190121135A1 (en) 2017-10-23 2019-04-25 North Inc. Free space multiple laser diode modules
WO2019112850A1 (en) 2017-12-07 2019-06-13 First-Light Usa, Llc Head-mounted illumination devices
US11144125B2 (en) 2017-12-07 2021-10-12 First-Light Usa, Llc Hands-free switch system
US11961494B1 (en) 2019-03-29 2024-04-16 Meta Platforms Technologies, Llc Electromagnetic interference reduction in extended reality environments
US11907423B2 (en) 2019-11-25 2024-02-20 Meta Platforms Technologies, Llc Systems and methods for contextualized interactions with an environment
US11481030B2 (en) 2019-03-29 2022-10-25 Meta Platforms Technologies, Llc Methods and apparatus for gesture detection and classification
US10937414B2 (en) 2018-05-08 2021-03-02 Facebook Technologies, Llc Systems and methods for text input using neuromuscular information
US11493993B2 (en) 2019-09-04 2022-11-08 Meta Platforms Technologies, Llc Systems, methods, and interfaces for performing inputs based on neuromuscular control
US11150730B1 (en) 2019-04-30 2021-10-19 Facebook Technologies, Llc Devices, systems, and methods for controlling computing devices via neuromuscular signals of users
US10592001B2 (en) 2018-05-08 2020-03-17 Facebook Technologies, Llc Systems and methods for improved speech recognition using neuromuscular information
WO2020047429A1 (en) 2018-08-31 2020-03-05 Ctrl-Labs Corporation Camera-guided interpretation of neuromuscular signals
WO2020061451A1 (en) 2018-09-20 2020-03-26 Ctrl-Labs Corporation Neuromuscular text entry, writing and drawing in augmented reality systems
US11797087B2 (en) 2018-11-27 2023-10-24 Meta Platforms Technologies, Llc Methods and apparatus for autocalibration of a wearable electrode sensor system
US11553313B2 (en) 2020-07-02 2023-01-10 Hourglass Medical Llc Clench activated switch system
US12380798B2 (en) 2020-07-02 2025-08-05 Hourglass Medical Llc Switch system for operating a controlled device
US11698678B2 (en) 2021-02-12 2023-07-11 Hourglass Medical Llc Clench-control accessory for head-worn devices
US11868531B1 (en) 2021-04-08 2024-01-09 Meta Platforms Technologies, Llc Wearable device providing for thumb-to-finger-based input gestures detected based on neuromuscular signals, and systems and methods of use thereof
US11662804B2 (en) 2021-04-21 2023-05-30 Hourglass Medical Llc Voice blanking muscle movement controlled systems
EP4591113A1 (en) 2022-10-04 2025-07-30 Hourglass Medical LLC Eyeglasses nose piece switch

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5491651A (en) * 1992-05-15 1996-02-13 Key, Idea Development Flexible wearable computer
US5977935A (en) * 1993-08-12 1999-11-02 Seiko Epson Corporation Head-mounted image display device and data processing apparatus including the same
JPH086708A (ja) * 1994-04-22 1996-01-12 Canon Inc 表示装置
JPH0888815A (ja) * 1994-09-19 1996-04-02 Olympus Optical Co Ltd 映像表示システム
US6046712A (en) * 1996-07-23 2000-04-04 Telxon Corporation Head mounted communication system for providing interactive visual communications with a remote system
US6388657B1 (en) * 1997-12-31 2002-05-14 Anthony James Francis Natoli Virtual reality keyboard system and method
US6356437B1 (en) * 1999-03-29 2002-03-12 Siemens Dematic Postal Automation, L.P. System, apparatus and method for providing a portable customizable maintenance support instruction system

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8091399B2 (en) 2004-10-28 2012-01-10 Sumitomo Metal Industries, Ltd. Process for manufacturing a seamless tube

Also Published As

Publication number Publication date
JP2001078177A (ja) 2001-03-23
US8188937B1 (en) 2012-05-29

Similar Documents

Publication Publication Date Title
JP4168221B2 (ja) 身体装着型表示システム
US20020015008A1 (en) Computer system and headset-mounted display device
JP4627344B2 (ja) 双方向通信を備えた患者監視システム
US7656397B2 (en) Pointing device with integrated audio input and associated methods
JP4566443B2 (ja) 無線通信システム
US20010024507A1 (en) Cellular telephone, personal digital assistant with voice communication unit
EP1051945A3 (en) Diagnostic system and apparatus
US20020057810A1 (en) Computer and voice communication unit with handsfree device
DE69821223D1 (de) Diagnosegerät
US9571619B2 (en) Electronic communication system, in-vehicle unit, and control method
CN109004947A (zh) 一种射频装置和电子设备
EP2845115B1 (en) Cable chip system
JP4445178B2 (ja) 通信システムおよびそのための適切な制御ユニット
EP1022644A1 (en) Flat panel display
CN101989125A (zh) 手机的设备共享至计算机的装置
EP1345339A1 (en) Radio system, radio device, radio connection method, program, and medium
CN212012625U (zh) 无线通信模块以及多路语音通话装置
US20170366785A1 (en) Hands-Free Headset For Use With Mobile Communication Device
KR20150001329A (ko) 전자장치 및 전자장치를 이용한 정보교환 방법
JPH08213818A (ja) 無線端末機器
CN110868266B (zh) 一种电子设备及信息处理方法
KR20020079832A (ko) 전자 장치의 기능성을 모듈화하는 시스템 및 방법
JP3867780B2 (ja) ケーブルボックス、電気機器システム
KR100698136B1 (ko) 이동통신 단말기를 이용한 데이터 송수신방법
JP2001268018A (ja) 通信方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20060112

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20080623

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20080709

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20080722

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110815

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110815

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120815

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120815

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130815

Year of fee payment: 5

LAPS Cancellation because of no payment of annual fees