JP6330089B1 - 仮想空間を提供するためにコンピュータで実行されるプログラム、情報処理装置および仮想空間を提供するための方法 - Google Patents

Abstract

【課題】ヘッドマウントデバイスによって提供される仮想空間における撮影を容易に実現する。
【解決手段】ヘッドマウントデバイスに装着される端末のモニタ１１２の画面の状態は、仮想空間におけるコンテンツ１０１を撮影するためのカメラオブジェクト１００表示する状態Ａと、カメラオブジェクト１００の位置および姿勢を調整するために左手オブジェクト１０４および右手オブジェクト１０５を表示する状態Ｂと、カメラオブジェクト１００の位置および姿勢が確定した後に左手オブジェクト１０４および右手オブジェクト１０５が非表示になる状態Ｃとを含む。
【選択図】図１

Description

本開示は、ヘッドマウントデバイスを用いた仮想空間の提供に関し、より特定的には仮想空間における撮影に関する。

ヘッドマウントデバイス（Head-Mounted Device：以下「ＨＭＤ」と表す。）を用いて仮想現実空間（以下「仮想空間」ともいう。）を提供する技術が知られている。仮想空間においては、ＨＭＤのユーザに対応するアバターが表示され得る。例えば、特開２０１７−１０２６３９号公報（特許文献１）は、「ユーザの頭部や視線の動きを他のユーザに対して選択的に公開することが可能なアバター表示システム」を開示している（［要約］参照）。

特開２０１７−１０２６３９号公報

仮想空間に提示されるコンテンツによっては、現実空間と同様に写真を撮影したいというニーズが生じ得る。また、現実空間の場合と同様に所謂自撮りを行ないたいというニーズも生じ得る。さらに、仮想空間に提供されるコンテンツが複数のユーザによって視聴される場合、撮影ポイントを共有したいというニーズも生じ得る。したがって、仮想空間における撮影を可能にする技術が必要とされている。また、仮想空間においても容易に自撮りを行なえる技術が必要とされている。さらには、撮影ポイントを容易に共有できる技術も必要とされる。

本開示は上述のような背景に鑑みてなされたものであって、ある局面における目的は、仮想空間における撮影を可能にする技術を提供することである。他の局面における目的は仮想空間において所謂自撮りを可能にする技術を提供することである。さらには、仮想空間における撮影ポイントを共有できる技術も提供することである。

ある実施の形態に従うと、仮想空間を提供するためにコンピュータで実行されるプログラムが提供される。このプログラムはコンピュータに、コンピュータに接続されるヘッドマウントデバイスに提示される仮想空間を定義するステップと、仮想空間に表示される画像を撮影するためのカメラオブジェクトを仮想空間に提示するステップと、ヘッドマウントデバイスのユーザによるカメラオブジェクトの位置または姿勢を変更するための操作を受け付けるステップと、位置を表わす位置情報または姿勢を表わす姿勢情報を保存するステップとを実行させる。

ある実施の形態に従うと、仮想空間における撮影が容易になる。他の局面において、仮想空間における自撮りが容易になる。さらに別の局面において、仮想空間における撮影ポイントが共有され得る。

この発明の上記および他の目的、特徴、局面および利点は、添付の図面と関連して理解されるこの発明に関する次の詳細な説明から明らかとなるであろう。

モニタ１１２における画面の表示の移り変わりを表わす図である。 モニタ１１２に提示される画像と、その時の仮想空間２における各オブジェクトの位置関係を表わす図である。 ある実施の形態に従うＨＭＤシステム３００の構成の概略を表す図である。 一局面に従うコンピュータ２００のハードウェア構成の一例を表すブロック図である。 ある実施の形態に従うＨＭＤ１１０に設定されるｕｖｗ視野座標系を概念的に表す図である。 ある実施の形態に従う仮想空間２を表現する一態様を概念的に表す図である。 ある実施の形態に従うＨＭＤ１１０を装着するユーザ１９０の頭部を上から表した図である。 仮想空間２において視界領域２３をＸ方向から見たＹＺ断面を表す図である。 仮想空間２において視界領域２３をＹ方向から見たＸＺ断面を表す図である。 ある実施の形態に従うコントローラ１６０の概略構成を表す図である。 右コントローラ８００を把持するユーザ１９０の右手に対応して仮想空間に配置されるハンドオブジェクト８１０の一例を示す。 ある実施の形態に従うコンピュータ２００をモジュール構成として表わすブロック図である。 サーバ１５０が備えるストレージ１５４におけるデータの格納の一態様を概念的に表わす図である。 ある実施の形態に従って位置情報および取得情報を取得するためにコンピュータ２００のプロセッサ１０が実行する処理の一部を表わすフローチャートである。 アングル調整から撮影までに実行される処理の一部を表わすフローチャートである。 ある実施の形態に従って、お薦めの撮影地点を提供するためにサーバ１５０が実行する処理の一部を表わすフローチャートである。 サーバ１５０によって配信されるコンテンツ１７００の構成の一例を表わす図である。 ある実施の形態に従ってコンピュータ２００がコンテンツ１７００を再生する場合における処理の一部を表わすフローチャートである。 モニタ１１２がおすすめの撮影ポイントを提示する場合における画面の遷移を表わす図である。

以下、図面を参照しつつ、本発明の実施の形態について説明する。以下の説明では、同一の部品には同一の符号を付してある。それらの名称および機能も同じである。したがって、それらについての詳細な説明は繰り返さない。

まず、写真の撮影に関し、現実空間および仮想空間における相違点を説明する。現実空間では、以下のような点が認識され得る。撮影者は、たくさんの写真を撮りたいという願望を持つ。その一方で、撮影者は、いちいち自撮り棒を伸縮させることすら手間と考える。また、撮影者は、どこで撮影すると良いかといった情報を有さない場合が多く、撮影に適した場所を知らないことも多く、撮影タイミングを逃す可能性もある。結果として、撮影者は、自撮り棒を出しっ放しにすることもある。

一方、ＨＭＤを用いて提供される仮想空間では、撮影のアングルが適切か否かを確認するためには、ＨＭＤのモニタ、例えば、ＨＭＤに装着したカメラ内蔵スマートフォンのモニタを通して撮影時のプレビュー表示を見る必要がある。この場合、現実世界のように、「この辺から撮影したらよい」といった撮影場所を提案する仕組みがない。

自撮りを行なう場合、撮影者は、自分が適切な位置に写っているか否かを確認する手段は、スマートフォンのプレビュー表示に限れらる。現実世界の場合には「ここから撮影するならこの位置に人物が立つとよい」という提案や表示が存在し得るが、仮想空間の場合には、そのような提案や表示は存在し得ない。

目線に関し、スマートフォンの所謂インカメラを用いて撮影する場合、ユーザは、被写体として、スマートフォンのモニタ画面を見がちである。したがって、特に、モニタ画面のサイズが大きくなると、ユーザの視線がカメラよりもモニタ画面を向くため、ユーザの目線が、所謂カメラ目線になりにくくなる。

そこで、図１および図２を参照して、本開示に係る技術思想について説明する。図１は、モニタ１１２における画面の表示の移り変わりを表わす図である。

状態Ａに示されるように、ある局面において、モニタ１１２は、オブジェクト１０１を表示している。さらに、モニタ１１２は、仮想空間におけるカメラオブジェクト１００も表示している。カメラオブジェクト１００は、オブジェクト１０１に対応するモニタ画像１０２を表示している。ある局面において、さらにモニタ１１２は、カメラオブジェクト１００を適切な方向に移動することを促す矢印１０３を表示している。ユーザが矢印１０３に沿ってカメラオブジェクト１００を移動させると、オブジェクト１０１をより好ましく撮影範囲に捉えることができる。

具体的には、状態Ｂに示されるように、ユーザの手に対応する左手オブジェクト１０４と右手オブジェクト１０５とがモニタ１１２に表示される。ユーザは、左手オブジェクト１０４と右手オブジェクト１０５とを用いてカメラオブジェクト１００の仮想空間における位置および撮影方向を調整する。オブジェクト１０１のモニタ画像がカメラオブジェクト１００に表示されることを確認すると、その位置が撮影のための位置として記録される。

したがって、状態Ｃに示されるように、仮想空間における左手オブジェクト１０４と右手オブジェクト１０５とが表示されなくなった後でも、カメラオブジェクト１００の姿勢は、オブジェクト１０１を撮影するのに好ましい状態で維持される。

図２は、モニタ１１２に提示される画像と、その時の仮想空間２における各オブジェクトの位置関係を表わす図である。図２を参照して、状態Ａに示されるように、モニタ１１２は、オブジェクト１０１を表示している。このとき、仮想空間２における仮想カメラ１とオブジェクト１０１との位置関係は、例えば、状態Ｂのように示される。

カメラオブジェクト１００を仮想空間２に表示するために予め定められた条件が成立すると、状態Ｃに示されるように、カメラオブジェクト１００は、モニタ１１２において予め定められた位置に表示される。例えば、カメラオブジェクト１００は、両手で把持できるようにモニタ１１２の中心に配置され得る。このとき、仮想空間２における仮想カメラ１とオブジェクト１０１との位置関係は、例えば、状態Ｄのように示される。

その後、ユーザが、仮想空間２におけるカメラオブジェクト１００の位置を調整すると、状態Ｅとして示されるように、調整後の配置に基づくモニタ画像１０２がカメラオブジェクト１００に表示される。このとき、仮想空間２における仮想カメラ１とオブジェクト１０１との位置関係は、例えば、状態Ｆのように示される。ユーザが、この配置を撮影アングルとして確定すると、この配置を特定する識別番号と、当該配置を示す位置情報とは、仮想空間２を提供するサーバその他のコンピュータに格納される。したがって、別のタイミングで、同一のオブジェクトが表示される局面において、その識別番号を指定することにより、同じ撮影アングルが容易に再現され得る。

さらに、ユーザが仮想空間２における自撮りモードを選択すると、状態Ｇとして示されるように、予め登録されたユーザのアバターオブジェクト１０６が、モニタ１１２に提示される。このとき、仮想空間２におけるカメラオブジェクト１００とアバターオブジェクト１０６との位置関係は、例えば、状態Ｈのように示される。

［ＨＭＤシステムの構成］
図３を参照して、ＨＭＤ（Head Mounted Device）システム３００の構成について説明する。図３は、ある実施の形態に従うＨＭＤシステム３００の構成の概略を表す図である。ある局面において、ＨＭＤシステム３００は、家庭用のシステムとしてあるいは業務用のシステムとして提供される。なお、本実施の形態において、ＨＭＤとは、モニタを備える所謂ヘッドマウントディスプレイと、スマートホンその他のモニタを有する端末を装着可能なヘッドマウント機器のいずれをも含み得る。

ＨＭＤシステム３００は、ＨＭＤ１１０と、ＨＭＤセンサ１２０と、コントローラ１６０と、コンピュータ２００とを備える。ＨＭＤ１１０は、モニタ１１２と、注視センサ１４０とを含む。コントローラ１６０は、モーションセンサ１３０を含み得る。

ある局面において、コンピュータ２００は、インターネットその他のネットワーク１９に接続可能であり、ネットワーク１９に接続されているサーバ１５０その他のコンピュータと通信可能である。他のユーザによって使用されるユーザ端末２０１Ａ・・・２０１Ｎが、ネットワーク１９に接続されている。ユーザ端末２０１Ａ，２０１Ｎは、総称する時は、ユーザ端末２０１と表わす。ある局面において、ユーザ端末２０１は、コンピュータとＨＭＤとを含み得る。別の局面において、ユーザ端末２０１は、コンピュータ機能を備えたＨＭＤによって実現されてもよい。

別の局面において、ＨＭＤシステム３００がＨＭＤセンサ１２０を備える代わりに、ＨＭＤ１１０がセンサ１１４を含んでもよい。

サーバ１５０は、プロセッサ１５１と、メモリ１５２と、通信インターフェイス１５３とを含む。サーバ１５０は、周知の構成を有するコンピュータによって実現される。プロセッサ１５１は、命令を実行する。メモリ１５２は、ＲＡＭ（Random Access Memory）その他の揮発性メモリである。通信インターフェイス１５３は、コンピュータ２００、ユーザ端末２０１Ａ，２０１Ｎ等と通信する。ストレージ１５４は、サーバ１５０がコンピュータ２００その他の外部の装置から受信したデータまたはプロセッサ１５１によって生成されたデータを保持する。ストレージ１５４は、例えば、ハードディスク、ＳＳＤ（Solid State Disc）その他の不揮発性の記憶装置によって実現され得る。

ＨＭＤ１１０は、ユーザの頭部に装着され、動作中に仮想空間をユーザに提供し得る。より具体的には、ＨＭＤ１１０は、右目用の画像および左目用の画像をモニタ１１２にそれぞれ表示する。ユーザの各目がそれぞれの画像を視認すると、ユーザは、両目の視差に基づき当該画像を３次元の画像として認識し得る。

モニタ１１２は、例えば、非透過型の表示装置として実現される。ある局面において、モニタ１１２は、ユーザの両目の前方に位置するようにＨＭＤ１１０の本体に配置されている。したがって、ユーザは、モニタ１１２に表示される３次元画像を視認すると、仮想空間に没入することができる。ある実施の形態において、仮想空間は、例えば、背景、ユーザが操作可能なオブジェクト、ユーザが選択可能なメニューの画像を含む。ある実施の形態において、モニタ１１２は、所謂スマートフォンその他の情報表示端末が備える液晶モニタまたは有機ＥＬ（Electro Luminescence）モニタとして実現され得る。

ある局面において、モニタ１１２は、右目用の画像を表示するためのサブモニタと、左目用の画像を表示するためのサブモニタとを含み得る。別の局面において、モニタ１１２は、右目用の画像と左目用の画像とを一体として表示する構成であってもよい。この場合、モニタ１１２は、高速シャッタを含む。高速シャッタは、画像がいずれか一方の目にのみ認識されるように、右目用の画像と左目用の画像とを交互に表示可能に作動する。

ＨＭＤセンサ１２０は、複数の光源（図示しない）を含む。各光源は例えば、赤外線を発するＬＥＤ（Light Emitting Diode）により実現される。ＨＭＤセンサ１２０は、ＨＭＤ１１０の動きを検出するためのポジショントラッキング機能を有する。ＨＭＤセンサ１２０は、この機能を用いて、現実空間内におけるＨＭＤ１１０の位置および傾きを検出する。

なお、別の局面において、ＨＭＤセンサ１２０は、カメラにより実現されてもよい。この場合、ＨＭＤセンサ１２０は、カメラから出力されるＨＭＤ１１０の画像情報を用いて、画像解析処理を実行することにより、ＨＭＤ１１０の位置および傾きを検出することができる。

別の局面において、ＨＭＤ１１０は、位置検出器として、ＨＭＤセンサ１２０の代わりに、センサ１１４を備えてもよい。ＨＭＤ１１０は、センサ１１４を用いて、ＨＭＤ１１０自身の位置および傾きを検出し得る。例えば、センサ１１４が角速度センサ、地磁気センサ、加速度センサ、あるいはジャイロセンサ等である場合、ＨＭＤ１１０は、ＨＭＤセンサ１２０の代わりに、これらの各センサのいずれかを用いて、自身の位置および傾きを検出し得る。一例として、センサ１１４が角速度センサである場合、角速度センサは、現実空間におけるＨＭＤ１１０の３軸周りの角速度を経時的に検出する。ＨＭＤ１１０は、各角速度に基づいて、ＨＭＤ１１０の３軸周りの角度の時間的変化を算出し、さらに、角度の時間的変化に基づいて、ＨＭＤ１１０の傾きを算出する。また、ＨＭＤ１１０は、透過型表示装置を備えていても良い。この場合、当該透過型表示装置は、その透過率を調整することにより、一時的に非透過型の表示装置として構成可能であってもよい。また、視野画像は仮想空間を構成する画像の一部に、現実空間を提示する構成を含んでいてもよい。例えば、ＨＭＤ１１０に搭載されたカメラで撮影した画像を視野画像の一部に重畳して表示させてもよいし、当該透過型表示装置の一部の透過率を高く設定することにより、視野画像の一部から現実空間を視認可能にしてもよい。

注視センサ１４０は、ユーザ１９０の右目および左目の視線が向けられる方向（視線方向）を検出する。当該方向の検出は、例えば、公知のアイトラッキング機能によって実現される。注視センサ１４０は、当該アイトラッキング機能を有するセンサにより実現される。ある局面において、注視センサ１４０は、右目用のセンサおよび左目用のセンサを含むことが好ましい。注視センサ１４０は、例えば、ユーザ１９０の右目および左目に赤外光を照射するとともに、照射光に対する角膜および虹彩からの反射光を受けることにより各眼球の回転角を検出するセンサであってもよい。注視センサ１４０は、検出した各回転角に基づいて、ユーザ１９０の視線方向を検知することができる。

サーバ１５０は、コンピュータ２００にプログラムを送信し得る。別の局面において、サーバ１５０は、他のユーザによって使用されるＨＭＤに仮想現実を提供するための他のコンピュータ２００と通信し得る。

コントローラ１６０は、ユーザ１９０からコンピュータ２００への命令の入力を受け付ける。ある局面において、コントローラ１６０は、ユーザ１９０によって把持可能に構成される。別の局面において、コントローラ１６０は、ユーザ１９０の身体あるいは衣類の一部に装着可能に構成される。別の局面において、コントローラ１６０は、コンピュータ２００から送られる信号に基づいて、振動、音、光のうちの少なくともいずれかを出力するように構成されてもよい。別の局面において、コントローラ１６０は、仮想現実を提供する空間に配置されるオブジェクトの位置や動きを制御するためにユーザ１９０によって与えられる操作を受け付ける。

モーションセンサ１３０は、ある局面において、ユーザの手に取り付けられて、ユーザの手の動きを検出する。例えば、モーションセンサ１３０は、手の回転速度、回転数等を検出する。検出された信号は、コンピュータ２００に送られる。モーションセンサ１３０は、例えば、手袋型のコントローラ１６０に設けられている。ある実施の形態において、現実空間における安全のため、コントローラ１６０は、手袋型のようにユーザ１９０の手に装着されることにより容易に飛んで行かないものに装着されるのが望ましい。別の局面において、ユーザ１９０に装着されないセンサがユーザ１９０の手の動きを検出してもよい。例えば、ユーザ１９０を撮影するカメラの信号が、ユーザ１９０の動作を表わす信号として、コンピュータ２００に入力されてもよい。モーションセンサ１３０とコンピュータ２００とは、有線により、または無線により互いに接続される。無線の場合、通信形態は特に限られず、例えば、Ｂｌｕｅｔｏｏｔｈ（登録商標）その他の公知の通信手法が用いられる。

［ハードウェア構成］
図４を参照して、本実施の形態に係るコンピュータ２００について説明する。図４は、一局面に従うコンピュータ２００のハードウェア構成の一例を表すブロック図である。コンピュータ２００は、主たる構成要素として、プロセッサ１０と、メモリ１１と、ストレージ１２と、入出力インターフェイス１３と、通信インターフェイス１４とを備える。各構成要素は、それぞれ、バス１５に接続されている。

プロセッサ１０は、コンピュータ２００に与えられる信号に基づいて、あるいは、予め定められた条件が成立したことに基づいて、メモリ１１またはストレージ１２に格納されているプログラムに含まれる一連の命令を実行する。ある局面において、プロセッサ１０は、ＣＰＵ（Central Processing Unit）、ＭＰＵ（Micro Processor Unit）、ＦＰＧＡ（Field-Programmable Gate Array）その他のデバイスとして実現される。

メモリ１１は、プログラムおよびデータを一時的に保存する。プログラムは、例えば、ストレージ１２からロードされる。データは、コンピュータ２００に入力されたデータと、プロセッサ１０によって生成されたデータとを含む。ある局面において、メモリ１１は、ＲＡＭ（Random Access Memory）その他の揮発メモリとして実現される。

ストレージ１２は、プログラムおよびデータを永続的に保持する。ストレージ１２は、例えば、ＲＯＭ（Read-Only Memory）、ハードディスク装置、フラッシュメモリ、その他の不揮発記憶装置として実現される。ストレージ１２に格納されるプログラムは、ＨＭＤシステム３００において仮想空間を提供するためのプログラム、シミュレーションプログラム、ゲームプログラム、ユーザ認証プログラム、他のコンピュータ２００との通信を実現するためのプログラムを含む。ストレージ１２に格納されるデータは、仮想空間を規定するためのデータおよびオブジェクト等を含む。

なお、別の局面において、ストレージ１２は、メモリカードのように着脱可能な記憶装置として実現されてもよい。さらに別の局面において、コンピュータ２００に内蔵されたストレージ１２の代わりに、外部の記憶装置に保存されているプログラムおよびデータを使用する構成が使用されてもよい。このような構成によれば、例えば、アミューズメント施設のように複数のＨＭＤシステム３００が使用される場面において、プログラムやデータの更新を一括して行なうことが可能になる。

ある実施の形態において、入出力インターフェイス１３は、ＨＭＤ１１０、ＨＭＤセンサ１２０またはモーションセンサ１３０との間で信号を通信する。ある局面において、入出力インターフェイス１３は、ＵＳＢ（Universal Serial Bus）インターフェイス、ＤＶＩ（Digital Visual Interface）、ＨＤＭＩ（登録商標）（High-Definition Multimedia Interface）その他の端子を用いて実現される。なお、入出力インターフェイス１３は上述のものに限られない。

ある実施の形態において、入出力インターフェイス１３は、さらに、コントローラ１６０と通信し得る。例えば、入出力インターフェイス１３は、モーションセンサ１３０から出力された信号の入力を受ける。別の局面において、入出力インターフェイス１３は、プロセッサ１０から出力された命令を、コントローラ１６０に送る。当該命令は、振動、音声出力、発光等をコントローラ１６０に指示する。コントローラ１６０は、当該命令を受信すると、その命令に応じて、振動、音声出力または発光のいずれかを実行する。

通信インターフェイス１４は、ネットワーク１９に接続されて、ネットワーク１９に接続されている他のコンピュータ（例えば、サーバ１５０）と通信する。ある局面において、通信インターフェイス１４は、例えば、ＬＡＮ（Local Area Network）その他の有線通信インターフェイス、あるいは、ＷｉＦｉ（Wireless Fidelity）、Ｂｌｕｅｔｏｏｔｈ（登録商標）、ＮＦＣ（Near Field Communication）その他の無線通信インターフェイスとして実現される。なお、通信インターフェイス１４は上述のものに限られない。

ある局面において、プロセッサ１０は、ストレージ１２にアクセスし、ストレージ１２に格納されている１つ以上のプログラムをメモリ１１にロードし、当該プログラムに含まれる一連の命令を実行する。当該１つ以上のプログラムは、コンピュータ２００のオペレーティングシステム、仮想空間を提供するためのアプリケーションプログラム、コントローラ１６０を用いて仮想空間で実行可能なゲームソフトウェア等を含み得る。プロセッサ１０は、入出力インターフェイス１３を介して、仮想空間を提供するための信号をＨＭＤ１１０に送る。ＨＭＤ１１０は、その信号に基づいてモニタ１１２に映像を表示する。

なお、図４に示される例では、コンピュータ２００は、ＨＭＤ１１０の外部に設けられる構成が示されているが、別の局面において、コンピュータ２００は、ＨＭＤ１１０に内蔵されてもよい。一例として、モニタ１１２を含む携帯型の情報通信端末（例えば、スマートフォン）がコンピュータ２００として機能してもよい。

また、コンピュータ２００は、複数のＨＭＤ１１０に共通して用いられる構成であってもよい。このような構成によれば、例えば、複数のユーザに同一の仮想空間を提供することもできるので、各ユーザは同一の仮想空間で他のユーザと同一のアプリケーションを楽しむことができる。

ある実施の形態において、ＨＭＤシステム３００では、グローバル座標系が予め設定されている。グローバル座標系は、現実空間における鉛直方向、鉛直方向に直交する水平方向、ならびに、鉛直方向および水平方向の双方に直交する前後方向にそれぞれ平行な、３つの基準方向（軸）を有する。本実施の形態では、グローバル座標系は視点座標系の一つである。そこで、グローバル座標系における水平方向、鉛直方向（上下方向）、および前後方向は、それぞれ、ｘ軸、ｙ軸、ｚ軸と規定される。より具体的には、グローバル座標系において、ｘ軸は現実空間の水平方向に平行である。ｙ軸は、現実空間の鉛直方向に平行である。ｚ軸は現実空間の前後方向に平行である。

ある局面において、ＨＭＤセンサ１２０は、赤外線センサを含む。赤外線センサが、ＨＭＤ１１０の各光源から発せられた赤外線をそれぞれ検出すると、ＨＭＤ１１０の存在を検出する。ＨＭＤセンサ１２０は、さらに、各点の値（グローバル座標系における各座標値）に基づいて、ＨＭＤ１１０を装着したユーザ１９０の動きに応じた、現実空間内におけるＨＭＤ１１０の位置および傾きを検出する。より詳しくは、ＨＭＤセンサ１２０は、経時的に検出された各値を用いて、ＨＭＤ１１０の位置および傾きの時間的変化を検出できる。

グローバル座標系は現実空間の座標系と平行である。したがって、ＨＭＤセンサ１２０によって検出されたＨＭＤ１１０の各傾きは、グローバル座標系におけるＨＭＤ１１０の３軸周りの各傾きに相当する。ＨＭＤセンサ１２０は、グローバル座標系におけるＨＭＤ１１０の傾きに基づき、ｕｖｗ視野座標系をＨＭＤ１１０に設定する。ＨＭＤ１１０に設定されるｕｖｗ視野座標系は、ＨＭＤ１１０を装着したユーザ１９０が仮想空間において物体を見る際の視点座標系に対応する。

［ｕｖｗ視野座標系］
図５を参照して、ｕｖｗ視野座標系について説明する。図５は、ある実施の形態に従うＨＭＤ１１０に設定されるｕｖｗ視野座標系を概念的に表す図である。ＨＭＤセンサ１２０は、ＨＭＤ１１０の起動時に、グローバル座標系におけるＨＭＤ１１０の位置および傾きを検出する。プロセッサ１０は、検出された値に基づいて、ｕｖｗ視野座標系をＨＭＤ１１０に設定する。

図５に示されるように、ＨＭＤ１１０は、ＨＭＤ１１０を装着したユーザの頭部を中心（原点）とした３次元のｕｖｗ視野座標系を設定する。より具体的には、ＨＭＤ１１０は、グローバル座標系を規定する水平方向、鉛直方向、および前後方向（ｘ軸、ｙ軸、ｚ軸）を、グローバル座標系内においてＨＭＤ１１０の各軸周りの傾きだけ各軸周りにそれぞれ傾けることによって新たに得られる３つの方向を、ＨＭＤ１１０におけるｕｖｗ視野座標系のピッチ方向（ｕ軸）、ヨー方向（ｖ軸）、およびロール方向（ｗ軸）として設定する。

ある局面において、ＨＭＤ１１０を装着したユーザ１９０が直立し、かつ、正面を視認している場合、プロセッサ１０は、グローバル座標系に平行なｕｖｗ視野座標系をＨＭＤ１１０に設定する。この場合、グローバル座標系における水平方向（ｘ軸）、鉛直方向（ｙ軸）、および前後方向（ｚ軸）は、ＨＭＤ１１０におけるｕｖｗ視野座標系のピッチ方向（ｕ軸）、ヨー方向（ｖ軸）、およびロール方向（ｗ軸）に一致する。

ｕｖｗ視野座標系がＨＭＤ１１０に設定された後、ＨＭＤセンサ１２０は、ＨＭＤ１１０の動きに基づいて、設定されたｕｖｗ視野座標系におけるＨＭＤ１１０の傾き（傾きの変化量）を検出できる。この場合、ＨＭＤセンサ１２０は、ＨＭＤ１１０の傾きとして、ｕｖｗ視野座標系におけるＨＭＤ１１０のピッチ角（θｕ）、ヨー角（θｖ）、およびロール角（θｗ）をそれぞれ検出する。ピッチ角（θｕ）は、ｕｖｗ視野座標系におけるピッチ方向周りのＨＭＤ１１０の傾き角度を表す。ヨー角（θｖ）は、ｕｖｗ視野座標系におけるヨー方向周りのＨＭＤ１１０の傾き角度を表す。ロール角（θｗ）は、ｕｖｗ視野座標系におけるロール方向周りのＨＭＤ１１０の傾き角度を表す。

ＨＭＤセンサ１２０は、検出されたＨＭＤ１１０の傾き角度に基づいて、ＨＭＤ１１０が動いた後のＨＭＤ１１０におけるｕｖｗ視野座標系を、ＨＭＤ１１０に設定する。ＨＭＤ１１０と、ＨＭＤ１１０のｕｖｗ視野座標系との関係は、ＨＭＤ１１０の位置および傾きに関わらず、常に一定である。ＨＭＤ１１０の位置および傾きが変わると、当該位置および傾きの変化に連動して、グローバル座標系におけるＨＭＤ１１０のｕｖｗ視野座標系の位置および傾きが変化する。

ある局面において、ＨＭＤセンサ１２０は、赤外線センサからの出力に基づいて取得される赤外線の光強度および複数の点間の相対的な位置関係（例えば、各点間の距離など）に基づいて、ＨＭＤ１１０の現実空間内における位置を、ＨＭＤセンサ１２０に対する相対位置として特定してもよい。また、プロセッサ１０は、特定された相対位置に基づいて、現実空間内（グローバル座標系）におけるＨＭＤ１１０のｕｖｗ視野座標系の原点を決定してもよい。

［仮想空間］
図６を参照して、仮想空間についてさらに説明する。図６は、ある実施の形態に従う仮想空間２を表現する一態様を概念的に表す図である。仮想空間２は、中心２１の３６０度方向の全体を覆う全天球状の構造を有する。図６では、説明を複雑にしないために、仮想空間２のうちの上半分の天球が例示されている。仮想空間２では各メッシュが規定される。各メッシュの位置は、仮想空間２に規定されるＸＹＺ座標系における座標値として予め規定されている。コンピュータ２００は、仮想空間２に展開可能なコンテンツ（静止画、動画等）を構成する各部分画像を、仮想空間２において対応する各メッシュにそれぞれ対応付けて、ユーザによって視認可能な仮想空間画像２２が展開される仮想空間２をユーザに提供する。

ある局面において、仮想空間２では、中心２１を原点とするＸＹＺ座標系が規定される。ＸＹＺ座標系は、例えば、グローバル座標系に平行である。ＸＹＺ座標系は視点座標系の一種であるため、ＸＹＺ座標系における水平方向、鉛直方向（上下方向）、および前後方向は、それぞれＸ軸、Ｙ軸、Ｚ軸として規定される。したがって、ＸＹＺ座標系のＸ軸（水平方向）がグローバル座標系のｘ軸と平行であり、ＸＹＺ座標系のＹ軸（鉛直方向）がグローバル座標系のｙ軸と平行であり、ＸＹＺ座標系のＺ軸（前後方向）がグローバル座標系のｚ軸と平行である。

ＨＭＤ１１０の起動時、すなわちＨＭＤ１１０の初期状態において、仮想カメラ１が、仮想空間２の中心２１に配置される。仮想カメラ１は、現実空間におけるＨＭＤ１１０の動きに連動して、仮想空間２を同様に移動する。これにより、現実空間におけるＨＭＤ１１０の位置および向きの変化が、仮想空間２において同様に再現される。

仮想カメラ１には、ＨＭＤ１１０の場合と同様に、ｕｖｗ視野座標系が規定される。仮想空間２における仮想カメラ１のｕｖｗ視野座標系は、現実空間（グローバル座標系）におけるＨＭＤ１１０のｕｖｗ視野座標系に連動するように規定されている。したがって、ＨＭＤ１１０の傾きが変化すると、それに応じて、仮想カメラ１の傾きも変化する。また、仮想カメラ１は、ＨＭＤ１１０を装着したユーザの現実空間における移動に連動して、仮想空間２において移動することもできる。

仮想カメラ１の向きは、仮想カメラ１の位置および傾きに応じて決まるので、ユーザが仮想空間画像２２を視認する際に基準となる視線（基準視線５）は、仮想カメラ１の向きに応じて決まる。コンピュータ２００のプロセッサ１０は、基準視線５に基づいて、仮想空間２における視界領域２３を規定する。視界領域２３は、仮想空間２のうち、ＨＭＤ１１０を装着したユーザの視界に対応する。

注視センサ１４０によって検出されるユーザ１９０の視線方向は、ユーザ１９０が物体を視認する際の視点座標系における方向である。ＨＭＤ１１０のｕｖｗ視野座標系は、ユーザ１９０がモニタ１１２を視認する際の視点座標系に等しい。また、仮想カメラ１のｕｖｗ視野座標系は、ＨＭＤ１１０のｕｖｗ視野座標系に連動している。したがって、ある局面に従うＨＭＤシステム３００は、注視センサ１４０によって検出されたユーザ１９０の視線方向を、仮想カメラ１のｕｖｗ視野座標系におけるユーザの視線方向とみなすことができる。

［ユーザの視線］
図７を参照して、ユーザの視線方向の決定について説明する。図７は、ある実施の形態に従うＨＭＤ１１０を装着するユーザ１９０の頭部を上から表した図である。

ある局面において、注視センサ１４０は、ユーザ１９０の右目および左目の各視線を検出する。ある局面において、ユーザ１９０が近くを見ている場合、注視センサ１４０は、視線Ｒ１およびＬ１を検出する。別の局面において、ユーザ１９０が遠くを見ている場合、注視センサ１４０は、視線Ｒ２およびＬ２を検出する。この場合、ロール方向ｗに対して視線Ｒ２およびＬ２がなす角度は、ロール方向ｗに対して視線Ｒ１およびＬ１がなす角度よりも小さい。注視センサ１４０は、検出結果をコンピュータ２００に送信する。

コンピュータ２００が、視線の検出結果として、視線Ｒ１およびＬ１の検出値を注視センサ１４０から受信した場合には、その検出値に基づいて、視線Ｒ１およびＬ１の交点である注視点Ｎ１を特定する。一方、コンピュータ２００は、視線Ｒ２およびＬ２の検出値を注視センサ１４０から受信した場合には、視線Ｒ２およびＬ２の交点を注視点Ｎ１として特定する。コンピュータ２００は、特定した注視点Ｎ１の位置に基づき、ユーザ１９０の視線方向Ｎ０を特定する。コンピュータ２００は、例えば、ユーザ１９０の右目Ｒと左目Ｌとを結ぶ直線の中点と、注視点Ｎ１とを通る直線の延びる方向を、視線方向Ｎ０として検出する。視線方向Ｎ０は、ユーザ１９０が両目により実際に視線を向けている方向である。また、視線方向Ｎ０は、視界領域２３に対してユーザ１９０が実際に視線を向けている方向に相当する。

別の局面において、ＨＭＤシステム３００は、ＨＭＤシステム３００を構成するいずれかのパーツに、マイクおよびスピーカを備えてもよい。ユーザは、マイクに発話することにより、仮想空間２に対して、音声による指示を与えることができる。

また、別の局面において、ＨＭＤシステム３００は、テレビジョン放送受信チューナを備えてもよい。このような構成によれば、ＨＭＤシステム３００は、仮想空間２においてテレビ番組を表示することができる。

さらに別の局面において、ＨＭＤシステム３００は、インターネットに接続するための通信回路、あるいは、電話回線に接続するための通話機能を備えていてもよい。

［視界領域］
図８および図９を参照して、視界領域２３について説明する。図８は、仮想空間２において視界領域２３をＸ方向から見たＹＺ断面を表す図である。図９は、仮想空間２において視界領域２３をＹ方向から見たＸＺ断面を表す図である。

図８に示されるように、ＹＺ断面における視界領域２３は、領域２４を含む。領域２４は、仮想カメラ１の基準視線５と仮想空間２のＹＺ断面とによって定義される。プロセッサ１０は、仮想空間おける基準視線５を中心として極角αを含む範囲を、領域２４として規定する。

図９に示されるように、ＸＺ断面における視界領域２３は、領域２５を含む。領域２５は、基準視線５と仮想空間２のＸＺ断面とによって定義される。プロセッサ１０は、仮想空間２における基準視線５を中心とした方位角βを含む範囲を、領域２５として規定する。

ある局面において、ＨＭＤシステム３００は、コンピュータ２００からの信号に基づいて、視界画像２６をモニタ１１２に表示させることにより、ユーザ１９０に仮想空間を提供する。視界画像２６は、仮想空間画像２２のうち視界領域２３に重畳する部分に相当する。ユーザ１９０が、頭に装着したＨＭＤ１１０を動かすと、その動きに連動して仮想カメラ１も動く。その結果、仮想空間２における視界領域２３の位置が変化する。これにより、モニタ１１２に表示される視界画像２６は、仮想空間画像２２のうち、仮想空間２においてユーザが向いた方向の視界領域２３に重畳する画像に更新される。ユーザは、仮想空間２における所望の方向を視認することができる。

ユーザ１９０は、ＨＭＤ１１０を装着している間、現実世界を視認することなく、仮想空間２に展開される仮想空間画像２２のみを視認できる。そのため、ＨＭＤシステム３００は、仮想空間２への高い没入感覚をユーザに与えることができる。

ある局面において、プロセッサ１０は、ＨＭＤ１１０を装着したユーザ１９０の現実空間における移動に連動して、仮想空間２において仮想カメラ１を移動し得る。この場合、プロセッサ１０は、仮想空間２における仮想カメラ１の位置および向きに基づいて、ＨＭＤ１１０のモニタ１１２に投影される画像領域（すなわち、仮想空間２における視界領域２３）を特定する。

ある実施の形態に従うと、仮想カメラ１は、二つの仮想カメラ、すなわち、右目用の画像を提供するための仮想カメラと、左目用の画像を提供するための仮想カメラとを含むことが望ましい。また、ユーザ１９０が３次元の仮想空間２を認識できるように、適切な視差が、二つの仮想カメラに設定されていることが好ましい。本実施の形態においては、仮想カメラ１が二つの仮想カメラを含み、二つの仮想カメラのロール方向が合成されることによって生成されるロール方向（ｗ）がＨＭＤ１１０のロール方向（ｗ）に適合されるように構成されているものとして、本開示に係る技術思想を例示する。

［コントローラ］
図１０を参照して、コントローラ１６０の一例について説明する。図１０は、ある実施の形態に従うコントローラ１６０の概略構成を表す図である。ある局面において、コントローラ１６０は、右コントローラ８００と左コントローラとを含み得る。右コントローラ８００は、ユーザ１９０の右手で操作される。左コントローラは、ユーザ１９０の左手で操作される。ある局面において、右コントローラ８００と左コントローラとは、別個の装置として対称に構成される。したがって、ユーザ１９０は、右コントローラ８００を把持した右手と、左コントローラを把持した左手とをそれぞれ自由に動かすことができる。別の局面において、コントローラ１６０は両手の操作を受け付ける一体型のコントローラであってもよい。以下、右コントローラ８００について説明する。

右コントローラ８００は、グリップ３０と、フレーム３１と、天面３２とを備える。グリップ３０は、ユーザ１９０の右手によって把持されるように構成されている。例えば、グリップ３０は、ユーザ１９０の右手の掌と３本の指（中指、薬指、小指）とによって保持され得る。

グリップ３０は、ボタン３３，３４と、モーションセンサ１３０とを含む。ボタン３３は、グリップ３０の側面に配置され、右手の中指による操作を受け付ける。ボタン３４は、グリップ３０の前面に配置され、右手の人差し指による操作を受け付ける。ある局面において、ボタン３３，３４は、トリガー式のボタンとして構成される。モーションセンサ１３０は、グリップ３０の筐体に内蔵されている。なお、ユーザ１９０の動作がカメラその他の装置によってユーザ１９０の周りから検出可能である場合には、グリップ３０は、モーションセンサ１３０を備えなくてもよい。

フレーム３１は、その円周方向に沿って配置された複数の赤外線ＬＥＤ３５を含む。赤外線ＬＥＤ３５は、コントローラ１６０を使用するプログラムの実行中に、当該プログラムの進行に合わせて赤外線を発光する。赤外線ＬＥＤ３５から発せられた赤外線は、右コントローラ８００と左コントローラ（図示しない）との各位置や姿勢（傾き、向き）を検出するために使用され得る。図８に示される例では、二列に配置された赤外線ＬＥＤ３５が示されているが、配列の数は図８に示されるものに限られない。一列あるいは３列以上の配列が使用されてもよい。

天面３２は、ボタン３６，３７と、アナログスティック３８とを備える。ボタン３６，３７は、プッシュ式ボタンとして構成される。ボタン３６，３７は、ユーザ１９０の右手の親指による操作を受け付ける。アナログスティック３８は、ある局面において、初期位置（ニュートラルの位置）から３６０度任意の方向への操作を受け付ける。当該操作は、例えば、仮想空間２に配置されるオブジェクトを移動するための操作を含む。

ある局面において、右コントローラ８００および左コントローラは、赤外線ＬＥＤ３５その他の部材を駆動するための電池を含む。電池は、充電式、ボタン型、乾電池型等を含むが、これらに限定されない。別の局面において、右コントローラ８００と左コントローラは、例えば、コンピュータ２００のＵＳＢインターフェイスに接続され得る。この場合、右コントローラ８００および左コントローラは、電池を必要としない。

図１１は、右コントローラ８００を把持するユーザ１９０の右手に対応して仮想空間に配置されるハンドオブジェクト８１０の一例を示す。例えば、ユーザ１９０の右手に対応するハンドオブジェクト８１０に対して、ヨー、ロール、ピッチの各方向が規定される。例えば、入力操作が、右コントローラ８００のボタン３４に対して行なわれると、ハンドオブジェクト８１０の人差し指を握りこんだ状態とし、入力操作がボタン３４に対して行なわれていない場合には、ハンドオブジェクト８１０の人差し指を伸ばした状態とすることもできる。例えば、ハンドオブジェクト８１０において親指と人差し指とが伸びている場合に、親指の伸びる方向がヨー方向、人差し指の伸びる方向がロール方向、ヨー方向の軸およびロール方向の軸によって規定される平面に垂直な方向がピッチ方向としてハンドオブジェクト８１０に規定される。

［ＨＭＤ１１０の制御装置］
図１２を参照して、ＨＭＤ１１０の制御装置について説明する。ある実施の形態において、制御装置は周知の構成を有するコンピュータ２００によって実現される。図１２は、ある実施の形態に従うコンピュータ２００をモジュール構成として表わすブロック図である。以下では、サーバコンピュータ２０によるコメントの付加機能がコンピュータ２００によって実現される場合を説明する。別の局面において、この付加機能は、サーバ１５０によって実現されてもよい。

図１２に示されるように、コンピュータ２００は、表示制御モジュール２２０と、仮想空間制御モジュール２３０と、メモリモジュール２４０と、通信制御モジュール２５０とを備える。表示制御モジュール２２０は、サブモジュールとして、仮想カメラ制御モジュール２２１と、視界領域決定モジュール２２２と、視界画像生成モジュール２２３と、基準視線特定モジュール２２４と、コメント付加モジュール２２５とを含む。仮想空間制御モジュール２３０は、サブモジュールとして、仮想空間定義モジュール２３１と、仮想オブジェクト生成モジュール２３２と、コントローラ管理モジュール２３３と、位置情報取得モジュール２３４と、姿勢情報取得モジュール２３５とを含む。

ある実施の形態において、表示制御モジュール２２０と仮想空間制御モジュール２３０とは、プロセッサ１０によって実現される。別の実施の形態において、複数のプロセッサ１０が表示制御モジュール２２０と仮想空間制御モジュール２３０として作動してもよい。メモリモジュール２４０は、メモリ１１またはストレージ１２によって実現される。通信制御モジュール２５０は、通信インターフェイス１４によって実現される。

ある局面において、表示制御モジュール２２０は、ＨＭＤ１１０のモニタ１１２における画像表示を制御する。仮想カメラ制御モジュール２２１は、仮想空間２に仮想カメラ１を配置し、仮想カメラ１の挙動、向き等を制御する。視界領域決定モジュール２２２は、ＨＭＤ１１０を装着したユーザの頭の向きに応じて、視界領域２３を規定する。視界画像生成モジュール２２３は、決定された視界領域２３に基づいて、モニタ１１２に表示される視界画像２６を生成する。

基準視線特定モジュール２２４は、注視センサ１４０からの信号に基づいて、ユーザ１９０の視線を特定する。コメント付加モジュール２２５は、サーバ１５０を介して受信したコメントを、視界画像生成モジュール２２３によって生成された視界画像にオーバーラップさせる。

位置情報取得モジュール２３４は、仮想空間２におけるカメラオブジェクト１００の位置情報を取得する。位置情報は、例えば、図６に示される仮想空間２の座標軸に基づいて示される。

姿勢情報取得モジュール２３５は、仮想空間２におけるカメラオブジェクト１００の姿勢情報を取得する。姿勢情報は、カメラオブジェクト１００の撮影方向を含む。ある局面において、姿勢情報は、カメラオブジェクト１００の仮想空間２におけるベクトル情報として示され得る。

仮想空間制御モジュール２３０は、ユーザ１９０に提供される仮想空間２を制御する。仮想空間定義モジュール２３１は、仮想空間２を表わす仮想空間データを生成することにより、ＨＭＤシステム３００における仮想空間２を規定する。仮想オブジェクト生成モジュール２３２は、仮想空間２に配置される対象物を生成する。対象物は、例えば、山、木、建造物その他の背景を構成するオブジェクト、コンピュータ２００によって実現されるプログラムを構成するストーリーに従って提示される動物のオブジェクト等を含む。

コントローラ管理モジュール２３３は、仮想空間２においてユーザ１９０の動作を受け付けて、その動作に応じてコントローラオブジェクトを制御する。ある実施の形態に従うコントローラオブジェクトは、仮想空間２に配置される他のオブジェクトに対して命令を与えるコントローラとして機能する。ある局面において、コントローラ管理モジュール２３３は、仮想空間２において制御を受け付けるコントローラオブジェクトを仮想空間２に配置するためのデータを生成する。ＨＭＤ１１０がこのデータを受信すると、モニタ１１２は、コントローラオブジェクトを表示し得る。

メモリモジュール２４０は、コンピュータ２００が仮想空間２をユーザ１９０に提供するために使用されるデータを保持している。ある局面において、メモリモジュール２４０は、空間情報２４１と、ユーザ情報２４２と、コンテンツ２４３と、コメント２４４とを保持している。

空間情報２４１は、仮想空間２を提供するために規定された１つ以上のテンプレートを保持している。ユーザ情報２４２は、ＨＭＤ１１０のユーザ１９０の識別情報、ユーザ１９０に関連付けられている権限等を含む。当該権限は、例えば、アプリケーションを提供するウェブサイトにアクセスするためのアカウント情報（ユーザＩＤ（Identification）、パスワード）等を含む。コンテンツ２４３は、例えば、ＨＭＤ１１０によって提示されるコンテンツを含む。コメント２４４は、ユーザ端末２０１Ａ・・・２０１Ｎのいずれかを使用する他のユーザによって入力されたコメントである。

通信制御モジュール２５０は、ネットワーク１９を介して、サーバ１５０その他の情報通信装置と通信し得る。通信制御モジュール２５０は、無線および有線のいずれであってもよい。

ある局面において、表示制御モジュール２２０および仮想空間制御モジュール２３０は、例えば、ユニティテクノロジーズ社によって提供されるＵｎｉｔｙ（登録商標）を用いて実現され得る。別の局面において、表示制御モジュール２２０および仮想空間制御モジュール２３０は、各処理を実現する回路素子の組み合わせとしても実現され得る。

コンピュータ２００における処理は、ハードウェアと、プロセッサ１０により実行されるソフトウェアとによって実現される。このようなソフトウェアは、ハードディスクその他のメモリモジュール２４０に予め格納されている場合がある。また、ソフトウェアは、ＣＤ−ＲＯＭその他のコンピュータ読み取り可能な不揮発性のデータ記録媒体に格納されて、プログラム製品として流通している場合もある。あるいは、当該ソフトウェアは、インターネットその他のネットワークに接続されている情報提供事業者によってダウンロード可能なプログラム製品として提供される場合もある。このようなソフトウェアは、光ディスク駆動装置その他のデータ読取装置によってデータ記録媒体から読み取られて、あるいは、通信制御モジュール２５０を介してサーバ１５０その他のコンピュータからダウンロードされた後、記憶モジュールに一旦格納される。そのソフトウェアは、プロセッサ１０によって記憶モジュールから読み出され、実行可能なプログラムの形式でＲＡＭに格納される。プロセッサ１０は、そのプログラムを実行する。

コンピュータ２００を構成するハードウェアは、一般的なものである。したがって、本実施の形態に係る最も本質的な部分は、コンピュータ２００に格納されたプログラムであるともいえる。なお、コンピュータ２００のハードウェアの動作は周知であるので、詳細な説明は繰り返さない。

なお、データ記録媒体としては、ＣＤ−ＲＯＭ、ＦＤ（Flexible Disk）、ハードディスクに限られず、磁気テープ、カセットテープ、光ディスク（ＭＯ（Magnetic Optical Disc）／ＭＤ（Mini Disc）／ＤＶＤ（Digital Versatile Disc））、ＩＣ（Integrated Circuit）カード（メモリカードを含む）、光カード、マスクＲＯＭ、ＥＰＲＯＭ（Electronically Programmable Read-Only Memory）、ＥＥＰＲＯＭ（Electronically Erasable Programmable Read-Only Memory）、フラッシュＲＯＭなどの半導体メモリ等の固定的にプログラムを担持する不揮発性のデータ記録媒体でもよい。

ここでいうプログラムとは、プロセッサ１０により直接実行可能なプログラムだけでなく、ソースプログラム形式のプログラム、圧縮処理されたプログラム、暗号化されたプログラム等を含み得る。

［構成の概要］
ある実施の形態において、プロセッサ１０は、コンピュータ２００に接続されるＨＭＤ１１０に提示される仮想空間２を定義する。プロセッサ１０は、仮想空間２に表示される画像を撮影するためのカメラオブジェクト１００を仮想空間２に提示する。プロセッサ１０は、ＨＭＤ１１０のユーザ１９０によるカメラオブジェクト１００の位置または姿勢を変更するための操作を、コントローラ１６０から受け付ける。プロセッサ１０は、位置を表わす位置情報または姿勢を表わす姿勢情報をメモリ１１に保存する。プロセッサ１０は、位置情報または姿勢情報をサーバ１５０に送信する。これにより、仮想空間２における撮影ポイントおよび撮影方向が、位置情報および撮影方向という形で共有され得る。

ある実施の形態において、プロセッサ１０は、ＨＭＤ１１０のユーザ１９０の操作に基づいてカメラオブジェクト１００を提示する。これにより、ユーザ１９０が望む場合にカメラオブジェクト１００を用いて撮影することができる。

ある実施の形態において、プロセッサ１０は、ユーザ１９０によるコメントの入力を受け付けるユーザインターフェイスオブジェクトを仮想空間２に提示する。ユーザ１９０がコメントを入力すると、サーバ１５０に保存され得る。これにより、撮影ポイントの感想等が他のユーザとの間でも共有され得る。

ある実施の形態において、画像は複数のフレームを含む。複数のフレームのいずれかには、撮影を促すタグ情報が関連付けられている。プロセッサ１０は、タグ情報が関連付けられたフレームが仮想空間２に提示されたことに基づいて、カメラオブジェクト１００を提示する。タグ情報が検出されるとカメラオブジェクト１００が表示されるので、ユーザ１９０は、お薦めの撮影タイミングであることを容易に認識でき、撮影チャンスを逃しにくくなる。

ある実施の形態において、タグ情報は、例えば、画像の作成時に予め作成された情報、または、画像を視聴したユーザ１９０による撮影に基づいて当該画像に関連付けられた情報、のいずれかを含み得る。これにより、コンテンツの作成者がお薦めの撮影タイミングは、タグ情報を用いて視聴者に通知され得る。また、視聴者が新たに撮影した場所もタグ情報に追加できるので、コンテンツの作成者が意図しない視点からの撮影ポイントも新たにユーザ間で共有され得る。

ある実施の形態において、プロセッサ１０は、カメラオブジェクト１００の姿勢が一定時間継続したことに基づいて、カメラオブジェクト１００による撮影を行なう。これにより、自動撮影が可能になる。

ある実施の形態において、プロセッサ１０は、ユーザ１９０のアバターオブジェクトを仮想空間２に配置し、カメラオブジェクト１００がアバターオブジェクトの撮影を行なう。これにより、仮想空間２における所謂自撮りが可能になる。

ある実施の形態において、プロセッサ１０は、アバターオブジェクトが撮影された時のカメラオブジェクト１００の位置情報および姿勢情報を保存する。プロセッサ１０は、アバターオブジェクトの位置を表わす位置情報およびアバターオブジェクトの向きを表わす姿勢情報を保存し得る。これにより、自撮りが行なわれた場所およびアングルの情報（位置情報および姿勢情報）が他ユーザにも共有され得る。

ある実施の形態において、プロセッサ１０は、撮影が行なわれたコンテンツの識別データと、一組以上の位置情報および姿勢情報とを保存する。これにより、位置情報および姿勢情報が、同一コンテンツを視聴する他ユーザにも提供され得る。

ある実施の形態において、プロセッサ１０は、仮想空間２にカメラオブジェクト１００が提示されていない場合に、カメラオブジェクト１００を仮想空間２に提示する。ユーザ１９０は、カメラオブジェクト１００を視認すると、撮影チャンスが到来したことを容易に認識できる。

ある実施の形態において、プロセッサ１０は、仮想空間２を共有する他ユーザによって使用されたカメラオブジェクトの位置情報および姿勢情報に基づいて、ＨＭＤ１１０のユーザ１９０のカメラオブジェクト１００を提示し得る。例えば、サーバ１５０が、同一コンテンツを視聴した他ユーザのリコメンド（推薦）に基づき、コンピュータ２００に位置情報および姿勢情報を通知し得るので、ユーザ１９０は他ユーザにも人気のある撮影場所での撮影を行なうことができる。

ある実施の形態において、プロセッサ１０は、ユーザ１９０の手に対応する手オブジェクトを仮想空間２に提示する。プロセッサ１０は、ユーザ１９０の操作または動作に基づく手オブジェクトの動きに応じて、カメラオブジェクト１００の位置および姿勢を調整する。カメラオブジェクト１００の姿勢が一定時間維持された後に、プロセッサ１０は、手オブジェクトがカメラオブジェクト１００から離れた状態でカメラオブジェクト１００の姿勢を維持し得る。このようにすると、仮想空間２における手振れが防止される。また、ユーザ１９０は、撮影のアングルが確定された状態を維持しつつ、自撮りのために仮想空間２における自身の位置を調整し得る。

［データ構造］
図１３を参照して、サーバ１５０のデータ構造について説明する。図１３は、サーバ１５０が備えるストレージ１５４におけるデータの格納の一態様を概念的に表わす図である。ある局面において、ストレージ１５４は、テーブル１３１０，１３２０，１３３０を保持している。

テーブル１３１０は、撮影ポイントのデータベースを構成する。より具体的には、ある局面において、テーブル１３１０は、アングルＩＤ１３１１と、ユーザＩＤ１３１２と、仮想空間での位置１３１３と、姿勢情報（撮影方向）１３１４と、コンテンツＩＤ１３１５と、再生位置１３１６と、登録日時１３１７と、使用回数１３１８とを含む。

アングルＩＤ１３１１は、仮想空間２におけるカメラオブジェクト１００のアングルを識別する。アングルＩＤ１３１１は、各ユーザが仮想空間２における撮影位置を確定する操作に基づいて、命令を実行するプロセッサ１５１によって自動的に付与される。ユーザＩＤ１３１２は、当該撮影位置の登録を要求したユーザ１９０を識別する。仮想空間での位置１３１３は、仮想空間２における位置情報を表わす。位置情報は、例えば、ｕｖｗ視野座標系に基づいて示される。姿勢情報１３１４は、カメラオブジェクト１００が向いている撮影方向を表わす。姿勢情報１４１４は、例えば、位置１３１３を起点とするベクトル情報として示される。コンテンツＩＤ１３１５は、カメラオブジェクト１００を用いた撮影が行なわれたコンテンツを識別する。再生位置１３１６は、当該コンテンツにおいて撮影が行なわれたタイムスタンプを表わす。コンテンツが動画である場合、仮想空間２には、動画が表示される。再生位置１３１６は、その動画において撮影された一フレームを特定し得る。登録日時１３１７は、アングルＩＤ１３１１で識別される当該アングルがユーザ１９０によって保存された日時を表わす。使用回数１３１８は、当該アングルが使用された回数を表わす。

テーブル１３２０は、アングル情報の使用履歴を保持する。より具体的には、ある局面において、テーブル１３２０は、アングルＩＤ１３２１と、ユーザＩＤ１３２２と、アバターの位置１３２３と、アバターの方向１３２４と、撮影日時１３２５と、コメント１３２６とを含む。

アングルＩＤ１３２１は、使用されたアングルを識別する。ユーザＩＤ１３２２は、アングルＩＤ１３２１で特定されるアングルのユーザを識別する。テーブル１３１０に登録されているアングルは、一人以上のユーザによって使用可能である。したがって、ユーザＩＤ１３２２は、様々なユーザのユーザＩＤを含み得る。アバターの位置１３２３は、当該アングルを使用したユーザに対応するアバターオブジェクトが配置された位置を表わす。アバターの方向１３２４は、アバターオブジェクトの正面が向いている方向を表わす。当該方向は、例えば、アバターの位置１３２３を起点とするベクトル情報として示され得る。撮影日時１３２５は、当該アングルを用いて撮影が行なわれた日時を表わす。コメント１３２６は、当該アングルを使用したユーザによって入力されたコメントを表わす。

テーブル１３３０は、各アングルで撮影された画像からプロセッサ１５１によって抽出された背景のデータベースを保持している。テーブル１３３０は、アングルＩＤ１３３１と、ユーザＩＤ１３３２と、背景１３３３と、嗜好分類１３３４と、広告ＩＤ１３３５と、抽出日時１３３６とを含む。

アングルＩＤ１３３１は、背景が抽出されたアングルを識別する。ユーザＩＤ１３３２は、当該アングルを用いてアバターオブジェクトとして撮影されたユーザを識別する。背景１３３３は、当該アングルで撮影された画像から抽出された背景を特定する。特定される背景は、予め規定されている。抽出される背景の特定は、例えば、当該背景を含む画像に予め関連付けられた名称に基づいて、または、現実空間における背景を模した画像から背景が抽出される場合には当該現実空間における地理的座標値に対応付けられた背景の名称に基づいて行なわれる。嗜好分類１３３４は、抽出された背景１３３３に予め関連付けられている分類、または、ユーザによってユーザ情報の登録時に入力された嗜好を表わす。広告ＩＤ１３３５は、抽出の結果（背景１３３３）に基づいてユーザＩＤによって特定されるユーザに配信され得る広告を識別する。抽出日時１３３６は、背景１３３３が抽出された日時を表わす。

［制御構造］
図１４を参照して、コンピュータ２００の制御構造について説明する。図１４は、ある実施の形態に従って位置情報および取得情報を取得するためにコンピュータ２００のプロセッサ１０が実行する処理の一部を表わすフローチャートである。なお別の局面において、各処理は、それぞれの処理を実行するように構成された回路素子によって実現されてもよい。さらに別の局面において、ＨＭＤ１１０がプロセッサを備える場合には、当該プロセッサが当該処理を実行してもよい。

ステップＳ１１１０にて、プロセッサ１０は、仮想現実空間にコンテンツを提供するアプリケーションプログラムを実行して、仮想空間２を定義する。コンテンツは、例えば、現実空間の撮影によって得られた画像を用いたコンテンツ、仮想現実の世界を描画したアニメーションその他のコンテンツのいずれをも含み得る。

ステップＳ１１２０にて、プロセッサ１０は、仮想空間２にコンテンツ画像を提示する。ＨＭＤ１１０を装着したユーザ１９０は、モニタ１１２を視認すると、コンテンツ画像を認識し得る。

ステップＳ１２３０にて、プロセッサ１０は、コンテンツ画像を撮影するためのカメラオブジェクト１００を仮想空間２に提示する。カメラオブジェクト１００を提示するためのトリガーは、例えば、ユーザ１９０がカメラオブジェクト１００の提示を指示したこと、当該コンテンツ画像を以前に視聴した他のユーザがコメントその他の入力により当該コンテンツ画像の一部（一シーン、ある位置から見た眺め等）を推奨していること、コンテンツ画像の作成者あるいは提供者によって予め推奨されていること等に基づく。いずれのトリガーが有効であるかは、ユーザ１９０によって選択された動作モードによって規定される。カメラオブジェクト１００が提示される場所は、初期位置として予め規定されている場所、他のユーザにより推奨された場所のいずれであってもよい。ユーザ１９０は、カメラオブジェクト１００が提示された後、コントローラ１６０を用いて仮想空間２におけるカメラオブジェクト１００の位置をさらに変更し得る。

ステップＳ１４４０にて、プロセッサ１０は、カメラオブジェクト１００の位置情報およびカメラオブジェクト１００の姿勢を表わす姿勢情報を取得する。位置情報は、カメラオブジェクト１００の初期位置、あるいは、ユーザ１９０によって変更された場合には変更後の位置情報が取得される。姿勢情報は、カメラオブジェクト１００の初期位置において予め規定された姿勢に応じた姿勢情報（撮影方向）、あるいは、コントローラ１６０の操作によって変更された場合には、変更後の姿勢に応じた姿勢情報が取得される。

ステップＳ１４５０にて、プロセッサ１０は、ユーザ１９０による操作に基づいて、仮想空間２におけるカメラオブジェクト１００の位置を表わす位置情報およびカメラオブジェクトの姿勢を表わす姿勢情報を保存する。例えば、ユーザ１９０がカメラオブジェクト１００の位置または姿勢を変更した場合には、変更後の位置情報または姿勢情報を保存する命令がユーザ１９０によって与えられると、当該位置情報または姿勢情報は、ユーザ１９０のユーザＩＤ、再生されているコンテンツのコンテンツＩＤおよび登録日時と共に、コンピュータ２００からサーバ１５０に送信される。

図１５を参照して、コンピュータ２００の制御構造についてさらに説明する。図１５は、アングル調整から撮影までに実行される処理の一部を表わすフローチャートである。以下の処理は、例えば、ユーザ１９０がコンテンツとしてパノラマ動画を選択して再生の命令をコントローラ１６０に与えられたことに基づいて開始される。

ステップＳ１５１０にて、プロセッサ１０は、ステップ１４１０と同様に、仮想空間２を定義する。ステップＳ１５２０にて、プロセッサ１０は、ＨＭＤ１１０のモニタ１１２にパノラマ動画を表示する。

ステップＳ１５３０にて、プロセッサ１０は、ユーザ１９０によるコントローラ１６０の操作およびＨＭＤ１００を装着した頭の移動等の動作に基づいて、仮想空間２におけるユーザ１９０の視点を移動する。

ステップＳ１５４０にて、プロセッサ１０は、ユーザ１９０によるコントローラ１６０の操作に基づいて、仮想空間２における撮影のためのアングルを確定する指示の入力を検知する。例えば、ユーザ１９０は、モニタ１１２に提示されている画像のシーンを視認し、その画像を撮影したいと希望する場合には、コントローラ１６０を操作して、撮影場所としてそのシーンを登録するための入力操作を行なう。

ステップＳ１５５０にて、プロセッサ１０は、仮想空間２における位置および方向とパノラマ動画の再生位置とユーザＩＤとをメモリ１１に格納する。さらに、プロセッサ１０は、当該位置に基づく位置情報および方向に基づく姿勢情報と、当該再生位置と、ユーザＩＤと、コンテンツＩＤと、登録が行なわれた時刻データとを、サーバ１５０に送信する。サーバ１５０は、コンピュータ２００から受信したこれらのデータをストレージ１５４のテーブル１３１０に格納する。アングルＩＤ１３１１が新たに付与され、受信したデータに基づくユーザＩＤ１３１２と、仮想空間での位置１３１３と、姿勢情報１３１４と、コンテンツＩＤ１３１５とを含むデータレコードが、テーブル１３１０に追加される。

ステップＳ１５６０にて、プロセッサ１０は、ユーザ１９０に対応するアバターオブジェクトを仮想空間２に配置する。例えば、パノラマ動画の一シーンにおける撮影位置および姿勢情報が登録された場合には、その一シーンに対応する画像を背景に、ユーザ１９０に対応するアバターオブジェクトが配置される。この場合、アバターオブジェクトから見ると、一シーンを背景に自撮りすることになる。

ステップＳ１５７０にて、プロセッサ１０は、ユーザ１９０によるコントローラ１６０の操作に基づいて、アバターオブジェクトの位置および向きを調整する。

ステップＳ１５８０にて、プロセッサ１０は、ユーザ１９０によるコントローラ１６０の操作または動作に基づいて、もしくは予め定められた一定時間が経過したことに基づいて、カメラオブジェクト１００を用いた撮影を実行する。ユーザ１９０の動作は、例えば、モニタ１１２に提示されている画像のうちの予め指定された場所（例、カメラオブジェクト１００）を凝視すること、予め定められた時間瞬きをしないこと等を含み得る。

ステップＳ１５９０にて、プロセッサ１０は、撮影した画像をメモリ１１に保存する。さらに、コンピュータ２００は、撮影時の情報をサーバ１５０に送信する。サーバ１５０は受信した情報をストレージ１５４に格納する（テーブル１３２０）。当該情報は、例えば、ユーザＩＤ、アバターオブジェクトの位置、アバターオブジェクトの向き、および撮影日時を含む。さらに、ユーザ１９０がコメントを入力した場合には、コンピュータ２００は、そのコメントをサーバ１５０に送信する。サーバ１５０は、受信したコメントをコメント１３２６としてテーブル１３２０に格納する。

図１６を参照して、サーバ１５０の制御構造について説明する。図１６は、ある実施の形態に従って、お薦めの撮影地点を提供するためにサーバ１５０が実行する処理の一部を表わすフローチャートである。

ステップＳ１６１０にて、サーバ１５０のプロセッサ１５１は、撮影場所のおすすめのリクエストを他ユーザから受信する。例えば、ユーザ端末２０１Ａのユーザが、ＨＭＤ１１０に提示される仮想空間２において、お薦めの撮影場所をリクエストするアイコンを選択すると、当該リクエストがユーザ端末２０１Ａに接続されているコンピュータ（図示しない）からサーバ１５０に送信される。

ステップＳ１６２０にて、プロセッサ１５１は、当該リクエストを受信したことに基づいて、１つ以上のおすすめの撮影場所をストレージ１５４から抽出する。お薦めの撮影場所は、例えば、使用回数１３１８が多いアングルＩＤ１３１１、コメント１３２６にお勧めのメッセージが含まれれているアングルＩＤ１３２１、または、当該他ユーザのユーザ情報として予め登録されている嗜好に合致した嗜好分類１３３４等に基づいて抽出され得る。

ステップＳ１６３０にて、プロセッサ１５１は、１つ以上のおすすめの撮影場所の情報を当該他ユーザが接続しているコンピュータに送信する。当該情報は、アングルＩＤ１３１１、仮想空間での位置１３１３、姿勢情報１３１４、コンテンツＩＤ１３１５を含み得る。他ユーザは、一つ以上の組の情報を受信すると、その中から、いずれかを選択し得る。複数のコンテンツの各々について撮影情報が他ユーザに提供された場合、他ユーザは、いずれかのコンテンツを選択し得る。

ステップＳ１６４０にて、プロセッサ１５１は、他ユーザによって選択された撮影場所の識別情報を含む情報を当該他ユーザから受信する。受信する情報は、他ユーザのユーザＩＤと、コンテンツＩＤ１３１５と、アングルＩＤ１３１１とを含む。

ステップＳ１６５０にて、プロセッサ１５１は、選択された撮影場所を含む動画のシーンを、他ユーザが接続しているコンピュータを介して、ユーザ端末２０１Ａに提供される仮想空間２に再生する。他ユーザは、ユーザ端末２０１Ａのモニタ（図示しない）を視認すると、自ら選択したコンテンツを視認することができる。他ユーザは、当該コンテンツのお薦めの撮影場所において、仮想空間２における撮影動作を実行し得る。より詳しくは、他ユーザは、受信した情報に基づいてコンテンツを視聴し、お薦めの撮影場所において、風景画像として撮影し、あるいは、自らのアバターオブジェクトを仮想空間２に提示して自撮りする。他ユーザが、ユーザ端末２０１Ａを操作して仮想空間２における撮影を行なうと、撮影が行なわれたことを示す情報がサーバ１５０に送信される。

ステップＳ１６６０にて、プロセッサ１５１は、撮影が行なわれたことを示す情報を他ユーザが使用しているユーザ端末２０１Ａが接続しているコンピュータから受信する。ある局面において、当該情報は、ユーザＩＤ、コンテンツＩＤ、アングルＩＤ、撮影日時を含む。別の局面において、当該情報は、アバターの位置およびアバターの方向をさらに含み得る。

ステップＳ１６７０にて、プロセッサ１５１は、受信したデータに基づいて、データベースに使用履歴を追加する（テーブル１３２０）。

ステップＳ１６８０にて、プロセッサ１５１は、選択された撮影場所に対するコメントを他ユーザから受信する。プロセッサ１５１は、受信したコメントをコメント１３２６としてテーブル１３２０を更新する。

ステップＳ１６９０にて、プロセッサ１５１は、撮影場所を登録したユーザに当該コメントを送信する。例えば、プロセッサ１５１は、コンテンツの提供を受けるために登録されているユーザのアカウントに、当該コメントを送信する。別の局面において、そのユーザが登録した撮影場所が他ユーザによって使用されたことに基づいて、プロセッサ１５１は、テーブル１３１０の使用回数１３１８を更新する。

［データ構造］
図１７を参照して、コンテンツのデータ構造について説明する。図１７は、サーバ１５０によって配信されるコンテンツ１７００の構成の一例を表わす図である。コンテンツ１７００は、インデックス１７１０と、タグ情報１７２０とを含む。

インデックス１７１０は、コンテンツ１７００における再生の開始位置からの場所を表わす。当該場所は、たとえば開始時刻を０とした場合における経過時間により示される。インデックス１７１０は、ある局面において、再生位置１３１６に対応する。タグ情報１７２０は、コンテンツ１７００において各位置に割り当てられた情報を示す。

たとえば、コンテンツ１７００の例では、先頭からの時間が１時間１０分１５秒であることを示すインデックス「０１：１０：１５」において、撮影タグ「コンテンツプロバイダのおすすめ」が関連付けられている。サーバ１５０のプロセッサ１５１は、コンテンツ１７００の配信時にこのインデックスを検出すると、撮影タグが関連付けられていることを検知し、当該シーンがプロバイダーのお薦めである旨を、コンテンツ１７００の視聴者（例えば、上記の他ユーザ）に通知し得る。また、プロセッサ１５１は、インデックス「０１：２５：１０」を検出すると、撮影タグが関連付けられていることを検知し、当該シーンが他のユーザに人気である旨をコンテンツ１７００の視聴者に通知する。コンテンツの視聴者（例えば、ユーザ１９０）は、このような通知に基づいて、視聴中のコンテンツにおけるお薦めを知ることができる。

［制御構造］
図１８を参照して、コンピュータ２００の制御構造について説明する。図１８は、ある実施の形態に従ってコンピュータ２００がコンテンツ１７００を再生する場合における処理の一部を表わすフローチャートである。

ステップＳ１８１０にて、プロセッサ１０は、ＨＭＤ１１０のユーザ１９０によって選択された動画（コンテンツ１７００）を仮想空間２において再生する。より詳しくは、まず、コンピュータ２００は、サーバ１５０から、ユーザ１９０によって選択されたコンテンツのデータを受信する。プロセッサ１０は、そのデータをＨＭＤ１１０における表示に適合した形式に変換し、変換後のデータをＨＭＤ１１０に送信する。ＨＭＤ１１０のモニタ１１２は、そのデータに基づいてコンテンツの動画を仮想空間２に提示する。

ステップＳ１８２０にて、プロセッサ１０は、インデックス１７１０を検出したことに基づいて、撮影タグが関連付けられたフレームが再生されていることを検知する。

ステップＳ１８３０にて、プロセッサ１０は、その検知に応答して、撮影タグに関連付けられる位置情報（仮想空間での位置１３１３）および姿勢情報１３１４に基づいて、カメラオブジェクト１００を仮想空間２に提示する。

ステップＳ１８４０にて、プロセッサ１０は、カメラオブジェクト１００に対するユーザ操作の検出に基づいて、そのフレームの撮影が行なわれたことを検知する。例えば、ユーザ１９０が、撮影のために予め定められた操作をコントローラ１６０に対して行なうと、その操作に応じた信号がプロセッサ１０に入力され、プロセッサ１０は、撮影が行なわれたことを検知する。

ステップＳ１８５０にて、プロセッサ１０は、検知された情報をサーバ１５０に通知する。サーバ１５０に通知される情報は、ユーザＩＤ、コンテンツＩＤ、仮想空間での位置、姿勢情報、および撮影日時を含む。ユーザ１９０の仮想空間２における自撮りが行なわれた場合には、当該情報は、アバターの位置１３２３とアバターの方向１３２４とをさらに含み得る。

ステップＳ１８６０にて、プロセッサ１０は、コンテンツの再生を継続する。その後、別のインデックスが検出されると、ステップＳ１８２０以降の処理が繰り返される。

ステップＳ１８７０にて、プロセッサ１０は、終了指示を検出する。例えば、プロセッサ１０は、コンテンツ１７００の終了部分を検出したことに基づいて、あるいは、再生の途中にサーバ１５０またはユーザ１９０によって強制終了の指示が入力されたことに基づいて、再生を終了する。

［画面の表示態様］
図１９を参照して、モニタ１１２における画面の表示態様について説明する。図１９は、モニタ１１２がおすすめの撮影ポイントを提示する場合における画面の遷移を表わす図である。以下の画面は、例えば、ＨＭＤ１１０を装着したユーザ１９０がコントローラ１６０を操作して、コンテンツを提供するサーバ１５０にアクセスしたことに基づいて、表示される。

状態Ａで示されるように、ある局面において、モニタ１１２はたとえば「おすすめの撮影ポイントを見ますか？」というメッセージを表示する。ユーザ１９０がたとえば「はい」という表示を選択すると、モニタ１１２の画面は状態Ｂに切り替わる。

状態Ｂにおいて、モニタ１１２は、ユーザ１９０が選択可能なコンテンツを表示する。一画面に表示されない数のコンテンツが存在する場合、ユーザ１９０は、コントローラ１６０を操作して画面をスクロール表示することにより、画面を切り換えられる。ユーザ１９０がたとえばコンテンツ番号「１」を選択すると、画面は、その選択結果に応じて切り換わる。

より具体的には、状態Ｃに示されるように、モニタ１１２は、おすすめコンテンツ番号「１」を表示する。ユーザが「再生」を選択すると、その選択結果がコンピュータ２００に送られ、プロセッサ１０は、当該コンテンツの再生を始める。

状態Ｄに示されるように、コンテンツの再生が終了すると、ユーザ１９０によるコメントの入力を促す画面が表示される。ユーザ１９０によって入力されたコメントは、サーバ１５０に送信される。サーバ１５０は、当該コンテンツにコメントを関連付けて保存する。後日、新たなユーザが同一のコンテンツを視聴する場合に、サーバ１５０は、当該新たなユーザに対して蓄積されているコメントを提示し得る。新たなユーザは、そのコメントを参考にして撮影するか否かを判断できる。なお、別の局面において、当該画面は、コンテンツの再生中に表示されてもよい。例えば、ユーザ１９０がコンテンツの再生を一時停止し、その間にコメントを入力してもよい。このようにすると、ユーザ１９０によるコメントの入力漏れが防止され得る。

その後、状態Ｅに示されるように、コンテンツを再生した後、モニタ１１２は、たとえば「おすすめスポットのご利用有難うございました」といったメッセージを表示する。

［まとめ］
以上のようにして、本実施の形態によれば、まず撮影のアングルが決められ、その後、アバターが撮影画像に入れる。ユーザ１９０は、仮想空間２において、コンテンツ（パノラマ動画）を視認しつつ、まず撮影したいアングル（仮想カメラ１の位置）を決めると、誰がどの位置からいつ撮影したいか（あるいは、いつ撮影したか）というパノラマ動画の撮影タイミングに関するデータが得られる。このようなデータは、現実空間での撮影によって得られる２次元の撮影画像に基づくデータとは異なるものである。

その後、同一のコンテンツを視認する一人以上のユーザが、各々に対応するアバターオブジェクトの配置を調整して、自撮りを行なうことにより、自身のアバターオブジェクトが一緒に写った撮影画像を得ることができる。サーバ１５０は、撮影が行なわれたアングルにおけるアバターオブジェクトの配置位置の情報も保存し得る。

アングルの情報（例えば、どの位置から、何時、誰が撮影したかを示す情報）は、コンテンツのＩＤに対応付けられ、コンテンツごとにサーバ１５０に蓄積される。その結果、サーバ１５０は、多くのユーザがよく撮影している箇所について、新たなユーザに撮影ポイントとしてのアングル情報を推奨することができる。また、サーバ１５０は、蓄積された情報に基づいて、ユーザの嗜好にあわせてアングルをリコメンドすることもできる。ユーザがそのリコメンドに基づいて撮影を行なった場合には、その撮影の結果がサーバ１５０に送られるので、サーバ１５０は、当該リコメンドに基づいて、そのアングルでユーザが撮影したか否か等のユーザの嗜好をデータベースに蓄積する。また、ユーザが、リコメンドに基づくアングルを使用した場合には、そのアングルを使用した感想を入力する等、サーバ１５０にフィードバックすることができる。また、サーバ１５０は、コンテンツごとに各アングルにおけるアバターオブジェクトの配置箇所も保存することにより、他のユーザの撮影実績に基づいて、当該コンテンツを視聴する新たなユーザに対しても、そのユーザのアバターオブジェクトの配置を適切にリコメンドできる。

サーバ１５０は、ユーザが撮影した画像に写った被写体に基づいて当該ユーザの関心を示すデータを収集できるので、そのデータに基づいて当該ユーザに適切な広告を配信することもできる。

本明細書に開示された技術的特徴の一部は、以下のように要約され得る。
（構成１） 仮想空間２を提供するためにコンピュータ２００で実行されるプログラムであって、プログラムはコンピュータ２００に、コンピュータ２００に接続されるＨＭＤ１１０に提示される仮想空間２を定義するステップと、仮想空間２に表示される画像を撮影するためのカメラオブジェクト１００を仮想空間２に提示するステップと、ＨＭＤ１１０のユーザ１９０によるカメラオブジェクト１００の位置または姿勢を変更するための操作を受け付けるステップと、位置を表わす位置情報または姿勢を表わす姿勢情報を保存するステップとを実行させる。

（構成２） 好ましくは、カメラオブジェクト１００を提示するステップは、ＨＭＤ１１０のユーザ１９０の操作に基づいてカメラオブジェクト１００を提示することを含む。

（構成３） 好ましくは、プログラムはコンピュータ２００に、ユーザ１９０によるコメントの入力を受け付けるユーザインターフェイスオブジェクトを仮想空間２に提示するステップをさらに実行させる。

（構成４） 好ましくは、画像は複数のフレームを含む。複数のフレームのいずれかには、撮影を促すタグ情報が関連付けられている。カメラオブジェクト１００を提示するステップは、タグ情報が関連付けられたフレームが仮想空間２に提示されたことに基づいて、カメラオブジェクト１００を提示することを含む。

（構成５） 好ましくは、タグ情報は、画像の作成時に予め作成された情報、または、画像を視聴したユーザ１９０による撮影に基づいて当該画像に関連付けられた情報、のいずれかを含む。

（構成６） 好ましくは、プログラムはコンピュータ２００に、カメラオブジェクト１００の姿勢が一定時間継続したことに基づいて、カメラオブジェクト１００が撮影を行なうステップをさらに実行させる。

（構成７） 好ましくは、プログラムはコンピュータ２００に、ＨＭＤ１１０のユーザ１９０のアバターオブジェクトを仮想空間２に配置するステップと、カメラオブジェクト１００がアバターオブジェクトの撮影を行なうステップとをさらに実行させる。

（構成８） 好ましくは、位置情報および姿勢情報を保存するステップは、アバターオブジェクトが撮影された時のカメラオブジェクト１００の位置情報および姿勢情報を保存することを含む。プログラムはコンピュータ２００に、アバターオブジェクトの位置を表わす位置情報およびアバターオブジェクトの向きを表わす姿勢情報を保存するステップをさらに実行させる。

（構成９） 好ましくは、プログラムはコンピュータ２００に、撮影が行なわれたコンテンツの識別データと、位置情報および姿勢情報とを保存するステップをさらに実行させる。

（構成１０） 好ましくは、プログラムはコンピュータ２００に、仮想空間２にカメラオブジェクト１００が提示されていない場合に、カメラオブジェクト１００を仮想空間２に提示するステップをさらに実行させる。

（構成１１） 好ましくは、カメラオブジェクト１００を提示するステップは、仮想空間２を共有する他ユーザによって使用されたカメラオブジェクト１００の位置情報および姿勢情報に基づいて、ＨＭＤ１１０のユーザ１９０のカメラオブジェクト１００を提示することを含む。

（構成１２） 好ましくは、プログラムはコンピュータ２００に、ＨＭＤ１１０のユーザ１９０の手に対応する手オブジェクトを仮想空間２に提示するステップと、ユーザ１９０の操作または動作に基づく手オブジェクトの動きに応じて、カメラオブジェクト１００の位置および姿勢を調整するステップと、カメラオブジェクト１００の姿勢が一定時間維持された後に、手オブジェクトがカメラオブジェクト１００から離れた状態でカメラオブジェクト１００の姿勢を維持するステップをさらに実行させる。

今回開示された実施の形態はすべての点で例示であって制限的なものではないと考えられるべきである。本発明の範囲は上記した説明ではなくて特許請求の範囲によって示され、特許請求の範囲と均等の意味および範囲内でのすべての変更が含まれることが意図される。

本開示はヘッドマウントデバイスを用いてコンテンツを提供する技術に適用可能である。

１ 仮想カメラ、２ 仮想空間、５ 基準視線、１０，１５１ プロセッサ、１１，１５２ メモリ、１２，１５４ ストレージ。

Claims (14)

1. 仮想体験を提供するためにコンピュータで実行されるプログラムであって、前記プログラムは前記コンピュータに、
   仮想空間を定義するステップと、
   前記コンピュータに接続されるヘッドマウントデバイスを装着したユーザの視点に相当する仮想カメラを前記仮想空間に定義するステップと、
   前記仮想空間内を撮影するためのカメラオブジェクトを前記仮想カメラの視界内に提示するステップと、
   前記カメラオブジェクトに、当該カメラオブジェクトの撮影範囲に対応する画像を表示させるステップと、
   前記仮想カメラの視界に対応する視界画像を前記ヘッドマウントデバイスに表示させるステップと、
   前記ユーザによる前記カメラオブジェクトの位置または姿勢を変更するための操作を受け付けるステップと、
   前記位置を表わす位置情報または前記姿勢を表わす姿勢情報を保存するステップとを実行させる、プログラム。
2. 前記カメラオブジェクトを提示するステップは、前記ユーザの操作に基づいて前記カメラオブジェクトを提示することを含む、請求項１に記載のプログラム。
3. 前記プログラムは前記コンピュータに、前記ユーザによるコメントの入力を受け付けるユーザインターフェイスオブジェクトを前記仮想空間に提示するステップをさらに実行させる、請求項２に記載のプログラム。
4. 前記仮想空間の背景画像は複数のフレームを含み、前記複数のフレームのいずれかには、撮影を促すタグ情報が関連付けられており、
   前記カメラオブジェクトを提示するステップは、前記タグ情報が関連付けられたフレームが前記仮想空間に提示されたことに基づいて、前記カメラオブジェクトを提示することを含む、請求項１に記載のプログラム。
5. 前記タグ情報は、前記背景画像の作成時に予め作成された情報、または、前記背景画像を視聴したユーザによる撮影に基づいて当該背景画像に関連付けられた情報、のいずれかを含む、請求項４に記載のプログラム。
6. 前記プログラムは前記コンピュータに、前記カメラオブジェクトの姿勢が一定時間継続したことに基づいて、前記カメラオブジェクトが撮影を行なうステップをさらに実行させる、請求項１〜５のいずれかに記載のプログラム。
7. 前記プログラムは前記コンピュータに、
   前記ユーザのアバターオブジェクトを前記仮想空間に配置するステップと、
   前記カメラオブジェクトが前記アバターオブジェクトの撮影を行なうステップとをさらに実行させる、請求項１〜６のいずれかに記載のプログラム。
8. 前記位置情報および前記姿勢情報を保存するステップは、前記アバターオブジェクトが撮影された時の前記カメラオブジェクトの位置情報および姿勢情報を保存することを含み、
   前記プログラムは前記コンピュータに、前記アバターオブジェクトの位置を表わす位置情報および前記アバターオブジェクトの向きを表わす姿勢情報を保存するステップをさらに実行させる、請求項７に記載のプログラム。
9. 前記プログラムは前記コンピュータに、前記撮影された画像の識別データと、前記位置情報および前記姿勢情報とを保存するステップをさらに実行させる、請求項７または８に記載のプログラム。
10. 前記プログラムは前記コンピュータに、前記仮想空間に前記カメラオブジェクトが提示されていない場合に、前記カメラオブジェクトを前記仮想空間に提示するステップをさらに実行させる、請求項１〜９のいずれかに記載のプログラム。
11. 前記カメラオブジェクトを提示するステップは、前記仮想空間を共有する他ユーザによって使用された前記カメラオブジェクトの前記位置情報および前記姿勢情報に基づいて、前記ヘッドマウントデバイスの前記ユーザの前記カメラオブジェクトを提示することを含む、請求項１０に記載のプログラム。
12. 前記プログラムは前記コンピュータに、
    前記ヘッドマウントデバイスの前記ユーザの手に対応する手オブジェクトを前記仮想空間に提示するステップと、
    前記ユーザの操作または動作に基づく前記手オブジェクトの動きに応じて、前記カメラオブジェクトの位置および姿勢を調整するステップと、
    前記カメラオブジェクトの姿勢が一定時間維持された後に、前記手オブジェクトが前記カメラオブジェクトから離れた状態で前記カメラオブジェクトの姿勢を維持するステップをさらに実行させる、請求項１〜１１のいずれかに記載のプログラム。
13. 請求項１〜１２のいずれかに記載のプログラムを格納したメモリと、
    前記プログラムを実行するためのプロセッサとを備える、情報処理装置。
14. 仮想体験を提供するためにコンピュータで実行される方法であって、
    仮想空間を定義するステップと、
    前記コンピュータに接続されるヘッドマウントデバイスを装着したユーザの視点に相当する仮想カメラを前記仮想空間に定義するステップと、
    前記仮想空間内を撮影するためのカメラオブジェクトを前記仮想カメラの視界内に提示するステップと、
    前記カメラオブジェクトに、当該カメラオブジェクトの撮影範囲に対応する画像を表示させるステップと、
    前記仮想カメラの視界に対応する視界画像を前記ヘッドマウントデバイスに表示させるステップと、
    前記ユーザによる前記カメラオブジェクトの位置または姿勢を変更するための操作を受け付けるステップと、
    前記位置を表わす位置情報または前記姿勢を表わす姿勢情報を保存するステップとを含む、方法。

Images