JPH11328443A - 三次元パノラマ画像生成システム、三次元パノラマ画像生成方法及び記録媒体 - Google Patents

Abstract

(57)【要約】 【課題】 質感のある三次元形状のグラフィックデータ
が合成されたパノラマ画像を生成することのできる三次
元パノラマ画像生成システムを提供する。 【解決手段】画像入力部１は、実写された背景画像デー
タを入力する。処理制御部４は、入力された背景画像デ
ータを結合して１枚のパノラマ画像を生成する。画像入
力部１は、三次元形状のグラフィックデータから構成さ
れるオブジェクト画像データを入力する。処理制御部４
は、取得したオブジェクト画像データに、背景画像デー
タと実質的に同一な光源設定となる光源情報を操作入力
部２を介して入力する。処理制御部４は、入力した光源
情報に従って、オブジェクト画像データにレンダリング
し質感を与える。処理制御部４は、レンダリング後のオ
ブジェクト画像データをパノラマ画像に合成し、合成し
たパノラマ画像を画像表示部６に表示する。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、撮像装置等により
実際に撮像した画像に三次元形状のグラフィックデータ
を合成し、仮想的な三次元パノラマ画像を生成する三次
元パノラマ画像生成システム、三次元パノラマ画像生成
方法及び記録媒体に関する。

【０００２】

【従来の技術】従来、カメラ等の撮像装置により実際に
撮像した風景画像に、コンピュータグラフィックス等に
より生成された三次元形状の建築物等のグラフィックデ
ータを合成した仮想画像を生成する技術が知られてい
る。この仮想画像は、景観検証及び、建築プレゼンテー
ション等において使用され、建築物等の完成後の景観等
を容易に明らかにすることができる。

【０００３】一方、最近では、パーソナルコンピュータ
等のディスプレイ装置に風景画像等を表示し、ユーザか
らの視点位置の変更指示に従って、表示画像を変化させ
て、３６０度の三次元パノラマ画像を表示することので
きる三次元パノラマ画像技術が知られている。この三次
元パノラマ画像技術は、従来のパノラマ画像と多少異な
る。従来のパノラマ画像がパノラマ画像を全て表示する
のに対して、三次元パノラマ画像技術は、パノラマ画像
の一部の領域を表示して、ユーザの視点変更指示に従っ
て、画像をなめらかに移動することにより、３６０度の
三次元パノラマ画像を表示するものである。

【０００４】以下、このような三次元パノラマ画像技術
について図面を参照して説明する。図１３に示すよう
に、中心点を定めた、カメラ等の撮像装置により角度を
変化させながら撮影した複数の画像をパノラマ合成する
場合について説明する。このように撮像された複数の画
像を図１４に示す。三次元パノラマ画像技術は、このよ
うな複数の画像を図１５に示す仮想空間上における環状
の帯の内側に貼り付けて、それぞれつなぎ目が目立たな
いように結合させて１枚の三次元パノラマ画像を生成す
る。三次元パノラマ画像技術は、このように生成した三
次元パノラマ画像における一部の領域を表示して、ユー
ザの視点変更指示に従って、画像をなめらかに移動する
ことにより、３６０度の三次元パノラマ画像を表示する
ものである。現在、このような、有用な三次元パノラマ
画像を景観検証及び、建築プレゼンテーション等に利用
しようとする動きが現れている。

【０００５】

【発明が解決しようとする課題】しかし、三次元パノラ
マ画像を景観検証及び、建築プレゼンテーション等に使
用するためには、いくつかの課題を有していた。三次元
パノラマ画像は、実際には仮想空間上における環状の帯
をほどいて、二次元平面に位置変換してパーソナルコン
ピュータ等のメモリ中に記憶される。メモリ中の二次元
領域における画像は、歪みを生じたものとなる。すなわ
ち、図１６（ａ）に示すような三次元パノラマ画像にお
けるテーブルの画像は、図１６（ｂ）に示すように、歪
んだものとなる。そのため、景観検証等におけるグラフ
ィックデータを合成する場合に、歪んだグラフィックデ
ータを生成して、パノラマ画像に合成する必要があっ
た。また、パノラマ画像における画像の歪みは、場所に
よって異なるため、グラフィックデータをパノラマ画像
のどこに配置して合成するかによって、歪みを調節する
必要があった。さらに、実写による背景画像となるパノ
ラマ画像と同程度の光の照射及び陰を忠実にグラフィッ
クデータに再現し、正確かつリアルに表現させるには、
ある程度の経験が必要であった。

【０００６】本発明は、上記実状に鑑みてなされたもの
で、質感のある三次元形状のグラフィックデータが合成
されたパノラマ画像を生成することのできる三次元パノ
ラマ画像生成システム、三次元パノラマ画像生成方法及
び記録媒体を提供することを目的とする。

【０００７】

【課題を解決するための手段】上記目的を達成するた
め、この発明の第１の観点に係る三次元パノラマ画像生
成システムは、実写された背景画像となる複数の画像デ
ータを入力する背景画像入力手段と、前記背景画像入力
手段にて入力された複数の画像データをそれぞれ結合し
て１枚のパノラマ画像を生成するパノラマ画像生成手段
と、三次元形状のグラフィックデータから構成されるオ
ブジェクトデータを入力するオブジェクトデータ入力手
段と、前記オブジェクトデータ入力手段にて入力された
オブジェクトデータに、少なくとも前記背景画像入力手
段にて入力された画像データと実質的に同一な光源設定
となる光源情報を入力する光源情報入力手段と、前記光
源情報入力手段により入力した光源情報に従って、前記
パノラマ画像生成手段により生成されたパノラマ画像に
前記オブジェクトデータ入力手段にて入力されたオブジ
ェクトデータを合成する合成手段と、前記合成手段によ
り合成されたパノラマ画像を表示する表示手段と、を備
えることを特徴とする。

【０００８】この発明によれば、パノラマ画像生成手段
は、背景画像入力手段にて入力された複数の画像データ
をそれぞれ結合して１枚のパノラマ画像を生成する。光
源情報入力手段は、オブジェクトデータ入力手段にて入
力されたオブジェクトデータに、少なくとも背景画像入
力手段にて入力された画像データと実質的に同一な光源
設定となる光源情報を入力する。合成手段は、光源情報
入力手段により入力した光源情報に従って、パノラマ画
像生成手段により生成されたパノラマ画像にオブジェク
トデータ入力手段にて入力されたオブジェクトデータを
合成する。表示手段は、合成手段により合成されたパノ
ラマ画像を表示する。この結果、実写された背景画像と
なるパノラマ画像と実質的に同一となる質感のある三次
元形状のグラフィックデータを生成することができる。

【０００９】前記パノラマ画像生成手段により生成され
たパノラマ画像の画像情報に前記オブジェクトデータ入
力手段にて入力されたオブジェクトデータを合成する仮
想空間上の座標位置を設定する座標位置設定手段と、前
記座標位置設定手段により設定された座標位置のパノラ
マ画像における少なくとも歪み情報を取得する歪み情報
取得手段と、を更に備え、前記合成手段は、前記歪み情
報取得手段により取得した歪み情報に従って、前記パノ
ラマ画像生成手段により生成されたパノラマ画像に前記
オブジェクトデータ入力手段にて入力されたオブジェク
トデータを合成してもよい。この結果、実写された背景
画像となるパノラマ画像と実質的に同一となる質感のあ
る三次元形状のグラフィックデータを生成することがで
きる。

【００１０】前記光源情報入力手段は、少なくとも経度
情報、緯度情報、時刻情報及び天候情報からなる撮影情
報を入力し、入力した撮影情報に従って、前記オブジェ
クトデータ入力手段にて入力されたオブジェクトデータ
に、前記背景画像入力手段にて入力された画像データと
実質的に同一な光源設定となる光源情報を入力してもよ
い。この結果、実写された背景画像となるパノラマ画像
と実質的に同一となる質感のある三次元形状のグラフィ
ックデータを生成することができる。

【００１１】前記合成手段により合成されたパノラマ画
像において合成されたオブジェクトデータの境目を画素
補完する画素補完手段を更に備えてもよい。

【００１２】上記目的を達成するため、この発明の第２
の観点に係る三次元パノラマ画像生成方法は、実写され
た背景画像となる複数の画像データを入力する背景画像
入力ステップと、前記背景画像入力ステップにて入力さ
れた複数の画像データをそれぞれ結合して１枚のパノラ
マ画像を生成するパノラマ画像生成ステップと、三次元
形状のグラフィックデータから構成されるオブジェクト
データを入力するオブジェクトデータ入力ステップと、
前記オブジェクトデータ入力ステップにて入力されたオ
ブジェクトデータに、少なくとも前記背景画像入力ステ
ップにて入力された画像データと実質的に同一な光源設
定となる光源情報を入力する光源情報入力ステップと、
前記光源情報入力ステップにより入力した光源情報に従
って、前記パノラマ画像生成ステップにより生成された
パノラマ画像に前記オブジェクトデータ入力ステップに
て入力されたオブジェクトデータを合成する合成ステッ
プと、前記合成ステップにより合成されたパノラマ画像
を表示する表示ステップと、を備えることを特徴とす
る。

【００１３】この発明によれば、パノラマ画像生成ステ
ップは、背景画像入力ステップにて入力された複数の画
像データをそれぞれ結合して１枚のパノラマ画像を生成
する。光源情報入力ステップは、オブジェクトデータ入
力ステップにて入力されたオブジェクトデータに、少な
くとも背景画像入力ステップにて入力された画像データ
と実質的に同一な光源設定となる光源情報を入力する。
合成ステップは、光源情報入力ステップにより入力した
光源情報に従って、パノラマ画像生成ステップにより生
成されたパノラマ画像に前記オブジェクトデータ入力ス
テップにて入力されたオブジェクトデータを合成する。
表示ステップは、合成ステップにより合成されたパノラ
マ画像を表示する。この結果、実写された背景画像とな
るパノラマ画像と実質的に同一となる質感のある三次元
形状のグラフィックデータを生成することができる。

【００１４】上記目的を達成するため、この発明の第３
の観点に係る記録媒体は、コンピュータを三次元パノラ
マ画像生成システムとして機能させるプログラムを記録
するコンピュータ読み取り可能な記録媒体であって、実
写された背景画像となる複数の画像データを入力する背
景画像入力ステップと、前記背景画像入力ステップにて
入力された複数の画像データをそれぞれ結合して１枚の
パノラマ画像を生成するパノラマ画像生成ステップと、
三次元形状のグラフィックデータから構成されるオブジ
ェクトデータを入力するオブジェクトデータ入力ステッ
プと、前記オブジェクトデータ入力ステップにて入力さ
れたオブジェクトデータに、少なくとも前記背景画像入
力ステップにて入力された画像データと実質的に同一な
光源設定となる光源情報を入力する光源情報入力ステッ
プと、前記光源情報入力ステップにより入力した光源情
報に従って、前記パノラマ画像生成ステップにより生成
されたパノラマ画像に前記オブジェクトデータ入力ステ
ップにて入力されたオブジェクトデータを合成する合成
ステップと、前記合成ステップにより合成されたパノラ
マ画像を表示する表示ステップとを実現するプログラム
を記憶する。

【００１５】

【発明の実施の形態】以下、この発明の実施の形態にか
かる三次元パノラマ画像生成システムについて図面を参
照して説明する。図１に示す三次元パノラマ画像生成シ
ステムは、画像入力部１と、操作入力部２と、パラメー
タ記憶部３と、処理制御部４と、画像記憶部５と、画像
表示部６とより構成される。

【００１６】画像入力部１は、実写による複数の背景画
像データを入力し、処理制御部４を介して画像記憶部５
に記憶する。また、画像入力部１は、三次元形状のグラ
フィック画像データからなるオブジェクト画像を入力
し、画像記憶部５に記憶する。

【００１７】操作入力部２は、キーボード及びマウス等
の入力装置等からなり、ユーザから入力される三次元パ
ノラマ画像生成の指示データ等を取得し、処理制御部４
に供給する。

【００１８】パラメータ記憶部３は、処理制御部４が行
うオブジェクト画像に質感を与えるためのレンダリング
処理において使用する各種パラメータ等を記憶する。

【００１９】処理制御部４は、オブジェクト画像に対す
る加工処理、光源設定処理及びレンダリング処理を行
う。また、処理制御部４は、背景画像データ及びオブジ
ェクト画像データを合成する。また、処理制御部４は、
オブジェクト画像データをパノラマ画像データに合成す
る合成処理を行う。

【００２０】画像記憶部５は、メモリ等からなり、画像
入力部１から入力した背景画像データ及び、オブジェク
ト画像データを記憶する。また、画像記憶部５は、処理
制御部４により生成された合成処理後のパノラマ画像デ
ータを記憶する。

【００２１】画像表示部６は、ＣＲＴ（Cathode Ray Tu
be）等からなり、画像記憶部５に記憶されたパノラマ画
像データを表示する。

【００２２】以下、この発明の実施の形態に係る三次元
パノラマ画像生成システムにおける三次元パノラマ画像
生成処理について図面を参照して説明する。図２は、三
次元パノラマ画像生成システムが行う三次元パノラマ画
像生成処理について説明するフローチャートである。ユ
ーザが操作入力部２からパノラマ画像作生成処理の開始
を指示する指示データを入力すると、図２に示す三次元
パノラマ画像生成処理を開始する。

【００２３】まず、画像入力部１は、図示せぬ外部のカ
ラースキャナ等から複数の背景画像データを入力する
（ステップＳ１）。すなわち、画像入力部１は、図３に
示すような複数の背景画像データを入力する。画像入力
部１は、入力した背景画像データを処理制御部４に供給
する。処理制御部４は、取得した背景画像データを画像
記憶部５に記憶する。

【００２４】処理制御部４は、画像記憶部５に記憶した
背景画像データをパノラマ画像合成する（ステップＳ
２）。すなわち、処理制御部４は、図３に示すような複
数の背景画像データを仮想空間上における環状の帯の内
側に貼り付けて、それぞれつなぎ目が目立たないように
結合させて１枚のパノラマ画像に合成する。処理制御部
４は、仮想空間上における環状の帯をほどいて、図４に
示すような二次元平面に変換したパノラマ画像を画像記
憶部５に記憶する。

【００２５】次に、画像入力部１は、図示せぬ外部のコ
ンピュータグラフィックス生成装置等からポリゴン等か
ら構成される三次元形状のオブジェクトデータを入力す
る（ステップＳ３）。すなわち、画像入力部１は、図５
に示すような三次元形状のビルのグラフィックデータと
なるオブジェクトデータを入力する。画像入力部１は、
入力したオブジェクトデータを処理制御部４に供給す
る。処理制御部４は、取得したオブジェクト画像データ
を画像記憶部５に記憶する。

【００２６】画像記憶部５に、オブジェクト画像データ
を記憶すると、処理制御部４は、ユーザからの指示デー
タに従って、オブジェクト画像データを仮想空間におけ
る平面座標上に配置する（ステップＳ４）。以下、処理
制御部４が行うオブジェクトデータを平面座標上に配置
する処理について図６に示すフローチャートを参照して
詳細に説明する。

【００２７】処理制御部４は、図３に示す背景画像デー
タに対応する予め画像記憶部５に記憶されていた図７に
示すような平面の地形図等からなる平面座標図を画像表
示部６に表示する（ステップＳ４１）。

【００２８】操作入力部２は、ユーザからの指示データ
を入力し、処理制御部４に供給する。処理制御部４は、
操作入力部２から取得した指示データに従って、オブジ
ェクトデータを平面座標図上に配置する（ステップＳ４
２）。すなわち、処理制御部４は、指示データに従っ
て、例えば、ビルを建設する予定地等に、オブジェクト
データを配置する。

【００２９】処理制御部４は、配置されたオブジェクト
データの平面座標図上における座標位置に従って、予め
定められた視点位置から見たオブジェクト表示画像を生
成する（ステップＳ４３）。

【００３０】処理制御部４は、生成したオブジェクト表
示画像を画像表示部６に表示する（ステップＳ４４）。

【００３１】図２に戻って、ステップＳ４にて、オブジ
ェクトの仮想空間における平面座標上の位置が定まる
と、処理制御部４は、ユーザからの指示データに従っ
て、オブジェクトデータを加工する（ステップＳ５）。
以下、処理制御部４が行うオブジェクトデータの加工処
理について図８に示すフローチャートを参照して詳細に
説明する。

【００３２】操作入力部２は、ユーザからの指示データ
を入力し、処理制御部４に供給する。処理制御部４は、
操作入力部２から取得した指示データに従って、オブジ
ェクト画像データの大きさや表示方向を変更する（ステ
ップＳ５１）。

【００３３】また、処理制御部４は、操作入力部２から
取得した指示データに従って、オブジェクトデータに設
定されている色や模様等を変更する（ステップＳ５
２）。すなわち、処理制御部４は、オブジェクトデータ
の色情報、鏡面反射係数情報、透過係数情報及び、テク
スチャ情報を取得した指示データに従って変更する。

【００３４】処理制御部４は、変更後のオブジェクトデ
ータを予め定められた視点位置から見たオブジェクト表
示画像を生成する（ステップＳ５３）。処理制御部４
は、生成したオブジェクト画像を画像表示部６に表示す
る（ステップＳ５４）。

【００３５】図２に戻って、ステップＳ５にて、オブジ
ェクトデータの加工処理が行われると、処理制御部４
は、ユーザからの指示データに従って、光源の設定を行
う（ステップＳ６）。以下、処理制御部４が行うオブジ
ェクトデータの光源設定処理について図９に示すフロー
チャートを参照して詳細に説明する。

【００３６】処理制御部４は、画像記憶部５に記憶され
ている背景データが屋外の画像である場合に、画像表示
部６に図１０に示すような光源情報入力画面を表示する
（ステップＳ６１）。

【００３７】操作入力部２は、ユーザから光源情報を入
力し、処理制御部４に供給する。処理制御部４は、操作
入力部２から取得した光源情報に従って、光源の設定デ
ータを生成する（ステップＳ６２）。すなわち、処理制
御部４は、取得した光源情報に従って、光源となる太陽
の位置及び、太陽からの光の強さ等をパラメータ記憶部
３に記憶されたパラメータ情報に従って算出し、光源の
設定データを生成する。

【００３８】処理制御部４は、生成した光源の設定デー
タを画像記憶部５に記憶する（ステップＳ６３）。

【００３９】図２に戻って、ステップＳ６にて、オブジ
ェクトデータの光源設定処理が行われると、処理制御部
４は、生成された光源の設定データに従って、オブジェ
クトデータに実写に近い質感を与えるレンダリングを行
う（ステップＳ７）。以下、処理制御部４が行うオブジ
ェクトデータのレンダリング処理及び合成処理について
図１１に示すフローチャートを参照して詳細に説明す
る。

【００４０】処理制御部４は、図９のステップＳ６３に
て画像記憶部５に記憶した光源の設定データに従って、
オブジェクトデータに設定されている色及び模様を変更
する（ステップＳ７１）。すなわち、処理制御部４は、
レイトレーシング（光線追跡法）等により生成した光源
の設定データに基づいて、オブジェクト画像の色、鏡面
反射係数、透過係数及び、テクスチャデータを変更す
る。

【００４１】処理制御部４は、画像実写に近い質感を与
えたオブジェクトデータを、ステップＳ４にて配置され
た平面座標上の位置に対応する背景画像データと同様と
なる歪みを与えて変形させる（ステップＳ７２）。すな
わち、処理制御部４は、オブジェクトデータが配置され
た平面座標上の位置に対応する背景画像データの歪みを
取得し、取得した歪みに従って、オブジェクトデータを
変形させる。

【００４２】処理制御部４は、オブジェクトデータとパ
ノラマ画像データとを合成する（ステップＳ７３）。す
なわち、処理制御部４は、ステップＳ２にて生成したパ
ノラマ画像データにオブジェクトデータを合成する。処
理制御部４は、合成後のパノラマ画像データにおけるオ
ブジェクトデータの境目となるエッジ部を目立たなくさ
せるアンチエイリアスを行う（ステップＳ７４）。すな
わち、処理制御部４は、オブジェクトデータのエッジ部
を隣接する色との中間色にて補色して境目を目立たなく
させる。この結果、処理制御部４は、図１２に示すよう
なオブジェクト画像データとなるビルが合成されたパノ
ラマ画像を生成する。

【００４３】処理制御部４は、生成したパノラマ画像を
画像表示部６に表示する（ステップＳ８）。すなわち、
処理制御部４は、生成したパノラマ画像の一部の領域を
表示して、ユーザの視点変更指示に従って、画像をなめ
らかに移動することにより、３６０度の三次元パノラマ
画像を表示する。この結果、オブジェクトデータにパノ
ラマ画像と実質的に同一となる光源からの光を与え、実
写に近い質感の三次元パノラマ画像を生成することがで
きる。

【００４４】上述の実施の形態では、画像入力部１から
入力した複数の背景画像データを処理制御部４にてパノ
ラマ合成したが、初めから、パノラマ合成を入力しても
よい。他の画像生成装置により生成されたパノラマ合成
を使用することにより処理を高速化することができる。

【００４５】なお、この発明の三次元パノラマ画像生成
システムは、専用のシステムによらず、通常のコンピュ
ータシステムを用いて実現可能である。例えば、コンピ
ュータに上述のいずれかの処理を実行するためのプログ
ラムを格納した媒体（フロッピーディスク、ＣＤ−ＲＯ
Ｍ等）から該プログラムをインストールすることによ
り、上述の処理を実行する三次元パノラマ画像生成シス
テムを構成することができる。

【００４６】また、コンピュータにプログラムを供給す
るための媒体は、通信媒体（通信回線、通信ネットワー
ク、通信システムのように、一時的かつ流動的にプログ
ラムを保持する媒体）でも良い。例えば、通信ネットワ
ークの掲示板（ＢＢＳ）に該プログラムを掲示し、これ
をネットワークを介して配信してもよい。そして、この
プログラムを起動し、ＯＳの制御下で、他のアプリケー
ションプログラムと同様に実行することにより、上述の
処理を実行することができる。

【００４７】

【発明の効果】以上説明したように、本発明によれば、
質感のある三次元形状のグラフィックデータが合成され
たパノラマ画像を生成することができる。

【図面の簡単な説明】

【図１】本発明の実施の形態に係る三次元パノラマ画像
生成システムの構成を示す模式図である。

【図２】本発明の実施の形態に係る三次元パノラマ画像
生成処理を説明するフローチャートである。

【図３】複数の背景画像を示す模式図である。

【図４】背景画像から合成されたパノラマ画像を示す模
式図である。

【図５】オブジェクト画像データの一例を示す模式図で
ある。

【図６】オブジェクト画像データの配置処理を説明する
フローチャートである。

【図７】平面の地形図等からなる平面座標図の一例を示
す模式図である。

【図８】オブジェクト画像データの加工処理を説明する
フローチャートである。

【図９】光源設定処理を説明するフローチャートであ
る。

【図１０】光源情報入力画面の一例を示す模式図であ
る。

【図１１】レンダリング処理及び合成処理を説明するフ
ローチャートである。

【図１２】完成した三次元パノラマ画像を示す模式図で
ある。

【図１３】角度を変化させながら撮影する様子を示す模
式図である。

【図１４】複数の撮影された画像を示す模式図である。

【図１５】仮想空間上における環状の帯の内側に貼り付
けられた画像のイメージを示す模式図である。

【図１６】正常な画像及び歪んだ画像を示す模式図であ
る。

【符号の説明】

１ 画像入力部 ２ 操作入力部 ３ パラメータ記憶部 ４ 処理制御部 ５ 画像記憶部 ６ 画像表示部

Claims (6)

【特許請求の範囲】
1. 【請求項１】実写された背景画像となる複数の画像デー
   タを入力する背景画像入力手段と、 前記背景画像入力手段にて入力された複数の画像データ
   をそれぞれ結合して１枚のパノラマ画像を生成するパノ
   ラマ画像生成手段と、 三次元形状のグラフィックデータから構成されるオブジ
   ェクトデータを入力するオブジェクトデータ入力手段
   と、 前記オブジェクトデータ入力手段にて入力されたオブジ
   ェクトデータに、少なくとも前記背景画像入力手段にて
   入力された画像データと実質的に同一な光源設定となる
   光源情報を入力する光源情報入力手段と、 前記光源情報入力手段により入力した光源情報に従っ
   て、前記パノラマ画像生成手段により生成されたパノラ
   マ画像に前記オブジェクトデータ入力手段にて入力され
   たオブジェクトデータを合成する合成手段と、 前記合成手段により合成されたパノラマ画像を表示する
   表示手段と、 を備えることを特徴とする三次元パノラマ画像生成シス
   テム。
2. 【請求項２】前記パノラマ画像生成手段により生成され
   たパノラマ画像の画像情報に前記オブジェクトデータ入
   力手段にて入力されたオブジェクトデータを合成する仮
   想空間上の座標位置を設定する座標位置設定手段と、 前記座標位置設定手段により設定された座標位置のパノ
   ラマ画像における少なくとも歪み情報を取得する歪み情
   報取得手段と、を更に備え、 前記合成手段は、前記歪み情報取得手段により取得した
   歪み情報に従って、前記パノラマ画像生成手段により生
   成されたパノラマ画像に前記オブジェクトデータ入力手
   段にて入力されたオブジェクトデータを合成する、 ことを特徴とする請求項１に記載の三次元パノラマ画像
   生成システム。
3. 【請求項３】前記光源情報入力手段は、少なくとも経度
   情報、緯度情報、時刻情報及び天候情報からなる撮影情
   報を入力し、入力した撮影情報に従って、前記オブジェ
   クトデータ入力手段にて入力されたオブジェクトデータ
   に、前記背景画像入力手段にて入力された画像データと
   実質的に同一な光源設定となる光源情報を入力する、 ことを特徴とする請求項１又は２に記載の三次元パノラ
   マ画像生成システム。
4. 【請求項４】前記合成手段により合成されたパノラマ画
   像において合成されたオブジェクトデータの境目を画素
   補完する画素補完手段を更に備える、 ことを特徴とする請求項１、２又は３に記載の三次元パ
   ノラマ画像生成システム。
5. 【請求項５】実写された背景画像となる複数の画像デー
   タを入力する背景画像入力ステップと、 前記背景画像入力ステップにて入力された複数の画像デ
   ータをそれぞれ結合して１枚のパノラマ画像を生成する
   パノラマ画像生成ステップと、 三次元形状のグラフィックデータから構成されるオブジ
   ェクトデータを入力するオブジェクトデータ入力ステッ
   プと、 前記オブジェクトデータ入力ステップにて入力されたオ
   ブジェクトデータに、少なくとも前記背景画像入力ステ
   ップにて入力された画像データと実質的に同一な光源設
   定となる光源情報を入力する光源情報入力ステップと、 前記光源情報入力ステップにより入力した光源情報に従
   って、前記パノラマ画像生成ステップにより生成された
   パノラマ画像に前記オブジェクトデータ入力ステップに
   て入力されたオブジェクトデータを合成する合成ステッ
   プと、 前記合成ステップにより合成されたパノラマ画像を表示
   する表示ステップと、 を備えることを特徴とする三次元パノラマ画像生成方
   法。
6. 【請求項６】コンピュータを三次元パノラマ画像生成シ
   ステムとして機能させるプログラムを記録するコンピュ
   ータ読み取り可能な記録媒体であって、 実写された背景画像となる複数の画像データを入力する
   背景画像入力ステップと、前記背景画像入力ステップに
   て入力された複数の画像データをそれぞれ結合して１枚
   のパノラマ画像を生成するパノラマ画像生成ステップ
   と、三次元形状のグラフィックデータから構成されるオ
   ブジェクトデータを入力するオブジェクトデータ入力ス
   テップと、前記オブジェクトデータ入力ステップにて入
   力されたオブジェクトデータに、少なくとも前記背景画
   像入力ステップにて入力された画像データと実質的に同
   一な光源設定となる光源情報を入力する光源情報入力ス
   テップと、前記光源情報入力ステップにより入力した光
   源情報に従って、前記パノラマ画像生成ステップにより
   生成されたパノラマ画像に前記オブジェクトデータ入力
   ステップにて入力されたオブジェクトデータを合成する
   合成ステップと、前記合成ステップにより合成されたパ
   ノラマ画像を表示する表示ステップとを実現するプログ
   ラムを記憶することを特徴とする記録媒体。