JP2024020074A

JP2024020074A - 情報処理方法及び情報処理装置

Info

Publication number: JP2024020074A
Application number: JP2022122964A
Authority: JP
Inventors: 達朗堀; Tatsuro Hori
Original assignee: Toyota Motor Corp
Current assignee: Toyota Motor Corp
Priority date: 2022-08-01
Filing date: 2022-08-01
Publication date: 2024-02-14
Anticipated expiration: 2042-08-01
Also published as: JP7715095B2; US20240037711A1; CN117499795A; US12462344B2

Abstract

【課題】画像の結合部分における被写体の歪みを低減できる情報処理方法及び情報処理装置を提供する。【解決手段】情報処理方法は、撮影範囲が互いに一部において重複する複数の撮影部１４Ａ、１４Ｂのそれぞれで被写体を撮影して得られた、重複領域３２を有する複数の画像３０Ａ、３０Ｂのそれぞれについて、重複領域３２における被写体の特徴点の位置を検出することと、各画像における特徴点の位置を基準とした仮想線３４が重複領域３２に含まれる画像に対して、仮想線３４の位置でトリミングを行うことと、複数の画像を結合して１つの合成画像４０を生成することとを含む。【選択図】図１

Description

本開示は、情報処理方法及び情報処理装置に関する。

撮影により得られた２枚の画像の重複領域を検出した結果に基づいて２枚の画像を合成する装置が知られている（例えば、特許文献１参照）。

特開２０１１－１９９４７８号公報

２枚の画像を結合する場合、画像の結合部分において、各画像の撮影位置又は撮影方向の違いに起因して被写体が歪むことがある。

かかる事情に鑑みてなされた本開示の目的は、画像の結合部分における被写体の歪みを低減することにある。

本開示の一実施形態に係る情報処理方法は、撮影範囲が互いに一部において重複する複数の撮影部のそれぞれで被写体を撮影して得られた、重複領域を有する複数の画像のそれぞれについて、前記重複領域における被写体の特徴点の位置を検出することと、前記各画像における前記特徴点の位置を基準とした仮想線が前記重複領域に含まれる画像に対して、前記仮想線の位置でトリミングを行うことと、前記複数の画像を結合して１つの合成画像を生成することとを含む。

本開示の一実施形態に係る情報処理装置は、複数の撮影部と、制御部とを備える。前記複数の撮影部のそれぞれは、互いに重複領域を有する画像を撮影する。前記制御部は、前記各撮影部が撮影した画像について、前記重複領域における被写体の特徴点の位置を検出する。前記制御部は、前記各画像における前記特徴点の位置を基準とした仮想線が前記重複領域に含まれる画像に対して、前記仮想線の位置でトリミングを行い、前記複数の画像を結合して１つの合成画像を生成する。

本開示の一実施形態に係る情報処理方法及び情報処理装置によれば、画像の結合部分における被写体の歪みが低減され得る。

一実施形態に係る情報処理装置の構成例を示すブロック図である。撮影部の配置例を示す図である。第１撮影部で撮影したユーザ画像の一例を示す図である。第２撮影部で撮影したユーザ画像の一例を示す図である。図３Ａ及び図３Ｂの画像を合成した画像の一例を示す図である。一実施形態に係る情報処理方法の手順例を示すフローチャートである。

（情報処理装置１０の構成例）
図１に示されるように、一実施形態に係る情報処理装置１０は、制御部１１と、記憶部１２と、インタフェース１３と、撮影部１４とを備える。情報処理装置１０は、必須ではないが表示装置２０に接続される。情報処理装置１０は、表示装置２０を備えてもよい。

情報処理装置１０は、ノートＰＣ（Personal Computer）、デスクトップＰＣ、又はタブレットＰＣ等のＰＣを含んで構成されてよい。情報処理装置１０は、ユーザが所持するスマートフォン又はタブレット等の携帯端末を含んで構成されてもよい。情報処理装置１０は、これらの例に限られず、種々の機器を含んで構成されてよい。以下、情報処理装置１０の各構成部が説明される。

＜制御部１１＞
制御部１１は、情報処理装置１０の少なくとも１つの構成部を制御する。制御部１１及び２１は、同一又は類似に構成されてよい。制御部１１は、１つ以上のプロセッサを含んで構成されてよい。本実施形態において「プロセッサ」は、汎用のプロセッサ、特定の処理に特化した専用のプロセッサ等であるが、これらに限られない。制御部１１は、１つ以上の専用回路を含んで構成されてもよい。専用回路は、例えば、ＦＰＧＡ（Field-Programmable Gate Array）又はＡＳＩＣ（Application Specific Integrated Circuit）を含んでよい。制御部１１は、プロセッサの代わりに専用回路を含んで構成されてもよいし、プロセッサとともに専用回路を含んで構成されてもよい。

＜記憶部１２＞
記憶部１２は、情報処理装置１０の動作に用いられる任意の情報を格納する。記憶部１２又は２２は、同一又は類似に構成されてよい。記憶部１２は、システムプログラム、又はアプリケーションプログラム等を格納してもよい。記憶部１２は、例えば半導体メモリ、磁気メモリ、又は光メモリ等を含んで構成されてよいが、これらに限られず他の種々のメモリを含んで構成されてもよい。記憶部１２は、例えば主記憶装置、補助記憶装置、又はキャッシュメモリとして機能してもよい。記憶部１２は、磁気ディスク等の電磁記憶媒体を含んで構成されてもよい。記憶部１２は、非一時的なコンピュータ読み取り可能な媒体を含んで構成されてもよい。記憶部１２は、制御部１１に含まれてもよい。

＜インタフェース１３＞
インタフェース１３は、情報処理装置１０において、制御部１１から情報又はデータ等を出力したり、制御部１１に情報又はデータ等を入力したりする。インタフェース１３は、ネットワークを介して、又は、ネットワークを介さずに、他の情報処理装置１０等の他の機器と通信可能に構成される通信モジュールを含んでよい。通信モジュールは、例えば４Ｇ（4th Generation）又は５Ｇ（5th Generation）等の移動体通信規格に対応してよい。通信モジュールは、ＬＡＮ（Local Area Network）等の通信規格に対応してもよい。通信モジュールは、有線又は無線の通信規格に対応してもよい。通信モジュールは、これらに限られず、種々の通信規格に対応してよい。インタフェース１３は、外部の通信モジュールに接続可能に構成されてもよい。

ネットワークは、インターネット、少なくとも１つのＷＡＮ（Wide Area Network）、少なくとも１つのＭＡＮ（Metropolitan Area Network）、又はこれらの任意の組合せを含んで構成されてよい。ネットワークは、少なくとも１つの無線ネットワーク、少なくとも１つの光ネットワーク、又はこれらの任意の組合せを含んで構成されてもよい。無線ネットワークは、例えば、アドホックネットワーク、セルラーネットワーク、無線ＬＡＮ（Local Area Network）、衛星通信ネットワーク、又は地上マイクロ波ネットワークを含んで構成されてよい。

インタフェース１３は、ＵＳＢ（Universal Serial Bus）又はBluetooth（登録商標）等の規格に対応するように構成されてもよい。

インタフェース１３は、ユーザから情報又はデータ等の入力を受け付ける入力デバイスを含んで構成されてよい。入力デバイスは、例えば、タッチパネル若しくはタッチセンサ、又はマウス等のポインティングデバイスを含んで構成されてよい。入力デバイスは、物理キーを含んで構成されてもよい。入力デバイスは、マイク等の音声入力デバイスを含んで構成されてもよい。インタフェース１３は、外部の入力デバイスに接続可能に構成されてもよい。

インタフェース１３は、ユーザに対して情報又はデータ等を出力する出力デバイスを含んで構成されてよい。出力デバイスは、後述する表示装置２０に表示させる情報又はデータを表示装置２０に対して出力するように構成されてよい。出力デバイスは、例えば、音声等の聴覚情報を出力するスピーカ等の音声出力デバイスを含んでよい。出力デバイスは、例えば振動等の触覚情報を出力するバイブレータ等の振動デバイスを含んでよい。出力デバイスは、これらの例に限られず、他の種々のデバイスを含んでよい。インタフェース１３は、外部の出力デバイスに接続可能に構成されてもよい。

＜撮影部１４＞
撮影部１４は、ＲＧＢ画像を撮影するカメラ等の撮影デバイスを含んでよい。撮影部１４は、デプス画像を取得するデプスセンサ又はステレオカメラ等の測距デバイスを含んでよい。情報処理装置１０は、外部の撮影デバイス又は測距デバイスから、インタフェース１３を介して、画像又は測距データ（デプスデータ）を取得してもよい。撮影部１４の撮影デバイス又は測距デバイスの機能は、インタフェース１３の機能に含まれてもよい。

図２に示されるように、撮影部１４は、第１撮影部１４Ａと第２撮影部１４Ｂとを含む。第１撮影部１４Ａ及び第２撮影部１４Ｂは、表示装置２０の額縁の上下に設置されているがこれに限られず種々の態様で設置されてよい。例えば第１撮影部１４Ａ及び第２撮影部１４Ｂは、表示装置２０の左右に設置されてよいし、表示装置２０から分離して設置されてもよい。撮影部１４の数は、２台に限られず、３台以上であってもよい。

＜表示装置２０＞
表示装置２０は、画像又は文字若しくは図形等の視覚情報を表示するように構成される。表示装置２０は、例えば、ＬＣＤ（Liquid Crystal Display）、有機ＥＬ（Electro-Luminescence）ディスプレイ若しくは無機ＥＬディスプレイ、又は、ＰＤＰ（Plasma Display Panel）等を含んで構成されてよい。表示装置２０は、これらのディスプレイに限られず、他の種々の方式のディスプレイを含んで構成されてよい。表示装置２０は、ＬＥＤ（Light Emitting Diode）又はＬＤ（Laser Diode）等の発光デバイスを含んで構成されてよい。表示装置２０は、他の種々のデバイスを含んで構成されてよい。

（情報処理装置１０の動作例）
情報処理装置１０は、ユーザの複数の部位を別々に被写体とした複数の画像を撮影し、複数の画像を合成することによって、ユーザの広い範囲を撮影した画像を生成する。このようにすることで、被写体として写そうとするユーザの全体が撮影部１４の撮影範囲から見切れないようにするためのユーザの位置の自由度が増大する。情報処理装置１０は、ユーザの顔の全体を被写体として写すように動作してよいし、ユーザの上半身又は全身を被写体として写すように動作してもよい。以下、情報処理装置１０の具体的な動作例が説明される。

＜撮影部１４による撮影＞
情報処理装置１０は、複数の撮影部１４を備える。図２に示されるように、撮影部１４は、第１撮影部１４Ａと第２撮影部１４Ｂとを含むとする。本動作例において、撮影部１４の数が２台であるとする。

第１撮影部１４Ａは、ユーザを被写体として写そうとする全体の範囲のうちの一部の範囲を撮影して、図３Ａに例示される第１ユーザ画像３０Ａを生成する。第２撮影部１４Ｂは、ユーザを被写体として写そうとする全体の範囲のうちの他の一部の範囲を撮影して、図３Ｂに例示される第２ユーザ画像３０Ｂを生成する。図３Ａの例において、第１ユーザ画像３０Ａにユーザの顔の上部が写っている。図３Ｂの例において、第２ユーザ画像３０Ｂにユーザの顔の下部が写っている。本動作例において、情報処理装置１０は、ユーザの顔の全体を被写体として写すように動作する。

第１撮影部１４Ａ及び第２撮影部１４Ｂのそれぞれの撮影範囲は、被写体とするユーザの一部の部位が撮影範囲の一部に重複して含まれるように設定される。撮影範囲に重複して含まれる部分は、重複部分とも称される。第１ユーザ画像３０Ａ及び第２ユーザ画像３０Ｂにおいて、ユーザの重複部分を撮影した領域が破線の枠で囲まれた重複領域３２として示されている。重複部分以外のユーザの部分は、非重複部分とも称される。ユーザの非重複部分を撮影した領域は、第１ユーザ画像３０Ａ及び第２ユーザ画像３０Ｂにおいて、重複領域３２以外の領域に対応する。

第１撮影部１４Ａ及び第２撮影部１４Ｂのそれぞれの撮影範囲は、撮影範囲に非重複部分のそれぞれ異なる部分が含まれるように設定される。例えば、第１撮影部１４Ａの撮影範囲がユーザの重複部分と第１の非重複部分とを含むように設定される場合、第２撮影部１４Ｂの撮影範囲は、ユーザの重複部分と、第１の非重複部分と重複しない第２の非重複部分とを含むように設定される。図３Ａの第１ユーザ画像３０Ａ及び図３Ｂの第２ユーザ画像３０Ｂにおいて、ユーザの重複部分を写した領域は重複領域３２に対応する。図３Ａの第１ユーザ画像３０Ａにおいて、ユーザの第１非重複部分を写した領域は、重複領域３２に含まれない、眉よりも上の領域に対応する。図３Ｂの第２ユーザ画像３０Ｂにおいて、ユーザの第２非重複部分を写した領域は、重複領域３２に含まれない、顎よりも下の領域に対応する。

＜画像の合成＞
情報処理装置１０の制御部１１は、第１ユーザ画像３０Ａ及び第２ユーザ画像３０Ｂのそれぞれを解析する。制御部１１は、例えば、各画像に写っているユーザの顔から、目、鼻、口、耳、眉、又は頭髪等の特徴的な部位を抽出してよい。制御部１１は、例えば、各画像に写っているユーザの身体から、手、足、頭又は胴体等の特徴的な部位を抽出してよい。制御部１１は、抽出した各部位の位置又は向きを検出してよい。制御部１１は、ユーザの顔又は身体の各部位を、ボーン又はジョイントを含む骨格情報として検出してもよい。

制御部１１は、第１ユーザ画像３０Ａと第２ユーザ画像３０Ｂとに重複して写っている領域として、重複領域３２を検出する。制御部１１は、ユーザの特徴的な部位の抽出結果に基づいて第１ユーザ画像３０Ａと第２ユーザ画像３０Ｂとの重複領域３２を検出してよい。制御部１１は、第１ユーザ画像３０Ａと第２ユーザ画像３０Ｂとを部分的に比較することによって重複領域３２を検出してもよい。

制御部１１は、第１ユーザ画像３０Ａと第２ユーザ画像３０Ｂとで重複領域３２同士を重ねるように合成することによって、ユーザを被写体として写そうとする全体の範囲を含む画像を生成する。具体的に、制御部１１は、第１ユーザ画像３０Ａ又は第２ユーザ画像３０Ｂの一方又は両方を重複領域３２の中に位置する線に沿ってトリミングする。制御部１１は、トリミングによって、重複領域３２のうち第１ユーザ画像３０Ａに残る部分を第２ユーザ画像３０Ｂから除去し、重複領域３２のうち第２ユーザ画像３０Ｂに残る部分を第１ユーザ画像３０Ａから除去する。制御部１１は、トリミングした第１ユーザ画像３０Ａと第２ユーザ画像３０Ｂとを結合することによって、第１ユーザ画像３０Ａと第２ユーザ画像３０Ｂとを合成した１枚の画像を生成する。

＜画像をトリミングする線の決定＞
制御部１１は、画像の解析結果に基づいて、画像をトリミングする線を決定する。制御部１１が画像をトリミングする線として決定される仮想的な線は、二点鎖線の仮想線３４として図３Ａ及び図３Ｂに例示される。

制御部１１は、第１ユーザ画像３０Ａと第２ユーザ画像３０Ｂとの結合部分の歪みが小さくなるように、仮想線３４を決定する。例えば、仮想線３４がユーザの鼻を上下に分けるように位置する場合、第１ユーザ画像３０Ａと第２ユーザ画像３０Ｂとを合成した画像において鼻の歪みが大きく見え得る。そこで、制御部１１は、ひとまとまりの部位を分けないように仮想線３４を決定してよい。

制御部１１は、ユーザの画像から抽出したユーザの各部位の位置又は形状等の種々の特徴に基づいて、仮想線３４を決定してよい。言い換えれば、制御部１１は、重複領域３２における被写体としてのユーザの特徴点の位置を検出し、特徴点の位置を基準として仮想線３４を決定してよい。

制御部１１は、例えば、ユーザの顎、又は、顎よりも下の部分を通る線を仮想線３４として決定してよい。制御部１１は、例えば、ユーザの鼻の下と口との間の領域を通る線、又は、ユーザの鼻の下から所定距離だけ下の位置を通る線を仮想線３４として決定してよい。制御部１１は、例えば、ユーザの眉と頭髪との間の領域、すなわち額を通る線、又は、ユーザの眉から所定距離だけ上の位置を通る線を仮想線３４として決定してよい。制御部１１は、例えば、ユーザがマスクを装着している場合に、マスクの上端又は下端の少なくとも一部を通る線を仮想線３４として決定してよい。制御部１１は、ユーザの画像の全体において仮想線３４を決定してよいし、重複領域３２の中だけで仮想線３４を決定してもよい。

図３Ａ及び図３Ｂにおいて、仮想線３４は、直線として例示されているが、曲線を含んで構成されてもよいし、複数の線分を含んだ折れ線として構成されてもよい。

制御部１１は、決定した仮想線３４の全体が重複領域３２の中に位置する場合、仮想線３４で第１ユーザ画像３０Ａ又は第２ユーザ画像３０Ｂをトリミングする。制御部１１は、仮想線３４でトリミングした第１ユーザ画像３０Ａ及び第２ユーザ画像３０Ｂをトリミングした線で結合し、図３Ｃに示されるように合成画像４０を生成する。図３Ｃに例示される合成画像４０において、重複領域３２と仮想線３４とが示される。図３Ａ、図３Ｂ及び図３Ｃに例示される仮想線３４は、ユーザの鼻の下と口との間の領域を通る線として決定されている。仮想線３４が鼻又は口のようなひとまとまりの部位を分けないように決定されることによって、合成画像４０におけるユーザの顔の歪みが小さくなり得る。

制御部１１は、決定した仮想線３４の一部だけが重複領域３２の中に位置する場合、重複領域３２の中に位置する仮想線３４と、重複領域３２の輪郭の線とをつないだ線に沿って画像をトリミングしてよい。制御部１１は、決定した仮想線３４の全体が重複領域３２の中に位置しない場合、重複領域３２の輪郭の線に沿って画像をトリミングしてよい。つまり、制御部１１は、決定した仮想線３４の少なくとも一部が重複領域３２の中に位置しない場合、重複領域３２の輪郭の線を含む線に沿って画像をトリミングしてよい。

制御部１１は、仮想線３４が重複領域３２の中に存在せず重複領域３２の外だけに存在する場合、仮想線３４が重複領域３２の中に入るように、ユーザに対して移動を提案してよい。この場合に必要な移動量は、ユーザを被写体として写そうとする範囲の全体を１台の撮影部１４の撮影範囲の中だけに収める場合よりも低減され得る。つまり、ユーザを被写体として写そうとする範囲の全体を撮影した画像を生成するときのユーザの位置の自由度が増大し得る。

制御部１１は、ユーザが動くたびに仮想線３４を決定し直してよい。例えば、制御部１１は、ユーザを写した動画の１枚又は複数枚のフレーム毎に仮想線３４を決定し直してよい。つまり、制御部１１は、仮想線３４を動的に変更してよい。このようにすることで、被写体が動いたときでも被写体の歪みが低減され得る。

制御部１１は、３枚以上の画像を合成する場合であっても、各画像が重複している領域を検出し、重複している領域毎に仮想線３４を決定し、仮想線３４の位置で画像をトリミングして１枚の画像に合成してよい。

＜情報処理方法の手順例＞
以上述べてきたように、本実施形態に係る情報処理装置１０は、ユーザを被写体として撮影した複数の画像を合成して表示する。情報処理装置１０の制御部１１は、例えば図４に例示されるフローチャートの手順を含む情報処理方法を実行してよい。情報処理方法は、制御部１１に実行させる情報処理プログラムとして実現されてもよい。情報処理プログラムは、非一時的なコンピュータ読み取り可能媒体に格納されてよい。

制御部１１は、第１ユーザ画像３０Ａ及び第２ユーザ画像３０Ｂを取得する（ステップＳ１）。制御部１１は、第１ユーザ画像３０Ａ及び第２ユーザ画像３０Ｂにおいて重複領域３２及び仮想線３４を解析する（ステップＳ２）。

制御部１１は、仮想線３４が重複領域３２の中に含まれるか判定する（ステップＳ３）。制御部１１は、仮想線３４が重複領域３２の中に含まれる場合（ステップＳ３：ＹＥＳ）、仮想線３４の位置で、第１ユーザ画像３０Ａ及び第２ユーザ画像３０Ｂをトリミングする（ステップＳ４）。制御部１１は、仮想線３４が重複領域３２の中に含まれない場合（ステップＳ３：ＮＯ）、重複領域３２内で適宜設定した所定位置で、第１ユーザ画像３０Ａ及び第２ユーザ画像３０Ｂをトリミングする（ステップＳ５）。

制御部１１は、ステップＳ４又はＳ５のトリミングの手順の実行後、トリミングした第１ユーザ画像３０Ａ及び第２ユーザ画像３０Ｂを合成して合成画像４０を生成する（ステップＳ６）。制御部１１は、ステップＳ６の手順の実行後、図４のフローチャートの手順の実行を終了する。

＜小括＞
以上述べてきたように本実施形態に係る情報処理装置１０は、重複領域３２の中で決定した仮想線３４で複数の画像を結合し、１枚の合成画像４０を生成する。このようにすることで、合成画像４０における被写体の顔又は身体等の歪みが小さくされ得る。つまり、合成画像４０の結合部分における被写体の歪みが低減され得る。また、情報処理装置１０は、仮想線３４を被写体の特徴点に基づいて決定できる。つまり、情報処理装置１０は、トリミングのために用いる仮想線３４を動的に変更できる。このようにすることで、被写体が動いたときでも被写体の歪みが低減され得る。

（他の実施形態）
以下、他の実施形態に係る情報処理装置１０の構成例が説明される。

＜３次元画像の表示＞
情報処理装置１０は、撮影部１４でユーザのＲＧＢ画像とデプス画像とを撮影し、ユーザの立体的な画像、すなわち３次元画像を表示してよい。以下、立体的な画像を表示するための具体的な動作が説明される。

情報処理装置１０の撮影部１４は、ユーザの身体の少なくとも一部のＲＧＢ画像を撮影するとともに、ユーザの身体の少なくとも一部の部位までの距離を測定してデプス画像を生成する。デプス画像は、複数のピクセルを有する距離マップとして表されてよい。距離マップにおいて、各ピクセルに対応する部位までの距離の測定結果が各ピクセルに対応づけられる。デプス画像のピクセルの数及び配置は、ＲＧＢ画像のピクセルの数及び配置と一致してもよいし異なってもよい。

情報処理装置１０の制御部１１は、デプス画像に基づいてユーザの立体的な画像を生成する。制御部１１は、デプス画像に基づいてユーザの３次元ポリゴンデータを生成し、３次元ポリゴンデータを構成する各ポリゴンにＲＧＢ画像をレンダリングすることによって立体的な画像を生成してよい。制御部１１は、デプス画像に基づいてユーザのボクセルデータを生成し、各ボクセルにＲＧＢ画像の各ピクセルを割り当てることによって立体的な画像を生成してもよい。つまり、制御部１１は、ユーザの３次元データにＲＧＢ画像をマッピングすることによってユーザの立体的な画像を生成してよい。制御部１１は、これに限られず種々の態様でユーザの立体的な画像を生成してよい。

制御部１１は、ユーザの３次元ポリゴンデータにレンダリングするＲＧＢ画像として、第１ユーザ画像３０Ａと第２ユーザ画像３０Ｂとを用いてよい。この場合、制御部１１は、第１ユーザ画像３０Ａ及び第２ユーザ画像３０Ｂを３次元ポリゴンデータの一部のポリゴンのつなぎ目に合わせてトリミングしてよい。具体的に、制御部１１は、第１ユーザ画像３０Ａ及び第２ユーザ画像３０Ｂをトリミングするときの仮想線３４を、画像をレンダリングするポリゴンの輪郭に沿った線として決定してよい。

制御部１１は、ユーザのボクセルデータに割り当てるＲＧＢ画像として、第１ユーザ画像３０Ａと第２ユーザ画像３０Ｂとを用いてよい。この場合、制御部１１は、第１ユーザ画像３０Ａ及び第２ユーザ画像３０Ｂを、ユーザのボクセルデータの表面の曲率半径が小さい部分（急激に曲がる部分）を境界としてつなぐようにトリミングしてよい。具体的に、制御部１１は、ユーザのボクセルデータの表面のボクセル単位の凹凸を平均化した面の各部の曲率半径を算出し、曲率半径が所定値未満になる位置で複数の画像を結合するように画像をトリミングしてよい。つまり、制御部１１は、第１ユーザ画像３０Ａ及び第２ユーザ画像３０Ｂをトリミングするときの仮想線３４を、曲率半径が所定値未満になる位置を含む線として決定してよい。

以上述べてきたように、制御部１１は、被写体としてのユーザの３次元データに合成画像４０をマッピングすることによって、ユーザの立体的な画像を生成してよい。

本開示に係る実施形態について、諸図面及び実施例に基づき説明してきたが、当業者であれば本開示に基づき種々の変形及び改変を行うことが可能であることに注意されたい。したがって、これらの変形及び改変は本開示の範囲に含まれることに留意されたい。例えば、各手段又は各ステップ等に含まれる機能等は論理的に矛盾しないように再配置可能であり、複数の手段又はステップ等を１つに組み合わせたり、或いは分割したりすることが可能である。

１０情報処理装置（１１：制御部、１２：記憶部、１３：インタフェース、１４：撮影部、１４Ａ：第１撮影部、１４Ｂ：第２撮影部）
２０表示装置
３０Ａ、３０Ｂ第１ユーザ画像、第２ユーザ画像
３２重複領域
３４仮想線
４０合成画像

Claims

撮影範囲が互いに一部において重複する複数の撮影部のそれぞれで被写体を撮影して得られた、重複領域を有する複数の画像のそれぞれについて、前記重複領域における被写体の特徴点の位置を検出することと、
前記各画像における前記特徴点の位置を基準とした仮想線が前記重複領域に含まれる画像に対して、前記仮想線の位置でトリミングを行うことと、
前記複数の画像を結合して１つの合成画像を生成することと
を含む、情報処理方法。
前記被写体のデプス画像を取得することと、
前記デプス画像に基づいて前記被写体の３次元データを生成することと、
前記被写体の３次元データに前記合成画像をマッピングすることと
を更に含む、請求項１に記載の情報処理方法。
複数の撮影部と、制御部とを備え、
前記複数の撮影部のそれぞれは、互いに重複領域を有する画像を撮影し、
前記制御部は、
前記各撮影部が撮影した画像について、前記重複領域における被写体の特徴点の位置を検出し、
前記各画像における前記特徴点の位置を基準とした仮想線が前記重複領域に含まれる画像に対して、前記仮想線の位置でトリミングを行い、
前記複数の画像を結合して１つの合成画像を生成する、
情報処理装置。