JP2017034570A

JP2017034570A - 撮像装置

Info

Publication number: JP2017034570A
Application number: JP2015154647A
Authority: JP
Inventors: 細江　洋; Hiroshi Hosoe; 洋細江
Original assignee: Canon Inc
Current assignee: Canon Inc
Priority date: 2015-08-05
Filing date: 2015-08-05
Publication date: 2017-02-09

Abstract

【課題】カメラ部と表示部とが分離可能で表示部にステレオマイクを備える撮像装置において、撮影画像とステレオ音声の左右の不一致を解決する方法を提供する。
【解決手段】撮像素子を備えるカメラ部１０１と、画像表示手段１０９と第一のステレオ音声収録手段１１７とを備える表示部１０２と、カメラ部と表示部の分離状態を検知する分離検知手段１０５、１１０と、第一のステレオ音声収録手段の収録音声信号を処理する音声信号処理部３１６とを有する。カメラ部と表示部とが分離状態であって、カメラ部の撮影方向と表示部の画像表示手段が向く方向とが略合致すると判定された場合に、第一のステレオ音声収録手段により収録した音声信号の左右を入れ替えるように制御する。
【選択図】図３

Description

本発明は、カメラ部と表示部とに分離して撮影可能に構成された撮像装置に関する。

撮像素子を有するカメラ部と、ＬＣＤ等の画像表示手段および操作部を有する表示部とに分離合体が自在で、無線通信によって両者を連携動作させることによって、分離合体いずれの状態でも撮影が可能なデジタルカメラがある。また、表示手段や操作部を持たず、スマートフォンなどの外部装置を無線通信で連携させて表示部・操作部として利用するデジタルカメラも提案されている。

このようなデジタルカメラには、カメラ部と表示部が一体化した従来のカメラと同様の使い方の他に、カメラ部と表示部とを離した自由な姿勢で撮影を行うことができる利点がある。さらに、カメラ部と表示部のそれぞれに内蔵マイクを備えることで、例えばカメラ部から離れた位置にいる撮影者が、手元にある表示部の内蔵マイクを使ってナレーション音声を記録するといったような、様々な動画撮影時の集音方法を実施することができる。

カメラ部と表示部にそれぞれマイクを備える記録装置または撮像装置として、以下の参考文献を挙げる。

特許文献１には、再生用モニターをもつ記録部とビデオカメラ部とが分離可能で、それぞれにマイクとスピーカーを設けたビデオカメラ付き記録装置が示されている。

特許文献２では、撮像装置本体に対し撮像部が回転自在に設けられており、撮像装置本体と撮像部のそれぞれに音声入力手段が設けられ、撮像装置本体に対する撮像部の回転位置に基づいて音声入力を制御する撮像装置が開示されている。ただし、撮像部は撮像装置本体から分離可能な構成ではない。

特開平０９−３０７８００号公報特開２００５−２８６７１８号公報

さて、カメラ部と分離した表示部を持つ撮影者自身を撮影する、いわゆる対面撮影（自分撮り）を行う際に、ステレオ方式に構成された表示部のマイクを用いて集音する場合、カメラ部が撮影する画像の左右と表示部のマイクが集音する音声の左右とが合致しない問題が生じる場合がある。

図１２にカメラ部と表示部とが分離可能な撮像装置の例を示す。撮影者１２０４は、表示部１２０１の表示画面１２０３でカメラ部１２０２が撮影する画像を確認しながら撮影を行う。図１２（Ａ）のように撮影者１２０４が撮影方向と同じ方向を向いている場合、カメラ部１２０２のステレオマイク部１２０５と表示部１２０１のステレオマイク部１２０６は、その左右（左をＬ、右をＲと示す）が一致するため、どちらのマイクを用いて集音しても撮影画像の左右とステレオ音声の左右が一致する。

一方、図１２（Ｂ）のように表示部１２０１を持った撮影者１２０４自身を撮影する場合、カメラ部１２０２のステレオマイク部１２０５に対して表示部１２０１のステレオマイク部１２０６は左右の配置が逆転する。この状態で表示部１２０１のステレオマイク部１２０６で集音されたステレオ音声は、カメラ部１２０２が撮影した画像と左右が逆転し、該画像と該ステレオ音声を組み合わせた動画は違和感のあるものになってしまう。

本発明は、カメラ部と表示部とが分離可能で、表示部にステレオマイクを備える撮像装置において、上述のような撮影画像とステレオ音声の左右の不一致を解決することが課題である。

上記の課題を解決するために、本発明に係る撮像装置は、
撮像素子を備えるカメラ部と、画像表示手段と第一のステレオ音声収録手段とを備える表示部とが分離合体自在に構成された撮像装置であって、前記カメラ部と前記表示部の分離状態を検知する分離検知手段と、前記カメラ部と前記表示部の相対向きを判別する向き判別手段と、前記第一のステレオ音声収録手段の収録音声信号を処理する音声信号処理部と、前記分離検知手段の検知結果および前記向き判別手段の判別結果に応じて、前記音声信号処理部を制御する制御部と、を備えることを特徴とする。

さらに、前記カメラ部に第二のステレオ音声収録手段を備え、前記第一および第二のステレオ音声収録手段により取得した音声信号を信号比較手段により比較し、その比較結果から前記カメラ部と前記表示部の相対向きを判別することを特徴とする。

または、前記カメラ部に第一の位置取得手段と第一の方位取得手段とを備え、前記表示部に第二の位置取得手段と第二の方位取得手段とを備え、前記第一および第二の位置取得手段が取得する位置情報、および前記第一および第二の方位取得手段が取得する方位情報を情報比較手段により比較し、その比較結果から前記カメラ部と前記表示部の相対向きを判別することを特徴とする。

あるいは、前記表示部に表示される画像の左右を反転表示させる表示切替操作手段を備え、前記分離検知手段の検知結果、および前記表示切替操作手段の操作状態に応じて、前記音声信号処理部を制御することを特徴とする。

特に、前記向き検知手段は、前記カメラ部の撮影方向と前記表示部の画像表示手段が向く方向とが略合致することを検知することを特徴としている。

さらには、前記分離検知手段および前記向き検知手段の検知結果に応じて、前記第一のステレオ音声収録手段から得る音声信号の左右を入れ替えるように前記音声信号処理部を制御することを特徴とする。

本発明に係る撮像装置によれば、分離したカメラ部と表示部の相対向きに応じて収録音声信号を処理する音声信号処理部を適切に制御し、動画像と音声の左右が逆転するような違和感を生じさせずに対面撮影を行うことができる。

第一の実施形態における撮像システムの合体状態を表す外観図である。第一の実施形態における撮像システムの分離状態を表す外観図である。第一の実施形態における撮像システムの構成を説明するブロック図である。本撮像システムを一般的なカメラの形態で使用する様子を表す図である。本撮像システムを分離して使用する様子を表す図である。本撮像システムを分離して対面撮影で使用する様子を表す図である。第一の実施形態における撮像システムの音声信号処理設定を行うフローチャートである。第二の実施形態における撮像システムの構成を説明するブロック図である。第二の実施形態における撮像システムの音声信号処理設定を行うフローチャートである。第三の実施形態における撮像システムの構成を説明するブロック図である。第三の実施形態における撮像システムの音声信号処理設定を行うフローチャートである。カメラ部と表示部が分離可能な撮像装置を使用する様子を表す図である。

以下、本発明を実施するための形態を図面に基づいて説明する。

＜第１の実施形態＞
本発明の第一の実施形態を説明する。

図１および図２はカメラ部たるカメラヘッド１０１と表示部たるスマートフォン１０２で構成される撮像システム１００の外観を表す図である。図１はカメラヘッド１０１とスマートフォン１０２を合体させた状態を表しており、図２はそれらを分離させた状態の外観を表している。また、図１および図２において、（Ａ）は本撮像システム１００を前方から俯瞰した外観を表し、（Ｂ）は同じく後方から俯瞰した外観を表している。さらに、図３は本撮像システム１００を成すカメラヘッド１０１とスマートフォン１０２の構成を説明するブロック図である。

図１から図３を参照して、本撮像システム１００の構成を説明する。

まず、カメラヘッド１０１は略円筒形状の筐体を持ち、筐体後部には一対の係合爪１０７、１０８を有している。係合爪１０７、１０８の略中間部に、後述する無接点検知部１１０を内蔵している（図２（Ｂ）中に破線で示す）。係合爪１０７、１０８はその間隔を任意に調整することが可能であり、係合爪１０７、１０８でスマートフォン１０２のような相手機器を挟み込むことで係合することが出来る。

カメラヘッド１０１筐体内部には、レンズ光学系３０１と撮像素子３０２を備えている。撮像素子３０２はカメラ制御部３０３によって制御されて被写体像を撮像し、被写体像は画像処理部３０４に送られて所定の静止画像データ、または動画像データに変換処理される。該静止画像データまたは動画像データは、制御部３０５により、カメラヘッド１０１に備えるメモリ３０６に記録するか、またはＷｉ−Ｆｉに代表されるような無線送受信部３０７を介してカメラヘッド１０１の外部に送信をすることが出来る。

さらに、カメラヘッド１０１の上面部にカメラ部マイクＲ１１２、カメラ部マイクＬ１１３を備え、ステレオマイクを構成している。以降、カメラ部マイクＲ１１２とカメラ部マイクＬ１１３の組み合わせを指してカメラ部マイク１１６とも記す。カメラ部マイク１１６で集音した音声は、音声処理部３１５にて所定のステレオ音声信号に変換される。そして、画像処理部３０４で生成された動画像データと結合されて動画ファイルが生成される。該動画ファイルは、先と同様に、メモリ３０６に記録するか、無線送受信部３０７を介してカメラヘッド１０１の外部に送信をすることが出来る。

カメラヘッド１０１の各部の動作は、制御部３０５によって制御されている。また、電源スイッチ１１１により、カメラヘッド１０１の電源をＯＮ／ＯＦＦすることができる。

一方、スマートフォン１０２は、ＬＣＤやＯＬＥＤに代表される表示素子１０９を一面に備えた扁平な筐体を持っている。表示素子１０９の反対側の面には、後述する無接点検知部１０５を内蔵している（図２（Ａ）中に破線で示す）。表示素子１０９には、無線送受信部３０９を介して外部から受信した画像データや、メモリ３１１に記録されていた画像データを、画像処理部３１２で復号化して画像として表示することができる。また、表示素子１０９に表示する画像には、キャラクタジェネレータ３１３にて生成したキャラクタを重畳することが出来る。

さらに、表示素子１０９に重なるようにしてタッチパネル３１４を配している。これにより、表示画面の所望の位置にキャラクタを表示し、当該個所を指などで触れたことをタッチパネル３１４で検知して所定の応答を行うグラフィカルなユーザーインターフェイス（以下、ＧＵＩ）を構成している。

さらに、画像の撮影動作を指示するレリーズスイッチ１０４を備え、レリーズスイッチ１０４側の辺には表示部マイクＲ１１４、表示部マイクＬ１１５を配置して、ステレオマイクを構成している。以降、表示部マイクＲ１１４と表示部マイクＬ１１５の組み合わせを指して表示部マイク１１７とも記す。表示部マイク１１７で集音した音声は、音声処理部３１６にて所定のステレオ音声信号に変換される。該ステレオ音声信号は、無線送受信部３０９にて受信する動画像データと結合して動画ファイルを生成することができ、生成した動画ファイルはメモリ３１１に記録したり、表示素子１０９に映像として表示することができる。その他に、スマートフォン１０２の電源をＯＮ／ＯＦＦする電源スイッチ１０３を備えている。制御部３１０は、スマートフォン１０２各部の動作を司っている。

カメラヘッド１０１とスマートフォン１０２は、無線送受信部３０７、３０９を介して通信し、互いに連携した動作を行うことで撮像システム１００を成している。具体的には、タッチパネル３１４やレリーズスイッチ１０４の操作に応じた制御コマンドをスマートフォン１０２の無線送受信部３０９から送出し、カメラヘッド１０１の無線送受信部３０７で受信してカメラヘッド１０１の動作を制御することが可能である。スマートフォン１０２からの撮影指示コマンドに応じてカメラヘッド１０１は画像を撮影し、画像データを無線送受信部３０７から送出する。スマートフォン１０２の無線送受信部３０９で受信した画像データは、表示素子１０９に表示したり、またはメモリ３１１に記録することが可能である。すなわち、カメラヘッド１０１とスマートフォン１０２は、無線送受信部３０７、３０９の通信到達距離以内であれば両者の距離に関わらず連携動作が可能であり、相互に位置や姿勢の制約を受けず撮影が出来るため、撮影領域の拡大を望むことができる。なお、先述のような係合爪１０７、１０８によってカメラヘッド１０１とスマートフォン１０２を係合させた状態でも、無線送受信部３０７、３０９によって相互通信を行って連携動作を行う。

さて、カメラヘッド１０１、スマートフォン１０２のそれぞれに設けられた無接点検知部には、ここではＮＦＣ（ＮｅａｒＦｉｅｌｄＣｏｍｍｕｎｉｃａｔｉｏｎ）を利用した近距離無線通信技術を適用することにする。無接点検知部は、通信データ送受のためのアンテナと該通信データを符号化・復号化する送受信部を有し（いずれも図示せず）、他の無接点検知部やＩＣタグと情報をやり取りするリーダ／ライタ機能を実装している。近距離無線通信技術では十数ｃｍ程度に到達距離の限られる微弱電波を用いることにより、無接点検知部によって、カメラヘッド１０１とスマートフォン１０２が近接していることを検知することができる。

では、無接点検知部の動作について説明する。先述の通り、カメラヘッド１０１には、係合爪１０７、１０８の略中間部に無接点検知部１１０を内蔵している。無接点検知部１１０によって他の無接点検知部やＩＣタグが近接しているかどうか検知した結果は、制御部３０５に伝達されてカメラヘッド１０１の制御に利用される。スマートフォン１０２の一側面には、図２（Ａ）に示す通り無接点検知部１０５が配置されている。無接点検知部１０５の検知結果は、制御部３１０に伝達されてスマートフォン１０２の制御に利用される。

以上説明した配置によって、カメラヘッド１０１をスマートフォン１０２に取り付けると、無接点検知部１１０と無接点検知部１０５が近接して向かい合い、近距離無線通信が可能な状態になる。カメラヘッド１０１の制御部３０５は、無接点検知部１１０の検知によってスマートフォン１０２が近距離無線通信可能な状態にある、すなわちカメラヘッド１０１がスマートフォン１０２に取り付けられている状態であることを示す取付検知信号を無線送受信部３０７を通して発信する。スマートフォン１０２は、無接点検知部１０５の検知によってカメラヘッド１０１が取り付けられている状態であることを検知する。さらに、無線送受信部３０９を通してカメラヘッド１０１が発信した取付検知信号を受信すると、無接点検知部１０５の検知結果と併せて、カメラヘッド１０１が取り付けられていると認識する。また逆に、スマートフォン１０２から無線送受信部３０９を通して発信する取付検知信号を、カメラヘッド１０１が無線送受信部３０７で受信して取付判定に用いることもできる。

このようにして、カメラヘッド１０１とスマートフォン１０２は互いに分離状態か合体状態かを検知することができる。

さて、本撮像システム１００は、カメラヘッド１０１とスマートフォン１０２との分離合体状態の検知結果と、カメラヘッド１０１とスマートフォン１０２が向かい合う状態、いわゆる自分撮りの状態であるかどうかを検知した結果に応じ、マイクで集音した音声信号の処理を切り替える。

図４から図６は本撮像システム１００を使用している様子を表す図である。図４はカメラヘッド１０１とスマートフォン１０２を合体して一般的なカメラの形態で撮影を行う様子である。図５はカメラヘッド１０１を支柱５０１等に設置し、離れた場所から撮影者５０２がスマートフォン１０２の表示素子１０９で画像を確認しながら撮影する様子である。この時、カメラヘッド１０１の撮影方向は撮影者５０２が向く方向と同じである。図６はカメラヘッド１０１を支柱５０１等に設置して、スマートフォン１０２を持つ撮影者５０２を含む方向を撮影する様子である。いわゆる対面撮影（自分撮り）と呼ばれる撮影方法であり、撮影者５０２はカメラヘッド１０１から送信されて表示素子１０９に表示される撮影画像を確認しながら、自身の立ち位置を調整して撮影を行う。

本撮像システム１００では、カメラヘッド１０１とスマートフォン１０２が分離している状態である時、カメラヘッド１０１のマイクかスマートフォン１０２のマイクのいずれを使って音声収録を行うか、撮影者自身が選択することができる。例えば、図５の撮影状況で説明する。この状況においてカメラ部マイク１１６を使って集音すれば、撮影者５０２は離れた位置にいるので、撮影者５０２の声や衣類の擦れ音が収録音声に混ざることなく、被写体側の音声を明瞭に収録することができる。または、表示部マイク１１７を使って集音すれば、撮影者５０２は被写体から遠く離れた位置に居ながらもナレーション音声を明瞭に収録することができる。次に図６の撮影状況で説明する。この場合、撮影者５０２の手元にある表示部マイク１１７で音声を収録すれば、撮影者５０２のナレーション音声が明瞭に収録でき、特にカメラヘッド１０１を遠方に設置した時には有効である。しかしながら、先に説明した通りに、カメラヘッド１０１の撮影画像の左右と表示部マイク１１７が収録するステレオ音声の左右が、このままでは合致しないという課題がある。そこで、本撮像システム１００は、以降に説明する手順によって収録音声信号の処理を切り替えるものである。

図７は本撮像システム１００の音声信号処理設定を決定する動作を説明するフローチャートである。図７に沿って、本撮像システム１００の動作を説明する。

音声信号処理設定Ｓ５０１は、本撮像システム１００が音声を含む動画を撮影する動作モードに遷移した時に開始される。

まず、Ｓ５０２において、カメラヘッド１０１とスマートフォン１０２の分離合体状態を検知する。これは、先に説明した無接点検知部によって検知される。カメラヘッド１０１とスマートフォン１０２が合体状態にある時、すなわち図４の一般的なカメラ形態での撮影状態である時、Ｓ５０３に進み、音声収録に用いるマイクを自動的にカメラ部マイク１１６に設定し、表示部マイク１１７を無効とする。そしてＳ５１１に進み、撮影待機状態へ以降する。

Ｓ５０２において、カメラヘッド１０１とスマートフォン１０２が分離状態にあると検知された時、Ｓ５０４に進み、カメラ部マイク１１６か表示部マイク１１７のいずれを使って音声収録を行うかを撮影者が決定する。これは例えばＧＵＩにより提示された選択メニューに従って、タッチパネル３１４を用いて操作することで決定を行う。ここで、撮影者がカメラ部マイク１１６を用いることを決定した場合、Ｓ５０５に進み、本撮像システム１００はカメラ部マイク１１６で音声収録をするよう設定を行い、表示部マイク１１７を無効とする。この場合、カメラヘッド１０１内で動画像データと収録された音声データが結合された動画ファイルが生成され、無線送受信部３０７、３０９を介してスマートフォン１０２に送信されてメモリ３１１への記録および表示素子１０９での再生が行われることとなる。

では、Ｓ５０４において表示部マイク１１７を用いて撮影を行うことが決定された場合、Ｓ５０６に進み、表示部マイク１１７で音声収録をするように設定する。この場合、カメラヘッド１０１からは音声を含まない動画像データが無線送受信部３０７、３０９を介してスマートフォン１０２に送信される。スマートフォン１０２においては、該動画像データと表示部マイク１１７により収録された音声が、後述する音声信号処理設定に従って結合されて動画ファイルが生成される。生成された動画ファイルはメモリ３１１に記録され、また表示素子１０９での再生が行われる。

次に、カメラヘッド１０１とスマートフォン１０２の相対位置関係を判定するステップに進む。まず、Ｓ５０７において、カメラ部マイク１１６および表示部マイク１１７の双方で所定時間、同時に音声をサンプリングする。カメラヘッド１０１においては、カメラ部マイクＲ１１２とカメラ部マイクＬ１１３に入力された音声の音圧レベル差と位相差を評価し、評価結果を無線送受信部３０７を介してスマートフォン１０２へ送信する。スマートフォン１０２においては、受信したカメラヘッド１０１の評価結果をメモリ３１１に記憶する。さらに、表示部マイクＲ１１４と表示部マイクＬ１１５に入力された音声の音圧レベル差と位相差を評価し、評価結果をメモリ３１１に記憶する。

次に、Ｓ５０８に進み、カメラ部マイク１１６における左右の入力音声の位相差と表示部マイク１１７における左右の入力音声の位相差の比較評価を行い、基準に照らしてそれらが所定以上に相反するか否かを判断する。左右の位相差は音源の方向性を示すから、位相差がカメラ部マイク１１６と表示部マイク１１７とで所定以上に相反する場合、カメラヘッド１０１とスマートフォン１０２（ひいては撮影者）が互いに逆の方向を向いていることが推定できる。

位相差が所定以上に相反する場合、Ｓ５０９に進み、カメラ部マイク１１６における左右の音圧レベル差と表示部マイク１１７における左右の音圧レベル差の比較評価を行い、基準に照らしてそれらが所定以上に相反するか否かを判断する。左右マイクの音圧レベル差がカメラ部マイク１１６と表示部マイク１１７とで所定以上に相反する場合も、カメラヘッド１０１とスマートフォン１０２（ひいては撮影者）が互いに逆の方向を向いていることが想定できる。さらに、ステレオ効果が大きい音源であって、撮影画像の左右とステレオ音声の左右が合致しない場合の違和感がより大きく感じられる場面であると推定できる。従って、Ｓ５１０に進み、表示部マイクＲ１１４と表示部マイクＬ１１５の入力信号を入れ替え、表示部マイクＲ１１４を左側音声、表示部マイクＬ１１５を右側音声としてステレオ音声信号を生成するように設定を切り替える。そして、Ｓ５１１に進み、撮影待機状態へ以降する。

Ｓ５０８およびＳ５０９において、カメラ部マイク１１６と表示部マイク１１７の位相差、または音圧レベル差が所定以上には相反しない場合、カメラヘッド１０１とスマートフォン１０２（ひいては撮影者）が互いに逆の方向を向いている可能性は低いと判断される。その場合は、音声信号処理設定は変更されず、通常の通りに表示部マイクＲ１１４を右側音声、表示部マイクＬ１１５を左側音声として音声収録を行う。

なお、上述の音声信号処理設定を定める動作フローは、動作モードが遷移した時以外にも、撮影待機の状態である時に所定のインターバルで実行される。または、動画撮影を停止したタイミングで実行しても良い。

以上に説明した通り、本撮像システム１００は、図６に示すような対面撮影状態を含むカメラヘッド１０１とスマートフォン１０２（ひいては撮影者）が互いに逆の方向を向いている状況を音声信号の評価から判定し、撮影画像の左右とステレオ音声の左右が合致するよう音声信号処理の設定を切り替えるものである。これにより画像と音声が合致しない不自然な動画を撮影してしまうことを避けることができる。

＜第２の実施形態＞
続いて、本発明の第二の実施形態を説明する。

図８は第二の実施形態におけるカメラヘッド８０１、スマートフォン８０２から成る撮像システム８００の構成を示すブロック図である。なお、第一の実施形態で説明した構成要素と同一の要素については同一の符号を付し、説明を省略する。

カメラヘッド８０１は、位置取得部８０３、方位取得部８０４、姿勢検出部８０５を備えている。

位置取得部８０３はＧＰＳを利用した測位処理を行う。すなわち、ＧＰＳ衛星から信号を受信し、受信した信号からカメラヘッド８０１の現在位置を示す位置情報を緯度・経度の座標で取得する。位置情報は定期的に取得され、メモリ３０６に記録および上書きされて常に最新の位置情報が保持される。

方位取得部８０４は、カメラヘッド８０１がどの方角を向いているかを検出し、方位情報を取得する。方位取得部８０４は例えば電子コンパスで構成される。電子コンパスとは、地磁気センサ、方位センサなどとも呼ばれ、地球の地磁気を検出することができるデバイスの総称である。電子コンパスは、地磁気を２次元、または、３次元で検出し、地磁気に対して、電子コンパスのデバイス自体がどの方角を向いているかを検出することができる。方位情報は定期的に取得され、メモリ３０６に記録および上書きされて常に最新の方位情報が保持される。なお、方位取得部８０４はカメラヘッド８０１の撮影方位を取得するよう取り付けられているものとする。

姿勢検出部８０５は、カメラヘッド８０１の姿勢を検出するものである。例えば傾きセンサを用いて構成される。カメラヘッド８０１の姿勢情報は定期的に取得され、メモリ３０６に記録および上書きされて常に最新の姿勢情報が保持される。

次に、スマートフォン８０２は、カメラヘッド８０１と同様に位置取得部８０６、方位取得部８０７、姿勢検出部８０８を備えている。それらの機能は上述したカメラヘッド８０１のものと同一であるので説明は省略するが、位置取得部８０６はスマートフォン８０２の位置情報を、方位取得部８０７は方位情報を、姿勢検出部８０８は姿勢情報をそれぞれ取得する。定期的に取得した位置情報、方位情報、姿勢情報は、メモリ３１１に記録および上書きされて常に最新の姿勢情報が保持される。なお、方位取得部８０７はスマートフォン８０２の表示画面が向く方位を取得するよう取り付けられているものとする。

また、カメラヘッド８０１、スマートフォン８０２のそれぞれの位置情報、方位情報、姿勢情報は、無線送受信部３０７、３０９を介した通信によって送受され、共有することができる。

図９は本撮像システム８００の音声信号処理設定を決定する動作を説明するフローチャートである。図９に沿って、本撮像システム８００の動作を説明する。

音声信号処理設定Ｓ９０１は、本撮像システム８００が音声を含む動画を撮影する動作モードに遷移した時に開始される。

まず、Ｓ９０２において、カメラヘッド８０１とスマートフォン８０２の分離合体状態を検知する。カメラヘッド８０１とスマートフォン８０２が合体状態にある時、Ｓ９０３に進み、音声収録に用いるマイクを自動的にカメラ部マイク１１６に設定し、表示部マイク１１７を無効とする。そしてＳ９１２に進み、撮影待機状態へ以降する。Ｓ９０２において、カメラヘッド８０１とスマートフォン８０２が分離状態にあると検知された時、Ｓ９０４に進み、カメラ部マイク１１６か表示部マイク１１７のいずれを使って音声収録を行うかを、撮影者がタッチパネル３１４を用いて操作するなどして決定する。ここで、撮影者がカメラ部マイク１１６を用いることを決定した場合、Ｓ９０５に進み、本撮像システム８００はカメラ部マイク１１６で音声収録をするよう設定を行い、表示部マイク１１７を無効とする。

では、Ｓ９０４において表示部マイク１１７を用いて撮影を行うことが決定された場合、Ｓ９０６に進み、表示部マイク１１７で音声収録をするように設定する。

次に、カメラヘッド８０１とスマートフォン８０２の相対位置関係を判定するステップに進む。まず、Ｓ９０７において、メモリ３０６に記録されたカメラヘッド８０１の最新の位置情報、方位情報、姿勢情報をスマートフォン８０２が無線通信を介して取得する。次に、Ｓ９０８に進み、メモリ３１１に記録されたスマートフォン８０２の最新の位置情報、方位情報、姿勢情報を参照し、各情報をカメラヘッド８０１から取得した情報と比較評価する。

Ｓ９０９では、カメラヘッド８０１の位置情報、方位情報と、スマートフォン８０２の位置情報、方位情報とを突き合わせ、カメラヘッド８０１とスマートフォン８０２が対面撮影（自分撮り）の位置にあるか否かを判定する。方位取得部８０４によって取得されたカメラヘッド８０１の撮影方位と、方位取得部８０７によって取得されたスマートフォン８０２の表示画面が向く方位が略合致し、さらにカメラヘッド８０１の撮影方位ベクトルがスマートフォン８０２の位置座標近傍を通過する場合、カメラヘッド８０１と表示画面を見る撮影者が対面する位置関係にあると推定できる。この対面する位置関係が所定時間維持された時、対面撮影を意図した状態であると推定できるため、Ｓ９１０に進む。

Ｓ９１０では、カメラヘッド８０１とスマートフォン８０２の姿勢を評価する。カメラヘッド８０１およびスマートフォン８０２の姿勢が略水平を保った通常の撮影姿勢である時、Ｓ９１１に進む。通常の撮影姿勢とは、カメラ部マイク１１６、表示部マイク１１７が左右方向のステレオ音声を生成できる適切な位置関係にある状態の姿勢を指す。

Ｓ９１１では、表示部マイクＲ１１４と表示部マイクＬ１１５の入力信号を入れ替え、表示部マイクＲ１１４を左側音声、表示部マイクＬ１１５を右側音声としてステレオ音声信号を生成するように設定を切り替える。そしてＳ９１２に進み、撮影待機状態へ以降する。

Ｓ９０９においてカメラヘッド８０１とスマートフォン８０２が対面撮影状態ではないと判断した場合、または対面撮影状態と判断できなかった場合、音声信号処理設定は変更されず、通常の通りに表示部マイクＲ１１４を右側音声、表示部マイクＬ１１５を左側音声として音声収録を行う。

また、Ｓ９１０においてカメラヘッド８０１またはスマートフォン８０２の姿勢が通常の撮影姿勢とは異なる特殊な姿勢だった場合も、音声信号処理設定は変更されず、表示部マイクＲ１１４を右側音声、表示部マイクＬ１１５を左側音声として音声収録を行う。特殊な姿勢とは、例えばカメラヘッド８０１が撮影光軸を中心に９０度回転している場合である。この場合、撮影する画像の左右方向がスマートフォン８０２にとって天地方向にあたるため、表示部マイク１１７で収録したステレオ音声を画像と合致させることができない。

以上に説明した通り、本撮像システム８００は、対面撮影状態であるか否かを位置情報、方位情報から判定し、対面撮影状態であると判断された場合、撮影画像の左右とステレオ音声の左右が合致するよう音声信号処理の設定を切り替えるものである。これにより画像と音声が合致しない不自然な動画を撮影してしまうことを避けることができる。

＜第三の実施形態＞
続いて、本発明の第三の実施形態を説明する。

図１０は第三の実施形態におけるスマートフォン１００２と、第一の実施形態におけるカメラヘッド１０１から成る撮像システム１０００の構成を示すブロック図である。なお、第一、第二の実施形態で説明した構成要素と同一の要素については同一の符号を付し、説明を省略する。

本実施形態でのスマートフォン１００２には、対面撮影スイッチ１００３が設けられている。対面撮影スイッチ１００３の入力は制御部３１０に伝達され、対面撮影に関わる諸設定の切替操作に用いる。

図１１は本撮像システム１０００の音声信号処理設定を決定する動作を説明するフローチャートである。図１１に沿って、本撮像システム１０００の動作を説明する。

音声信号処理設定Ｓ１１０１は、本撮像システム１０００が音声を含む動画を撮影する動作モードに遷移した時に開始される。

まず、Ｓ１１０２において、カメラヘッド１０１とスマートフォン１００２の分離合体状態を検知する。カメラヘッド１０１とスマートフォン１００２が合体状態にある時、Ｓ１１０３に進み、音声収録に用いるマイクを自動的にカメラ部マイク１１６に設定し、表示部マイク１１７を無効とする。Ｓ１１０２において、カメラヘッド１０１とスマートフォン１００２が分離状態にあると検知された時、Ｓ１１０４に進み、カメラ部マイク１１６か表示部マイク１１７のいずれを使って音声収録を行うかを、撮影者がタッチパネル３１４を操作するなどして決定する。撮影者がカメラ部マイク１１６を用いることを決定した場合、Ｓ１１０５に進み、本撮像システム１０００はカメラ部マイク１１６で音声収録をするよう設定を行い、表示部マイク１１７を無効とする。

さて、Ｓ１１０４において表示部マイク１１７を用いて撮影を行うことが決定された場合、Ｓ１１０６に進み、表示部マイク１１７で音声収録をするように設定する。

次に、Ｓ１１０６において、対面撮影スイッチ１００３の操作状態を参照する。対面撮影スイッチ１００３はＯＮ／ＯＦＦを切り替え操作するスイッチであり、撮影者が対面撮影（自分撮り）を行う場合にＯＮ操作をする。ＯＮにすると、表示素子１０９に表示する撮影画像を左右反転させた鏡像に切り替えると共に、Ｓ１１０８にて表示部マイクＲ１１４と表示部マイクＬ１１５の入力信号を入れ替え、表示部マイクＲ１１４を左側音声、表示部マイクＬ１１５を右側音声としてステレオ音声信号を生成するように設定を切り替える。このように、対面撮影に好適な動作モードへ対面撮影スイッチ１００３を操作するだけで移行するように構成されている。

Ｓ１１０６において対面撮影スイッチ１００３がＯＦＦである場合は、音声信号処理設定は変更されず、通常の通りに表示部マイクＲ１１４を右側音声、表示部マイクＬ１１５を左側音声として音声収録を行う。さらに、表示素子１０９に表示する撮影画像も鏡像には切り替えない。

以上に説明した通り、本撮像システム１０００では、撮影者の対面撮影スイッチ１００３の操作に応じて、撮影画像の左右とステレオ音声の左右が合致するよう音声信号処理の設定を切り替えるとともに、表示素子１０９に表示する画像も鏡像に切り替えて、対面撮影に好適な動作モードを提供する。

１００撮像システム、１０１カメラヘッド、１０２スマートフォン、
１０３電源スイッチ、１０４レリーズスイッチ、１０５無接点検知部、
１０８係合爪１０７、１０９表示素子、１１０無接点検知部、
１１１電源スイッチ、１１２カメラ部マイクＲ、１１３カメラ部マイクＬ、
１１４表示部マイクＲ、１１５表示部マイクＬ、１１６カメラ部マイク、
１１７表示部マイク、３０１レンズ光学系、３０２撮像素子、
３０３カメラ制御部、３０４画像処理部、３０５制御部、３０６メモリ、
３０７無線送受信部、３０９無線送受信部、３１０制御部、３１１メモリ、
３１２画像処理部、３１３キャラクタジェネレータ、３１４タッチパネル、
３１５音声処理部、３１６音声処理部、５０１支柱、５０２撮影者、
８００撮像システム、８０１カメラヘッド、８０２スマートフォン、
８０３位置取得部、８０４方位取得部、８０５姿勢検出部、８０６位置取得部、
８０７方位取得部、８０８姿勢検出部、１０００撮像システム、
１００２スマートフォン、１００３対面撮影スイッチ、１２０１表示部、
１２０２カメラ部、１２０３表示画面、１２０４撮影者、
１２０５ステレオマイク部、１２０６ステレオマイク部

Claims

撮像素子を備えるカメラ部と、
画像表示手段と第一のステレオ音声収録手段とを備える表示部とを含み、
前記カメラ部と前記表示部とが分離合体自在に構成された撮像装置であって、
前記カメラ部と前記表示部の分離状態を検知する分離検知手段と、
前記カメラ部と前記表示部の相対向きを判別する向き判別手段と、
前記第一のステレオ音声収録手段の収録音声信号を処理する音声信号処理部と、
前記分離検知手段および前記向き検知手段の検知結果に応じて、前記音声信号処理部を制御する制御部と、
を備えることを特徴する撮像装置。
第二のステレオ音声収録手段を備える前記カメラ部と、
前記第一および第二のステレオ音声収録手段により取得した音声信号を比較する信号比較手段と、
前記信号比較手段による比較結果から前記カメラ部と前記表示部の相対向きを判別する向き判別手段と、
を備えることを特徴とする請求項１に記載の撮像装置。
第一の位置取得手段と第一の方位取得手段とを備える前記カメラ部と、
第二の位置取得手段と第二の方位取得手段とを備える前記表示部と、
前記第一および第二の位置取得手段が取得する位置情報、および前記第一および第二の方位取得手段が取得する方位情報をそれぞれ比較する情報比較手段と、
前記情報比較手段による比較結果から前記カメラ部と前記表示部の相対向きを判別する向き判別手段と、
を備えることを特徴とする請求項１に記載の撮像装置。
前記表示部に表示される画像の左右を反転表示させる表示切替操作手段と、
前記分離検知手段の検知結果、および前記表示切替操作手段の操作状態に応じて、前記音声信号処理部を制御する制御部と、
を備えることを特徴とする請求項１に記載の撮像装置。
前記カメラ部の撮影方向と前記表示部の画像表示手段が向く方向とが合致することを判別する前記向き判別手段と、
を備えることを特徴とする請求項１乃至請求項３の何れか一項に記載の撮像装置。
前記分離検知手段の検知結果および前記向き判別手段の判別結果に応じて、
前記第一のステレオ音声収録手段から得る音声信号の左右を入れ替えるように前記音声信号処理部を制御する制御部と、
を備えることを特徴とする請求項１乃至請求項５の何れか一項に記載の撮像装置。