JP2008103831A

JP2008103831A - 撮像装置

Info

Publication number: JP2008103831A
Application number: JP2006282688A
Authority: JP
Inventors: Shigeki Motoyama; 茂樹本山
Original assignee: Sony Corp
Current assignee: Sony Corp
Priority date: 2006-10-17
Filing date: 2006-10-17
Publication date: 2008-05-01

Abstract

【課題】単一の画面内でブラケット撮影によって得られた画像を選択すると共に合成処理結果の画像が確認できるようにしてユーザーが前記画像の処理を直感的且つ簡単に操作を行えるようにする。
【解決手段】ブラケット撮影可能な撮像装置（デジタルスチルカメラ１）において、ブラケット撮影によって得られた複数の画像を表示する表示部１７を備える。表示部１７は単一の画面５１で区間５１１，５２２に含まれる前記複数の画像の中から選択された複数の画像に基づき合成処理された画像５１０を表示させる。次いで、表示部１７は前記合成処理した画像５１０を二つの合成調整項目の組み合わせに基づき調整して得た画像を表示する。
【選択図】図１

Description

本発明はブラケット撮影の機能を有する撮像装置に関する。

ブラケット撮影は設定された露出補正量の幅に従って撮像装置が露出を変えながら複数の画像例えば３枚の画像を撮影する技術である。そして、この技術を自動的に行うことで、撮像装置が算出した適正露出で撮影した写真の露出よりも明るい写真と暗い写真とを連続的に撮影できる。すなわち、露出を変更して複数の写真を撮影することで露出の失敗を回避できる。

また、異なる撮像条件を変えて撮影された複数の画像の中から任意の画像の選択や合成によって良好な画像を抽出するようにした撮像装置としては例えば特許文献１及び特許文献２に開示された撮像装置がある。
特開２０００−９２３７８特開２００２−２７１６８６

しかしながら、特許文献１及び特許文献２の撮像装置は、同一被写体に対し、ブラケット撮影により露出の異なる撮影画像を領域毎に合成調整処理する際に、同一調整処理する段階で複数の元画像を個別に選択することができない。また、合成画像を微調整する際に、同一調整段階において２つ以上の合成調整項目を個別に設定操作することができない。さらに、上記の設定操作をする上で、ユーザーが現状の合成調整項目値を直感的に把握できるユーザーインターフェイスがない。

そこで、本発明の撮像装置は、ブラケット撮影可能な撮像装置において、ブラケット撮影によって得られた複数の画像を表示する表示部を備え、前記表示部は、単一の画面で前記複数の画像の中から選択された複数の画像に基づき合成処理された画像を表示させる手段と、前記合成処理した画像を二つの合成調整項目の組み合わせに基づき調整して得た画像を表示する手段とを有する。

前記ブラケット撮影によって得られた複数の画像としては、シャッタースピード、絞り、撮像素子の感度のいずかの撮影条件を変えて得られたものが挙げられる。

前記ブラケット撮影によって得られた複数の画像は前記表示部の画面の垂直方向、水平方向または対角線方向に表示するようにするか、前記表示部の画面の角を中心とする円弧状に表示するようにするとよい。

前記表示部は前記合成調整項目を同一の調整段階で独立に設定する手段を有するようにするとよい。前記合成調整項目の組み合わせとしては、例えば、合成境界部のシャープネス値、合成境界の明るさ閾値、合成比率、合成画像のコントラスト、合成画像の明るさから適宜二者が選択されたものの組み合わせが挙げられる。より具体的には、合成境界部のシャープネス値と合成境界の明るさ閾値の組み合わせ、合成境界部のシャープネス値と合成比率の組み合わせ、合成画像のコントラストと明るさの組み合わせが例示される。

前記単一の画面で前記複数の画像の中から選択された複数の画像としては、例えば、前記単一の画面に表示された複数の画像の中でヒストグラムにおけるシャドー側の画素数積算割合が１０％以上である画像と、ハイライト側の画素数積算割合が１０％以上である画像が挙げられる。

前記同一の調整段階では、第一の合成調整項目と第二の合成調整項目が割り当てられた直交座標を表示し、この表示された直交座標上の変位が反映されて合成処理された画像を表示するようにすると、前記二つの合成調整項目に基づく調整によって得られた合成画像を一見で確認できる。また、前記合成処理された画像の中心と前記直交座標の原点との変位した分が調整の度合いであるようにすると、調整の度合いの確認が容易となる。

前記合成処理された画像は前記表示部の画面の中央部に表示するようにするとよい。さらには、前記合成処理される前の画像と共に表示するようにするとなおよい。

以上の発明の撮像装置によれば、単一の画面内でブラケット撮影によって得られた画像を選択すると共に合成処理結果の画像を確認できるので、ユーザーが直感的且つ簡単に操作ができる。

また、単一の画面で２つの合成調整項目が同時に操作できるので、ユーザーが直感的に調整値の把握と結果画像の確認が行える。

さらに、画面内の結果画像が比較的大きな表示枠で再生させることができるので、詳細な部分領域の確認が行え、ユーザーは最適な合成画像を得ることができる。

そして、合成作業初期において合成元の画像を選択でき、最終的に選択された画像に至るまでの操作回数を減らすことができるので、簡便で迅速に合成作業を行うことができる。

図１は発明の一実施形態に係る撮像装置とその表示部の画面における画像の表示例の説明図である。図２は前記撮像装置によって実行される合成処理のステップを示したフローチャート図である。この合成処理のステップは図１６や図１８に例示された撮像装置のブラケット撮影により得られた画像を利用して重ね合わせ合成処理する場合のグラフィカルユーザーインターフェイスの形態に適用される。

図１６に例示されたデジタルスチルカメラ１はカメラ本体１０の正面にフラッシュ部１１とレンズ鏡筒１２とファインダー窓１３と指かけフック１４とを備える。電源ボタン１５及びシャッターボタン１６はカメラ本体１０の上面に設けられている。レンズ鏡筒１２はデジタルスチルカメラ１の起動時にカメラ本体１０から突出すると共に停止時にカメラ本体１０内に収納可能となっている。また、図１７に示されたように、カメラ本体１０の背面には表示部１７、ダイレクト再生ボタン１８及び画面表示ボタン１９の他に、フラッシュモードボタン、明るさ調整ボタン、画像サイズ選択/画像削除ボタン、セルフタイマーボタン、決定ボタン等の機能を有する操作ボタン２０が設けられている。

図１８に例示されたデジタルスチルカメラ２は一眼レフレックス型デジタルスチルカメラの形態を成している。カメラ本体２１の正面ほぼ中央部にはレンズ鏡筒２２が着脱自在に設けられている。カメラ本体２１の正面左端部にはユーザーの手によって保持されるグリップ部が形成されている。このグリップ部の上端部にはシャッターボタン２２が設けられている。カメラ本体２１の正面右上端部にはファンクションダイヤル２４ａ及びファンクションボタン２４ｂが設けられる一方でカメラ本体２１の正面略左上端部にはモードダイヤル２５が設けられている。そして、カメラ本体２１の上面の中央部付近にはアクセサリーシュー２６が設けられている。また、図１９に示されたカメラ本体２１の背面略中央上部にはファインダー２７が設けられている。ファインダー２７の左側には電源スイッチ２８が配置されている。カメラ本体２１の背面のほぼ中央には表示部２９が設けられている。表示部２９の右側には実行ボタン、スポットＡＦボタン等の機能を有する操作ボタン３０と手ぶれ補正スイッチ３１とが配置されている。表示部２９の左側にはメニューボタン、表示切り替えボタン、消去ボタン、再生ボタン等の有する操作ボタン３２が配置されている。

図２に示された合成処理のステップは、ブラケット撮影によって得られた撮影条件の異なる複数の画像に対し、露出分布が飽和している撮影領域を相互に補完するための重ね合わせ合成処理する事例を想定している。前記撮影条件を制御する要素としては、シャッタースピード、光学系の絞り、撮像素子の感度がある。

撮影画像は例えば図３に示されたＥＶ（露出値）の範囲に対応したダイナミックレンジで得られる。画像４１は約１５ＥＶ〜約１８ＥＶの範囲で撮影された画像である。画像４２は約１３ＥＶ〜約１６ＥＶの範囲で撮影された画像である。画像４３は約１０．５ＥＶ〜約１３．５ＥＶの範囲で得られた画像である。画像４４は約８．５ＥＶ〜約１１ＥＶの範囲で撮影された画像である。画像４５は約６．５ＥＶ〜約９．５ＥＶの範囲で撮影された画像である。画像４６は約４ＥＶ〜約７ＥＶの範囲で撮影された画像である。画像４７は約２ＥＶ〜約４．５ＥＶの範囲で撮影された画像である。画像４８は０ＥＶ〜約２．５ＥＶの範囲で撮影された画像である。

図２に示された合成処理のステップは、２枚の画像が選択されこの選択された画像の合成処理画像が表示される第１段階と、この第１段階で得られた合成処理画像の調整項目が選択されこの選択に基づき得られた合成処理画像が表示される第２段階とを有する。図１６及び図１８に例示された撮像装置の表示部は前記第１段階及び第２段階に係る表示を行なう手段を有している。

第１段階ではステップＳ１からステップＳ４が実行される。ステップＳ１では合成処理作業を行うか否かがユーザーによって判断される。合成処理する必要があると判断された場合、操作ボタンの操作によって作業の開始が実行される。ステップＳ２では例えば２枚の元画像（元画像７１，７２）が選択され、ステップＳ３では前記選択された画像の合成処理画像７３が表示されてユーザーによって確認される。ステップＳ４では合成画像７３を確定してもよいか否かがユーザーによって決定される。合成画像７３が確定しない場合はステップＳ１に戻る。合成画像７３が確定されると、第２段階に移行する。

第２段階ではステップ５からステップＳ８が実行される。ステップＳ５では第１段階で得られた合成画像７３の調整項目が単数または複数選択される。この事例では二つの調整項目（調整項目７４，７５）が選択される。ステップＳ６では前記選択された調整項目に基づき合成された合成画像７６が表示されてユーザーによって確認される。ステップＳ７では合成画像７６を確定してもよいか否かがユーザーによって決定される。合成画像７６が確定しない場合はステップＳ４に戻る。合成画像７６が確定されると、ステップＳ８に移行し、撮像装置の内部メモリまたは外部メモリに保存される。

第１段階の処理では、撮影条件の順列などに沿って例えば図１、図４〜図６に示されたように配列された画像群からそれらの一部区間の画像を表示部の画面に表示させ、ユーザーに選択させるようにするとよい。

すなわち、図１には二つの一部区間（区間５１１，５１２）の画像を表示部１７の画面５１の垂直方向及び水平方向に配列させて表示した例が示されている。図４には二つの一部区間（区間５２１，５２２）の画像を表示部１７の画面５２の角を中心として円弧上に配列させて表示した例が示されている。図５には二つの一部区間（区間５３１，５３２）の画像を表示部１７の画面５３の縦方向に配列させて表示した例を示す。図６には二つの一部区間（区間５４１，５４２）の画像を表示部１７の画面５４の横方向に表示した例が示されている。尚、以上の表示例から明らかなように合成処理した画像５１０，５２０，５３０，５４０は各々の画面５１，５２，５３，５４の中央に配置されるように表示されるようになっている。

また、これに加えて、異なる一部区間を表示させ、別途ユーザーに選択させる。ここで選択した２枚の画像を合成処理した画像を画面上に表示させることでユーザーに処理後の画像を確認させるとよい。

画像の順送り及び逆送りはそれぞれの一部区間ごとに操作ボタン２０に割り当てるようにすれば、ユーザーは双方の配列に対し、同時に操作することができる。

合成処理画像は、図１、図４〜図６に示された合成処理画像のように、表示部１７の画面の中央に配置して表示することで、それぞれの配列から選択した画像が反映されて明示される。

また、３枚以上の画像を選択する場合の配列表示の形態を図７〜図１０に例示した。

図７は画像を表示部の画面の縦横方向及び対角線方向に配列させて表示した例を示す。第一の配列画像５５１は表示部１７の画面５５の横方向に配列されている。第二の配列画像５５２は画面５５の縦方向に配列されている。第三の配列画像５５３は画面５５の左上がり対角線方向に配列されている。第四の配列画像５５４は画面５５の右上がり対角線方向に配列されている。合成処理画面５５０は画面５５の中央部に配置されている。

図８は画像を表示部の画面の角を中心として円弧状に配列させた表示した例を示す。第一の配列画像５６１は表示部１７の画面５６の右上コーナー部を中心に円弧状に配列されている。第二の配列画像５６２は画面５６の左上コーナー部を中心に円弧状に配列されている。第三の配列画像５６３は画面５６の左下コーナー部を中心に円弧状に配列されている。第四の配列画像５６４は画面５６の右下コーナー部を中心に円弧状に配列されている。合成処理画面５６０は前記画面の中央部に配置されている。

図９は画像を表示部の画面の縦方向に配列させて表示した例を示す。第一の配列画像５７１は表示部１７の画面５７の左側縦方向に配列されている。第二の配列画像５７２は第一の配列画像５７１と並んで画面５７の縦方向に配列されている。第三の配列画像５７３は画面５７の中央右側縦方向に配列されている。第四の配列画像５７４は第三の配列画像と並んで画面５７の縦方向に配列されている。合成処理画面５７０は画面５７の中央部で第二の配列画像５７２と第三の配列画像５７３とによって挟まれるように配置されている。

図１０は画像を表示部の画面の横方向に配列させて表示した例を示す。第一の配列画像５８１は表示部１７の画面５８の上側横方向に配列されている。第二の配列画像５８２は第一の配列画像５８１の下方に配列されている。第三の配列画像５８３は画面５８の中央下側の横方向に配列されている。第四の配列画像５８４は第三の配列画像５８３と下方に配列されている。合成処理画面５８０は画面５８の中央部で第二の配列画像５８２と第三の配列画像５８３とによって挟まれるように配置されている。

また、合成画像を生成する元画像は自動選択されるようにし、表示部が適当な初期の選択画像候補をユーザーに提供できるようにするとよい。自動選択の条件としては、撮影画像のヒストグラム情報から黒つぶれ、及び白飛び画像を定量的に抽出し、選択する形態がある。より具体的には、選択画像として、複数毎の撮影画像配列の内、ヒストグラムにおけるシャドー側の画素数積算割合が１０％以上である画像と、ハイライト側の画素数積算割合が１０％以上である画像が選択されて初期表示される。

第２段階のステップＳ５では２つの合成調整項目すなわち第一の合成調整項目（調整項目７４）と第二の合成調整項目（調整項目７５）とを同時に独立して操作及び設定できるようにするとよい。図１１に例示された形態では、第一の合成調整項目の調整軸５９１は表示部１７の画面５９の横方向に配置される。第二の合成調整項目の調整軸５９２は画面５９の縦方向に配置される。合成処理した画像５９０は画面の中央部に表示される。前記それぞれの合成調整項目は調整軸５９１，５９２のように直交座標系に割り当てられ、この座標系を含む画面５９に表示された合成処理した画像５９０にはその中心点０が変位した分の調整の度合いが反映される。合成処理した画像５９０は操作ボタン２０の操作による中心点０の変位に基づく２つの合成調整項目の変化量が調整されて得られる。

より詳細には図１２に例示された画面６０に横軸である第一合成調整項目の調整軸６０１と縦軸である第二合成調整項目の調整軸６０２が表示されている。調整軸６０１と調整軸６０２が直交する原点Ｏは画面６０の中心に位置している。合成処理した画像６００にはその中心点６０３が原点Ｏから第一合成調整項目の調整軸６０１の方向（横軸方向）に変化量ΔＸだけ変位すると共に第二合成調整項目の調整軸６０２の方向（縦軸方向）に変化量ΔＹだけ変位した分の調整の度合いが反映されている。すなわち、直交座標系上の変位が反映された画像６００はその中心点６０３が前記直交座標系の原点Ｏから前記変位した変位点となるように表示される。以上のように第一合成調整項目及び第二合成調整項目に基づく調整によって得られた画像６００が一見で確認できるようになっている。特に、画像６００の中心点６０３と前記直交座標系の原点Ｏとの変位した分が調整の度合いとなっているので調整の度合いの確認も容易となる。

合成調整項目の組み合わせとしては、例えば、「合成境界部のシャープネス値」、「合成境界の明るさ閾値」、「合成比率」、「合成画像のコントラスト」、「合成画像の明るさ」から適宜二者が選択されたものの組み合わせが挙げられる。例えば、第一の合成調整項目として「合成境界部のシャープネス値」と第二の合成調整項目として「合成境界の明るさ閾値」の組み合わせが挙げられる。「合成境界部のシャープネス値」とは、合成境界部において接する複数の元画像断片の端部に対し、境界部近傍の領域をぼかす画像処理を施す際の効果指標である。「合成境界の明るさ閾値」とは、明るさを指標とした閾値であり、元画像において最適な露出が得られている領域を含む閾値以上若しくは閾値以下の明るさである領域を切り取る処理において設定されるものである。

また、その他には、合成境界部のシャープネス値と合成比率の組み合わせや、合成画像のコントラストと明るさの組み合わせが挙げられる。

具体的な事例としては図１３に示されたように、画面６１において第一の合成調整項目である「合成境界部のシャープネス値」の調整軸６１１が横軸として画面６１の中央に表示されている。「合成境界部のシャープネス値」の調整軸６１１は画面６１の左方向にシャープネスの効果が強くなる一方で画面６１の右方向にシャープネスの効果が弱くなるように合成画面６１０を調整できるようになっている。第二の合成調整項目である「合成比率」の調整軸６１２は縦軸として画面６１の中央に表示される。「合成比率」の調整軸６１２は画面６１の上方向に元画面１３１の比率が増加する一方で画面６１の下方向に元画面１３２の比率が増加するように合成画面６１０を調整できるようになっている。

図１４に示された事例では、第一の合成調整項目として合成画像の「コントラスト」と第二の合成調整項目として「明るさ」の組み合わせがある。図１４に示された画面６２には「コントラスト」の調整軸６２１が横軸として画面６２の中央に表示される。「コントラスト」の調整軸６２１は画面６２の左方向にコントラストが強くなる一方で画面６２の右方向にコントラストが弱くなるように調整できる。「明るさ」の調整軸６２２は縦軸として画面６２の中央に表示される。「明るさ」の調整軸６２は画面６２の上方向に合成画像６２０が明るくなる一方で画面６２の下方向に合成画像６２０が暗くなるように調整できる。

また、合成調整項目の変化量が決定された後は、図１５に示されたように画面６３のように、合成調整処理前の画像６３１と合成調整処理した画像６３２とが並んで表示されるようにすれば、ユーザーは合成調整前後の画像６３１，６３２を比較して調整の効果を確認することができる。画像６３１（または６３２）は例えば画面６３の所定の角の位置や画像６３２（または６３１）とのオーバーラップが少なくなるまたはなくなるような位置に配置される。

さらに、調整項目軸の事象毎及び前記軸上の適当な変化量における合成結果画像が同時に表示されるようにすれば、ユーザーに対してその周辺の調整方向に対する効果を案内することができる。この表示は例えば無操作時または特定キー操作により表示されるようにすればよい。

以上の作業により得られた合成後の画像は、元の画像の配列に加えることができ、これによって再度合成作業を行えるようにすれば、合成後の画像を元画像としてさらに合成処理を行うことができる。

発明の一実施形態に係るデジタルススチルカメラとその表示部の画面における画像の表示例の説明図。発明の一実施形態に係るデジタルスチルカメラによって実行される合成処理のステップを示したフローチャート。８種類の画像に対応したＥＶ（露出値）の範囲。画像を表示部の画面の角を中心として円弧上に配列させて表示した例。画像を表示部の画面の縦方向に配列させて表示した例。画像を表示部の画面の横方向に表示した例。画像を表示部の画面の縦横方向及び対角線方向に配列させて表示した例。画像を表示部の画面の角を中心として円弧状に配列させた表示した例。画像を表示部の画面の縦方向に配列させて表示した例。画像を表示部の画面の横方向に配列させて表示した例。第一の合成調整項目の調整軸と第二の合成調整項目の調整軸とを表示した例。第一の合成調整項目の調整軸と第二の合成調整項目の調整軸とによる画像の合成処理の説明図。第一の合成調整項目（合成境界部のシャープネス値）の調整軸と第二の合成調整項目（合成境界の明るさ閾値）の調整軸とによる画像の合成処理の説明図。第一の合成調整項目（コントラスト）の調整軸と第二の合成調整項目（明るさ）の調整軸とによる画像の合成処理の説明図。合成調整処理前の画像と合成調整処理した画像とを表示した例。発明の一実施形態に係るデジタルスチルカメラの斜視図。発明の一実施形態に係るデジタルスチルカメラの背面図。発明の一実施形態に係るデジタルスチルカメラの斜視図。発明の一実施形態に係るデジタルスチルカメラの背面を示した斜視図。

符号の説明

１…デジタルスチルカメラ
１７…表示部
２０，３０，３２…操作ボタン
５１〜６３…画面
５１０，５２０，５３０，５４０，５５０，５６０，５７０，５８０，５９０，６００…合成処理した画像
５１１，５１２，５２１，５２２，５３１，５３２，５４１，５４２…区間
５５１〜５５４，５６１〜５６４，５７１〜５７４，５８１〜５８４…配列画像
５９１，５９２，６０１，６０２，６１１，６１２，６２１，６２２…調整軸
６３１…合成調整処理前の画像、６３２…合成調整処理した画像

Claims

ブラケット撮影可能な撮像装置において、
ブラケット撮影によって得られた複数の画像を表示する表示部を備え、
前記表示部は、
単一の画面で前記複数の画像の中から選択された複数の画像に基づき合成処理された画像を表示させる手段と、
前記合成処理した画像を二つの合成調整項目の組み合わせに基づき調整して得た画像を表示する手段と
を有すること
を特徴とする撮像装置。
前記表示部は前記合成調整項目を同一の調整段階で独立に設定する手段を有すること
を特徴とする請求項１記載の撮像装置。
前記合成調整項目の組み合わせは合成境界部のシャープネス値と合成境界の明るさ閾値であること
を特徴とする請求項１に記載の撮像装置。
前記合成調整項目の組み合わせは合成境界部のシャープネス値と合成比率であること
前記合成調整項目の組み合わせは合成画像のコントラストと明るさであること
を特徴とする請求項１に記載の撮像装置。
前記単一の画面で前記複数の画像の中から選択された複数の画像は、前記単一の画面に表示された複数の画像の中でヒストグラムにおけるシャドー側の画素数積算割合が１０％以上である画像と、ハイライト側の画素数積算割合が１０％以上である画像であること
を特徴とする請求項１に記載の撮像装置。
前記同一の調整段階では、第一の合成調整項目と第二の合成調整項目が割り当てられた直交座標を表示し、この表示された直交座標上の変位が反映されて合成処理された画像を表示すること
を特徴とする請求項２に記載の撮像装置。
前記合成処理された画像の中心と前記直交座標の原点との変位した分が調整の度合いであること
を特徴とする請求項７に記載の撮像装置。
前記ブラケット撮影によって得られた複数の画像を前記表示部の画面の垂直方向、水平方向または対角線方向に表示すること
を特徴とする請求項１に記載の撮像装置。
前記ブラケット撮影によって得られた複数の画像を前記表示部の画面の角を中心とする円弧状に表示すること
を特徴とする請求項１に記載の撮像装置。
前記合成処理された画像を前記表示部の画面の中央部に表示すること
を特徴とする請求項１に記載の撮像装置。
前記合成処理された画像を前記合成処理される前の画像と共に表示することを特徴とする請求項１に記載の撮像装置。
前記ブラケット撮影によって得られた複数の画像はシャッタースピード、絞り、撮像素子の感度のいずかの撮影条件を変えて得られたものであること
を特徴とする請求項１に記載の撮像装置。