JP7008243B2 - 撮像装置 - Google Patents

Description

本開示は、複数の撮影画像からハイレゾ画像を生成することが可能な撮像装置に関する。

例えば、特許文献１には、複数の撮影画像を用いて、これらの撮影画像の画素数に比べて高い画素数を備えるハイレゾ画像（高解像度画像）を生成することができる撮像装置が開示されている。

特許文献１に記載された撮像装置は、レンズおよびイメージセンサの少なくとも一方を所定の画素分だけ移動させる移動機構を備える。移動機構がレンズおよびイメージセンサの少なくとも一方が移動することにより、イメージセンサの受光面上の被写体の像が所定の画素分だけ位置ずれする。被写体が所定の画素分ずれて写る複数の撮影画像をイメージセンサが取得し、その複数の撮影画像を合成することにより、ハイレゾ画像が生成される。

特開平６－２２５３１７号公報

ところで、特許文献１に記載された撮像装置の場合、ハイレゾ画像の生成に必要な複数の撮影画像をイメージセンサが取得するために、撮像装置はぶれないように三脚等で固定される必要がある。これに対して、撮像装置が手持ち状態のときに取得された撮影画像からハイレゾ画像を生成することが望まれている。

そこで、本開示は、手持ち状態時に取得された撮影画像からハイレゾ画像を生成することができる撮像装置を提供することを課題とする。

本開示の一態様によれば、
撮像装置であって、
被写体が写る撮影画像を取得するイメージセンサと、
位置および姿勢の少なくとも一方が変化するように前記イメージセンサを駆動するイメージセンサ駆動部と、
それぞれの被写体が互いにずれて所定の位置関係で写る所定枚数の前記撮影画像を所定枚数のオリジナル画像とし、前記所定枚数のオリジナル画像からハイレゾ画像を作成するハイレゾ画像作成部と、
前記撮像装置のぶれ量を検出するぶれ量検出部と、
前記撮像装置が手持ち状態のときに取得された前記撮影画像から前記ハイレゾ画像を作成する手持ちハイレゾモードの実行開始をユーザが指示するための操作部と、を有し、
前記手持ちハイレゾモードの実行中、前記イメージセンサ駆動部が前記ぶれ量に基づいて算出されたぶれ補正用変化量に追加変化量が補充された増補変化量で前記イメージセンサを駆動している状態で、前記ハイレゾ画像作成部が、前記イメージセンサによって取得された前記撮影画像から前記ハイレゾ画像を作成する、撮像装置が提供される。

本開示によれば、撮像装置は、手持ち状態時に取得された撮影画像からハイレゾ画像を生成することができる。

本開示の一実施の形態に係る撮像装置の概略的な斜視図 撮像装置のブロック図 所定枚数のオリジナル画像それぞれに写る被写体の位置関係を示す図 所定枚数のオリジナル画像データからハイレゾ画像用の赤色画素データ、緑色画素データ、および青色画素データを作成する処理を示す図 ハイレゾ画像用の赤色画素データ、緑色画素データ、および青色画素データからハイレゾ画像データを作成する処理を示す図 手持ちハイレゾモードの実行中に取得された複数の撮影画像それぞれに写る被写体の位置関係を示す図 イメージセンサのＸ軸方向の位置を変化させる増補変化量の一例を示す図 ユーザによって手持ちハイレゾモードが開始されてからハイレゾ画像が作成されるまでの処理の一例を示す図 本開示の別の実施の形態に係る撮像装置のブロック図 イメージセンサのＸ軸方向の位置を変化させる増補変化量の別例を示す図 複数のオリジナル画像を取得するためのイメージセンサの位置の変化を示すタイミングチャート

以下、適宜図面を参照しながら、実施の形態を詳細に説明する。但し、必要以上に詳細な説明は省略する場合がある。例えば、既によく知られた事項の詳細説明や実質的に同一の構成に対する重複説明を省略する場合がある。これは、以下の説明が不必要に冗長になるのを避け、当業者の理解を容易にするためである。

なお、発明者（ら）は、当業者が本開示を十分に理解するために添付図面および以下の説明を提供するのであって、これらによって特許請求の範囲に記載の主題を限定することを意図するものではない。

以下に、本開示の一実施の形態に係る情報処理装置について図１～図８を参照しながら説明する。

図１は、本開示の一実施の形態に係る撮像装置を概略的に示す斜視図である。図２は、撮像装置のブロック図である。

図１および図２に示すように、本実施の形態に係る撮像装置１０は、被写体の撮影画像を取得するイメージセンサ１２と、被写体の像をイメージセンサ１２の受光面１２ａに結像する複数のレンズを含む交換レンズ１４とを有する、いわゆるデジタルカメラである。

また、図２に示すように、撮像装置１０は、ユーザが撮像装置１０を操作するためのシャッターボタンなどの操作部１６と、ユーザが撮影画像を確認するなどに使用される表示部１８と、イメージセンサ１２によって取得された撮影画像などを記憶する記憶部２０とを有する。

また、本実施の形態の場合、撮像装置１０は、その本体１０ａに、イメージセンサ１２を駆動するセンサアクチュエータ（イメージセンサ駆動部）２２と、撮像装置１０のぶれ量を検出する角速度センサ（ぶれ量検出部）２４と、イメージセンサ１２の位置を検出する位置センサ２５とを有する。

イメージセンサ１２は、受光面１２ａを備える。本実施の形態の場合、その受光面１２ａに、赤色光を検出する複数のフォトダイオードと、緑色光を検出する複数のフォトダイオードと、青色光を検出する複数のフォトダイオードとがベイヤー配列されている。

交換レンズ１４は、撮像装置１０の本体１０ａに対して着脱可能なユニットであって、イメージセンサ１２の受光面１２ａに被写体の像を結像する。交換レンズ１４には、フォーカスレンズ１４ａ、ズームレンズ１４ｂなどが含まれる。また、交換レンズ１４には、フォーカスレンズやズームレンズを駆動するアクチュエータ１４ｃ、１４ｄと、そのアクチュエータを制御するレンズコントローラ１４ｅが含まれる。交換レンズ１４に設けられたレンズマウンタ１４ｆと、撮像装置１０の本体１０ａに設けられたボディマウンタ１０ｂとが連結することにより、交換レンズ１４が撮像装置１０の本体１０に対して着脱可能に固定されるとともに電気的に接続される。

操作部１６は、シャッターボタン１６ａなどの複数のボタンから構成されている。本実施の形態の場合、操作部１６は、撮像装置１０の動作モードとして、ユーザからの手ぶれ補正モード、ノーマルハイレゾモード、および手持ちハイレゾモードそれぞれの実行開始の指示を受け取るように構成されている。例えば、それぞれのモードを開始するためのボタンを操作部１６は含んでいる。

なお、手ぶれ補正モードは、撮像装置１０のぶれによって生じる撮影画像に写る被写体のぶれを抑制するためのモードである。ノーマルハイレゾモードは、撮像装置１０が三脚などによって固定されている状態のときに取得された複数の撮影画像からハイレゾ画像を作成するためのモードである。手持ちハイレゾモードは、撮像装置１０が手持ち状態のときに取得された複数の撮影画像からハイレゾ画像を作成するためのモードである。なお、これらのモードの詳細については後述する。

表示部１８は、例えば液晶ディスプレイであって、撮影画像や現在実行中のモードなどの情報を表示するためのデバイスである。

なお、操作部１６の一部と表示部１８とが、タッチスクリーンディスプレイによって提供されてもよい。

記憶部２０は、例えば、撮像装置１０に内蔵されたメモリや不図示のカードスロットを介して撮像装置１０に取り外し可能に着脱可能に装着されるメモリカードである。

センサアクチュエータ２２は、イメージセンサ１２を駆動してその状態を変化させるデバイスであって、本実施の形態の場合、状態として位置を変化させる。イメージセンサ１２の位置を変化させるために、センサアクチュエータ２２は、例えば、光軸Ｃと直交する２方向（Ｘ軸方向、Ｙ軸方向）にイメージセンサ１２を移動させる。なお、Ｘ軸方向は撮像装置１０の幅方向であって、Ｙ軸方向は撮像装置１０の高さ方向であって、Ｚ軸方向は光軸Ｃの延在方向である。

角速度センサ２４は、撮像装置１０のぶれ量、例えば撮像装置１０がユーザによって手持ちされた状態で使用されているときに生じるぶれ量（角速度）を検出する。本実施の形態の場合、Ｘ軸方向およびＹ軸方向のぶれ量を、角速度センサ２４は検出する。

位置センサ２５は、イメージセンサ１２の位置を検出する。本実施の形態の場合、位置センサ２５は、Ｘ軸方向およびＹ軸方向、Ｒｏｌｌ方向についてのイメージセンサ１２の位置を検出する。

撮像装置１０はまた、撮像装置１０の動作を制御するカメラコントローラ３０を有する。例えば、カメラコントローラ３０は、ユーザの操作部１６へのフォーカス操作やズーム操作に対応する信号を交換レンズ１４のレンズコントローラ１４ｅに出力し、その信号に基づいて、レンズコントローラ１４ｅがアクチュエータ１４ｃ、１４ｄにフォーカスレンズ１４ａやズームレンズ１４ｂを駆動させる。また、本実施の形態の場合、カメラコントローラ３０は、センサアクチュエータ２２を制御するセンサアクチュエータ制御部３２と、撮像装置１０のぶれによって生じる撮影画像に写る被写体のぶれを抑制するためのぶれ補正部３４と、ハイレゾ画像を作成するハイレゾ画像作成部３６とを含んでいる。

カメラコントローラ３０は、例えば、ＣＰＵなどのプロセッサであって、フラッシュメモリ（記憶部２０）に記憶されているプログラムにしたがって動作することにより、撮像装置１０の様々な動作を制御する。本実施の形態の場合、プロセッサは、プログラムにしたがって動作することにより、センサアクチュエータ制御部３２、ぶれ補正部３４、およびハイレゾ画像作成部３６として機能する。カメラコントローラ３０は、制御動作や画像処理動作の際に、ＤＲＡＭ（記憶部２０）をワークメモリとして使用する。カメラコントローラ３０は、ハードワイヤードな電子回路で構成してもよい。また、カメラコントローラ３０は、ハイレゾ画像作成部３６等の画像処理部やＤＲＡＭと共に１つの半導体チップで構成してもよく、あるいは、センサアクチュエータ制御部３２、ぶれ補正部３４、およびハイレゾ画像作成部３６として機能する別個の半導体チップで構成してもよい。

センサアクチュエータ制御部３２は、上述した手ぶれ補正モード、ノーマルハイレゾモード、および手持ちハイレゾモードの実行時に、後述するようにセンサアクチュエータ２２を制御する。その制御に基づいて、センサアクチュエータ２２は、イメージセンサ１２を駆動する。

ぶれ補正部３４は、手ぶれ補正モードの実行中、撮像装置１０にぶれが生じていても、被写体が実質的にぶれることなく撮影画像に写るように、センサアクチュエータ制御部３２と協働してイメージセンサ１２の位置を変化させるように構成されている。すなわち、ぶれ補正部３４は、撮像装置１０にぶれが生じても、被写体の像がイメージセンサ１２の受光面１２ａにおける実質的に同一の部分に結像し続けるように、センサアクチュエータ制御部２２と協働してイメージセンサ１２の位置を変化させる。例えば、撮像装置１０が周期的に振動している場合、イメージセンサ１２を実質的に同一の周期、振幅で振動させる。

そのために、ぶれ補正部３４は、角速度センサ２４によって検出された撮像装置１０のぶれ量に基づいて、被写体の像がイメージセンサ１２の受光面１２ａの実質的に同一の部分に結像するために必要なイメージセンサ１２の位置の変化量を算出する。例えば、撮像装置１０が、時間の経過とともに変化するぶれ量として、周期的に振動している場合、角速度センサ２４の検出結果に基づいて、ぶれ補正部３４は、ぶれ周波数と振幅とを算出し、センサアクチュエータ制御部３２に出力する。センサアクチュエータ制御部３２は、入力されたぶれ周波数および振幅と、位置センサ２５によって検出されたイメージセンサ１２の現在位置とに基づいて、イメージセンサ１２の位置を偏差させるためのぶれ補正用変化量を算出する。そして、その算出したぶれ補正用変化量に基づいて、センサアクチュエータ制御部３２は、センサアクチュエータ２２がぶれ補正用変化量でイメージセンサ１２を駆動するように、センサアクチュエータ２２を制御する。このような手ぶれ補正モードにより、撮像装置１０にぶれが生じても、被写体が実質的にぶれることなく写る撮影画像を取得することができる。ここで、位置センサ２５は、ホール素子やその他の位置センサであってもよい。

ハイレゾ画像作成部３６は、ノーマルハイレゾモードの実行中にイメージセンサ１２によって取得され、それぞれの被写体が互いにずれて所定の位置関係で写る撮影画像をオリジナル画像（ＲＡＷ画像）とし、そのオリジナル画像からハイレゾ画像を作成する。ハイレゾ画像は、撮影画像に比べて解像度が高い（画素数が多い）画像である。

まず、ノーマルハイレゾモードの実行中、すなわち撮像装置１０が三脚などを介して固定された状態であるとき、ユーザがシャッターボタン１６ａを操作すると、一枚ではなく、所定枚数の撮影画像（オリジナル画像）がイメージセンサ１２を介して取得される。具体的には、シャッターボタン１６ａが操作されると、センサアクチュエータ２２がイメージセンサ１２を駆動し、イメージセンサ１２を複数の異なる位置（オリジナル画像取得位置）それぞれに駆動、停止する。そして、複数のオリジナル画像取得位置それぞれでイメージセンサ１２がオリジナル画像を取得する。これにより、それぞれの被写体が互いにずれて所定の位置関係で写る所定枚数のオリジナル画像が取得される。

図３は、所定枚数のオリジナル画像それぞれに写る被写体の位置関係を示している。

図３は、ハイレゾ画像の作成に必要な８枚のオリジナル画像それぞれに写る被写体の位置（必要位置）Ｎｐ（１）～Ｎｐ（８）を示している。複数の必要位置Ｎｐ（１）～Ｎｐ（８）は、例えば被写体の特徴点が写る撮影画像上の位置である。本実施の形態の場合、複数の必要位置Ｎｐ（１）～Ｎｐ（８）は、Ｘ―Ｙ平面上で１．５画素×１．５画素の範囲内に存在する。

センサアクチュエータ２２は、センサアクチュエータ制御部３２に制御されることにより、被写体が必要位置Ｎｐ（１）～Ｎｐ（８）それぞれに写るための変化量（オリジナル画像取得用変化量）で、イメージセンサ１２の位置を変化させる。例えば、センサアクチュエータ２２は、オリジナル画像取得用変化量として、Ｘ軸方向の位置を周期的に変化させる振動とＹ軸方向の位置を周期的に変化させる振動とが重畳してなる振動で、イメージセンサ１２を駆動させる。

例えば、図３に示すように、イメージセンサ１２がオリジナル画像取得用位置で停止することにより、まず、被写体が最初の必要位置Ｎｐ（１）に写る１枚目のオリジナル画像が所得される。その１枚目のオリジナル画像を取得したオリジナル画像取得位置からイメージセンサ１２がＸ軸マイナス方向に１画素分移動することにより、被写体が必要位置Ｎｐ（２）に写る２枚目のオリジナル画像が取得される。２枚目のオリジナル画像を取得したオリジナル画像取得位置からイメージセンサ１２がＹ軸プラス方向に１画素分移動することにより、被写体が必要位置Ｎｐ（３）に写る３枚目のオリジナル画像が取得される。３枚目のオリジナル画像を取得したオリジナル画像取得位置からイメージセンサ１２がＸ軸プラス方向に１画素分移動することにより、被写体が必要位置Ｎｐ（４）に写る４枚目のオリジナル画像が取得される。４枚目のオリジナル画像を取得したオリジナル画像取得位置からイメージセンサ１２がＸ軸マイナス方向に半画素分且つＹ軸マイナス方向に半画素分移動することにより、被写体が必要位置Ｎｐ（５）に写る５枚目のオリジナル画像が取得される。５枚目のオリジナル画像を取得したオリジナル画像取得位置からイメージセンサ１２がＸ軸マイナス方向に１画素分移動することにより、被写体が必要位置Ｎｐ（６）に写る６枚目のオリジナル画像が取得される。６枚目のオリジナル画像を所得したオリジナル画像取得位置からイメージセンサ１２がＹ軸プラス方向に１画素分移動することにより、被写体が必要位置Ｎｐ（７）に写る７枚目のオリジナル画像が取得される。そして、７枚目のオリジナル画像を取得したオリジナル画像取得位置からイメージセンサ１２がＸ軸プラス方向に１画素分移動することにより、被写体が必要位置Ｎｐ（８）に写る８枚目のオリジナル画像が取得される。

なお、上述のオリジナル画像の取得の順番は、イメージセンサ１２の移動量を最小にした場合、すなわち短時間でオリジナル画像を取得するための順番である。被写体が必要位置Ｎｐ（１）～Ｎｐ（８）それぞれに写る８枚のオリジナル画像を取得できるのであれば、その取得の順番、駆動の向きは限定されない。

このようにイメージセンサ１２が駆動されることによってそれぞれの被写体が互いにずれて所定の位置関係で写る８枚のオリジナル画像が取得される。ハイレゾ画像作成部３６は、このようにして取得した８枚のオリジナル画像を用いて１枚のハイレゾ画像を作成する。その作成方法について、図４および図５を参照しながら説明する。なお、理解を容易にするために、大きさが４画素（ｗ）×４画素（ｈ）のオリジナル画像を例に挙げる。ｗは画像の幅を示し、ｈは画像の高さを示している。

図４は、オリジナル画像データからハイレゾ画像用の赤色画素データ、緑色画素データ、および青色画素データを作成するプロセスを示している。図５は、ハイレゾ画像用の赤色画素データ、緑色画素データ、および青色画素データからハイレゾ画像データを作成する処理を示している。

図４に示すように、ハイレゾ画像作成部３６は、まず、８枚のオリジナル画像（ＲＡＷ画像）データそれぞれの画素数を２倍にする。すなわち、４画素（ｗ）×４画素（ｈ）のＲＡＷ画像データから８画素（２ｗ）×８画素（２ｈ）のＲＡＷ画像データを作成する。

ハイレゾ画像作成部３６は、その画素数を２倍にしたＲＡＷ画像データそれぞれをＲＧＢ分離し、赤色画素の位置を示す赤色画素データ、緑色画素の位置を示す緑色画素データ、および青色画素の位置を示す青色画素データを作成する。なお、ｎ枚目のオリジナル画像（被写体が必要位置Ｎｐ（ｎ）に写るオリジナル画像）から作成された赤色画素データをＲｎ、緑色画素データをＧｎ、青色画素データをＢｎとする。

図４に示すように、ハイレゾ画像作成部３６は、次に、８枚の赤色画素データＲ１～Ｒ８それぞれにおける赤色画素の位置をまとめて示す１枚のハイレゾ赤色画素データＲｓを作成する。同様に、８枚の緑色画素データＧ１～Ｇ８からハイレゾ緑色画素データＧｓを作成し、８枚の青色データＢ１～Ｂ８からハイレゾ青色画素データＢｓを作成する。

図５に示すように、ハイレゾ画像作成部３６は、ハイレゾ赤色画素データＲｓをデモザイキングするための赤補間データＲｃを、補間アルゴリズムに基づいて作成し、同様に、ハイレゾ青色画素データＢｓをデモザイキングするための、青補間データＢｃを作成する。

そして、ハイレゾ画像作成部３６は、赤補間データＲｃ、ハイレゾ緑色画素データＧｓ、および青補間データＢｃを合成してハイレゾ画像データを作成する。なお、ハイレゾ画像作成部３６によって作成されたハイレゾ画像データは記憶部２０に保存される。なお、ハイレゾ画像生成方法は、この方法に限らない。

ハイレゾ画像作成部３６は、ノーマルハイレゾモードの実行中のみならず、手持ちハイレゾモードの実行中も、ハイレゾ画像を作成する。しかしながら、手持ちハイレゾモードにおけるハイレゾ画像の作成方法、特にハイレゾ画像の作成に必要なオリジナル画像の取得方法が、ノーマルハイレゾモードの実行中とは異なる。この手持ちハイレゾモードについて説明する。

手持ちハイレゾモードは、概略、上述のぶれ補正部３４によるぶれ補正（ぶれ補正モード）を実行しつつ、そのぶれ補正中にイメージセンサ１２によって取得された撮影画像からハイレゾ画像を作成するモードである。

上述したように、ぶれ補正部３４により、角速度センサ２４によって検出された撮像装置１０のぶれ量に基づいて、被写体の像がイメージセンサ１２の受光面１２ａの実質的に同一の部分に結像するようにイメージセンサ１２の位置が変化される。当然ながら、被写体の像がイメージセンサ１２の受光面１２ａの同一の部分に完全に結像する場合、複数の撮影画像において被写体にずれは生じない。しかしながら、実際には、撮像装置１０のぶれ量が数百画素以上である場合、ぶれ補正を実行しても、被写体の像がイメージセンサ１２の受光面１２ａに数画素程度ずれて結像する。その結果、複数の撮影画像間において被写体の数画素程度の位置ずれが生じる。手持ちハイレゾモードは、この数画素程度の被写体の位置ずれを利用するモードである。

本実施の形態の場合、手持ちハイレゾモードの実行中、ユーザがシャッターボタン１６ａを押すと、ハイレゾ画像の作成に必要な所定枚数を超える枚数（例えば１６枚）の撮影画像がイメージセンサ１２によって取得される。

このとき、イメージセンサ１２は、ぶれ補正部３４により、被写体の像がイメージセンサ１２の受光面１２ａの実質的に同一部分に結像するようにその位置が変化されている（例えば振動されている）。しかしながら、実際には、被写体の像がイメージセンサ１２の受光面１２ａに数画素程度ずれて結像する。その結果として、被写体が互いにずれて写る所定枚数を超える枚数の撮影画像が取得される。

ハイレゾ画像作成部３６は、被写体が互いにずれて写る所定枚数を超える枚数、例えば１６枚のオリジナル画像それぞれに対して画像解析処理を実行することにより、それぞれに写る被写体の位置関係を検出する。例えば、１枚目の撮影画像を基準撮影画像とし、その基準撮影画像に写る被写体の位置に対する２～１６枚目のオリジナル画像それぞれに写る被写体の位置ずれを検出する。

図６は、手持ちハイレゾモードの実行中に取得された複数の撮影画像それぞれに写る被写体の位置関係を示している。

図６には、手持ちハイレゾモードの実行中に取得された１６枚の撮影画像それぞれに写る被写体（例えばその特徴点）の位置Ｃｐ（１）～Ｃｐ（１６）を示している。なお、ｍ枚目の撮影画像に写る被写体の位置はＣ（ｍ）である。また、図６には、ハイレゾ画像の作成に必要な８枚のオリジナル画像それぞれに写る被写体の必要位置Ｎｐ（１）～Ｎｐ（８）を示している。

ハイレゾ画像作成部３６は、１６枚の撮影画像からハイレゾ画像の作成に使用するオリジナル画像を選択する。その選択は、図６に示すように、１６枚の撮影画像それぞれに写る被写体の位置Ｃｐ（１）～Ｃｐ（１６）と、ハイレゾ画像の作成に必要な８枚のオリジナル画像それぞれに写る被写体の必要位置Ｎｐ（１）～Ｎｐ（８）とに基づいて実行される。

具体的には、ハイレゾ画像作成部３６は、被写体の位置Ｃｐ（ｍ）がオリジナル画像の必要位置Ｎｐ（ｎ）それぞれに対して第１の範囲Ａ１内に存在するｍ枚目の撮影画像を、ｎ枚目のオリジナル画像として選択する。例えば、必要位置Ｎｐ（２）に対して第１の範囲内Ａ１の位置Ｃｐ（７）に被写体が写る７枚目の撮影画像が２枚目のオリジナル画像として選択される。また例えば、必要位置Ｎｐ（７）のように、その第１の範囲Ａ１内に被写体（位置Ｃｐ（１２）および位置Ｃｐ（１３）の被写体）が写る複数の撮影画像（１２枚目および１３枚目の撮影画像）が存在する場合、最も近い位置Ｃｐ（１３）に被写体が写る１３枚目の撮影画像が、７枚目のオリジナル画像として選択される。

なお、図６に示す必要位置Ｎｐ（１）のように、オリジナル画像の必要位置Ｎｐ（ｎ）に対して第１の範囲Ａ１内に被写体が写る撮影画像が存在しない場合がある。この場合、被写体が必要位置Ｎｐ（１）に写る１枚目のオリジナル画像が不足し、ハイレゾ画像が作成できない。そこで、本実施の形態の場合、ハイレゾ画像作成部３６は、不足するオリジナル画像を、少なくとも２枚の撮影画像を合成することによって作成する。

例えば、図６に示すように、ハイレゾ画像作成部３６は、被写体が必要位置Ｎｐ（１）に写る１枚目のオリジナル画像を作成するために、その必要位置Ｎｐ（１）に対して第２の範囲Ａ２内に被写体が写る複数の撮影画像を用いる。具体的には、被写体が位置Ｃｐ（１）、Ｃｐ（２）、Ｃｐ（３）それぞれに写る１～３枚目の撮影画像を合成して１枚目のオリジナル画像を作成する。なお、第２の範囲Ａ２は、第１の範囲Ａ１に比べて大きい範囲である。この時、合成に関しては合成に用いる画像の位置関係に応じて重みづけをして合成することも可能である。

なお、被写体が必要位置に写るオリジナル画像を高い精度で作成するために、ハイレゾ画像作成部３６が、使用する少なくとも２枚の撮影画像を前処理してもよい。

例えば、撮影画像それぞれを複数の領域に分割する。次に、前処理対象の少なくとも２枚の撮影画像において最初に取得された撮影画像の領域それぞれを基準にして、残りの撮影画像それぞれの領域それぞれについて位置ずれ量（例えば変位ベクトル）を検出する。領域それぞれについて検出された位置ずれ量に基づいて、最初の撮影画像全体に対する残りの撮影画像それぞれの全体の位置ずれ量および回転量を算出する。その算出した全体の位置ずれ量および回転量に基づいて、前処理対象の少なくとも２つの撮影画像それぞれに対して、それぞれの被写体が略同一位置に写るように、すなわちオリジナル画像の必要位置近傍に写るように、平行移動補正と回転補正を実行する。このような前処理が実行された複数の撮影画像を用いることにより、被写体が略必要位置に写るオリジナル画像を作成することができる。

上述したように、手持ちハイレゾモードにおいては、ぶれ補正を実行しても、被写体の像がイメージセンサ１２の受光面１２ａに数画素程度ずれて結像するために、ハイレゾ画像の作成に必要な、それぞれの被写体が互いにずれて所定の位置関係で写る所定枚数のオリジナル画像を取得することができる。しかしながら、撮像装置１０のぶれ量が小さい場合、例えば百画素以下である場合、ぶれ補正を実行すると、被写体の像がイメージセンサ１２の受光面１２ａ上に１画素以下の画素数でずれて結像する可能性がある。ぶれ補正により、被写体の像が、位置ずれすることなく、イメージセンサ１２の受光面の同一部分に完全に結像する可能性がある。この場合、図３に示すように、１．５画素×１．５画素の範囲において被写体が互いにずれて所定の位置関係で写る（必要位置Ｎｐ（１）～Ｎｐ（８）それぞれに被写体が写る）所定枚数のオリジナル画像を取得できない可能性がある。

そこで、手持ちハイレゾモードの実行中、複数の撮影画像間において被写体の位置ずれ量が所定のしきい位置ずれ量（例えば１画素以下）に比べて小さい場合、センサアクチュエータ制御部３２は、センサアクチュエータ２２がぶれ補正用変化量に追加変化量が補充された増補変化量でイメージセンサ１２の位置を変化させるように、センサアクチュエータ２２を制御する。

図７は、イメージセンサのＸ軸方向の位置を変化させる増補変化量の一例を示している。

図７に示すように、手持ちハイレゾモードの実行が開始されると（タイミングｔ０）、センサアクチュエータ２２が、ぶれ補正用変化量でイメージセンサ１２の位置を変化させる。例えば、センサアクチュエータ２２は、ぶれ補正用変化量として、撮像装置１０のぶれに対応する数Ｈｚ程度の周波数の振動で、イメージセンサ１２を振動させる。これにより、被写体の像がイメージセンサ１２の受光面１２ａ上に１画素以下の画素数のずれ量、すなわちオリジナル画像を取得できないずれ量でずれて結像される。

手持ちハイレゾモードの実行中、シャッターボタン１６ａがユーザの指によって操作されると（タイミングｔ１）、イメージセンサ１２が複数の撮影画像の取得を開始する。それぞれの露光中は、ぶれ補正用の変化に対応した駆動がなされるが、露光時間以外のタイミングで、センサアクチュエータ２２は、ぶれ補正用変化量に追加変化量が補充された増補変化量でイメージセンサ２２の位置を変化させる。追加変化量は、例えば、ぶれ補正用変化量に比べて低周波、低振幅の振動であって、撮像装置１０の連続撮影で画像間にずれを生じさせる周波数および数画素程度の振幅を備える振動である。

このような追加変化量が補充されることにより、被写体の像が、追加変化量が補充される前に比べて大きく、ハイレゾ画像の作成に必要なオリジナル画像の取得を可能にするずれ量、例えば数画素以上のずれ量でずれてイメージセンサ１２の受光面１２ａに結像する。これにより、図３に示すように、１．５画素×１．５画素の範囲において被写体が互いにずれて所定の位置関係で写る（必要位置Ｎｐ（１）～Ｎｐ（８）それぞれに被写体が写る）所定枚数のオリジナル画像を取得することが可能になる。

なお、追加変化量は、ハイレゾ画像の作成に必要な所定枚数のオリジナル画像を取得できる変化量（例えば周期的な振動、もしくはランダム振動）であればよく、ノーマルハイレゾモード時のオリジナル画像取得用変化量を用いてもよい。また、単純にぶれ補正の程度を弱めることで、ハイレゾ画像の作成に必要なオリジナル画像の取得が可能なずれ量を生じさせてもよい。

また、複数の撮影画像の取得が完了すると（タイミングｔｘ）、追加変化量の補充が終了する。

追加変化量を補充するか否かの判定、すなわち複数の撮影画像間において被写体の位置ずれ量が所定のしきい位置ずれ量に比べて小さいか否かの判定は、シャッターボタン１６ａがユーザによって操作された直後に取得された１枚目および２枚目の撮影画像を用いて行ってもよい。

具体的には、１枚目および２枚目の撮影画像それぞれに写る被写体の位置ずれ量をハイレゾ画像作成部３６が検出する。その検出した位置ずれ量が所定のしきい位置ずれ量（例えば１画素以下）に比べて小さい場合、すなわち１枚目の撮影画像と２枚目の撮影画像が実質的に同一である場合、センサアクチュエータ２２が、ぶれ補正用変化量に追加変化量を補充した駆動を始める（増補変化量でイメージセンサ１２を駆動し始める）。この場合、３枚目以降の撮影画像の中からハイレゾ画像の作成に使用される所定枚数のオリジナル画像が選択される。

これに代わって、手持ちハイレゾモードの開始後（タイミングｔ０）であってシャッターボタン１６ａが押される（タイミングｔ１）までの間で、センサアクチュエータ２２は、ぶれ補正用変化量に追加変化量を補充し始めてもよい（増補変化量でイメージセンサ１２を駆動し始めてもよい）。この場合、手持ちハイレゾモードの開始の直前またの直後に角速度センサ２４によって検出されたぶれ量が所定のしきい位置ずれ量に対応する所定のしきいぶれ量に比べて小さいときに、センサアクチュエータ２２が増補変化量でイメージセンサ１２を駆動する。この時、判定に用いるセンサは角速度センサ２４を用いたが、加速度センサや、画像の動きを用いた判断等を用いてもよい。

ここからは、ユーザによって手持ちハイレゾモードが開始されてからハイレゾ画像が作成されるまでの処理について、図８を参照しながら説明する。

図８は、ユーザによって手持ちハイレゾモードが開始されてからハイレゾ画像が作成されるまでの処理の一例を示している。

図８に示すように、ユーザによって手持ちハイレゾモードが開始されると、ステップＳ１００において、カメラコントローラ３０が、角速度センサ２４によって検出された撮像装置１０のぶれ量に基づいて、ぶれ補正用変化量を算出する。

次に、ステップＳ１１０において、センサアクチュエータ２２が、ステップＳ１００で算出されたぶれ補正用変化量でイメージセンサ１２を駆動し始める（イメージセンサ１２の位置を変化し始める）。これにより、ぶれ補正が開始される。

続いて、ステップＳ１２０において、シャッターボタン１６ａに対するユーザの操作の有無が判定される。ユーザによってシャッターボタン１６ａが操作されると、次のステップＳ１３０に進む。

ステップＳ１３０において、ぶれ補正変位量で位置が変化しているイメージセンサ１２が撮影画像の取得を開始する。

ステップＳ１４０において、カメラコントローラ３０が１枚目および２枚目の撮影画像間の被写体の位置ずれ量を検出する。

ステップＳ１５０において、ステップＳ１４０で検出された位置ずれ量が所定のしきい位置ずれ量に比べて大きいか否かが判定される。大きい場合はステップＳ１６０に進む。そうでない場合は、ステップＳ１９０に進む。

ステップＳ１６０において、イメージセンサ１２が、１枚目および２枚目の撮影画像を含む複数の撮影画像、例えば１６枚の撮影画像を取得する。

ステップＳ１７０において、カメラコントローラ３０が、取得した複数の撮影画像からハイレゾ画像の作成に使用する所定枚数のオリジナル画像を選択する。例えば1６枚の撮影画像から８枚のオリジナル画像を選択する。

ステップＳ１８０において、カメラコントローラ３０が、ステップ１７０で選択された所定枚数のオリジナル画像からハイレゾ画像を作成する。

ステップＳ１８０でハイレゾ画像が作成されると、ユーザによる手持ちハイレゾモードの終了指示の有無が判定される。ユーザによって手持ちハイレゾモードの終了が指示された場合、カメラコントローラ３０は手持ちハイレゾモードを終了する。その結果、センサアクチュエータ２２によるイメージセンサの駆動が停止する。終了の指示がない場合、ステップＳ１００に戻る。

一方、ステップＳ１５０で、ステップＳ１４０で検出された位置ずれ量が所定の位置ずれ量に比べて小さい場合、ステップＳ２００において、センサアクチュエータ２２が、露光時間以外にステップＳ１００で算出されたぶれ補正用変化量に追加変化量を補充した増補変化量でイメージセンサ１２を駆動し始める。これにより、オリジナル画像として選択可能な撮影画像の取得が可能になる。

続くステップＳ２１０において、イメージセンサ１２が、１枚目および２枚目の撮影画像を除く複数の撮影画像を取得する。そして、ステップＳ１７０に進む。

以上のような本実施の形態によれば、撮像装置１０は、手持ち状態時に取得された撮影画像からハイレゾ画像を生成することができる。

以上、上述の実施の形態を挙げて本開示を説明したが、本開示の実施の形態はこれに限定されない。

例えば、上述の実施の形態の場合、撮像装置１０にぶれが生じていても、被写体が実質的にぶれることなく撮影画像に写るように、イメージセンサ１２の位置を変化させる。しかしながら、本開示の実施の形態は、これに限らない。

図９は、本開示の別の実施の形態に係る撮像装置のブロック図である。

図９に示すように、別の実施の形態に係る撮像装置１１０は、図２に示す上述の実施の形態に係る撮像装置１０と同様に、イメージセンサ１２、光学系１４、操作部１６、表示部１８、記憶部２０、センサアクチュエータ２２、角速度センサ２４、位置センサ２５、およびカメラコントローラ１３０を有する。これに加えて、交換レンズ１１４が、ぶれ補正レンズ１１４ｇと、位置が変化するようにぶれ補正レンズ１１４ｇを駆動するぶれ補正レンズアクチュエータ（レンズ駆動部）１１４ｈと、角速度センサ１１４ｉと、ぶれ補正レンズ１１４ｇの位置を検出する位置センサ１１４ｋを有する。また、交換レンズ１１４のレンズコントローラ１１４ｅは、ぶれ補正レンズアクチュエータ１１４ｈを制御するぶれ補正レンズアクチュエータ制御部１１４ｊを含んでいる。

図９に示す別の実施の形態に係る撮像装置１１０の場合、手ぶれ補正モードおよび手ぶれハイレゾモードにおいて、被写体の像がイメージセンサ１２の受光面における実質的に同一の部分に結像し続けるように、イメージセンサ１２の位置が変化されるとともに、ぶれ補正レンズ１１４ｇの位置も変化される。そのために、ぶれ補正部１３４は、まず、角速度センサ２４の検出結果に基づいて撮像装置１１０のぶれ量（ぶれ周波数および振幅）を算出するとともに、角速度センサ１１４ｊの検出結果に基づいて交換レンズ１１４のぶれ量（ぶれ周波数および振幅）を算出し、センサアクチュエータ制御部３２とぶれ補正レンズアクチュエータ制御部１１４ｊとに出力する。センサアクチュエータ制御部３２は、入力されたぶれ周波数および振幅と位置センサ２５によって検出されたイメージセンサ１２の現在位置とに基づいて、イメージセンサ１２の位置を偏差させるためのぶれ補正用変化量を算出する。また、補正レンズアクチュエータ制御部１１４ｊは、入力されたぶれ周波数および振幅と位置センサ１１４ｋによって検出されたぶれ補正レンズ１１４ｇの現在位置とに基づいて、ぶれ補正レンズ１１４ｇの位置を偏差させるための第２のぶれ補正用変化量を算出する。そして、センサアクチュエータ２２がぶれ補正用変化量でイメージセンサ１２の位置を変化させつつ、ぶれ補正レンズアクチュエータ１１４ｈが第２のぶれ補正用変化量でぶれ補正レンズ１１４ｇの位置を変化させる。ここで、ぶれ補正用レンズ１１４ｇのための第２のぶれ補正変化量は、撮像装置１１０の本体１０ａ側の角速度センサ２４からの信号を用いて演算してもよいし、交換レンズ１１４に設けられた角速度センサ１１４ｉの信号を用いて演算してもよい。前者の場合、第２のぶれ補正変化量に対応する信号が、ボディマウンタ１０ｂおよびレンズマウンタ１４ｆを介して、カメラコントローラ１３０からレンズコントローラ１１４ｅに送信される。

なお、この別の実施の形態の場合、イメージセンサ１２のためのぶれ補正用変化量がゼロになりうる。すなわち、ぶれ補正用レンズ１２６の位置を変化させるだけで、被写体の像がイメージセンサ１２の受光面における実質的に同一の部分に結像し続ける場合がある。この場合、手持ちハイレゾモードにおいて、被写体の位置ずれ量が所定のしきい位置ずれ量に比べて小さい場合、イメージセンサ１２は、ゼロのぶれ補正用変化量に追加変化量が補充された増補変化量、すなわち追加変化量で位置が変化される。

さらに、図２に示す一実施の形態に係る撮像装置１０の場合および図９に示す別の実施の形態に係る撮像装置１１０の場合、ぶれ補正用変化量および増補変化量は、イメージセンサ１２の位置の変化量である。しかしながら、本開示の実施の形態はこれに限らない。

図１を用いて説明すると、撮像装置１０において（同様に撮像装置１１０において）、イメージセンサ１２は、Ｘ軸方向の位置およびＹ軸方向の位置について変化される。これに加えてまたはこれに代わって、イメージセンサ１２は、光軸Ｃの延在方向に延在して受光面１２ａに対して直交するＺ軸を中心とする回転姿勢が変化されてもよい。この場合、ぶれ補正用変化量および増補変化量に、イメージセンサ１２の回転姿勢の変化量が含まれる。また、撮像装置１０の姿勢のぶれ量を検出するために角速度センサが使用される。

さらにまた、上述の実施の形態の場合、図７および図８に示すように、手持ちハイレゾモード中において、撮影画像間において被写体の位置ずれ量が所定のしきい位置ずれ量に比べて小さい場合には、センサアクチュエータ（イメージセンサ駆動部）が、ぶれ補正用変化量に追加変化量が補充された増補変化量でイメージセンサを駆動する。しかしながら、本開示の実施の形態は、これに限らない。

例えば、手持ちハイレゾモード中において、撮影画像間における被写体の位置ずれ量に関係なく、センサアクチュエータ（イメージセンサ駆動部）が、定常的に、ぶれ補正用変化量に追加変化量が補充された増補変化量でイメージセンサを駆動してもよい。

例えば、手持ちハイレゾモード中に、ユーザが撮像装置を三脚などで固定する場合がある。この場合、撮像装置のぶれ量を検出する角速度センサ（ぶれ量検出部）は、撮像装置のぶれ量を検出していない、具体的には撮像装置がぶれていると判定できる所定のしきい値以上のぶれ量を検出していない。そのために、ぶれ補正部が実質的にゼロで変化しないイメージセンサのぶれ補正用変化量を算出する。その結果、撮影画像間において被写体の位置ずれ量が実質的にゼロになりうる、すなわち実質的に同一の複数の撮影画像が取得される。この対処として、手持ちハイレゾモード中において、撮影画像間において被写体の位置ずれ量に関係なく、センサアクチュエータ（イメージセンサ駆動部）が、定常的に、ぶれ補正用変化量に追加変化量が補充された増補変化量でイメージセンサを駆動する。

図１０は、イメージセンサのＸ軸方向の位置を変化させる増補変化量の別例を示している。

図１０に示すように、手持ちハイレゾモード中において、撮像装置が三脚などで固定されている場合、例えば、イメージセンサのＸ軸方向の位置を変化させる増補変化量は、実質的にゼロで変化しないぶれ補正用変化量に、追加変化量を定常的に補充したものになる。このような増補変化量により、手持ちハイレゾモード中において撮像装置が三脚などで固定されていても、また撮像装置が手持ち状態であっても、ハイレゾ画像の作成に必要な所定枚数のオリジナル画像を取得することができる。

なお、これに代わって、手持ちハイレゾモード中において撮像装置が三脚などで固定されると、すなわち角速度センサ（ぶれ量検出部）が所定のしきい値以上のぶれ量を検出していない場合、手持ちハイレゾモードからノーマルハイレゾモードにモード切替してもよい。

また、上述の実施の形態の場合、手持ちハイレゾモードにおいて、例えば、図３および図６に示すように、１．５画素×１．５画素の範囲において被写体が互いにずれて所定の位置関係で写る（必要位置Ｎｐ（１）～Ｎｐ（８）それぞれに被写体が写る）所定枚数のオリジナル画像を取得するために追加変化量がぶれ補正用変化量に補充される。しかしながら、複数のオリジナル画像は、１．５画素×１．５画素の範囲において被写体が互いにずれて所定の位置関係で写る画像に限らない。

すなわち、ベイヤー配列を考慮すれば、（１．５＋２ｋ（ｋは整数））画素×（１．５＋２ｋ）画素の範囲において被写体が互いにずれて所定の位置関係で写るオリジナル画像であればよい。

図１１は、複数のオリジナル画像を取得するためのイメージセンサの位置の変化を示すタイミングチャートである。

図１１に示すように、例えば、被写体が最初の必要位置Ｎｐ（１）に写る１枚目のオリジナル画像が取得される。その１枚目のオリジナル画像を取得したオリジナル画像取得位置からイメージセンサ１２がＸ軸マイナス方向に（１＋２ｋ）画素分移動することにより、被写体が必要位置Ｎｐ（２）に写る２枚目のオリジナル画像が取得される。２枚目のオリジナル画像を取得したオリジナル画像取得位置からイメージセンサ１２がＹ軸プラス方向に（１＋２ｋ）画素分移動することにより、被写体が必要位置Ｎｐ（３）に写る３枚目のオリジナル画像が取得される。３枚目のオリジナル画像を取得したオリジナル画像取得位置からイメージセンサ１２がＸ軸プラス方向に（１＋２ｋ）画素分移動することにより、被写体が必要位置Ｎｐ（４）に写る４枚目のオリジナル画像が取得される。４枚目のオリジナル画像を取得したオリジナル画像取得位置からイメージセンサ１２がＸ軸マイナス方向に（０．５＋２ｋ）画素分且つＹ軸マイナス方向に（０．５＋２ｋ）画素分移動することにより、被写体が必要位置Ｎｐ（５）に写る５枚目のオリジナル画像が取得される。５枚目のオリジナル画像を取得したオリジナル画像取得位置からイメージセンサ１２がＸ軸マイナス方向に（１＋２ｋ）画素分移動することにより、被写体が必要位置Ｎｐ（６）に写る６枚目のオリジナル画像が取得される。６枚目のオリジナル画像を所得したオリジナル画像取得位置からイメージセンサ１２がＹ軸プラス方向に（１＋２ｋ）画素分移動することにより、被写体が必要位置Ｎｐ（７）に写る７枚目のオリジナル画像が取得される。そして、７枚目のオリジナル画像を取得したオリジナル画像取得位置からイメージセンサ１２がＸ軸プラス方向に（１＋２ｋ）画素分移動することにより、被写体が必要位置Ｎｐ（８）に写る８枚目のオリジナル画像が取得される。

すなわち、本開示の実施の形態に係る撮像装置は、広義には、被写体が写る撮影画像を取得するイメージセンサと、位置および姿勢の少なくとも一方が変化するように前記イメージセンサを駆動するイメージセンサ駆動部と、それぞれの被写体が互いにずれて所定の位置関係で写る所定枚数の前記撮影画像を所定枚数のオリジナル画像とし、前記所定枚数のオリジナル画像からハイレゾ画像を作成するハイレゾ画像作成部と、前記撮像装置のぶれ量を検出するぶれ量検出部と、前記撮像装置が手持ち状態のときに取得された前記撮影画像から前記ハイレゾ画像を作成する手持ちハイレゾモードの実行開始をユーザが指示するための操作部と、を有し、前記手持ちハイレゾモードの実行中、前記イメージセンサ駆動部が前記ぶれ量に基づいて算出されたぶれ補正用変化量に追加変化量が補充された増補変化量で前記イメージセンサを駆動している状態で、前記ハイレゾ画像作成部が、前記イメージセンサによって取得された前記撮影画像から前記ハイレゾ画像を作成するものである。

以上のように、本開示における技術の例示として、複数の実施の形態を説明した。そのために、添付図面および詳細な説明を提供した。

したがって、添付図面および詳細な説明に記載された構成要素の中には、課題解決のために必須な構成要素だけでなく、前記技術を例示するために、課題解決のためには必須でない構成要素も含まれ得る。そのため、それらの必須ではない構成要素が添付図面や詳細な説明に記載されていることをもって、直ちに、それらの必須ではない構成要素が必須であるとの認定をするべきではない。

また、上述の実施の形態は、本開示における技術を例示するためのものであるから、請求の範囲またはその均等の範囲において種々の変更、置き換え、付加、省略などを行うことができる。

本開示は、手ぶれ補正機能を備えたスマートフォン等の撮像装置に適用可能である。

本開示は、ハイレゾ機能のみでなく、画素数はそのまま、解像感、色再現性を向上させる、リアルレゾリューション機能にも適用可能である。

１０ 撮像装置
１２ イメージセンサ
２２ イメージセンサ駆動部（センサアクチュエータ）
２４ ぶれ量検出部（角速度センサ）

Claims (9)

1. 撮像装置であって、
   被写体が写る撮影画像を取得するイメージセンサと、
   位置および姿勢の少なくとも一方が変化するように前記イメージセンサを駆動するイメージセンサ駆動部と、
   それぞれの被写体が互いにずれて所定の位置関係で写る所定枚数の前記撮影画像を所定枚数のオリジナル画像とし、前記所定枚数のオリジナル画像からハイレゾ画像を作成するハイレゾ画像作成部と、
   前記撮像装置のぶれ量を検出するぶれ量検出部と、
   前記撮像装置が手持ち状態のときに取得された前記撮影画像から前記ハイレゾ画像を作成する手持ちハイレゾモードの実行開始をユーザが指示するための操作部と、を有し、
   前記手持ちハイレゾモードの実行中、前記イメージセンサ駆動部が前記ぶれ量に基づいて算出されたぶれ補正用変化量で前記イメージセンサを駆動している状態で前記イメージセンサによって取得された複数枚の撮影画像の中に前記所定枚数のオリジナル画像が含まれる場合、前記ハイレゾ画像作成部が、当該所定枚数のオリジナル画像から前記ハイレゾ画像を作成し、
   前記手持ちハイレゾモードの実行中、撮影画像間において被写体の位置ずれ量が所定のしきい位置ずれ量に比べて小さい場合に、前記イメージセンサ駆動部が、前記ぶれ補正用変化量に追加変化量が補充された増補変化量で前記イメージセンサを駆動し、前記イメージセンサが前記所定枚数のオリジナル画像が含まれる複数枚の撮影画像を取得する、撮像装置。
   
   
2. 前記所定のしきい位置ずれ量に対応する所定のしきいぶれ量に比べて前記ぶれ量が小さい場合に、前記イメージセンサ駆動部が、前記増補変化量で前記イメージセンサを駆動する、請求項１に記載の撮像装置。
   
3. 前記所定のしきい位置ずれ量が１画素以下である、請求項１または２に記載の撮像装置。
   
4. 前記手持ちハイレゾモードの実行中、前記追加変化量が、定常的に前記ぶれ補正用変化量に補充される、請求項１に記載の撮像装置。
   
5. 前記手持ちハイレゾモードの実行中、
   前記イメージセンサが、前記所定枚数を超える複数の撮影画像を取得し、
   前記ハイレゾ画像作成部が、
   前記複数の撮影画像それぞれにおける被写体の位置関係を検出し、
   検出した位置関係に基づいて、前記複数の撮影画像から前記所定枚数のオリジナル画像を選択し、
   選択された前記所定枚数のオリジナル画像から前記ハイレゾ画像を作成する、請求項１から４のいずれか一項に記載の撮像装置。
   
6. 前記ハイレゾ画像作成部が、前記オリジナル画像が不足する場合、その不足するオリジナル画像を、前記複数の撮影画像の少なくとも２枚を合成することによって作成する、請求項５に記載の撮像装置。
   
7. 前記操作部が、前記撮像装置が固定状態のときに取得された前記撮影画像から前記ハイレゾ画像を作成するノーマルハイレゾモードの実行開始の指示を受け取り可能に構成され、
   前記ノーマルハイレゾモードの実行中、
   前記イメージセンサ駆動部が、前記イメージセンサが前記所定枚数のオリジナル画像それぞれを取得するためのオリジナル画像取得用変化量で前記イメージセンサを駆動している状態で、前記ハイレゾ画像作成部が、前記イメージセンサによって取得された前記撮影画像から前記ハイレゾ画像を作成する、請求項１から６のいずれか一項に記載の撮像装置。
   
8. 前記追加変化量が、前記オリジナル画像取得用変化量である、請求項７に記載の撮像装置。
   
9. 被写体を前記イメージセンサの受光面に結像する光学系に含まれるぶれ補正レンズと、
   位置および姿勢の少なくとも一方が変化するように前記ぶれ補正レンズを駆動するレンズ駆動部と、を有し、
   前記手持ちハイレゾモードの実行中、
   前記ぶれ量に基づいて前記ぶれ補正用変化量と第２のぶれ補正用変化量とが算出され、
   前記レンズ駆動部が、前記第２のぶれ補正用変化量で前記ぶれ補正レンズを駆動する、請求項１から８のいずれか一項に記載の撮像装置。

Images