JP4462329B2 - 撮像装置、撮像方法 - Google Patents

Description

本発明は、被写体光景の撮像を行う撮像装置、撮像方法に関し、特に手動撮像と自動撮像が実行できるようにされた撮像装置に関する。

特開２００４−３５６９７０号公報

上記特許文献１には、通常のデジタルスチルカメラやビデオカメラで手動操作（例えばシャッタ操作）に応じて撮像した画像と、ユーザが身体に装着するウェアラブルカメラで自動的に撮像した画像について、画像の記録方法を異なるようにする技術が開示されている。

ところが、撮像装置において、ユーザのシャッタ操作に応じたタイミングで撮像画像の保存処理を行う手動撮像モードと、ユーザのシャッタ操作によらずに自動的に撮像画像の保存処理を行う自動撮像モードとを、選択的に実行できるようにする撮像装置を考えた場合、そのモード切換をユーザにとって適切に実行できるようにしたり、各モードで適切な動作が行われるようにすることが望まれる。
例えば自動撮像モードの撮像は、例えばユーザが装着した状態で定期的に自動撮像を行うことで、いわゆるライフログカメラとして、ユーザの行動に応じた光景を撮像し保存していく用途が想定される。ところが、この自動撮像モードの際に、ユーザが特に撮像したい光景に出会った場合、即座に手動撮像モードとして動作できると好適である。またモード切換などにユーザが操作にとまどうと、シャッタチャンスを逃してしまうこともあり得る。
そこで本発明では、手動撮像と自動撮像を適切かつ容易に使い分けることができるとともに、それぞれのモードの場合で、より好適な動作が行われるようにすることを目的とする。

本発明の撮像装置は、撮像画像を取得する撮像手段と、上記撮像手段によって取得され た撮像画像の保存処理を行う撮像画像保存手段と、使用者の撮像意思の判定に用いる意志判定情報を検出する意志判定情報検出手段と、上記意思判定情報検出手段からの意志判定 情報を用いた意志判定を行い、使用者によるシャッタ操作に応じたタイミングで撮像画像の保存処理を行う第１の撮像モードと、上記シャッタ操作によらずに自動的に撮像画像の保存処理を行う第２の撮像モードとを上記意志判定の結果に応じて選択的に設定する制御手段と、撮像された画像を解析する画像解析手段とを備え、上記制御手段は意志判定情報 を用いた意志判定として、上記画像解析手段の解析結果に基づいて意志判定を行う。

また、本発明の撮像装置は、撮像画像を取得する撮像手段と、上記撮像手段によって取 得された撮像画像の保存処理を行う撮像画像保存手段と、使用者の撮像意思の判定に用い る意志判定情報を検出する意志判定情報検出手段と、上記意思判定情報検出手段からの意 志判定情報を用いた意志判定を行い、使用者によるシャッタ操作に応じたタイミングで撮 像画像の保存処理を行う第１の撮像モードと、上記シャッタ操作によらずに自動的に撮像 画像の保存処理を行う第２の撮像モードとを、上記意志判定の結果に応じて選択的に設定 する制御手段とを備え、上記制御手段は、上記意志判定情報を用いた意志判定として、使 用者による撮像装置本体の保持がなされたか否かを判定する。

また、本発明の撮像装置は、撮像画像を取得する撮像手段と、使用者の撮像意思の判定 に用いる意志判定情報を検出する意志判定情報検出手段と、上記意思判定情報検出手段か らの意志判定情報を用いた意志判定を行い、使用者によるシャッタ操作に応じたタイミン グで撮像画像の保存処理を行う第１の撮像モードと、上記シャッタ操作によらずに自動的 に撮像画像の保存処理を行う第２の撮像モードとを、上記意志判定の結果に応じて選択的 に設定する制御手段とを備え、上記制御手段は、上記意志判定情報を用いた意志判定とし て、撮像装置本体が所定方向へ移動したことを判定する。
また、本発明の撮像装置は、撮像画像を取得する撮像手段と、使用者の撮像意思の判定 に用いる意志判定情報を検出する意志判定情報検出手段と、上記意思判定情報検出手段か らの意志判定情報を用いた意志判定を行い、使用者によるシャッタ操作に応じたタイミン グで撮像画像の保存処理を行う第１の撮像モードと、上記シャッタ操作によらずに自動的 に撮像画像の保存処理を行う第２の撮像モードとを、上記意志判定の結果に応じて選択的 に設定する制御手段とを備え、上記制御手段は上記意志判定情報を用いた意志判定として 、撮像装置本体が装着位置状態から移動したことを判定する。

本発明の撮像方法は、撮像を行い、被写体の撮像画像を取得して、撮像画像の保存処理を実行する撮像装置の撮像方法である。そして、撮像画像を取得する撮像ステップと、使 用者の撮像意思の判定に用いる意志判定情報を検出する意志判定情報検出ステップと、上 記意思判定情報検出ステップからの意志判定情報を用いた意志判定を行い、使用者による シャッタ操作に応じたタイミングで撮像画像の保存処理を行う第１の撮像モードと、上記 シャッタ操作によらずに自動的に撮像画像の保存処理を行う第２の撮像モードとを上記意 志判定の結果に応じて選択的に設定する制御ステップと、撮像された画像を解析する画像 解析ステップとを実行し、上記制御ステップは、意志判定情報を用いた意志判定として、 上記画像解析ステップの解析結果に基づいて意志判定を行う。
または、上記制御ステップは上記意志判定情報を用いた意志判定として、使用者による 撮像装置本体の保持がなされたか否かを判定する。
または、上記制御ステップは上記意志判定情報を用いた意志判定として、撮像装置本体 が所定方向へ移動したことを判定する。
または、上記制御ステップは上記意志判定情報を用いた意志判定として、撮像装置本体 が装着位置状態から移動したことを判定する

以上の本発明では、例えばライフログ用途としての自動撮像モードの撮像動作と、ユーザのシャッタ操作による撮像を行う手動撮像モードの撮像動作が、ユーザの意志に的確に対応して切り換えられる。
ユーザが手動で撮像を行おうとする意志は、意志判定情報検出手段が検出する意志判定情報を用いて判断する。意志判定情報検出手段は、撮像の意志に応じた動作の検出情報を意志判定情報として制御手段に供給する。制御手段は、撮像装置に対するユーザの行動として、例えば撮像装置を或る程度の時間以上、シャッタを押せる状態で手に持つことや、手動撮像する場合に通常行われる本体の位置変動とその後の静止状態の判断などを、ユーザの撮像しようとする意志の判定として行い、ユーザの意志を推定する。この意志判定結果により、自動撮像モードと手動撮像モードの切換を行う。
また自動撮像と手動撮像は、その動作や目的の差に応じて、適切な動作切換を行う。例えば手動撮像で被写体を決めるためのモニタ表示は、自動撮像時は不要である。シャッタ操作子の操作も不要である。従って自動撮像モードの際は、モニタ表示をオフとしたり、シャッタ操作子を操作ロック状態とする。さらに各モードでの撮像動作の意味合いに応じて、撮像画像データの画サイズや圧縮率も切り換えることが好適となる。例えば手動撮像では、自動撮像よりも高画質で撮像を行いたいとする要望が一般的に考えられることや、自動撮像の場合は、保存される撮像画像データが大量となるため、保存容量を考慮する必要がある。これらに応じて撮像画像データの画サイズや圧縮率が、それぞれのモードで適切に設定されるようにする。

本発明によれば、自動撮像モードと手動撮像モードの切換が、ユーザの撮像意思の判定結果に応じて実行されるため、ユーザは自然に自動撮像と手動撮像を使い分けることができる。例えばユーザは、撮像装置にライフログ用途として自動撮像を行わせながら、任意の時点で手軽に手動撮像を実行できる。また手動撮像への切換操作に手間取って、シャッタチャンスを逃すといったことも防止される。
また、撮像装置は、自動撮像モードと手動撮像モードとで、モニタ表示やシャッタ操作子の操作ロック状態の切換、さらには保存する撮像画像データの画サイズや圧縮率の変更を行うことで、各モードの適切な動作を実現できる。

以下、本発明の実施の形態を説明する。説明は以下の順序で行う。
［１．撮像装置の外観例］
［２．撮像装置の構成例］
［３．撮像動作設定］
［４．撮像処理例Ｉ］
［５．撮像処理例II］
［６．撮像処理例III］
［７．撮像処理例IV］
［８．撮像処理例Ｖ］
［９．実施の形態の効果及び変形例］

［１．撮像装置の外観例］

実施の形態の撮像装置１としては、各種の形態が想定されるが、図１に一例を示す。
図１は、首かけタイプの撮像装置１を示している。この撮像装置１は、その本体に例えばストラップ１０ａが取り付けられ、ユーザがストラップ１０ａを首にかけることで装着される。ユーザは、撮像装置１が備える撮像レンズ３Ｌがユーザの正面方向を被写体方向として撮像出来るように装着すればよい。

図２（ａ）（ｂ）に撮像装置１の本体部の正面図と背面図を示すが、図２（ｂ）のように背面側には、表示パネル部５ａやシャッターキー７ａが設けられている。
表示パネル部５ａは、例えば液晶パネルや有機ＥＬ（Electroluminescence）パネルなどにより構成される。
シャッターキー７ａは、例えば押圧操作が可能なスイッチ構造とされ、ユーザがシャッタタイミングを指示する操作子とされる。
手動撮像モードの際には、ユーザがこのシャッターキー７ａを操作することによって、その操作タイミングで取り込まれる撮像画像データが、１枚分の写真に相当する静止画データとして、撮像装置１内で保存される。

このような撮像装置１では、図１のように首にかけられて装着された状態で、自動撮像モードの動作として例えば定期的な撮像を行うことができる。
また手動撮像モードの動作も実行可能とされる。即ちユーザは、任意にシャッタ操作により撮像を行うことができる。例えば図２（ｃ）に示すように、撮像装置１の本体部を手に持ち、表示パネル部５ａでのモニタ表示を見ながら被写体を定めてシャッターキー７ａを押すことで、手動撮像が行われる。
なお、表示パネル部５ａで行われるモニタ表示とは、ユーザがシャッターキー７ａの操作を行おうとする際に被写体を決めるために、現在、撮像レンズ３Ｌから取り込まれる被写体画像をそのまま動画として表示するものであり、通常のデジタルカメラで行われる表示である。プレビュー表示と呼ばれることもある。

なお、実施の形態の説明では、この図１，図２のような首かけタイプの撮像装置１を例にして説明していくが、撮像装置の外観構造や、ユーザが撮像装置１を装着するための構造は多様に考えられる。
例えば眼鏡型、ヘッドフォン型、ネックバンドタイプ、耳掛け式などの撮像装置１も考えられる。さらには、例えば通常の眼鏡やバイザー、或いはヘッドフォン等に、クリップなどの取付具で取り付けることでユーザに装着させる形態であってもよい。
また、例えば装着状態での撮像方向（自動撮像での撮像方向）が、ユーザの正面方向とならないものでもよい。例えば装着時にユーザの後方、側方、上方、足下方向などを撮像するように撮像レンズ３Ｌが取り付けられている構成や、撮像方向が同一又は異なる方向とされた複数の撮像系が設けられている構成も考えられる。
さらに、１又は複数の撮像レンズ３Ｌについて、被写体方向を手動又は自動で可変できる撮像方向可変機構を設けてもよい。

また撮像装置１は、必ずしもユーザの身体や衣服に装着されるものではなくてもよい。例えば、車に設置可能な撮像装置であって車内や、或いは車外を撮像することが可能な撮像装置１も本実施の形態として想定できる。例えば車室内を撮像するように取り付けられた撮像装置や、車の前方風景、後方風景等を撮像するように取り付けられた撮像装置である。これらも装着位置において自動撮像が行われるとともに、ユーザが手にとって使用することで手動撮像が行われるものとして考えられる。
また、携帯電話機やＰＤＡ（Personal Digital Assistant）、携帯用パーソナルコンピュータなどの機器であって、撮像装置としての機能を備えているものも本実施の形態の撮像装置１として想定できる。
また、これらの各種形態において、例えば外部音声を集音するマイクロフォンを設け、撮像時に、画像データと共に記録する音声信号を得るようにしてもよい。また音声出力を行うスピーカ部やイヤホン部を形成するようにしてもよい。
また、撮像レンズ３Ｌの近辺に、被写体方向への照明を行う発光部を、例えばＬＥＤ（Light Emitting Diode）等により設けたり、静止画撮像のためのフラッシュ発光部を設けることも考えられる。

［２．撮像装置の構成例］

続いて、実施の形態の撮像装置１の構成例を説明する。図３に撮像装置１の内部構成を示す。
図示するように撮像装置１は、システムコントローラ２、撮像部３、撮像制御部４、表示部５、表示制御部６、操作入力部７、ストレージ部８、通信部９、センサ部１０を有する。

システムコントローラ２は、例えばＣＰＵ（Central Processing Unit）、ＲＯＭ（Read Only Memory）、ＲＡＭ（Random Access Memory）、不揮発性メモリ部、インターフェース部を備えたマイクロコンピュータにより構成され、撮像装置１の全体を制御する制御部とされる。このシステムコントローラ２は内部のＲＯＭ等に保持したプログラムに基づいて、各種演算処理やバス１１を介した各部と制御信号等のやりとりを行い、各部に所要の動作を実行させる。
特に本例の場合、詳しくは後述するが、システムコントローラ２はセンサ部１０から供給される検出情報に基づいて、自動撮像モードと手動撮像モードの切換や各種動作設定制御も行う。

撮像部３は、撮像光学系３ａ、撮像素子部３ｂ、撮像信号処理部３ｃを有する。
撮像部３における撮像光学系３ａでは、図１及び図２（ａ）に示した撮像レンズ３Ｌや、絞り、ズームレンズ、フォーカスレンズなどを備えて構成されるレンズ系と、レンズ系に対してフォーカス動作やズーム動作を行わせるための駆動系等が備えられる。
また撮像部３における撮像素子部３ｂでは、撮像光学系３ａで得られる撮像光を検出し、光電変換を行うことで撮像信号を生成する固体撮像素子アレイが設けられる。固体撮像素子アレイは、例えばＣＣＤ（Charge Coupled Device）センサアレイや、ＣＭＯＳ（Complementary Metal Oxide Semiconductor）センサアレイとされる。
また撮像部３における撮像信号処理部３ｃでは、固体撮像素子によって得られる信号に対するゲイン調整や波形整形を行うサンプルホールド／ＡＧＣ(Automatic Gain Control)回路や、ビデオＡ／Ｄコンバータを備え、デジタルデータとしての撮像画像データを得る。また撮像画像データに対してホワイトバランス処理、輝度処理、色信号処理などを行う。

これらの撮像光学系３ａ、撮像素子部３ｂ、撮像信号処理部３ｃを有する撮像部３により、撮像が行われ、撮像画像データが得られる。
この撮像部３の撮像動作によって得られた画像データは、撮像制御部４で処理される。
撮像制御部４は、システムコントローラ２の制御に従って、撮像画像データを各種の圧縮率で圧縮する画像圧縮処理や、画サイズ変換処理、画像フォーマット変換処理などの処理を行い、また動作状況に応じて、撮像画像データをストレージ部８，表示制御部６、通信部９などへ転送する処理を行う。
例えば自動撮像モードや手動撮像モードでのいずれの場合も、システムコントローラ２からシャッタタイミングが指示されることに応じて、１フレームの撮像画像データについて所要の処理を行ってストレージ部８に転送する。また、手動撮像モードの際には、表示部５でモニタ表示を実行させるため、撮像部３で得られる各フレーム（もしくは間欠的なフレーム）の撮像画像データを表示制御部６に転送する。
また撮像制御部４はシステムコントローラ２の指示に基づいて、撮像部３における撮像動作のオン／オフ制御、シャッタ処理、撮像光学系３ａのズームレンズ、フォーカスレンズの駆動制御、撮像素子部３ｂのシャッタスピード制御、フレームレートの制御、撮像信号処理部３ｃの各処理のパラメータ制御や実行処理の設定なども行う。

撮像装置１においてユーザに対して表示を行う構成としては、表示部５、表示制御部６が設けられる。
この表示部５には、上述した液晶ディスプレイや有機ＥＬパネル等による表示パネル部５ａと、表示パネル部５ａを表示駆動する表示駆動部が設けられる。表示駆動部は、撮像制御部４から供給される画像データを表示パネル部５ａに表示させるための画素駆動回路で構成されている。画素駆動回路は表示パネル部においてマトリクス状に配置されている各画素について、それぞれ所定の水平／垂直駆動タイミングで映像信号に基づく駆動信号を印加し、表示を実行させる。

表示制御部６は、システムコントローラ２の制御に基づいて、表示部５における画素駆動回路を駆動し所定の表示を実行させる。例えば手動撮像モード時における上述したモニタ表示や、ストレージ部８で再生された画像の表示などを実行させる。
またこれらの表示のために表示制御部６では、例えば輝度レベル調整、色補正、コントラスト調整、シャープネス（輪郭強調）調整などを行うことができる。また画像データの一部を拡大した拡大画像の生成、或いは縮小画像の生成、ソフトフォーカス、モザイク、輝度反転、画像内の一部のハイライト表示（強調表示）、全体の色の雰囲気の変化などの画像エフェクト処理なども行うことができる。

操作入力部７は、シャッターキー７ａなど、必要な操作子が形成される。図１，図２ではシャッターキー７ａのみしか示していないが、例えばキー、ボタン、ダイヤル等の操作子として、電源オン／オフ操作や、自動撮像に関連する操作のための操作子や、各種設定入力のための操作子が形成されてもよい。
さらに、ユーザのシャッタ操作に応じた手動撮像に関連して、ズームの操作、露出の設定操作、セルフタイマ操作などに用いる操作子が形成されるようにしてもよい。
これらは、物理的な形態のキーではなく、例えば表示パネル部５ａにタッチセンサを設け、表示パネル部５ａ上での画像表示に対するタッチ操作などにより行うようにしても良い。またカーソル移動キーと決定キーを設け、表示上のメニュー操作により多様な操作が可能としてもよい。
操作入力部７は、これらの操作により得られる情報をシステムコントローラ２に供給し、システムコントローラ２はこれらの情報に対応した必要な演算処理や制御を行う。

ストレージ部８は、撮像画像データや、その他の各種データの保存に用いられる。
このストレージ部８は、フラッシュメモリなどの固体メモリにより構成されても良いし、例えばＨＤＤ（Hard Disk Drive）により構成されてもよい。
また内蔵の記録媒体ではなく、可搬性の記録媒体、例えば固体メモリを内蔵したメモリカード、光ディスク、光磁気ディスク、ホログラムメモリなどの記録媒体に対応する記録再生ドライブなどとされても良い。
もちろん、固体メモリやＨＤＤ等の内蔵タイプのメモリと、可搬性記録媒体に対する記録再生ドライブの両方が搭載されてもよい。
このストレージ部８は、システムコントローラ２の制御に基づいて、撮像画像データその他の各種データの記録／再生を行う。

通信部９は、各種の外部機器とデータ通信を行う部位として設けられる。
例えば、図示しないサーバ装置との間でのデータの送受信を行うようにしてもよい。その場合、例えば無線ＬＡＮやブルートゥースなどの方式で、ネットワークアクセスポイントに対する近距離無線通信を介してネットワーク通信を行う構成としてもよいし、対応する通信機能を備えたサーバ装置との間で直接無線通信を行うものでもよい。
また、通信部９は、例えばＵＳＢ（Universal Serial Bus）方式等のインターフェイスを用いてパーソナルコンピュータなどの機器と接続し、データの送受信を行うようにしてもよい。
この通信部９により、例えば撮像してストレージ部８に格納した撮像画像データを、パーソナルコンピュータその他の外部機器に転送することができる。従って、ライフログとしての定期的な撮像でストレージ部８に録り貯めた多数の撮像画像データは、この撮像装置１自体で表示部５で再生表示させることができるほか、パーソナルコンピュータ等の外部機器に転送して、それら外部機器側で再生させて表示させることもできる。

センサ部１０は、例えばユーザの撮像装置１への接触や撮像装置１自体の移動などを意思情報として検出し、システムコントローラ２に供給する。
センサ部１０としてどのようなセンサを用いるかは、後述する動作例によって異なるが、例えば撮像装置１の本体部に対するユーザの保持接触を検出する場合は、感圧センサ、静電容量センサ、ユーザの体温を感知する感熱センサ、発汗センサなどがセンサ部１０として備えられる。また撮像装置１の本体部の移動を検出する場合は、加速度センサ、角速度センサ、磁気センサ（ホール素子）、荷重センサなどがセンサ部１０として備えられる。

［３．撮像動作設定］

ここで、以上のように構成された撮像装置１における撮像動作モードと、モードに応じた動作設定に関して述べておく。
実施の形態の撮像装置１は、撮像動作として手動撮像モードの撮像と自動撮像モードの撮像の両方が実行可能とされる。

自動撮像モードの撮像動作とは、ユーザがシャッタ操作を行わなくとも、例えば定期的なタイミングで自動的に撮像（撮像画像データの記録）が行われる動作をいう。
例えば図１のように撮像装置１をユーザが装着している際に、例えば１秒間隔、数秒間隔、数１０秒間隔などで静止画撮像を行う動作が、自動撮像として想定される。なお、もちろん定期的な撮像ではなく、何らかのトリガ（ユーザのシャッタ操作以外のトリガ）に応じて不定期なタイミングで自動撮像を行ってもよい。
また手動撮像モードの撮像動作とは、ユーザのシャッタ操作により撮像（撮像画像データの記録）が行われる動作をいう。このシャッタ操作は、シャッターキー７ａの操作としてユーザの意思によって実行されるものをいう。

自動撮像モードは、例えばライフログ用途を目的とする場合に行われる。
本例では、システムコントローラ２は、この自動撮像モードの場合には、表示部５でのモニタ表示、シャッター設定、画像サイズ、圧縮率などの設定に関しては、以下のように制御する。
自動撮像モードが設定されている場合には、撮像画像データは自動的に取得されるものであって、ユーザがモニタ表示を見て被写体を確認するものではない。そのため、システムコントローラ２は表示部５のモニタ表示をオフとする。
また自動撮像モード中は、ユーザはシャッターキー７ａを操作しない。そのため、システムコントローラ２はシャッターキー７ａを操作ロック状態とする。
また、定期的な撮像である自動撮像モードでは、撮像して保存する撮像画像データのデータ量がかなりの量になる。そこで、ストレージ部８での容量を考えて、データ量を小さくするために、画像サイズは小さく、圧縮率は高圧縮率に設定することが好適となる。

一方、手動撮像モードは、ユーザが通常のカメラとしても使用できるようにするための動作であり、この手動撮像モードの場合には、モニタ表示、シャッター設定、画像サイズ、圧縮率設定に関しては、システムコントローラ２は次のように制御する。
すなわち、手動撮像モードの場合には、ユーザ自身が撮像対象をモニタ表示を見ながら決定することから、表示部５でのモニタ表示出力を実行させ、また当然、シャッターキー７ａの操作ロック状態も解除する。
また、手動撮像モードで取得される撮像画像データは、自動撮像モードで取得される撮像画像データよりもユーザにとっては重要であると考えられる。つまりユーザが「撮りたい」と思った被写体の画像である。このためユーザにとっては、なるべく高画質であることが望まれる。そこで撮像画像データに関しては、画像サイズは大きく、圧縮率に関しては低圧縮率（もしくは非圧縮）に設定するようにする。

本例の撮像装置１の代表的な使用形態としては、ユーザが図１のように装着した状態で、自動撮像モードで定期的な撮像を行う。
ユーザが日常生活において撮像装置１を装着した状態で自動撮像を行っていくと、ユーザの行動に応じた光景が自動的に撮像されていくことになる。
ユーザは、このように撮像装置１に自動撮像でライフログ画像を撮像／保存させながら行動するが、ユーザにとって撮像したい光景に出会ったときは、自らの被写体の決定とシャッタ操作による撮像を望む。
その場合には、撮像装置１を持って、被写体方向に撮像レンズ３Ｌを向け、表示パネル部５ａでのモニタ表示で被写体確認しながら任意のタイミングでシャッターキー７ａを押すことになる。
本例では、このような場合に、ユーザは特に自動撮像モードから手動撮像モードに切り換える操作を行う必要はなく、システムコントローラ２がユーザの撮像の意志を判定して手動撮像モードに切り換えるようにしている。
つまり、ユーザが手動撮像を行おうとすることに応じて、表示パネル部５ａでモニタ表示がオンとされ、シャッターキー７ａの操作ロック状態が解除される。そしてシャッターキー７ａの操作が行われたら、そのタイミングで取り込まれる撮像画像データが静止画データとして保存される分けであるが、その際の画像サイズや圧縮率は、自動撮像モードの場合より高画質の設定とされる。

以下では、撮像処理例Ｉ〜Ｖとして、このような動作、特に、ユーザの撮像の意志を判定し、手動撮像モードとする動作を実現するための処理例を、それぞれ説明していく。

［４．撮像処理例Ｉ］

撮像処理例Ｉとしては、自動撮像モードから手動撮像モードへ切り換えるトリガとなるユーザの意志の判定（ユーザが自分でシャッタ操作を行おうとする意志の判定）として、ユーザが撮像装置１の本体部のグリップ部分への所定時間以上接触したか否かを判定する。つまり、意志判定として、ユーザの撮像装置１の所定時間以上の保持がなされたか否かを判定するものである。

例えば図４（ａ）のように、ユーザが通常に撮像装置１を装着して自動撮像動作を実行させていたとしたとき、ユーザが或る被写体に出会って、積極的に撮像しようと思ったとする。その場合、ユーザは、図４（ｂ）のように撮像装置１のグリップ部１ｇを持つことになるとともに、グリップ部１ｇで持っている状態がある程度の時間継続される。
即ちグリップ部１ｇを握持して、撮像装置１を被写体に向け、その後シャッターキー７ａの操作を行うためである。

なお、グリップ部１ｇとは、例えば図２（ｃ）のようにシャッターキー７ａの操作を行うことができるように撮像装置１を保持したときに、ユーザの手が自然に触れている場所という意味である。
手動撮像を行おうとする場合、ユーザは、撮像装置１を持つという行動を起こすため、必然的にグリップ部１ｇに或る程度の時間触れていることになる。逆に、一瞬だけ触れたような場合は、撮像の意志とは考えにくい。偶然触れてしまうことも当然あり得る。
このためユーザが撮像装置１を所定時間以上握持するという行為を検出すれば、ユーザに撮像意志があると判定してよい。

そこで、上記図３のセンサ部１０に相当する構成として、グリップ部１ｇの表面に、静電容量の変化を検出する静電容量センサ、又は圧力の変化を検出する感圧センサ、又は体温を検知する温度センサなどを実装する。
そしてシステムコントローラ２は、このセンサ部１０からの接触の検出が所定時間以上継続したら、ユーザが撮像装置１を握持している、つまり撮像意志があると判定し、手動撮像モードに制御するようにすればよい。

なお、グリップ部１ｇへの接触が開始してから手動撮像モードに切り換わるまでにあまりに長い時間を要するとすれば、せっかくのシャッターチャンスを逃してしまうことにもなりうる。そこで、接触の継続の判定のための所定時間とは、偶然触れた状態か、握持している状態かを判定する所定時間とし、例えば２秒〜数秒程度が順当であると考えられる。

このような動作を実現するためのシステムコントローラ２の処理を図５に示す。
この図５は、システムコントローラ２が内部ＲＯＭに格納したプログラムに基づいて実行する制御処理として示している。また定期的な静止画撮像としての自動撮像モードの動作が開始された後の処理として示している。なお、これらのことは、後述する図７，図９，図１０，図１４についても同様であるとする。

自動撮像の実行中、システムコントローラ２は例えば内部タイマにより所定の撮像間隔としての時間カウントを行っている。そして例えば１０秒毎などの所定時間のカウントに応じて、撮像動作を実行させる。即ち撮像制御部４に、撮像部３で得られる撮像画像データについて圧縮処理等を実行させ、ストレージ部８に転送させる。ストレージ部８に対しては、転送されてきた撮像画像データを静止画として保存する動作を実行させる。
システムコントローラ２が例えば所定時間間隔でこのような撮像動作を指示することで、自動撮像が実行されていくが、この自動撮像実行中、システムコントローラ２は図５の処理を常時継続しており、逐次撮像動作設定の変更処理を実行することになる。

このように自動撮像が実行中である場合、システムコントローラ２はステップＦ１０１において自動撮像間隔の制御ためのタイマｔ１をｔ１＝０に初期化するとともに、カウントをスタートする。
そしてステップＦ１０２において、システムコントローラ２はタイマｔ１による計数で所定時間Ｔ１が経過したか否かを判別する。
また、ステップＦ１０４で、システムコントローラ２はセンサ部１０からの検出情報を確認し、グリップ部１ｇへの接触が検出されたか否かを確認する。
特に接触が検出されなければ、Ｔ１経過時点でステップＦ１０２からＦ１０３に進むことになる。
ステップＦ１０３では、システムコントローラ２は自動撮像モードに応じた撮像動作設定を行う。或いは、自動撮像モードとしての設定を継続する。
即ち、モニタ表示出力オフ、シャッターキー７ａの操作ロック状態という制御を行うとともに、撮像制御部４には小画像サイズ、大圧縮率設定という処理設定を指示する（或いはこれらの設定を継続する）。
その後、システムコントローラ２はステップＦ１１１へと処理を進め、撮像処理を実行する。つまり撮像制御部４に静止画撮像処理としての撮像画像データの取込やデータ処理（小画像サイズ、大圧縮率での信号処理）を指示するとともに、ストレージ部８に撮像画像データを転送させ、ストレージ部８に撮像画像データの保存を指示する。
これによって自動撮像モードの撮像動作として１枚の静止画データの撮像及び保存が行われる。

システムコントローラ２は、このような撮像動作制御を行ったら、再びステップＦ１０１へと処理を戻し、タイマｔ１をリセット／カウントスタートする。
自動撮像モードの動作が継続されている間は、以上のように、ステップＦ１０１→ステップＦ１０２→ステップＦ１０３→ステップＦ１１１→ステップＦ１０１・・・という処理が定期的（Ｔ１間隔）で行われて自動撮像が行われる。

この自動撮像モードで動作が行われている際に、ユーザがグリップ部１ｇに接触すると、システムコントローラ２はステップＦ１０４でそれを検知し、ステップＦ１０５に進むことになる。ここで、システムコントローラ２は、意志判定のためのタイマｔ２を初期化し、カウントをスタートさせる。すなわち、グリップ部１ｇへの接触時間の計測を開始する。
次のステップＦ１０６においては、システムコントローラ２はタイマｔ２のカウントが所定時間Ｔ２に達したか否かを判別する。
またステップＦ１０７では、システムコントローラ２はセンサ部１０からの検出情報として、グリップ部１ｇへの接触が無くなったか否かを判別する。

このステップＦ１０６、Ｆ１０７の処理は、グリップ部１ｇへの所定時間Ｔ２以上の継続的な接触をあったか否かを判定するための処理である。例えばユーザが無意識的にグリップ部１ｇへ接触する場合など、特に撮像の意志がなくとも一瞬接触してしまうことがある。そこで、ユーザが手動撮像の意志を持ってグリップ部１ｇを握持したか、単なる偶然の接触かを判定する。
ステップＦ１０６において所定時間Ｔ２が経過していないまま、ステップＦ１０７においてグリップ部分への接触が無くなったとされる場合は、単なる偶然の接触とし、システムコントローラ２はユーザの撮像意志は無いと判定する。その場合はシステムコントローラ２は処理をステップＦ１０２へと戻し、自動撮像モードの処理を継続する。

一方、ステップＦ１０６において所定時間が経過したという判別結果が得られた場合は、ユーザが所定時間Ｔ２以上（例えば所定時間Ｔ２とは、上述のように２秒〜数秒程度）継続してグリップ部１ｇを握持しているため、システムコントローラ２はユーザに撮像意志があると判定する。
そこでステップＦ１０８へと処理を進め、システムコントローラ２は手動撮像モードに応じた撮像動作設定を行う。この場合、モニタ表示出力オン、シャッターキー７ａの操作ロック状態解除を行うとともに、撮像制御部４には大画像サイズ、小圧縮率設定という処理設定を指示する。

そして、システムコントローラ２はステップＦ１０９において、シャッタ操作（シャッターキー７ａの操作）を待機するとともに、ステップＦ１１０ではセンサ部１０からの検出情報によるグリップ部１ｇへの接触が継続されているか否かを判別する。接触が継続されていればステップＦ１０９に戻る。
つまり、ユーザがグリップ部１ｇを握持する状態を継続している限りは、ユーザが被写体を狙っている状況であるとし、シャッターキー７ａの操作を待機する。
そしてシャッターキー７ａの操作が検出されたら、ステップＦ１１２で撮像処理動作を行う。即ちシステムコントローラ２は、撮像制御部４に静止画撮像処理としての撮像画像データの取込やデータ処理（大画像サイズ、小圧縮率での処理）を指示するとともに、ストレージ部８に撮像画像データを転送させ、ストレージ部８に撮像画像データの保存を指示する。
これによって手動撮像モードの撮像動作として１枚の静止画データの撮像及び保存が行われる。

ステップＦ１１０でグリップ部１ｇへの接触が継続的に確認されている限りは、シャッターキー７ａの操作が行われる毎に、ステップＦ１１２での撮像処理が実行され、静止画データがストレージ部８において記録されていくことになる。
つまり、ユーザがグリップ部１ｇを握持している限りは、手動撮像モードとしての処理が継続される。

シャッターキー７ａの操作により手動撮像が１回以上行われた後、もしくは１度もシャッターキー７ａの操作が行われないままであっても、ステップＦ１１０でグリップ部１ｇへの接触が無くなったと判断したら、システムコントローラ２は処理をステップＦ１０１に戻し、自動撮像モードとしての処理に移行する。
つまりその後、所定時間Ｔ１の経過に伴ってステップＦ１０３に進み、自動撮像モードに応じた設定に切り換えられ、ステップＦ１１１の自動撮像処理が行われる状態となる。

このように、本実施の形態における撮像装置１では、自動撮影が行われている際にユーザがグリップ部１ｇを所定時間（Ｔ２）以上保持していた場合には、ユーザに手動撮像の意志があるとみなして、自動撮像モードから手動撮影モードへの切換を行い、シャッターキー７ａの操作に応じた撮像処理を行う。
これによってユーザは、特に動作モードを意識せずに、自動撮像モードでのライフログ撮像を実行させながら、任意のタイミングでシャッターキー７ａの操作による手動撮像を実行できる。

［５．撮像処理例II］

続いて、撮像処理例IIについて説明する。これは、撮像装置１の本体の所定方向への移動と、移動検出後の所定時間以上の撮像装置１の静止状態の判定により、ユーザの手動撮像の意志を判定する処理例である。
例えば図６（ａ）の通常の装着状態から、ユーザが撮像装置１の本体部を持って図６（ｂ）のように上方（つまり自分の顔の前となる位置）に移動させ、その状態で所定時間以上静止させたら、ユーザは撮像意思を有していると見なして、自動撮像モードから手動撮像モードへの切換が実行されることとしている。

図６（ａ）の通常の装着状態で自動撮像を実行している際には、ユーザの撮像意思を伴ったものではないことから、撮像装置１はユーザの行動（例えば歩行など）に応じて自然に揺れたり止まったりする不定の状態となる。
一方、ユーザが自らの意思で撮像を実行しようとした場合には、図６（ｂ）に示すように自分自身の目で表示部５に表示されるモニタ表示を見ながら撮像することが一般的である。そのため、ユーザは撮像装置１を上方に持ち上げる。さらに手動で撮像を実行する場合には、ユーザは被写体を決めるまで、ある程度の時間（例えば少なくとも１〜３秒程度）、撮像装置１を例えば顔の正面側などで静止させるようにする。

そこで、この撮像処理例IIにおいては、ユーザが撮像装置１を通常の装着位置から上方に移動させた後に所定時間静止させた場合には、手動撮像の意志があるとみなして、自動撮像モードから手動撮像モードへの切換を行うようにする。
なお、ユーザが撮像の意志無く一時的に撮像装置１を持ち上げた場合や、ユーザの行動に応じて（例えば走ったりジャンプしたりする）撮像装置１が上方に移動された場合は、その移動後に静止されない。このため、上方への移動と、所定時間の静止という条件により、ある程度正確に、ユーザの撮像意志を推定できることになる。
なお、所定時間の「静止」とは、ユーザが撮像装置１を手に持って動かさない状態であることを検出する目的のため、手ぶれや多少の向きの変動などの動きは静止とみなすようにすることが好適である。

そして、このような撮像装置１自体の移動や静止を検出するためには、図３で説明したセンサ部１０は移動方向や移動量を検知できるような構成とすればよい。例えば加速度センサ、角速度センサ、振動センサ等をセンサ部１０として搭載し、システムコントローラ２が撮像装置１自体の動きを検知できるようにすればよい。

図７のフローチャートは、撮像処理例IIとしてのシステムコントローラ２の処理手順例を示している。
なお、この図７におけるステップＦ２０１、Ｆ２０２、Ｆ２０３、Ｆ２１１の処理は、先の図５で説明した自動撮像モードについての処理（Ｆ１０１，Ｆ１０２，Ｆ１０３，Ｆ１１１）と同様であるため、繰り返しの説明は避ける。

自動撮像モードとしてステップＦ２０２での所定時間Ｔ１の経過を待つ間、システムコントローラ２はステップＦ２０４で上方へ移動して静止した状況となったか否かを判定している。
もし、センサ部１０からの検出情報により、撮像装置１の上方への移動が検知され、かつその上方位置である程度の静止状態となったら、システムコントローラ２はステップＦ２０５に進み、撮像装置１が上方（顔正面）に移動された後の静止時間の測定を開始するためにタイマｔ２を初期化してカウントをスタートさせる。
なお、静止状態になるまでを検知するため、例えばユーザの身体の揺れに応じて撮像装置１が上下したような場合は、ステップＦ２０４での肯定結果の検知とはしない。

ステップＦ２０６では、タイマｔ２のカウントが所定時間Ｔ２を経過したか否かを監視する。つまり静止状態がＴ２時間経過したか否かである。所定時間Ｔ２とは、例えば１秒〜３秒程度に設定すればよい。
またステップＦ２０７では、装着状態の位置への移動を検出する。即ちステップＦ２０４で検出された上方移動と同程度の距離の下方移動の有無を、センサ部１０からの検出情報により判別する。

このステップＦ２０６、Ｆ２０７の処理は、ユーザが撮像装置１を顔の正面などで静止させたか否かを判定するものであり、例えば撮像装置１を外すためなどの状況で持ち上げたり、何となく手に取ったりしただけなのか、撮像意志を持って持ち上げたかを判別するためである。
特に撮像意志が無い場合は、その直後の静止状態はＴ２時間以上継続されず、ステップＦ２０７で装着位置の方向（つまり下方）への移動が検知される。或いは持ったままであれば他の方向への移動が検知される。
この場合は、撮像意志は無いとみなして、ステップＦ２０２に戻るようにする。
なお、ユーザが撮像方向を定めるため、撮像装置１を握持したまま大きく移動させる場合もあるが、その場合は、上方への移動状態が維持されている（下方への移動がない）として、再度静止状態になったことをステップＦ２０４で検知し、ステップＦ２０５に進むようにすればよい。

図６（ａ）の装着状態の位置より上方の位置での、静止状態が所定時間Ｔ２以上継続した場合は、システムコントローラ２はユーザに撮像意志があると判定し、ステップＦ２０８で手動撮像モードに応じた撮像動作設定を行う。即ちモニタ表示出力オン、シャッターキー７ａの操作ロック状態解除を行うとともに、撮像制御部４には大画像サイズ、小圧縮率設定という処理設定を指示する。

そして、システムコントローラ２はステップＦ２０９において、シャッタ操作（シャッターキー７ａの操作）を待機するとともに、ステップＦ２１０ではセンサ部１０からの検出情報による装着位置方向への移動（下方への移動）があったか否かを判別する。下方への移動がなければステップＦ２０９に戻る。
つまり、ユーザが撮像装置１を握持して被写体を狙う状態を継続している限りは、ユーザのシャッターキー７ａの操作を待機する。
そしてシャッターキー７ａの操作が検出されたら、ステップＦ２１２で撮像処理動作を行う。即ちシステムコントローラ２は、撮像制御部４に静止画撮像処理としての撮像画像データの取込やデータ処理（大画像サイズ、小圧縮率での処理）を指示するとともに、ストレージ部８に撮像画像データを転送させ、ストレージ部８に撮像画像データの保存を指示する。
これによって手動撮像モードの撮像動作として１枚の静止画データの撮像及び保存が行われる。

シャッターキー７ａの操作により手動撮像が１回以上行われた後、もしくは１度もシャッターキー７ａの操作が行われないままであっても、ステップＦ２１０で装着位置方向への移動が検出されたら、システムコントローラ２は処理をステップＦ２０１に戻し、自動撮像モードとしての処理に移行する。つまりその後、所定時間Ｔ１の経過に伴ってステップＦ２０３に進み、自動撮像モードに応じた設定に切り換えられ、ステップＦ２１１の自動撮像処理が行われる状態となる。

このように、自動撮影が行われている際にユーザが撮像装置１を上方に移動させて静止させたことを検出したら、ユーザに手動撮像の意志があるとみなして、自動撮像モードから手動撮影モードへの切換を行い、シャッターキー７ａの操作に応じた撮像処理を行う。
これによってユーザは、特に動作モードを意識せずに、自動撮像モードでのライフログ撮像を実行させながら、任意のタイミングでシャッターキー７ａの操作による手動撮像を実行できる。

［６．撮像処理例III］

続いて、撮像処理例IIIについて説明する。
これは、撮像装置１の装着位置状態からの移動と、移動検出後の所定時間以上の撮像装置の静止状態の判定により、ユーザの撮像意志を推定する例である。

図８（ａ）（ｃ）は、通常の装着位置状態を示し、図８（ｂ）（ｄ）はユーザが手動撮像を行おうとする状態を示している。
この場合、撮像装置１のセンサ部１０としては、加速度センサ等、静止状態の判別のためのセンサに加えて、磁気センサとして例えばホール素子１０ｂを備えるようにする。またユーザの衣服等において、撮像装置１の通常の装着位置に近い場所に磁石４０としてのユニットが取り付けられるようにする。

すると図８（ａ）（ｃ）のような通常の装着位置にあるときは、ホール素子１０ｂによって磁気検出がなされ、システムコントローラ２は、撮像装置１が装着位置に在ることを検出できる。一方、この装着位置より撮像装置１が移動すると、ホール素子１０ｂによる磁気検出がなされなくなり、これによってシステムコントローラ２は非装着位置への移動と判別できる。
但し、ユーザの行動に伴う身体揺れなどによって、撮像装置１が非装着位置へ移動することもある。
そこで、この撮像処理例IIIでは、ホール素子１０ｂによる検出磁気の消失として非装着位置への移動を検知し、さらにその非装着位置での静止状態の継続を条件として、ユーザの撮像意志を推定するものである。例えば図８（ｂ）（ｄ）のようにユーザが手動撮像を行おうとする場合、ある程度の時間、被写体に向けて撮像装置１を静止状態に維持するためである。

図９のフローチャートは、撮像処理例IIIとしてのシステムコントローラ２の処理手順例を示している。
なお、この図９におけるステップＦ３０１、Ｆ３０２、Ｆ３０３、Ｆ３１１の処理は、先の図５で説明した自動撮像モードについての処理（Ｆ１０１，Ｆ１０２，Ｆ１０３，Ｆ１１１）と同様であるため、繰り返しの説明は避ける。

上述のようにセンサ部１０としては、ホール素子１０ｂと、加速度センサ等が設けられている。
自動撮像モードとしてステップＦ３０２での所定時間Ｔ１の経過を待つ間、システムコントローラ２はステップＦ３０４で、ホール素子１０ｂによる磁気検出と、加速度センサ等による動き検出を監視し、検出磁気が消失して（つまり非装着位置へ移動して）静止状態となったか否かを判定する。
もし、センサ部１０からの検出情報により、撮像装置１の非装着位置への移動が検知され、かつその非装着位置である程度の静止状態となったら、システムコントローラ２はステップＦ３０５に進み、撮像装置１が非装着位置に移動された後の静止時間の測定を開始するためにタイマｔ２を初期化してカウントをスタートさせる。

ステップＦ３０６では、タイマｔ２のカウントが所定時間Ｔ２を経過したか否かを監視する。つまり静止状態がＴ２時間経過したか否かである。所定時間Ｔ２とは、例えば１秒〜３秒程度に設定すればよい。
またステップＦ３０７では、装着位置への復帰、つまりホール素子１０ｂによる磁気の検出を確認する。

装着位置へ復帰されないまま、静止状態が所定時間Ｔ２以上継続した場合は、システムコントローラ２はユーザに撮像意志があると判定し、ステップＦ３０８で手動撮像モードに応じた撮像動作設定を行う。即ちモニタ表示出力オン、シャッターキー７ａの操作ロック状態解除を行うとともに、撮像制御部４には大画像サイズ、小圧縮率設定という処理設定を指示する。

そして、システムコントローラ２はステップＦ３０９において、シャッタ操作（シャッターキー７ａの操作）を待機するとともに、ステップＦ３１０ではセンサ部１０からの検出情報による装着位置への復帰、つまりホール素子１０ｂによる磁気の検出を確認する。引き続き磁気が検出されない状態であればステップＦ３０９に戻る。このためユーザが撮像装置１を握持して被写体を狙う状態を継続している限りは、ユーザのシャッターキー７ａの操作を待機することになる。
そしてシャッターキー７ａの操作が検出されたら、ステップＦ３１２で撮像処理動作を行う。即ちシステムコントローラ２は、撮像制御部４に静止画撮像処理としての撮像画像データの取込やデータ処理（大画像サイズ、小圧縮率での処理）を指示するとともに、ストレージ部８に撮像画像データを転送させ、ストレージ部８に撮像画像データの保存を指示する。
これによって手動撮像モードの撮像動作として１枚の静止画データの撮像及び保存が行われる。

シャッターキー７ａの操作により手動撮像が１回以上行われた後、もしくは１度もシャッターキー７ａの操作が行われないままであっても、ステップＦ３１０で装着位置への復帰が検出されたら、システムコントローラ２は処理をステップＦ３０１に戻し、自動撮像モードとしての処理に移行する。つまりその後、所定時間Ｔ１の経過に伴ってステップＦ３０３に進み、自動撮像モードに応じた設定に切り換えられ、ステップＦ３１１の自動撮像処理が行われる状態となる。

このように、自動撮影が行われている際にユーザが撮像装置１を非装着位置に移動させて静止させたことを検出したら、ユーザに手動撮像の意志があるとみなして、自動撮像モードから手動撮影モードへの切換を行い、シャッターキー７ａの操作に応じた撮像処理を行う。
これによってユーザは、特に動作モードを意識せずに、自動撮像モードでのライフログ撮像を実行させながら、任意のタイミングでシャッターキー７ａの操作による手動撮像を実行できる。

［７．撮像処理例IV］

撮像処理例IVは、上記撮像処理例Ｉと同じく、ユーザが撮像装置１を所定時間以上保持したか否かにより、ユーザの撮像意志を判定するものである。
但し、この場合ストラップ１０ａの荷重を検出することでユーザの保持／非保持を判定するものである。

撮像装置１が図６（ａ）の装着位置にある場合は、ストラップ１０ａの撮像装置１の重量の荷重がかかっているが、図６（ｂ）に示したようにユーザが撮像装置１を保持すると、ストラップ１０ａには撮像装置１の荷重がかからなくなる。つまりストラップ１０ａに荷重が係らない状態がある程度継続する場合は、ユーザが撮像装置１を保持している状態であり、ユーザが撮像意志を持っている期間と推定できる。
なお、ユーザの行動に伴う身体揺れなどによって、撮像装置１が上下動し、瞬間的にストラップ１０ａの荷重が無くなることもあるが、この場合は、荷重が無くなった状態が継続しないため、ユーザの撮像意志と誤判定することはない。

センサ部１０としては、ストラップ１０ａの荷重を測定する機構を設けるようにすればよい。

図１０のフローチャートは、撮像処理例IVとしてのシステムコントローラ２の処理例を示している。
なお、この図１０におけるステップＦ４０１、Ｆ４０２、Ｆ４０３、Ｆ４１１の処理は、先の図５で説明した自動撮像モードについての処理（Ｆ１０１，Ｆ１０２，Ｆ１０３，Ｆ１１１）と同様であるため、重複説明は避ける。

上述のようにセンサ部１０としては、ストラップ１０ａの荷重を検出する荷重センサ機構が設けられている。
自動撮像モードとしてステップＦ４０２での所定時間Ｔ１の経過を待つ間、システムコントローラ２はステップＦ４０４で、荷重センサによる検出値を監視している。
そして、ストラップ１０ａの荷重消失が検出されたら、システムコントローラ２はステップＦ４０５に進み、荷重消失の継続時間の測定を開始するためにタイマｔ２を初期化してカウントをスタートさせる。

ステップＦ４０６では、タイマｔ２のカウントが所定時間Ｔ２を経過したか否かを監視する。つまりストラップ１０ａの荷重消失状態がＴ２時間経過したか否かである。所定時間Ｔ２とは、例えば２秒〜数秒程度に設定すればよい。これは、ユーザが撮像装置１を保持しているか否かの検出となる。
またステップＦ４０７では、ストラップ１０ａへの荷重が発生したか否か、つまりユーザが撮像装置１の保持をやめたか否かを確認する。

ストラップ１０ａへの荷重消失状態が所定時間Ｔ２以上継続した場合は、システムコントローラ２はユーザが撮像装置１を保持しているため撮像意志があると判定し、ステップＦ４０８で手動撮像モードに応じた撮像動作設定を行う。即ちモニタ表示出力オン、シャッターキー７ａの操作ロック状態解除を行うとともに、撮像制御部４には大画像サイズ、小圧縮率設定という処理設定を指示する。

そして、システムコントローラ２はステップＦ４０９において、シャッタ操作（シャッターキー７ａの操作）を待機するとともに、ステップＦ４１０ではセンサ部１０（荷重センサ機構）からの検出情報を監視し、ユーザが撮像装置１の保持をやめたか否かを確認する。そしてユーザが撮像装置１を保持している限りは、ステップＦ４０９でユーザのシャッターキー７ａの操作を待機することになる。
そしてシャッターキー７ａの操作が検出されたら、ステップＦ４１２で撮像処理動作を行う。即ちシステムコントローラ２は、撮像制御部４に静止画撮像処理としての撮像画像データの取込やデータ処理（大画像サイズ、小圧縮率での処理）を指示するとともに、ストレージ部８に撮像画像データを転送させ、ストレージ部８に撮像画像データの保存を指示する。
これによって手動撮像モードの撮像動作として１枚の静止画データの撮像及び保存が行われる。

シャッターキー７ａの操作により手動撮像が１回以上行われた後、もしくは１度もシャッターキー７ａの操作が行われないままであっても、ステップＦ４１０でストラップ１０ａへの荷重が発生したこと（ユーザが撮像装置１を放したこと）が検出されたら、システムコントローラ２は処理をステップＦ４０１に戻し、自動撮像モードとしての処理に移行する。つまりその後、所定時間Ｔ１の経過に伴ってステップＦ４０３に進み、自動撮像モードに応じた設定に切り換えられ、ステップＦ４１１の自動撮像処理が行われる状態となる。

このように、自動撮影が行われている際にユーザが撮像装置１を保持したことを、ストラップ１０ａの荷重の所定時間以上の消失という点で検出したら、ユーザに手動撮像の意志があるとみなして、自動撮像モードから手動撮影モードへの切換を行い、シャッターキー７ａの操作に応じた撮像処理を行う。
これによってユーザは、特に動作モードを意識せずに、自動撮像モードでのライフログ撮像を実行させながら、任意のタイミングでシャッターキー７ａの操作による手動撮像を実行できる。
なお、荷重センサによる検出に加えて、加速度センサ等により完全静止状態か、手ぶれなどによる微小な動き状態になったか否かの検出を行うようにしてもよい。
例えば撮像装置１を身体から外して置いた状態ではストラップ１０ａの荷重消失が検出されるが、その際、完全な静止状態になっていれば、ユーザが保持しているのではないと判定できる。つまり、荷重消失と、動き（ユーザが手に持った状態での動き）があることのアンド条件により、ユーザの撮像意志を推定すると、より正確な処理となる。

［８．撮像処理例Ｖ］

続いて、撮像処理例Ｖについて説明する。
これは、図１１に示すように、撮像装置１に使用者側の画像を取得する使用者撮像部１２と、使用者撮像部１２により取得された画像を解析する画像解析部１３を備えるようにした場合の処理例となる。
図１１は、撮像処理例Ｖを採用する場合の撮像装置１の構成例を示しているが、上記図３に示したセンサ部１０の代わりに使用者撮像部１２と画像解析部１３を備えるものである。なお他の構成は図３と同一であり、図３と同一部分には同一符号を付して説明を省略する。
使用者撮像部１２は、手動撮像時にユーザ側の方向を撮像方向とする撮像部である。例えば図１２（ａ）（ｂ）に撮像装置１の正面図と背面図を示すが、撮像レンズ３Ｌが設けられた正面部ではなく、図１２（ｂ）の背面部側において、例えば表示パネル部５ａの近傍位置Ｂに撮像レンズ部１２Ｌが配置される。
そして図１３（ａ）（ｃ）は撮像装置１が装着位置状態とされる場合、図１３（ｂ）（ｄ）は手動撮像時の位置状態とされる場合を示しているが、手動撮像を行う場合、つまりユーザが表示パネル部５ａでモニタ表示を確認して被写体を決めようとしている際には、撮像レンズ部１２Ｌがユーザの顔を撮像する状態となるようにされる。

なお、使用者撮像部１２は、撮像部３と同様に、撮像レンズ部１２Ｌを含む撮像光学系、撮像素子部、撮像信号処理部を有する構成となる。
このような使用者撮像部１２で撮像される撮像画像データは、画像解析部１３で画像解析される。
画像解析部１３は、マイクロコンピュータ、或いは画像処理用ＤＳＰ（Digital Signal Processor）などとして構成できる。この画像解析部１３は、撮像画像データによる画像内に、人の顔の一部が含まれているか否かの解析を行う。例えば入力されてきた撮像画像データ内に人の瞳が含まれているか否かの解析処理を行う。例えば画像内に水晶体や虹彩等の目の構成要素とその輪郭の認定により、撮像画像データの画像内に瞳画像が存在するか否かを判別できる。
そして解析結果として瞳が含まれているか否かの情報をシステムコントローラ２に通知する。
なお、ここでは画像解析部１３はシステムコントローラ２とは別ブロックで示しているが、システムコントローラ２としてのマイクロコンピュータが、画像解析部１３としての機能を備えるようにしてもよい。

システムコントローラ２は、使用者撮像部１２から取り込まれた撮像画像データのうちにユーザの瞳が検出された場合には、ユーザに撮像意志があると推定し、手動撮像モードとする処理を行う。
即ち、図１３（ａ）（ｃ）のように撮像装置１が装着状態の位置にあるときは、使用者撮像部１２によっては、ユーザの胸部近辺が撮像され、画像解析部１３によって瞳は検出されない。
一方、ユーザが手動撮像の意志を持って図１３（ｂ）（ｄ）のように撮像装置１を持ち、被写体確認のため表示パネル部５ａを見る状態とすると、使用者撮像部１２によってユーザの顔が撮像される。この場合、画像解析部１３によって撮像画像内で瞳が検出されることになる。
そこでシステムコントローラ２は、使用者撮像部１２によってユーザの瞳を含む撮像画像データが取得された場合には、ユーザが手動撮像のための行動を行っており、撮像の意思を有しているものとして、自動撮像モードから手動撮像モードへ切り換えるようにするものである。

図１４のフローチャートは、撮像処理例Ｖとしてのシステムコントローラ２の処理例を示している。
なお、この図１０におけるステップＦ５０１、Ｆ５０２、Ｆ５０３、Ｆ５０８の処理は、先の図５で説明した自動撮像モードについての処理（Ｆ１０１，Ｆ１０２，Ｆ１０３，Ｆ１１１）と同様であるため、重複説明は避ける。

自動撮像モードとしてステップＦ５０２での所定時間Ｔ１の経過を待つ間、システムコントローラ２は画像解析部１３からの瞳検出の情報を確認している。
そして、画像解析部１３から瞳検出の通知を受けたら、システムコントローラ２はステップＦ５０５に進む。即ちシステムコントローラ２はユーザに撮像意志があると判定し、手動撮像モードに応じた撮像動作設定を行う。即ちモニタ表示出力オン、シャッターキー７ａの操作ロック状態解除を行うとともに、撮像制御部４には大画像サイズ、小圧縮率設定という処理設定を指示する。

そして、システムコントローラ２はステップＦ５０６において、シャッタ操作（シャッターキー７ａの操作）を待機するとともに、ステップＦ５０７では画像解析部１３からの通知を引き続き確認し、ユーザの瞳の検出が継続されているか否かを確認する。引き続き瞳検出が確認されればステップＦ５０６のシャッタ操作待機を継続する。このためユーザが撮像姿勢を維持している限りは、ユーザのシャッターキー７ａの操作を待機することになる。
シャッターキー７ａの操作が検出されたら、ステップＦ５０９で撮像処理動作を行う。即ちシステムコントローラ２は、撮像制御部４に静止画撮像処理としての撮像画像データの取込やデータ処理（大画像サイズ、小圧縮率での処理）を指示するとともに、ストレージ部８に撮像画像データを転送させ、ストレージ部８に撮像画像データの保存を指示する。
これによって手動撮像モードの撮像動作として１枚の静止画データの撮像及び保存が行われる。

シャッターキー７ａの操作により手動撮像が１回以上行われた後、もしくは１度もシャッターキー７ａの操作が行われないままであっても、ステップＦ５０７でユーザの瞳が検出されなくなったことが確認されたら、システムコントローラ２は処理をステップＦ５０１に戻し、自動撮像モードとしての処理に移行する。つまりその後、所定時間Ｔ１の経過に伴ってステップＦ５０３に進み、自動撮像モードに応じた設定に切り換えられ、ステップＦ５０８の自動撮像処理が行われる状態となる。

このように、自動撮影が行われている際にユーザが撮像装置１を保持して撮像姿勢に入ったことを、使用者撮像部１２によるユーザの顔の撮像（撮像画像での瞳の検出）で判断し、瞳検出によってユーザに手動撮像の意志があるとみなして、自動撮像モードから手動撮影モードへの切換を行い、シャッターキー７ａの操作に応じた撮像処理を行う。
これによってユーザは、特に動作モードを意識せずに、自動撮像モードでのライフログ撮像を実行させながら、任意のタイミングでシャッターキー７ａの操作による手動撮像を実行できる。
なお、この例では瞳検出としたが、画像解析によって人の顔の全体や他の構造（目、鼻、口等）の画像が検出された場合に、手動撮像モードに移行するようにしても良い。

［９．実施の形態の効果及び変形例］

以上の実施の形態によれば、次のような効果が得られる。
まず自動撮像モードと手動撮像モードの切換が、ユーザの撮像意思の判定結果に応じて実行されるため、ユーザは自然に自動撮像と手動撮像を使い分けることができる。例えばユーザは、撮像装置１にライフログ用途として自動撮像を行わせながら、任意の時点で手軽に手動撮像を実行できる。つまり、ユーザは自動撮像モードと手動撮像モードを意識しなくてもよく、撮りたいときにはシャッタ操作を行えばよいという、非常に使いやすいものとなる。
またこれにより、手動撮像への切換操作に手間取って、シャッタチャンスを逃すといったことも防止される。

また、撮像装置１は、自動撮像モードと手動撮像モードとで、モニタ表示やシャッタ操作子の操作ロック状態の切換、さらには保存する撮像画像データの画サイズや圧縮率の変更を行うことで、各モードの適切な動作を実現できる。
自動撮像モードでは不要なモニタ表示を行わないことで消費電力を削減でき、バッテリーの長寿命化が可能である。一方、上記のように手動撮像時に、わざわざモード切換や表示オンなどの操作を行わなくとも、ユーザの撮像意志によって手動撮像モードに切り換えられ、その際に表示パネル部５ａでのモニタ表示も開始されるため、ユーザにとって不便は生じない。
またシャッターキー７ａに関しては、自動撮像モードではの操作ロック状態としておくことで、何らかの接触等による不要な動作が行われない。
なお、操作ロック状態とは、機械的にシャッターキー７ａが押せないようなロック機構を設けても良いし、システムコントローラ２がシャッターキー７ａの操作を無効操作と扱うものとしても良い。

また手動撮像では、画サイズ大、低圧縮率で撮像画像データが処理されて保存され、自動撮像では画サイズ小、大圧縮率で撮像画像データが処理されて保存される。これにより、手動撮像時には自動撮像よりも高画質で撮像を行いたいとする要望に合致し、また自動撮像の場合の大量の撮像によるストレージ部８の容量不足をなるべく引き起こさないようなことができる。
しかも、これらのことをユーザが意識して、圧縮率や画サイズをいちいち設定変更の操作を行う必要はない。

以上、本発明の実施の形態について説明したが、本発明としては多様な変形例が考えられる。
撮像動作モード切換のためのユーザの撮像意志の推定の手法は、上記撮像処理例Ｉ〜Ｖとして５つの例を挙げたが、他の手法も考えられる。また撮像処理例Ｉ〜Ｖのうちの複数の手法を組み合わせても良い。
他の手法の例としては、例えばセンサ部１０がユーザの脈拍や血圧、脳波等の生体情報を検出できるようにして、この生体情報によって撮像の意志の推定を行ったり、或いは上記撮像処理例Ｉ〜Ｖの手法での推定の際に、生体情報も条件に入れることなども考えられる。

また、上記各処理例においては、手動撮像モードから自動撮像モードに戻るトリガとしては、センサ部１０もしくは画像解析部１３からの情報によって、ユーザの撮像意思が推定できる検出状態が無くなる場合としたが、例えば手動撮像モードに移行した後は、所定時間経過した場合に自動的に自動撮像モードに戻るような処理例も考えられる。

実施の形態では、静止画撮像を例にして自動撮像、手動撮像を述べたが、動画撮像を考えた場合も、自動撮像、手動撮像の動作として想定できる。
その場合、自動撮像モード、手動撮像モードのいずれも動画撮像とする場合や、自動撮像モードで動画撮像、手動撮像モードで静止画撮像とする場合、さらには自動撮像モードでは静止画撮像、手動撮像モードで動画撮像を行う場合などが考えられる。
いずれの場合も、上記各動作例を適用してモード切換や動作設定制御を行えばよい。

本発明の撮像装置の外観例の説明図である。 実施の形態の撮像装置の正面図、背面図及び使用状態の説明図である。 実施の形態の撮像装置のブロック図である。 実施の形態のグリップ部の保持についての説明図である。 実施の形態の撮像処理例Ｉのフローチャートである。 実施の形態の撮像装置の上方への移動についての説明図である。 実施の形態の撮像処理例IIのフローチャートである。 実施の形態の撮像装置の移動と磁気検出についての説明図である。 実施の形態の撮像処理例IIIのフローチャートである。 実施の形態の撮像処理例IVのフローチャートである。 実施の形態の撮像処理例Ｖに対応する撮像装置のブロック図である。 実施の形態の撮像処理例Ｖに対応する撮像装置の正面図、背面図である。 実施の形態の撮像装置による瞳の検出についての説明図である。 実施の形態の撮像処理例5のフローチャートである。

符号の説明

１ 撮像装置、１ｇ グリップ部、２ システムコントローラ、３ 撮像部、３ａ 撮像光学系、３ｂ 撮像素子部、３ｃ 撮像信号処理部、４ 撮像制御部、５ 表示部、６ 表示制御部、７ 操作入力部、７ａ シャッターキー、８ ストレージ部、９ 通信部、１０ センサ部、１２ 使用者撮像部、画像解析部１３

Claims (16)

1. 撮像画像を取得する撮像手段と、
   上記撮像手段によって取得された撮像画像の保存処理を行う撮像画像保存手段と、
   使用者の撮像意思の判定に用いる意志判定情報を検出する意志判定情報検出手段と、
   上記意思判定情報検出手段からの意志判定情報を用いた意志判定を行い、使用者によるシャッタ操作に応じたタイミングで撮像画像の保存処理を行う第１の撮像モードと、上記シャッタ操作によらずに自動的に撮像画像の保存処理を行う第２の撮像モードとを上記意志判定の結果に応じて選択的に設定する制御手段と、
   撮像された画像を解析する画像解析手段と
   を備え、
   上記制御手段は、意志判定情報を用いた意志判定として、上記画像解析手段の解析結果 に基づいて意志判定を行う
   撮像装置。
2. 使用者の画像を取得する使用者撮像手段を備え、
   上記画像解析手段は、上記使用者撮像手段により収得された画像を解析し、
   上記制御手段は、上記使用者画像解析手段の解析結果に基づいて意志判定を行う請求項 １記載の撮像装置。
3. 上記制御手段は、上記第２の撮像モードを設定している際に、上記意思判定情報検出手段からの意志判定情報を用いた意志判定を行い、意志判定結果に応じて、上記第１の撮像モードに設定する請求項１に記載の撮像装置。
4. 撮影画像のモニタ表示を行う表示手段をさらに備え、
   上記制御手段は、上記第１の撮像モードに設定している際には、上記表示手段におけるモニタ表示を実行させ、上記第２の撮像モードに設定している際には、上記表示手段におけるモニタ表示をオフとする制御を行う請求項１に記載の撮像装置。
5. 上記制御手段は、上記第２の撮像モードに設定している際には、上記シャッタ操作子を操作ロック状態とする制御を行う請求項１に記載の撮像装置。
6. 上記制御手段は、上記第１の撮像モードに設定している際と、上記第２の撮像モードに 設定している際とで、上記撮像画像保存手段に異なる画像サイズでの撮像画像の保存処理を実行させる制御を行う請求項１に記載の撮像装置。
7. 上記制御手段は、上記第１の撮像モードに設定している際と、上記第２の撮像モードに 設定している際とで、上記撮像画像保存手段に異なる圧縮率で圧縮処理された撮像画像の保存処理を実行させる制御を行う請求項１に記載の撮像装置。
8. 撮像画像を取得する撮像手段と、
   上記撮像手段によって取得された撮像画像の保存処理を行う撮像画像保存手段と、
   使用者の撮像意思の判定に用いる意志判定情報を検出する意志判定情報検出手段と、
   上記意思判定情報検出手段からの意志判定情報を用いた意志判定を行い、使用者による シャッタ操作に応じたタイミングで撮像画像の保存処理を行う第１の撮像モードと、上記 シャッタ操作によらずに自動的に撮像画像の保存処理を行う第２の撮像モードとを、上記 意志判定の結果に応じて選択的に設定する制御手段と
   を備え、
   上記制御手段は、上記意志判定情報を用いた意志判定として、使用者による撮像装置本 体の保持がなされたか否かを判定する
   撮像装置。
9. 上記制御手段は、上記意志判定情報を用いた意志判定として、使用者による撮像装置本 体の所定時間以上の保持がなされたか否かを判定する請求項８記載の撮像装置。
10. 撮像画像を取得する撮像手段と、
    上記撮像手段によって取得された撮像画像の保存処理を行う撮像画像保存手段と、
    使用者の撮像意思の判定に用いる意志判定情報を検出する意志判定情報検出手段と、
    上記意思判定情報検出手段からの意志判定情報を用いた意志判定を行い、使用者による シャッタ操作に応じたタイミングで撮像画像の保存処理を行う第１の撮像モードと、上記 シャッタ操作によらずに自動的に撮像画像の保存処理を行う第２の撮像モードとを、上記 意志判定の結果に応じて選択的に設定する制御手段と
    を備え、
    上記制御手段は、上記意志判定情報を用いた意志判定として、撮像装置本体が所定方向 へ移動したことを判定する
    撮像装置。
11. 撮像画像を取得する撮像手段と、
    上記撮像手段によって取得された撮像画像の保存処理を行う撮像画像保存手段と、
    使用者の撮像意思の判定に用いる意志判定情報を検出する意志判定情報検出手段と、
    上記意思判定情報検出手段からの意志判定情報を用いた意志判定を行い、使用者による シャッタ操作に応じたタイミングで撮像画像の保存処理を行う第１の撮像モードと、上記 シャッタ操作によらずに自動的に撮像画像の保存処理を行う第２の撮像モードとを、上記 意志判定の結果に応じて選択的に設定する制御手段と
    を備え、
    上記制御手段は、上記意志判定情報を用いた意志判定として、撮像装置本体が装着位置 状態から移動したことを判定する
    撮像装置。
12. 上記制御手段は、撮像装置本体の静止状態を判定する請求項１０または１１に記載の撮 像装置。
13. 撮像を行い、被写体の撮像画像を取得して、撮像画像の保存処理を実行する撮像装置の 撮像方法として、
    撮像画像を取得する撮像ステップと、
    上記撮像ステップにおいて取得された撮像画像の保存処理を行う撮像画像保存ステップ と、
    使用者の撮像意思の判定に用いる意志判定情報を検出する意志判定情報検出ステップと 、
    上記意思判定情報検出ステップからの意志判定情報を用いた意志判定を行い、使用者に よるシャッタ操作に応じたタイミングで撮像画像の保存処理を行う第１の撮像モードと、 上記シャッタ操作によらずに自動的に撮像画像の保存処理を行う第２の撮像モードとを上 記意志判定の結果に応じて選択的に設定する制御ステップと、
    撮像された画像を解析する画像解析ステップと
    を実行し、
    上記制御ステップは、意志判定情報を用いた意志判定として、上記画像解析ステップの 解析結果に基づいて意志判定を行う
    撮像方法。
14. 撮像を行い、被写体の撮像画像を取得して、撮像画像の保存処理を実行する撮像装置の 撮像方法として、
    撮像画像を取得する撮像ステップと、
    上記撮像ステップにおいて取得された撮像画像の保存処理を行う撮像画像保存ステップ と、
    使用者の撮像意思の判定に用いる意志判定情報を検出する意志判定情報検出ステップと 、
    上記意思判定情報検出ステップからの意志判定情報を用いた意志判定を行い、使用者に よるシャッタ操作に応じたタイミングで撮像画像の保存処理を行う第１の撮像モードと、 上記シャッタ操作によらずに自動的に撮像画像の保存処理を行う第２の撮像モードとを、 上記意志判定の結果に応じて選択的に設定する制御ステップと
    を実行し、
    上記制御ステップは、上記意志判定情報を用いた意志判定として、使用者による撮像装 置本体の保持がなされたか否かを判定する
    撮像方法。
15. 撮像を行い、被写体の撮像画像を取得して、撮像画像の保存処理を実行する撮像装置の 撮像方法として、
    撮像画像を取得する撮像ステップと、
    上記撮像ステップにおいて取得された撮像画像の保存処理を行う撮像画像保存ステップ と、
    使用者の撮像意思の判定に用いる意志判定情報を検出する意志判定情報検出ステップと 、
    上記意思判定情報検出ステップからの意志判定情報を用いた意志判定を行い、使用者に よるシャッタ操作に応じたタイミングで撮像画像の保存処理を行う第１の撮像モードと、 上記シャッタ操作によらずに自動的に撮像画像の保存処理を行う第２の撮像モードとを、 上記意志判定の結果に応じて選択的に設定する制御ステップと
    を実行し、
    上記制御ステップは、上記意志判定情報を用いた意志判定として、撮像装置本体が所定 方向へ移動したことを判定する
    撮像方法。
16. 撮像を行い、被写体の撮像画像を取得して、撮像画像の保存処理を実行する撮像装置の 撮像方法として、
    撮像画像を取得する撮像ステップと、
    上記撮像ステップにおいて取得された撮像画像の保存処理を行う撮像画像保存ステップ と、
    使用者の撮像意思の判定に用いる意志判定情報を検出する意志判定情報検出ステップと 、
    上記意思判定情報検出ステップからの意志判定情報を用いた意志判定を行い、使用者に よるシャッタ操作に応じたタイミングで撮像画像の保存処理を行う第１の撮像モードと、 上記シャッタ操作によらずに自動的に撮像画像の保存処理を行う第２の撮像モードとを、 上記意志判定の結果に応じて選択的に設定する制御ステップと
    を実行し、
    上記制御ステップは、上記意志判定情報を用いた意志判定として、撮像装置本体が装着 位置状態から移動したことを判定する
    撮像方法。

Images