JP2018196070A - 画像処理装置およびプログラム - Google Patents

Abstract

【課題】現像パラメータの設定モード情報がマニュアルモードである時、撮影者の設定意図を保持しながら、簡便に現像パラメータ補正を行う。
【解決手段】ＲＡＷ動画像データの各フレーム毎に設定される現像パラメータを取得する現像パラメータ取得手段と、現像パラメータの設定モード情報を取得する設定モード情報取得手段と、現像パラメータに対して補正処理を行う補正手段とを備え、補正手段は、設定モード情報がマニュアルモードである時、現像パラメータが同一値を継続するフレーム区間に対してのみ、補正処理を実行する。
【選択図】図１

Description

本発明は、画像処理装置およびプログラムに関し、特に、現像パラメータの設定モード情報がマニュアルモードである時、現像パラメータが同一値を継続するフレーム区間のみ補正処理を適用したＲＡＷ動画像の現像を行う、画像処理装置およびプログラムに関する。

近年の画像処理装置は、電子技術およびコンピュータ技術の発達に伴い、性能向上の一途をたどっている。特に、パーソナルコンピュータの性能向上を背景に、その性能を活用する画像処理ソフトウェアの性能向上は著しく、様々な画像処理の提案が為されている。撮像記録装置いわゆるデジタルカメラの性能向上も同様に顕著である。特に、単位時間当たりに記録可能な情報量が増加している。

また、近年、デジタルカメラで撮影する時、撮像素子（センサ）の信号をそのままＲＡＷ画像として記録しておき、撮影後の後工程で現像パラメータを適用してＲＡＷ画像に対して現像処理を行い、視聴用の画像を得る提案が多数為されている。

ＲＡＷ画像データは、センサの信号をそのまま記録する為、データ容量が比較的大きくなる場合がある。後工程で現像処理を行う際のデータ処理量も比較的多くなる場合がある。その為、ＲＡＷ画像として記録する提案は、特に静止画像に関して広く普及している。一方、パーソナルコンピューター、画像処理ソフトウェアおよびデジタルカメラの性能向上に伴い、近年、動画像に関してもＲＡＷ画像として記録する提案が広まって来ている状況がある。

ＲＡＷ動画像による撮影と編集は、映画やＣＭ（Ｃｏｍｍｅｒｃｉａｌ Ｍｅｓｓａｇｅ）等、いわゆる制作系の用途で主に広まって来ている。そして今後、パーソナルコンピューター、画像処理ソフトウェアおよびデジタルカメラ等の必要機材の更なる性能向上およびコストダウンに伴い、ニュース取材等、いわゆる報道系の用途についても、ＲＡＷ動画像による撮影と編集が広まっていくと予想される。

報道系の用途では特に、一度きりの出来事を失敗無く且つ迅速に撮影して、更には迅速に視聴用画像を視聴者に提供したい要請がある。その為、動画像の撮影においては、撮影チャンスを逃さない様、一続きの動画像の撮影を継続しながら、複数の被写体を順次撮影する場合がある。

その時、それら被写体の変化に合わせて現像パラメータを自動いわゆるオートで設定する場合、その自動設定値が追従遅れを起こす場合がある。その場合、追従遅れを解消する様に補正を行う提案が為されている（特許文献１）。

特許第５９８８７５９号公報

しかしながら、上記従来例では、以下のような問題点があった。

現像パラメータが手動いわゆるマニュアルで設定された場合、その撮影者による設定意図を充分反映した現像パラメータ補正を簡便に行うことが困難な場合があった。

現像パラメータのオート設定は、不慣れな撮影者にとっては便利である。その一方で、慣れた撮影者の場合、撮影時に現像パラメータをマニュアル設定した方が、撮影者にとって都合が良い場合がある。その場合、撮影者は、一続きの動画像の撮影を継続しながら、被写体の変化状況および撮影者が意図する映像表現に合わせて現像パラメータを適宜マニュアル操作にて設定変更する。撮影中にマニュアル操作で設定変更された現像パラメータ設定には、映像表現に関する撮影者の意図が反映されている。

本発明は上記のような点に鑑みて為されたものである。現像パラメータがマニュアル操作で設定された場合であっても、その設定意図を充分反映した現像パラメータ補正を簡便に行うことを目的とする。

上記の目的を達成するために、本出願に係る第一の発明は、
ＲＡＷ動画像データの各フレーム毎に設定される現像用の現像パラメータを取得する現像パラメータ取得手段と、前記現像パラメータの設定モード情報を取得する設定モード情報取得手段と、前記現像パラメータに対して補正処理を行う補正手段とを備え、前記補正手段は、前記設定モード情報がマニュアルモードである時、現像パラメータが同一値を継続するフレーム区間に対してのみ前記補正処理を実行する、前記設定モード情報がオートモードである時、全てのフレーム区間に対して前記補正処理を実行する、ことを特徴としている。

本出願に係る第二の発明は、ＲＡＷ動画像データの各フレーム毎に設定される現像用の現像パラメータを取得する現像パラメータ取得工程と、前記現像パラメータの設定モード情報を取得する設定モード情報取得工程と、前記現像パラメータに対して補正処理を行う補正工程とを備え、前記補正工程は、前記設定モード情報がマニュアルモードである時、現像パラメータが同一値を継続するフレーム区間に対してのみ前記補正処理を実行する、前記設定モード情報がオートモードである時、全てのフレーム区間に対して前記補正処理を実行する、ことを特徴としている。

本発明によれば、現像パラメータが手動いわゆるマニュアルで設定された場合であっても、その設定意図を充分反映した現像パラメータ補正を簡便に行うことが出来る。特に、上述の通り、現像パラメータが同一値を継続するフレーム区間に対してのみ補正処理を実行することで、ある１つの設定意図に対してのみ補正を行うことが可能となる。例えば、ある特定の被写体およびその特定の被写体に対する映像表現の意図が反映された現像パラメータに対してのみ、その意図を反映しながら簡便に補正を行うことが可能となる。

第１の実施形態における画像処理装置のハード構成図である。 第１の実施形態における画像処理装置のシステム構成図である。 第１の実施形態における画像処理装置のユーザーインターフェイス画面を説明する図である。 第１の実施形態における動画像クリップの構造を説明する図である。 第１の実施形態における画像データファイルのファイル構造を説明する図である。 第１の実施形態における現像パラメータの時間変化を説明する図である。 第１の実施形態における現像パラメータ補正の手順を説明するフローチャートである。 第１の実施形態における現像パラメータの補正処理を説明する図である。 第２の実施形態における画像処理装置のユーザーインターフェイス画面を説明する図である。

以下に、本発明の好ましい実施の形態を、添付の図面に基づいて詳細に説明する。

＜第１の実施形態＞
図１は、本発明の第１の実施形態による、画像処理装置１００の構成を示すハード構成図である。

システム制御マイコン１０１は、例えば、ＣＰＵ（ＭＰＵ）、メモリ（ＤＲＡＭ、ＳＲＡＭ）などからなり、各種処理（プログラム）を実行して画像処理装置１００の各ブロックを制御したり、各ブロック間でのデータ送受信を制御したりする。またシステム制御マイコン１０１は、ユーザからの操作を受け付ける操作部１０２からの操作信号に応じて、画像処理装置１００の各ブロックを制御する。

操作部１０２は、電源ボタン、キーボード、マウス、ポインティングデバイス、タッチパネル等で構成される。ユーザによりこれらのキーボードやマウスが操作されるとシステム制御マイコン１０１に操作信号を送信する。

バス１０３は、各種データ、制御信号、指示信号などを画像処理装置１００の各ブロックに送るための汎用バスである。

メモリ１０４は、例えばＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）やフラッシュメモリであって、画像信号および音声信号、画像処理装置１００の設定情報などを一時的に記憶する揮発性メモリと不揮発性メモリの双方が備わる。

記録媒体１０５は、画像処理装置１００に内蔵される記録媒体である。記録媒体１０５は、画像処理装置で扱う各種データなどを記録することができる。記録媒体１０５の例としては、例えばハードディスク、ＳＳＤ、光ディスク、フラッシュメモリなどがあげられる。本実施形態では、ハードディスク装置を例に説明する。

外部記録媒体接続部１０６は、画像処理装置１００に外部記録媒体を接続する為の接続部である。外部記録媒体は、画像処理装置で扱う各種データなどを記録することができる。外部記録媒体の例としては、例えばハードディスク、ＳＳＤ、光ディスク、フラッシュメモリなどがあげられる。本実施形態では、外部記録媒体としては、いわゆるメモリカードと呼ばれる画像処理装置１００に装着可能なフラッシュメモリ装置を例に説明する。

通信部１０７は、画像処理装置１００が外部画像処理装置と通信する為の通信部である。外部画像処理装置は、画像処理装置１００と同様に、画像処理を行うことができる。外部画像処理装置の例としては、スマートフォン、タブレット型コンピュータ、パーソナルコンピュータなどがあげられる。更には、撮像部および画像記録部も含むデジタルビデオカメラ、デジタルスチルカメラなどもあげられる。本実施形態では、デジタルビデオカメラを例に説明する。

表示部１０８は、画像処理装置１００に内蔵されるものである。記録媒体１０５や外部記録媒体接続部１０６を経由して接続された外部記録媒体に記録された画像データや、各種メニューなどのＧＵＩを表示する。表示部１０８は例えば、液晶ディスプレイ、有機ＥＬディスプレイ等を用いることができる。

音声出力部１０９は、画像処理装置１００に内蔵されるものである。例えばスピーカおよびその駆動部からなり、記録媒体１０５や外部記録媒体に記録された音声信号にもとづき音声を出力する。

映像外部出力部１１０は、外部映像表示装置を画像処理装置１００に接続する為の出力部である。記録媒体１０５や外部記録媒体接続部１０６を経由して接続された外部記録媒体に記録された画像データや、各種メニューなどのＧＵＩを外部映像表示装置に表示する。外部映像表示装置の例としては、テレビ、モニタなどがあげられる。本実施形態では、モニタを例に説明する。

音声外部出力部１１１は、外部音声出力装置を画像処理装置１００に接続する為の出力部である。記録媒体１０５や外部記録媒体に記録された音声信号にもとづき音声を出力する。外部音声出力装置の例としては、スピーカーやヘッドフォンなどがあげられる。本実施形態では、スピーカーを例に説明する。

図２は、本発明の第１の実施形態による、デジタルビデオカメラと組み合わせて画像処理装置１００を使用する例を示すシステム構成図である。

図２（ａ）は、メモリカード経由でデジタルビデオカメラと組み合わせて画像処理装置１００を使用する例を示すシステム構成図である。

デジタルビデオカメラ２０１は、レンズ２０２を含む撮像部にて、レンズ２０２を通して集めた光を光電変換素子にて電気信号に変換し、更には信号処理を施して画像データにする。オートマニュアルモード切り替えスイッチ２０３は、現像パラメータの設定をフルオートモードとマニュアルモードのどちらかに設定するためのスイッチである。ゲイン切り替えスイッチ２１１は、信号処理を行う非図示の信号処理部にて映像信号の増幅処理を行う時の増幅率を切り替えるスイッチである。ゲイン切り替えスイッチ２１１はＨ、Ｍ、Ｌの３段階の切り替えが可能である。各段階には、それぞれ異なる増幅率が設定されている。ゲイン切り替えスイッチ２１１をＨに設定した時、増幅率は１２ｄＢが設定される。ゲイン切り替えスイッチ２１１をＭに設定した時、増幅率は６ｄＢが設定される。ゲイン切り替えスイッチ２１１をＬに設定した時、増幅率は０ｄＢが設定される。

カードスロット２０４は、メモリカード２０５を着脱可能である。デジタルビデオカメラ２０１にて撮像した結果となる画像データを記録する時、カードスロット２０４にメモリカード２０５を装着しておくことで、メモリカード２０５に画像データを記録する。また、画像データを他の装置、例えば画像処理装置１００で利用したい場合、画像データ記録済みであるメモリカード２０５をカードスロット２０４から取り外す。

画像処理装置１００にはデジタルビデオカメラ２０１と同様にカードスロット２０６が備わっており、メモリカード２０５を着脱することができる。このカードスロット２０６は、外部記録媒体接続部１０６の一部分である。それにより、デジタルビデオカメラ２０１で撮像して画像データを記録したメモリカード２０５を、画像処理装置１００のカードスロット２０６に装着することができる。それにより、デジタルビデオカメラ２０１で作成した画像データを画像処理装置１００で利用することができる。

また、画像処理装置１００には、操作部１０２の一部分として、キーボード２０８とトラックパッド２０７を備える。キーボード２０８は、文字や記号等の入力が可能である。トラックパッド２０７は、マウス等と同様にポインティングデバイスとして利用可能である。パネル２０９は表示部１０８の一部分であり、記録媒体１０５や外部記録媒体接続部１０６を経由して接続された外部記録媒体に記録された画像データや、各種メニューなどのＧＵＩを表示する。

以上述べたように、メモリカード２０５を介すことで、デジタルビデオカメラ２０１で生成した画像データを、画像処理装置１００で利用することができる。

デジタルビデオカメラ２０１で生成した画像データを画像処理装置１００で利用する為に、メモリカード２０５を利用することのほかに、別の方法もある。

図２（ｂ）は、通信ケーブル経由でデジタルビデオカメラと組み合わせて画像処理装置１００を使用する例を示すシステム構成図である。図２（ａ）との違いは、メモリカードではなく通信ケーブル２１０を介して、画像処理装置１００は画像データを取得する点である。

通信ケーブル２１０は画像処理装置１００の通信部１０７に接続される。本実施形態では、通信ケーブル２０１を介してデジタルビデオカメラ２０１と画像処理装置１００が通信する際の通信規格として、ＵＳＢ規格を例に説明する。デジタルビデオカメラ２０１は、通信ケーブル２１０を介して画像処理装置１００の通信部１０８が接続されると、マスストレージクラス動作状態となる。それにより、画像処理装置１００にて、デジタルビデオカメラ２０１のカードスロット２０４に装着された状態のメモリカード２０５に記録されている画像データを利用することができる。例えば、デジタルビデオカメラ２０１のカードスロット２０４に装着された状態のメモリカード２０５に記録されている画像データを、画像処理装置１００の記録媒体１０５にコピーすることができる。

図３は、本発明の第一の実施形態による、画像処理装置１００のパネル２０９に表示されるインターフェイス画面である。

インターフェイス画面３０１はパネル２０９の全画面に表示されるが、パネル２０９が複数ウインドウ表示可能な場合、そのうちの一つのウインドウとしてインターフェイス画面３０１が表示されても良い。

メニュー３０２は、画像処理装置が実行可能な機能を選択して実行するためのメニューである。トラックパッド２０７にてメニュー３０２を選択すると、いわゆるプルダウンメニューとして、メニューの詳細が表示される。更に、それら詳細のメニューの中から、実行したいメニューを選択することで、所望の機能を実行することができる。メニューの項目としては、大項目として、ファイル操作に関連するファイルメニュー、編集操作に関連する編集メニュー、表示操作に関連する表示メニュー、設定等に関連するツールメニュー、使用説明書を表示したりするヘルプメニュー等がある。

メディア一覧リスト３１１は、画像処理装置１００にて認識されるメディアの一覧を示すリストである。認識されるメディアの種類としては、メディア３１２と仮想メディア３１４とがある。メディア３１２は、画像処理装置１００のカードスロット２０６にてメモリカード２０５の装着が認識された場合に表示される。また、メディア３１２は、通信２１０を介してマスストレージクラス動作状態にて接続されたデジタルビデオカメラ２０１のカードスロット２０４に接続されたメモリカード２０５の装着が認識された場合に表示される。また、それ以外の手段で外部記録媒体が認識された場合に表示されても良い。仮想メディア３１４は、画像処理装置１００の記録媒体１０５にて階層構造にて各種データが記録されている場合、特定の階層のフォルダを仮想的なメディアとみなして画像処理装置１００にて扱う為のものである。メディア３１２には、メディア名３１３を併せて表示することができる。メディア３１２は図３では１つのみ表示されているが、画像処理装置１００にて複数のメディア３１２が認識された場合、メディア３１２を複数表示することが出来る。その際、それら複数のメディア３１２は、各メディアに対応するメディア名３１３にそれぞれ異なる名を設定することにより、それぞれを識別可能である。

また、仮想メディア３１４には、仮想メディア名３１４を併せて表示することが出来る。仮想メディア３１４は図３では１つのみ表示されているが、画像処理装置１００にて複数の仮想メディア３１４が認識された場合、仮想メディア３１４を複数表示することが出来る。その際、それら複数の仮想メディア３１４は、各仮想メディアに対応する仮想メディア名３１３にそれぞれ異なる名を設定することにより、それぞれを識別可能である。メディア選択枠３１６は、選択されているメディア３１２または仮想メディア３１４を示す。複数のメディア３１２または仮想メディア３１４を選択することも可能である。メディア選択枠３１６は、トラックパッド２０７またはキーボード２０８にて操作することができる。キーボード２０８にて操作する場合は、キーボード２０８に含まれる矢印キーの操作により、メディア選択枠３１６の位置を変更する。例えば、図３にて、仮想メディア３１４が選択されている状態で上向き矢印キーを操作することにより、メディア一覧リスト３１１にて１つ上側となるメディア３１２を選択する状態に変更することができる。

仮想メディア作成ボタン３１７は、仮想メディア３１４を作成するためのボタンである。仮想メディア作成ボタン３１７を押下することにより、記録媒体１０５のあらかじめ設定した階層のフォルダ下に、仮想メディア３１４を作成する。その時に、非図示のサブウインドウ表示にて、仮想メディア名３１５を設定することもできる。

仮想メディア削除ボタン３１８は、仮想メディア３１４を削除するためのボタンである。メディア選択枠３１６にて仮想メディア３１４が選択されている時に仮想メディア削除ボタン３１８を押下すると、その選択されている仮想メディア３１４が削除される。

バックアップボタン３１９は、ユーザの操作に基づき画像データバックアップを実行する。メディア３１２がメディア選択枠３１６にて選択された状態でバックアップボタン３１９を押下することにより以下の操作を行う。まず、仮想メディア３１４を新たに作成する。次に、メディア３１２に記録されている画像データを、新たに作成された仮想メディア３１４にコピーする。バックアップボタン３１９は、仮想メディアの作成と、画像データのコピー、以上２つの操作が必要なバックアップを、バックアップボタン３１９の押下という１つの操作で実施することができる。それにより、ユーザの作業を効率化し、利便性を向上する。

オートバックアップ動作モード表示部３２０は、オートバックアップ動作モードの状態を表示するための表示領域である。オートバックアップとは、メディア３１２の接続を認識した場合に、バックアップボタン３１９を押下しなくても、バックアップボタン３１９を押下した場合と同様の機能を実行する機能である。

ユーザの使用状況により、オートバックアップを利用したい場合と利用したくない場合とがある。オートバックアップを利用したい場合とは、例えば、デジタルビデオカメラ２０１で撮影してメモリカード２０５に記録した画像データに対して、効率良くバックアップ作業を実施したい場合である。効率良くとは、ユーザが実行する操作手順が簡略化されることを示す。具体的には、バックアップボタン３１９の押下操作を省略できることを示す。特に業務用途の場合、複数の作業者による連携作業であり、不慣れな作業者が参加する場合も多い。また、特に業務用途の場合、作業の失敗は金銭的損失に直結する為、作業の失敗を最も避けるべきこととして扱う場合がある。その様な場合、ボタン押下のひと手間と言えども、操作手順の簡略化により、作業者は作業失敗の回避という恩恵を受けることができる。更には、特に業務用途の場合、カメラを操作するカメラマン、データバックアップを担当するバックアップ作業者、バックアップ後のデータを編集等に利用する編集者等がチームを組み、連携して作業する。その中で、複数メンバが連携して実施する複数作業の流れをいわゆるルーチン作業として実施する場合がある。その様な定型作業を反復する場合、ボタン押下のひと手間といえども、操作手順の簡略化により、作業者は作業失敗の回避という恩恵を受けることができる。

一方、オートバックアップを利用したくない場合がある。前述のルーチン作業が一通り終了し、メモリカード２０５に記録された画像データの内容を単に確認したい場合等である。その様な場合に、オートバックアップ機能を停止することが出来る。メニュー３０２にて非図示のサブダイアログを表示し、そのサブダイアログ上にて画像処理装置１００の設定を行う。その様にしてオートバックアップ機能を非実施に設定することで、オートバックアップ機能を停止することが出来る。

クリップ一覧リスト３３１は、メディア一覧リスト３１１で選択したメディア３１２または仮想メディア３１４に記録されている画像データの一覧を表示するリストである。ここで、画像データをクリップと呼称する。サムネイル画像３３２は、１つのクリップに対する代表画像である。同様にサムネイル画像３３３、サムネイル画像３３４は、それぞれ１つのクリップに対する代表画像である。つまり、図３は、クリップが３つ、クリップ一覧リストに表示されていることを示す。それと共に、メディア一覧リスト３１１で選択したメディア３１２または仮想メディア３１４に、クリップが３つ記録されていることを示す。

クリップ一覧リスト３３１はまた、各クリップに対応するクリップ名及びメタデータ情報を表示する。クリップ名３３５は、サムネイル画像３３２に対応するクリップのクリップ名を表示する。クリップ名３３５は、クリップ名と共に、関連付けて記録されるメタデータを表示してもよい。同様に、クリップ名３３６はサムネイル画像３３３に対応するクリップ名およびメタデータ、クリップ名３３７はサムネイル画像３３４に対応するクリップ名およびメタデータを表示する。

また、アイコン３３８は、サムネイル画像３３２にて特定するクリップに付随するメタデータをアイコン表示したものである。同様に、アイコン３３９、アイコン３４０は同様に、サムネイル画像３３３、サムネイル画像３３４にて特定するクリップに付随するメタデータをアイコン表示したものである。

クリップ選択枠３４１は、クリップ一覧リスト３３１にて１つまたは複数表示されるクリップに対して、どのクリップが選択されたかを示す選択枠である。図３では、サムネイル画像３３４、クリップ名３３７、アイコン３４０にて特定されるクリップが選択されていることを示す。

クリップ一覧サムネイル大モード表示ボタン３４２を押下することにより、クリップ一覧リスト３３１をサムネイル大モード表示する。サムネイル大モードとは、サムネイル小モードよりも大きなサムネイル画像を表示するモードである。クリップ一覧サムネイル小モード表示ボタン３４３を押下することにより、クリップ一覧リスト３３１をサムネイル小モード表示する。図３は、サムネイル小モード表示されている状態を示している。クリップ一覧情報付きサムネイルモード表示ボタン３４４を押下することにより、クリップ一覧リスト３３１を情報付きサムネイルモード表示する。情報付きサムネイルモードとは、サムネイル大モードおよびサムネイル小モードよりも、メタデータ表示項目を増やしたモードである。クリップ一覧詳細表示モード表示ボタン３４５を押下することにより、クリップ一覧リスト３３１を詳細表示モード表示する。詳細表示モードとは、サムネイル画像を非表示とし、クリップ名およびメタデータをリスト表示するモードである。

簡易検索項目設定部３４６、簡易検索条件設定部３４７、全検索ボタン３４８、絞込み検索ボタン３４９、すべて表示ボタン３５０は、簡易検索機能にかかわる設定部およびボタンである。簡易検索とは、クリップ一覧リスト３３１に表示されるクリップに対して、検索条件を設定して検索を実行することにより、その検索条件に合致するクリップのみをクリップ一覧リストに表示させるようにする機能である。

簡易検索項目設定部３４６は、簡易検索の検索条件とする項目を設定する。具体的には、クリップに付随記録されるメタデータ項目のうち、どのメタデータ項目を検索キーとするかを設定する。例えば、クリップ名、撮影日時、ステータス（ＯＫマーク等）、クリップタイトル（任意の文字列）、撮影者（任意の文字列）、撮影場所（任意の文字列）、撮影内容（任意の文字列）等を設定することができる。

簡易検索条件設定部３４７は、簡易検索項目設定部３４６にて選択し設定したメタデータ項目に応じて、そのメタデータ値がいくつの場合を検索条件とするかを更に設定する設定部である。具体的には、簡易検索項目設定部３４６にて、クリップ名、クリップタイトル、撮影者、撮影場所、撮影内容を選択した場合は、任意の文字列を検索条件として設定することが出来る。例えば、クリップ一覧リスト３３１にて、クリップ名として“ＡＡ０００１”、“ＡＢ０００１”、“ＡＣ０００１”の３つのクリップがあるとする。簡易検索項目設定部３４６にてクリップ名を設定した場合、簡易検索条件設定部３４７にて文字列“ＡＡ”を設定することにより、簡易検索を実行した結果として、“ＡＡ０００１”のクリップのみをクリップ一覧リストに表示する。

全検索ボタン３４８は、簡易検索未実施の状態から検索を実行する為のボタンである。つまり、クリップ一覧リスト３３１が簡易検索実行済みの状態で表示されていた場合でも、全検索ボタン３４８を押下することにより、それまでの簡易検索結果を非反映として新たな検索を実行できる。

それに対して、絞込み検索ボタン３４９は、クリップ一覧リスト３３１が簡易検索実行済みの状態で、簡易検索条件に合致したクリップのみ表示されている状態から、更に絞り込み検索を行う為のボタンである。例えば、簡易検索未実施の状態にて、クリップ一覧リスト３３１には、クリップ名“ＡＡ０００１”、“ＡＡ０００２”、“ＡＢ０００１”が表示されているとする。クリップ名を検索項目、“ＡＡ”を検索条件として簡易検索を実行した結果として、クリップ名“ＡＡ０００１”と“ＡＡ０００２”のクリップが表示されているとする。その状態から更に、検索条件として“０００１”を設定して絞込み検索を実施する。すると、クリップ名“ＡＢ０００１”は表示されることなく、クリップ名“ＡＡ０００１”のみ表示される。

すべて表示ボタン３５０は、簡易検索実行結果を解除して、メディア選択リスト３１１にて選択されているメディア３１２または仮想メディア３１４に記録されているクリップを全てクリップ一覧リスト３３１に表示する為のボタンである。

プレビュー画像３６１は、クリップ一覧リスト３３１にて表示されたクリップの再生画像を表示する領域である。タイムコード３６２は、プレビュー画像３６１に表示されているフレーム画像に対応するタイムコードを表示する。例えば、タイムコードが１２時間３４分５６秒１２フレームである時、“１２：３４：５６：１２”と表示する。デュレーション３６３は、クリップ一覧リスト３３１にて表示されたクリップの時間長を表示する。例えば、クリップの時間長が１時間２３分４５秒２１フレームである時、“０１：２３：４５：２１”と表示する。

スライダーバー３６４およびスライダーバー操作部３６５は、クリップの時間長に対する、現在の再生位置を示す。具体的には、スライダーバー３６４に対するスライダーバー操作部３６５の位置により、現在のクリップ再生の時間的位置を表示する。また、スライダーバー操作部３６５をトラックパッド２０７にて操作して移動することで、プレビュー画像３６１に表示されるフレーム画像を変更することができる。

再生ボタン３６６は、トグル動作をするボタンである。トラックパッド２０７にて再生ボタン３６６を押下することにより、プレビュー画像３６１に対して通常再生（正方向の１倍速再生）を行うことができる。通常再生中は再生ボタン３６６は非図示の停止ボタン表示となり、同ボタンを再び押下することにより、プレビュー画像３６１に対して再生停止を行うことができる。

１フレーム戻すボタン３６７は、再生停止状態のプレビュー画像３６１に対して１フレームのみ再生位置を時間軸過去方向に変更する。１フレーム進めるボタン３６８は、再生停止状態のプレビュー画像３６１に対して１フレームのみ再生位置を時間軸将来方向に変更する。

スタートへボタン３６９は、プレビュー画像３６１に表示されるフレーム画像をスタートタイムコードに相当するフレーム画像に変更する。エンドへボタン３７０は、プレビュー画像３６１に表示されるフレーム画像をエンドタイムコードに相当するフレーム画像に変更する。

マークリストボタン３８１を押下することにより、非図示のマークリストダイアログが表示される。マークリストダイアログには、１つまたは複数のショットマークおよびイベントマークがリスト表示される。ショットマークとは、デジタルビデオカメラ２０１にてボタン操作等により付与された特定のタイムコードに対応するフレーム画像に対するメタデータである。イベントマークとは、デジタルビデオカメラ２０１の状態に応じて自動的に付与されるマークである。例えば、デジタルビデオカメラ２０１にて撮影中に顔認識が為された場合、その時点のタイムコードに対応するフレーム画像に対してメタデータが付与される。

ショットマークは、デジタルビデオカメラ２０１にて付与可能であると同時に、ショットマークボタン３８８の押下によっても、押下時点のフレーム画像に対して付与可能である。

ショットマーク表示３８２は、ショットマークが記録されている位置をスライダーバー３６４上で示す。前のショットマークへボタン３８４はスライダーバー操作部３６５より時間軸過去方向にショットマーク表示３８２が存在した場合、その位置にプレビュー画像３６１に表示するフレーム画像を変更する。次のショットマークへボタン３８５は、スライダーバー操作部３６５より時間軸将来方向にショットマーク表示３８２が存在した場合、その位置にプレビュー画像３６１に表示するフレーム画像を変更する。図３では、次のショットマークへボタン３８５を押下することにより、プレビュー画像３６１を、スライダーバー操作部３６５の現在位置に相当するフレーム画像から、ショットマーク表示３８２の位置に相当するフレーム画像へ変更できる。

イベントマーク表示３８３は、イベントマークが記録されている位置をスライダーバー３６４上で示す。前のイベントマークへボタン３８６はスライダーバー操作部３６５より時間軸過去方向にイベントマーク表示３８３が存在した場合、その位置にプレビュー画像３６１に表示するフレーム画像を変更する。次のイベントマークへボタン３８７は、スライダーバー操作部３６５より時間軸将来方向にイベントマーク表示３８３が存在した場合、その位置にプレビュー画像３６１に表示するフレーム画像を変更する。図３では、次のイベントマークへボタン３８７を押下することにより、プレビュー画像３６１を、スライダーバー操作部３６５の現在位置に相当するフレーム画像から、イベントマーク表示３８３の位置に相当するフレーム画像へ変更できる。

音声スライダーバー３７１および音声スライダーバー操作部３７２は、画像処理装置１００の音声出力部１０９または音声外部出力部１１１にて再生する音声の音量を設定する設定部である。ミュートボタン３７３を押下することで、音声スライダーバー操作部の位置にかかわらず、音声を非出力とすることができる。チャンネル１ボタン３７４を押下することで、チャンネル１ボタンのみを音声非出力とすることができる。チャンネル２ボタン３７５を押下することで、チャンネル２ボタンのみを音声非出力とすることができる。

ＬＵＴボタン３８９を押下することで、プレビュー画像３６１に表示する表示画像のガンマ特性に対して、あらかじめ設定されたＬＵＴ（Ｌｏｏｋｕｐ−Ｔａｂｌｅ）を適用することが出来る。例えば、Ｌｏｇガンマ特性で撮影されたクリップに対して、Ｌｏｇガンマ特性からＢＴ７０９ガンマ特性へ変換するＬＵＴを適用する。それにより、プレビュー画像３６１には、ＢＴ７０９ガンマ特性へ変換された画像を表示することができる。

３９０は、ホワイトバランス調整スライダーバーである。３９１は、ホワイトバランス調整スライダーバー操作部である。３９２は、露出調整スライダーバーである。３９３は、露出調整スライダーバー操作部である。

図４は、本発明の第１の実施形態による、動画像クリップの構造を説明する図である。

４００は動画像クリップの全体を示す。動画像クリップ４００の解像度は、例えば、横方向４０９６ピクセル、縦方向２１６０ピクセルである。動画像データ４００のフレームレートは、例えば、１２０ｆｐｓである。

４０１、４０２、４０３、４０４、４０５、４０６、４０７、４０８、４０９、４１０、４１１、４１２、４１３、４１４、４１５、４１６、４１７は、それぞれが１フレームの画像データに対応する画像データファイルであることを示している。

デジタルビデオカメラ２０１を用いて撮像記録を行い、動画像クリップ４００を生成することができる。デジタルビデオカメラ２０１を操作して、記録開始操作をしてから記録終了操作をするまでの一続きの動画像が、１つの動画像クリップ４００として記録される。そして動画像クリップ４００を動画像として利用すると共に、特定フレームの画像データに対応するデータファイルを取り出して、静止画像として利用することができる。例えば、画像データファイル４０７のみを動画像データ４００の中から取り出して、静止画像として利用することができる。

１フレームの画像データを１つのデータファイルとして格納するデータファイルフォーマットにて撮像記録した場合、特定のデータファイルのみを取り出すことにより、特定フレームの画像データを取り出すことが可能となる。その場合、編集アプリケーションソフトウェアを用いる必要はなく、ファイル管理ソフトウェアのみを使うことで実現できる。その場合、動画像データ４００は、１７個の画像データファイルの集合となる。

図５は、本発明の第１の実施形態による、画像データファイルのファイル構造を説明する図である。

５０１は、画像データファイルである。５０２は、画像データである。５０３はヘッダーメタデータである。画像データファイル５０１は、画像データ５０２とヘッダーメタデータ５０３を含む。

５０４は現像パラメータ設定モードメタデータである。５０５は現像パラメータ露出メタデータである。ヘッダーメタデータ５０３は、現像パラメータ設定モードメタデータ５０４と現像パラメータ露出メタデータ５０５を含む。

現像パラメータ設定モードメタデータ５０４の値は、デジタルビデオカメラ２０１で画像データ５０２を撮像記録する時の、オートマニュアルモード切り替えスイッチ２０３の設定状態を記録する。オートマニュアルモード切り替えスイッチ２０３の設定状態が「オート」である場合、現像パラメータ設定モードメタデータ５０４の値は「オート」となる。オートマニュアルモード切り替えスイッチ２０３の設定状態が「マニュアル」である場合、現像パラメータ設定モードメタデータ５０４の値は「マニュアル」となる。

現像パラメータ露出メタデータ５０５の値は、デジタルビデオカメラ２０１で画像データ５０２を撮像記録する時の、ゲイン切り替えスイッチ２１１の設定状態を記録する。ゲイン切り替えスイッチ２１１の設定状態が「Ｈ」である場合、現像パラメータ露出メタデータ５０５の値は「Ｈ」となる。ゲイン切り替えスイッチ２１１の設定状態が「Ｍ」である場合、現像パラメータ露出メタデータ５０５の値は「Ｍ」となる。ゲイン切り替えスイッチ２１１の設定状態が「Ｌ」である場合、現像パラメータ露出メタデータ５０５の値は「Ｌ」となる。

図６は、本発明の第一の実施形態による、現像パラメータを説明する図である。

６００は、グラフ全体を示す。このグラフ６００は、動画像クリップ６００の中で、現像パラメータ露出メタデータの値が、どのように時間変化するかを示す。６０１は、グラフ６００の横軸を示す。横軸６０１は時間を示す。６０２は、グラフ６００の縦軸を示す。縦軸６０２はデジタルビデオカメラ２０１で実施される映像信号の増幅処理における増幅率を示す。

６０３は、時間区間Ａを示す。６０４は、時間区間Ｂを示す。６０５は、時間区間Ｃを示す。６０６は、時間区間Ａ６０３において、設定されている現像パラメータ露出の値を示す。この場合、増幅率として「Ｈ」が設定されている。６０７は、時間区間Ｂ６０４において、設定されている現像パラメータ露出の値を示す。この場合、増幅率として「Ｌ」が設定されている。６０８は、時間区間Ｃ６０５において、設定されている現像パラメータ露出の値を示す。この場合、増幅率として「Ｍ」が設定されている。

図７は、本発明の第１の実施形態による、撮像記録再生装置１００のシステム制御マイコン１１４にて実施される現像パラメータ補正の手順を説明するフローチャートである。

Ｓ７０１は処理の開始を示す。Ｓ７０２は、表示中のフレームを補正対象とする。表示中のフレームとは、動画像データ４００の中からスライダーバー操作部３６５の操作に応じて選択されたフレーム画像を表示する、プレビュー画像３６１のことである。Ｓ７０３では、現像パラメータ露出メタデータを補正する。

Ｓ７０４では、１フレーム進む。Ｓ７０５では、フレームが存在するかどうか判定を行う。フレームが存在しない場合はＳ７０９に進む。フレームが存在する場合はＳ７０６に進む。Ｓ７０６では現像パラメータ設定モードメタデータの判定を行う。現像パラメータ設定モードメタデータ５０４がオートである場合は、Ｓ７０８に進む。現像パラメータ設定モードメタデータ５０４がマニュアルである場合は、Ｓ７０７に進む。Ｓ７０７では現像パラメータ露出メタデータの判定を行う。Ｓ７０４にて１フレーム進んだ結果として選択されたフレームの現像パラメータ露出メタデータ５０５が、プレビュー画像３６１に表示されているフレームの現像パラメータ露出メタデータ５０５と同一値かどうかを判定する。同一値である場合は、Ｓ７０８に進む。同一値でない場合はＳ７０９に進む。

Ｓ７０８では、現像パラメータ露出メタデータを補正する。Ｓ７０４にて１フレーム進んだ結果として選択されたフレームに対応する現像パラメータ露出メタデータ５０５に対して、補正を行う。

Ｓ７０９は、表示中のフレームを補正対象とする。表示中のフレームとは、動画像データ４００の中からスライダーバー操作部３６５の操作に応じて選択されたフレーム画像を表示する、プレビュー画像３６１のことである。

Ｓ７１０では、１フレーム戻る。Ｓ７１１では、フレームが存在するかどうか判定を行う。フレームが存在しない場合はＳ７１５に進む。フレームが存在する場合はＳ７１２に進む。Ｓ７１２では現像パラメータ設定モードメタデータの判定を行う。現像パラメータ設定モードメタデータ５０４がオートである場合は、Ｓ７１４に進む。現像パラメータ設定モードメタデータ５０４がマニュアルである場合は、Ｓ７１３に進む。Ｓ７１３では現像パラメータ露出メタデータの判定を行う。Ｓ７１０にて１フレーム戻った結果として選択されたフレームの現像パラメータ露出メタデータ５０５が、プレビュー画像３６１に表示されているフレームの現像パラメータ露出メタデータ５０５と同一値かどうかを判定する。同一値である場合は、Ｓ７１４に進む。同一値でない場合はＳ７１５に進む。

Ｓ７１４では、現像パラメータ露出メタデータを補正する。Ｓ７１０にて１フレーム戻った結果として選択されたフレームに対応する現像パラメータ露出メタデータ５０５に対して、補正を行う。

Ｓ７１５は処理の終了を示す。

図８は、本発明の第一の実施形態による、現像パラメータの補正を説明する図である。Ｓ７０３、Ｓ７０８、Ｓ７１４で実施される補正の処理内容を説明する。

図６に対する差異のみを説明する。８０１は、補正前の増幅率である。補正前であるので、点線で図示している。８０２は、補正後の増幅率である。補正後であるので、実線で図示している。補正量は、露出調整スライダーバー３９３の操作量に応じて決定される。この場合、露出調整スライダーバー３９３の操作量に応じて、増幅率を６ｄＢ減らす様に決定され、補正が行われている。また、図６の場合はマニュアルで現像パラメータが決定されている。その為、図７のフローチャートに沿って補正処理を実行した結果として、時間区間Ｂ６０４に対してのみ、補正が実行されている。

以上説明したように、本実施形態によれば、現像パラメータが手動いわゆるマニュアルで設定された場合であっても、その設定意図を充分反映した現像パラメータ補正を簡便に行うことが出来る。

特に、上述の通り、現像パラメータが同一値を継続するフレーム区間に対してのみ補正処理を実行することで、ある１つの設定意図に対してのみ補正を行うことが可能となる。例えば、ある特定の被写体およびその特定の被写体に対する映像表現の意図が反映された現像パラメータに対してのみ、その意図を反映しながら簡便に補正を行うことが可能となる。

更には、現像パラメータ情報および現像パラメータ設定モード情報は動画像を撮影時に撮影者が手動操作にて付与した情報である為、より一層、撮影者の意図を反映した補正処理が可能となる。

更には、画像処理装置にて画像表示中のフレームを含むフレーム区間に対してのみ補正処理を実行することで、操作者は補正対象となるフレーム区間に含まれるフレーム画像を確認しながら補正処理を実行することが可能となる。これにより、更に利便性が向上する。

本実施形態では、露出補正に対して適用しているが、露出以外の現像パラメータに対して本実施形態を適用しても良い。例えば、ホワイトバランス補正に対して適用しても良い。
報道系の用途では特に、一度きりの出来事を失敗無く且つ迅速に撮影して、更には迅速に視聴用画像を視聴者に提供したい要請がある。その中で、より高品質な視聴用画像を視聴者に提供したい要請がある。報道系における撮影時は特に、一度きりの出来事を迅速に撮影する必要がある為、撮影の失敗が発生する場合がある。撮影の失敗とは、例えば、ホワイトバランスの設定ミス、露出の設定ミス、等である。ＲＡＷ画像として撮像記録しておくことにより、それら撮影の失敗を編集工程にてより効果的に補正できる場合がある。その様に、ＲＡＷ画像は報道系の用途において有効である。本実施形態では、その補正を、更に簡便に行うことを提案している。すなわち、本実施形態を適用することで、ＲＡＷ画像をより効果的に活用する効果を奏する。

＜第２の実施形態＞
以下、第２の実施形態を、第１の実施形態に対する差異のみ説明する。

図９は、本発明の第２の実施形態による、画像処理装置１００のパネル２０９に表示されるインターフェイス画面である。図３に対する差異のみ説明する。

９０１は、現像パラメータグラフ表示部である。現像パラメータグラフ表示部９０１は、動画像データ４００に含まれる現像パラメータ露出メタデータの時間変化を表示する。具体的には、図８で説明した、時間区間Ａ６０３において設定されている現像パラメータ露出メタデータの値６０６、時間区間Ｂ６０４にて設定されている現像パラメータ露出メタデータの値８０２、時間区間Ｃ６０５にて設定されている現像パラメータ露出メタデータの値６０８を表示する。

現像パラメータ露出メタデータの値８０２は、プレビュー画像３６１で表示しているフレームに対応するので、そのグラフ表示を、表示色を変更する、より太い線で表示する、等、更に視認性を高める施策を講じても良い。

以上説明したように、本実施形態によれば、現像パラメータの時間変化と共に、特にマニュアルで設定した場合に補正対象となるフレーム区間が解り易くなる為、更に利便性が向上する。

本実施例は、撮像記録再生装置について記載したが、パーソナルコンピュータ等で実行される動画像処理プログラムとして実施されても良い。

以上、本発明をその好適な実施形態に基づいて詳述してきたが、本発明はこれら特定の実施形態に限られるものではなく、この発明の要旨を逸脱しない範囲の様々な形態も本発明に含まれる。上述の実施形態の一部を適宜組み合わせてもよい。

１００ 画像処理装置、１０１ システム制御マイコン、１０２ 操作部、
１０３ バス、１０４ メモリ、１０５ 記録媒体、１０６ 外部記録媒体接続部、
１０７ 通信部、１０８ 表示部、１０９ 音声出力部、１１０ 映像外部出力部、
１１１ 音声外部出力部

Claims (9)

1. ＲＡＷ動画像データの各フレーム毎に設定される現像用の現像パラメータを取得する現像パラメータ取得手段と、
   前記現像パラメータの設定モード情報を取得する設定モード情報取得手段と、
   前記現像パラメータに対して補正処理を行う補正手段とを備え、
   前記補正手段は、前記設定モード情報がマニュアルモードである時、現像パラメータが同一値を継続するフレーム区間に対してのみ前記補正処理を実行する、前記設定モード情報がオートモードである時、全てのフレーム区間に対して前記補正処理を実行する、ことを特徴とする画像処理装置。
2. 前記現像パラメータは、前記ＲＡＷ動画像データを撮像記録時に、撮像記録装置にて設定することを特徴とする、請求項１に記載の画像処理装置。
3. 前記設定モード情報は、前記ＲＡＷ動画像データを撮像記録時に、撮像記録装置にて設定することを特徴とする、請求項１に記載の画像処理装置。
4. 前記画像処理装置は特定のフレームの画像を表示する画像表示手段を有し、前記補正手段は、前記画像表示手段に表示されているフレームを含むフレーム区間に対してのみ、前記補正処理を実行することを特徴とする、請求項１に記載の画像処理装置。
5. 前記画像処理装置は現像パラメータの時間変化を示すグラフを表示する現像パラメータ表示手段を有することを特徴とする、請求項１乃至請求項４の何れか一項に記載の画像処理装置。
6. 前記現像パラメータ表示手段は、前記補正処理を実行したフレーム区間のみを識別可能に表示することを特徴とする、請求項５に記載の画像処理装置。
7. 前記現像パラメータは、ホワイトバランス調整値であることを特徴とする、請求項１乃至請求項６の何れか一項に記載の画像処理装置。
8. 前記現像パラメータは、露出調整値であることを特徴とする、請求項１乃至請求項６の何れか一項に記載の画像処理装置。
9. ＲＡＷ動画像データの各フレーム毎に設定される現像用の現像パラメータを取得する現像パラメータ取得工程と、
   前記現像パラメータの設定モード情報を取得する設定モード情報取得工程と、
   前記現像パラメータに対して補正処理を行う補正工程とを備え、
   前記補正工程は、前記設定モード情報がマニュアルモードである時、現像パラメータが同一値を継続するフレーム区間に対してのみ前記補正処理を実行する、前記設定モード情報がオートモードである時、全てのフレーム区間に対して前記補正処理を実行する、ことを特徴とする画像処理プログラム。