JP2001326881A - 映像一覧方法及び映像一覧処理プログラムを記録した記録媒体 - Google Patents

Abstract

(57)【要約】 【課題】本発明は、動きを含めた映像の詳細を素早く理
解できるようにする映像一覧方法の提供を目的とする。 【解決手段】映像を複数のシーンに分割して、それぞれ
のシーンから代表画像を一枚ずつ抽出しアイコンとして
一覧表示するとともに、利用者が注目するアイコンを検
出して、注目アイコンが検出された場合には、注目アイ
コンの指すシーンに属する映像を注目アイコンに動画表
示していくように処理する。このように利用者が注目す
るアイコンのみを動画表示することから、一画面に多く
のシーンを表示しつつ、動画アイコンによる映像の確認
を可能にして、視点の移動が煩雑になるという問題点
や、スクロール操作などの増加により確認作業の効率が
落ちるという問題点などの従来技術の持つ様々な問題点
を解決して、効率的な作業を行えるようにしている。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、映像をシーンに分
割し、一シーンを一アイコンで表現して、それらのアイ
コンを一覧表示することによって、映像の概要を素早く
把握できるようにする映像一覧方法と、その映像一覧方
法を実現する映像一覧処理プログラムを記録した記録媒
体とに関し、特に、動きを含めた映像の詳細を素早く理
解できるようにする映像一覧方法と、その映像一覧方法
を実現する映像一覧処理プログラムを記録した記録媒体
とに関する。

【０００２】

【従来の技術】従来技術１ 映像から場面の切り替わり（ショット切り替えと呼ぶ）
を検出して一覧表示するソフトウェア製品、例えば、Ｖ
irage 社ＶideoＬogger3.1が開発され販売されている。
このようなソフトウェア製品の目的の一つとして、映像
に対する情報付加を効率化することがある。

【０００３】図１０の模式図を用いて、この従来技術１
の動作の概略について説明する。

【０００４】入力として与える映像１００は、三つの場
面（ショット）Ａ，Ｂ，Ｃなどから構成されており、こ
の例では、ショットＡは４枚のフレームＡ1,Ａ2,Ａ3,Ａ
4 から構成され、ショットＢは３枚のフレームＢ1,Ｂ2,
Ｂ3 から構成され、ショットＣは３枚のフレームＣ1,Ｃ
2,Ｃ3 から構成されている。これらのショットＡ，Ｂ，
Ｃの境界１０１，１０２，１０３をショット切り替えと
呼ぶ。

【０００５】この従来技術１では、先ず最初に、このシ
ョット切り替え位置を検出する。画像処理を用いてショ
ット切り替え位置を検出する方法として様々なものが開
発されており、例えば、特許第2869398 号「カット点検
出方法及び装置」に示された方法を用いることで検出で
きる。

【０００６】続いて、それぞれのショットの先頭画像を
代表画像２０１（Ａ1,Ｂ1,Ｃ1,......）として映像１０
０から抜き出し、縮小するなどして、代表画像表示ウィ
ンドウ２００内に一覧表示する。

【０００７】このようにして、従来技術１では、ショッ
トから代表画像を抽出して一覧表示することで、利用者
は映像を再生して見なくても内容の概略を把握できるよ
うにしている。

【０００８】この従来技術１に従うと、以上のようにし
て作成した代表画像一覧を用いることで、情報付与イン
タフェースを構築できる。例えば、利用者が代表画像２
０１の一つをマウスなどのポインティングデバイスで選
択すると、コメント入力ウィンドウ２０３が表示される
ようにプログラムする。

【０００９】このコメント入力ウィンドウ２０３を使っ
て、例えば、登場人物、場所、日時、イベントなどとい
った付加情報をショット毎にテキスト入力する。入力テ
キストはデータベースに登録され、後で検索に利用され
る。例えば「国会」という単語を与えると、「国会」に
関するシーン（ショット）が検索され表示されるといっ
た具合である。

【００１０】この従来技術１の一つ目の問題点は、ショ
ット切り替え検出アルゴリズムが１００％正しくショッ
ト切り替えを検出できるわけではないことである。例え
ば、ショットＡとショットＢの境界を示すショット切り
替えが検出できなかったと仮定する。この場合、代表画
像一覧からショットＢの代表画像が抜け落ちることにな
り、重要なショットを見落とす可能性がある。結局、見
落としを無くすには映像をいちいち再生して確認する煩
雑な作業が必要となる。

【００１１】二つ目の問題点は、静止画である代表画像
を見るだけではシーンの詳細が分からない場合があるこ
とである。例えば、サッカー映像を入力として与え、シ
ュートシーンを見つけて情報を付与する作業を考える。
静止画ではシュートシーンか否かの判断が困難なので、
どうしても動画での確認が必要になる。静止画像から構
成される代表画像一覧だけでは動画による確認ができな
いという問題点があった。

【００１２】従来技術２ ショット切り替えの検出もれの有無を確認する作業を効
率化する方法として、特開平10-51734号「動画像編集装
置および動画像編集方法」が開示されている。この従来
技術２では、一ショットに対して一枚の代表画像を表示
するのではなくて、ショットの中からある一定間隔で抜
き出した画像もあわせて表示することで、検出もれを見
つけやすくしている。

【００１３】図１１に、この従来技術２のインタフェー
スの模式図を示す。

【００１４】この従来技術２では、画像表示ウィンドウ
３００に、ショット切り替え直後の代表画像Ａ１，Ｃ１
をショット切り替えを示すマーク３０１と共に表示する
とともに、その間の画像Ａ３，Ｂ１，Ｂ３も合わせて表
示するようにしている。

【００１５】この図１１では、Ｂ１がショット切り替え
として検出されなかった場合を示しているが、この表示
方法により、利用者が画像列を観察することで検出もれ
を簡単に発見できることになる。更に、この従来技術２
では、動画として当該部分を詳細に確認できるようにす
るために、別ウィンドウ３０２を表示して、マウスなど
でプレビューボタン３０３が操作されるときには動画と
して映像を確認できるようにしている。

【００１６】この従来技術２の問題点は、一つのショッ
トについて多数の代表画像を表示する必要があるので、
結局、一画面に収まるショットの数が少なくなり長時間
の映像について確認作業を行おうとすると、ウィンドウ
のスクロール操作などの余計な操作が増え作業効率が落
ちることがある。また、もう一つの問題点として、動画
としてショットを確認するために別ウィンドウ３０２を
表示すると、視点の移動が頻繁になり、利用者の負担が
増大することがあった。

【００１７】

【発明が解決しようとする課題】要約すると、従来技術
１は、一画面に多くのショットを表示でき映像の概要把
握には適しているが、動画として映像を確認できないと
いう問題点があった。したがって、ショット切り替えの
検出もれの修正が困難であった。

【００１８】この従来技術１では静止画を代表画像とし
ているが、すべてを動画として表示させることも可能で
ある。

【００１９】この方法を用いると、動画での確認作業が
可能になるとともに、一画面に多くのショットを収める
ことが可能になるものの、同時に表示される動画の数が
多くなることで、表示処理に多くの計算パワーを要する
という問題点や、画面が騒がしくなりすぎ集中しずらく
なるという問題点や、目が疲れるといった問題点が生ず
る。

【００２０】一方、従来技術２は、動画での確認作業を
可能にしているが、一画面に表示できるショットが少な
くなったり、視点の移動が頻繁になり、確認作業の効率
が落ちるという問題があった。

【００２１】本発明は、これらの問題点を解決するため
になされたものであり、動画によるシーンの確認作業を
効率化することで、動きを含めた映像の詳細を素早く理
解できるようにする新たな映像一覧方法の提供と、その
映像一覧方法を実現する映像一覧処理プログラムを記録
した新たな記録媒体の提供とを目的とする。

【００２２】

【課題を解決するための手段】この目的を達成するため
に、本発明では、映像を複数のシーンに分割する手順
と、分割したそれぞれのシーンから代表画像を一枚ずつ
抽出しアイコンとして一覧表示する手順と、利用者によ
り選定される利用者が注目するアイコンを検出する手順
と、注目アイコンが検出された場合に、注目アイコンの
指すシーンに属する映像を注目アイコンに動画表示する
手順とを有することを特徴とする。

【００２３】このように構成される本発明では、利用者
が注目するアイコンを検出する手順を備えて、その手順
により検出された注目アイコンのみを動画表示するよう
に処理することから、一画面に多くのシーンを表示しつ
つ、動画アイコンによる映像の確認を可能にして、視点
の移動が煩雑になるという問題点や、スクロール操作な
どの増加により確認作業の効率が落ちるという問題点
や、表示処理に多くの計算パワーを要するという問題点
や、画面が騒がしくなりすぎ集中しずらくなるという問
題点や、目が疲れるといった問題点を解決する。これに
より効率的な作業を行えるようになる。

【００２４】更に、本発明では、映像を複数のシーンに
分割する手順が、場面の切り替わりであるショット切り
替えを検出し、映像をショットに分割する手順を含むこ
とを特徴とする。

【００２５】この構成に従って、ショットという映像制
作でよく用いられている単位毎に情報を付与できるなど
の効果がある。

【００２６】このとき、動画表示する手順が、注目アイ
コンに対応する現ショットの先頭フレームから次ショッ
トの先頭フレームまでを繰り返し動画表示することを特
徴とする。

【００２７】この構成に従って、現ショットの最後まで
ではなく、次のショットの先頭まで表示されることにな
ることで、ショット切り替えの検出もれを目視で効率的
に確認できるようになる。

【００２８】更に、本発明では、注目アイコンを検出す
る手順が、コンピュータ画面上のポインティングカーソ
ルがアイコンに重なることを検出する手順であることを
特徴とする。

【００２９】この構成に従って、マウスを利用可能なウ
ィンドウシステム（例えば、Ｘ−Ｗindow,Ｗｉｎｄｏｗ
ｓ（登録商標））の上に簡単に実装できるようになる。

【００３０】更に、本発明では、動画表示する手順が、
予め設定した時間内に動画再生が一巡するように間引い
て表示することを特徴とする。

【００３１】この構成に従って、長いシーンも、一定時
間内に動画再生されるようになるので、動画確認作業が
効率化される。

【００３２】更に、本発明では、利用者にアイコンを選
択させる手順と、選択されたアイコンに対して利用者に
付加情報を入力させる手順と、入力された付加情報を、
選択されたアイコンの指す映像区間と関連付けて記録す
る手順とを有することを特徴とする。

【００３３】この構成に従って、アイコンに対するコメ
ントなどの付加情報を利用者が入力するインタフェース
が提供されることで、効率的に情報付加作業を行えるよ
うになる。

【００３４】

【発明の実施の形態】以下、実施の形態に従って本発明
を詳細に説明する。

【００３５】図１に、本発明を具備する映像処理装置１
の一実施形態例を図示する。

【００３６】この図に示すように、本発明を具備する映
像処理装置１は、処理対象の映像を格納する映像ファイ
ル２に接続されて、本発明を実現するために、利用者と
の対話手段となる端末３と、映像処理プログラム１０
と、動画アイコン表示ルーチン１１と、映像作業ファイ
ル１２と、タイムコード格納域１３とを備える。

【００３７】ここで、図中に示す４は端末３の備えるデ
ィスプレイ、５は端末３の備えるキーボード、６は端末
３の備えるマウスである。

【００３８】この映像処理プログラム１０は、フロッピ
ィディスクや回線などを介してインストールされてメモ
リ上で動作して、本発明を実現するための映像処理のメ
イン処理を実行する。動画アイコン表示ルーチン１１
は、フロッピィディスクや回線などを介してインストー
ルされてメモリ上で動作して、映像処理プログラム１０
から呼び出されて本発明に特徴的な動画アイコン表示処
理を実行する。

【００３９】映像作業ファイル１２は、映像処理プログ
ラム１０により処理される映像の作業用ファイルとして
用意される。タイムコード格納域１３は、映像を仮想的
に分割するときに得られるタイムコードを格納する。

【００４０】ここで、映像処理プログラム１０や動画ア
イコン表示ルーチン１１は、計算機が読み取り可能な可
搬媒体メモリや半導体メモリやハードディスクなどの適
当な記録媒体に格納することができる。

【００４１】図２及び図３に、映像処理プログラム１０
の実行する処理フローの一実施形態例、図４に、動画ア
イコン表示ルーチン１１の実行する処理フローの一実施
形態例を図示する。

【００４２】次に、この処理フローに従って、このよう
に構成される本発明を具備する映像処理装置１の実行す
る処理について詳細に説明する。

【００４３】映像処理プログラム１０は、起動される
と、図２及び図３の処理フローに示すように、先ず最初
に、ステップ１で、映像ファイル２から処理対象の映像
を読み込んで映像作業ファイル１２に格納する。

【００４４】続いて、ステップ２で、その読み込んだ処
理対象の映像からショット切り替え（カットとも呼ばれ
る）を検出する。具体的には、特許第2869398 号「カッ
ト点検出方法及び装置」に示された方法を用いることが
できる。

【００４５】この特許第2869398 号に示された方法で
は、図５に示すように、ＭＰＥＧ方式などにより圧縮さ
れた圧縮画像データを画面間順方向予測符号化画像列
（ＭＰＥＧ方式の場合にはＰピクチャの画像列）と、画
面内符号化画像列（ＭＰＥＧ方式の場合にはＩピクチャ
の画像列）とに分離し、それぞれの画像列の変化量を算
出して、その算出した２つの変換量からカット点を検出
するように処理しているので、この方法に従って、読み
込んだ処理対象の映像からショット切り替えを検出する
のである。

【００４６】このショット切り替えの検出処理により、
一本の映像が複数のショットに分割される。実際には、
映像データそのものを分割するわけではなくて、ショッ
ト切り替えの時間情報であるタイムコードをタイムコー
ド格納域１３に記憶することで、映像をショットに仮想
的に分割することになる。

【００４７】続いて、ステップ３で、ショット毎に一枚
の代表画像（アイコンと呼ぶ）を抽出（必要に応じて縮
小する）し、それらを図６に示すような代表画像一覧ウ
ィンドウ２０内に順に並べて表示する。この図に示す代
表画像一覧ウィンドウ２０では、通番(1),(2),......
と、ショットの開始時刻とをアイコンの下に表示するよ
うにしている。

【００４８】ここで、代表画像一覧ウィンドウ２０は、
図６に示すように、マウスカーソル２１を表示するとと
もに、併合ボタン２２と、追加ボタン２３と、コメント
入力ボタン２４とを持っている。

【００４９】このときの代表画像の表示形態について
は、特開平11-224266 号「電子映像文書作成利用方法及
びプログラム格納媒体」に記載されているように、利用
者が指定した方法などに従って、図７（ａ）に示すよう
に欧文の横書きの順に配置したり、図７（ｂ）に示すよ
うに縦方向に配置するといったように、時間順序を追う
ことができる形で代表画像を配置していくことになる。

【００５０】図６に示す代表画像一覧ウィンドウ２０の
例では、９つのアイコンＡ1,Ｂ1,Ｃ1,....を左から右
へ、上から下へというように欧文の横書きの順に一覧表
示している。

【００５１】このときに表示する代表画像としては、シ
ョットの先頭画像を用いることもできるし、ショット切
り替えから一定時間後の画像を代表画像とすることもで
きる。なお、この時点では、すべてのアイコンが静止画
として表示されている。

【００５２】続いて、ステップ４で、ユーザ操作を待っ
て、ユーザ操作を検出すると、続くステップ５で、その
ユーザ操作が処理の終了を要求するものであるのか否か
を判断して、処理終了要求のユーザ操作であることを判
断するときには、処理を終了する。

【００５３】一方、ステップ５で、処理終了要求のユー
ザ操作でないことを判断するときには、ステップ６に進
んで、ユーザ操作によりマウスカーソル２１がアイコン
の上に移動したのか否かを調べて、マウスカーソル２１
がアイコン上に存在する場合には、利用者がそのアイコ
ンに注目しているとみなし、ステップ７に進んで、動画
アイコン表示ルーチン１１を呼び出すことで動画アイコ
ン表示処理を開始させてから、ステップ４に戻ることで
次のユーザ操作を待つ。

【００５４】図６に示す代表画像一覧ウィンドウ２０の
例では、マウスカーソル２１がアイコンＡ１の上に位置
しているので、アイコンＡ１が注目アイコンとして検出
されることになる。後述するように、動画アイコン表示
ルーチン１１は、注目アイコンのみを動画表示するよう
に処理するので、この例の場合には、アイコンＡ１のみ
が動画表示されることになる。なお、マウスカーソル２
１の位置は、コンピュータのオペレーティングシステム
（ＯＳ）が管理しているので、オペレーティングシステ
ムに問い合わせることで取得できる。

【００５５】一方、ステップ６で、ユーザ操作によりマ
ウスカーソル２１がアイコンの上に移動したのではない
ことを判断するときには、ステップ８に進んで、ユーザ
操作によりマウスカーソル２１がアイコンの外へ移動し
たのか否かを判断して、マウスカーソル２１がアイコン
の外へ移動したことを判断するときには、ステップ９に
進んで、動画アイコン表示ルーチン１１を停止させるこ
とで動画アイコン表示処理を終了させてから、ステップ
４に戻ることで次のユーザ操作を待つ。

【００５６】このようにして、マウスカーソル２１がア
イコン上にとどまっている場合には動画アイコン表示処
理を継続させるとともに、マウスカーソル２１がアイコ
ンの外へ移動した場合には、動画アイコン表示処理を終
了させて、今まで動画表示されていたアイコンを静止画
表示に切り替えていくように処理するのである。

【００５７】次に、図２及び図３の処理フローの説明を
一時離れて、図４の処理フローに従って、動画アイコン
表示ルーチン１１の実行する動画アイコン表示処理につ
いて詳細に説明する。

【００５８】動画アイコン表示ルーチン１１は、注目ア
イコンが検出されることで起動されると、図４の処理フ
ローに示すように、先ず最初に、ステップ２０で、タイ
ムコード格納域１３にアクセスすることで、注目アイコ
ンに対応付けられるショットの開始時刻αと次のショッ
トの開始時刻βとを取得する。

【００５９】すなわち、映像処理プログラム１０の処理
に従ってタイムコード格納域１３にショット切り替えの
時刻情報であるタイムコードが記録されているので、そ
れを参照することで、注目アイコンに対応付けられるシ
ョットの開始時刻αと次のショットの開始時刻βとを取
得するのである。

【００６０】この２つの開始時刻α，βを取得すると、
続いて、ステップ２１で、変数ｉに初期値“０”をセッ
トする。

【００６１】続いて、ステップ２２で、注目アイコンに
対応付けられるショットをＮ等分する時刻ｔの内、変数
ｉの指す時刻を、 ｔ＝α×（Ｎ−ｉ）／Ｎ＋β×ｉ／Ｎ （ｉ＝0,1,
2,....,N） の式に従って算出して、映像作業ファイル１２に格納さ
れる映像の中から、その時刻ｔに最も近い画像を取得
（必要に応じて縮小する）して、それを注目アイコンに
表示する。

【００６２】この式に従って、「ｉ＝０」のときには
「ｔ＝α」という時刻が求められることで、注目アイコ
ンに対応付けられるショットの先頭画像が注目アイコン
に表示されることになる。また、「ｉ＝Ｎ」のときには
「ｔ＝β」という時刻が求められることで、注目アイコ
ンに対応付けられるショットの次のショットの先頭画像
が注目アイコンに表示されることになる。

【００６３】ここで、Ｎはショットの長さに関係なく設
定される。（Ｎ＋１）は一つのショットから抜き出すフ
レーム数であり、Ｎが大きいほど動画再生が滑らかにな
る反面、一回の再生に要する時間が長くなり確認作業に
時間がかかる。従って、適当な値（例えばＮ＝１０）を
Ｎとして設定する必要がある。

【００６４】続いて、ステップ２３で、ステップ２２の
処理により表示を開始してから規定の一定時間ｐ（例え
ば１００ミリ秒）が経過するのを待って、その一定時間
ｐが経過したことを判断すると、ステップ２４に進ん
で、変数ｉの値を１つインクリメントする。

【００６５】続いて、ステップ２５で、変数ｉの値がＮ
よりも大きくなったのか否かを判断して、大きくなって
いないことを判断するときには、そのままステップ２２
に戻り、大きくなったことを判断するときには、ステッ
プ２６に進んで、変数ｉの値を０にリセットしてからス
テップ２２に戻る。

【００６６】このようにして、動画アイコン表示ルーチ
ン１１は、注目アイコンが検出されることで起動される
と、数十〜数百ミリ秒という短い時間間隔ｐでもって、
注目アイコンに表示する画像を更新することで、注目ア
イコンの指すショットの画像を間引きつつ動画表示する
ように処理するのである。

【００６７】この動画アイコン表示処理は、ｐ×（Ｎ＋
１）（ｐ＝１００ミリ秒、Ｎ＝１０の場合、ｐ×Ｎ＝1.
１秒）の時間で一巡する。ショットの長さに関係なく一
定時間内に動画が一巡するようにしたので、長いショッ
トも短時間で確認できることになる。

【００６８】なお、動画の動きが速すぎて確認に困難を
きたす場合には、後述するモニターウィンドウ３０を補
助的に用いることも可能であり、この場合には、モニタ
ーウィンドウ３０の持つ早送り機能や、巻き戻し機能
や、再生機能や、停止機能などの制御を行いながら確認
作業を行うことになる。

【００６９】動画アイコン表示ルーチン１１は、図４の
処理フローに従う場合、注目アイコンに対応付けられる
ショットの開始フレームから次のショットの開始フレー
ムβまでを動画表示するようにしている。これに対し
て、注目アイコンに対応付けられるショットの開始フレ
ームαから終了フレーム（β−１）までを動画表示する
ように修正することもできる。

【００７０】この場合には、例えば、ショットＡに対応
する動画アイコンは画像列 「Ａ1,Ａ3,Ａ5 」 「Ａ1,Ａ3,Ａ5 」 ............ を繰り返し動画表示することになる。

【００７１】しかしながら、この方法によると、Ａ1,Ａ
3,Ａ5 はすべて同一ショットに含まれるフレームなので
画像の絵柄が似通っており、動画がどこで一巡したのか
が分かりずらいという問題がある。

【００７２】それに対して、図４の処理フローの方法で
は、 「Ａ1,Ａ3,Ａ5,Ｂ1 」 「Ａ1,Ａ3,Ａ5,Ｂ1 」
............ のように、次のショットの先頭フレームＢ１まで表示す
るようにしているので、動画が一巡したことが分かりや
すくなる。つまり、Ｂ１の画像を表示したとき、一瞬動
画がフラッシュしたように見えるので、その時点で動画
が一巡したことが分かる。

【００７３】更に、図４の処理フローの方法によると、
ショット切り替えの検出もれが目視で発見しやすくな
る。

【００７４】例えば、ショットＢが検出されなかった場
合、ショットＡに対応する動画アイコンは、例えば画像
列 「Ａ1,Ａ5,Ｂ2,Ｂ6,Ｃ1 」 「Ａ1,Ａ5,Ｂ2,Ｂ6,Ｃ1 」
............ を表示することになる。この場合には、Ｂ２とＣ１の画
像が表示されたとき、２回フラッシュしたように見え
る。２回、フラッシュしたように見せることで、ショッ
ト切り替えの検出もれがあったことを知覚できるように
している。

【００７５】次に、図２及び図３の処理フローに戻っ
て、映像処理プログラム１０の実行する処理について説
明を進める。

【００７６】映像処理プログラム１０は、図２の処理フ
ローのステップ８で、ユーザ操作がマウスカーソル２１
の移動操作でないことを判断するときには、ステップ１
０（図３の処理フロー）に進んで、ユーザ操作が代表画
像（アイコン）の併合要求であるのか否かを判断する。

【００７７】すなわち、図６に示すように、代表画像一
覧ウィンドウ２０には併合ボタン２２が用意されてお
り、利用者は、ショット切り替えが過剰に検出された
（一つのショットが二つ以上のショットとして検出され
た場合）ことで、代表画像一覧ウィンドウ２０に表示さ
れている代表画像を併合させたいと考えるときには、代
表画像一覧ウィンドウ２０に表示される複数の代表画像
を同時に選択して、併合ボタン２２を押下することによ
り代表画像の併合要求を発行してくるので、ユーザ操作
がこの併合要求（複数のショットを１つに併合させる要
求）であるのか否かを判断するのである。

【００７８】この判断処理により、ユーザ操作が代表画
像（アイコン）の併合要求であることを判断するときに
は、ステップ１１に進んで、併合対象として選択された
複数の代表画像の指すショットを併合するとともに、そ
れらの代表画像を併合してから、ステップ４に戻ること
で次のユーザ操作を待つ。

【００７９】このようにして、映像処理プログラム１０
は、代表画像一覧ウィンドウ２０に表示する複数の代表
画像がマウス６によりクリックされることで選択（その
旨が分かるように表示色を変えてもよい）された後に、
併合ボタン２２が押下されたことを検出すると、それら
の代表画像の併合要求が発行されたことを判断して、時
間的に前の方の代表画像を残し、残りの代表画像を消去
することで代表画像を併合するとともに、タイムコード
格納域１３に格納されるそれらの代表画像の指すタイム
コードを１つに統合（ショットの開始時刻と終了時刻と
が残るように統合）するように処理するのである。

【００８０】ここで、誤り修正メニューを用意して、こ
の誤り修正メニューが選択されるときに併合ボタン２２
を表示するという構成を採るときには、誤り修正メニュ
ーが選択されたことを検出するときに併合ボタン２２を
表示していくことで、上述した併合処理を行っていくこ
とになる。

【００８１】一方、ステップ１０で、ユーザ操作が代表
画像（アイコン）の併合要求でないことを判断するとき
には、ステップ１２に進んで、ユーザ操作が代表画像の
追加要求であるのか否かを判断する。

【００８２】すなわち、映像処理プログラム１０は、図
６に示す代表画像一覧ウィンドウ２０を表示するとき
に、図８に示すようなモニターウィンドウ３０を表示し
ており、利用者は、正規のショット切り替えが検出され
なかったことで、代表画像一覧ウィンドウ２０に代表画
像を追加したいと考えるときには、このモニターウィン
ドウ３０を使って代表画像の追加要求を発行してくるの
で、ユーザ操作がこの追加要求であるのか否かを判断す
るのである。

【００８３】この判断処理により、ユーザ操作が代表画
像（アイコン）の追加要求であることを判断するときに
は、ステップ１３に進んで、モニターウィンドウ３０を
使って利用者と対話することで、代表画像を追加（ショ
ットを追加）してから、ステップ４に戻ることで次のユ
ーザ操作を待つ。

【００８４】このモニターウィンドウ３０では、動画や
静止画を表示する画像表示エリア３１と、画像の動きを
停止させる停止ボタン３２と、画像を再生させる再生ボ
タン３３と、画像を早送りさせる早送りボタン３４と、
画像を巻き戻しさせる巻き戻しボタン３５と、映像全体
の中での現在の画像位置の変更に用いるスクロールバー
３６と、設定されたショット区間の中での現在の画像位
置の変更に用いるスクロールバー３７と、追加するショ
ットの開始時刻の設定に用いるＩＮボタン３８と、追加
するショットの終了時刻の設定に用いるＯＵＴボタン３
９とを用意している。

【００８５】これから、利用者は、例えば、スクロール
バー３６を使って、画像表示エリア３１に表示される画
像をスクロールしながら、追加したいショットの開始位
置を見つけると、ＩＮボタン３８を押下することでショ
ットの開始時刻を仮設定するとともに、追加したいショ
ットの終了位置を見つけると、ＯＵＴボタン３９を押下
することでショットの終了時刻を仮設定する。そして、
その仮設定した時刻の区切るショットを追加するときに
は、代表画像一覧ウィンドウ２０の追加ボタン２３を押
下する。

【００８６】この代表画像の追加要求（ショットの追加
要求）を受けて、映像処理プログラム１０は、仮設定さ
れた開始時刻と終了時刻とをタイムコード格納域１３に
登録することで新たなショットを登録するとともに、そ
の登録したショットの代表画像を代表画像一覧ウィンド
ウ２０に追加表示することで代表画像を追加する。

【００８７】このようにして、映像処理プログラム１０
は、モニターウィンドウ３０を表示して、ＩＮボタン３
８の押下されるときのスクロールバー３６の座標位置の
指す映像時刻をショットの仮開始時刻とし、ＯＵＴボタ
ン３９の押下されるときのスクロールバー３６の座標位
置の指す映像時刻をショットの仮終了時刻として決定
し、追加ボタン２３が押下されることを検出すると、そ
の仮設定した開始時刻／終了時刻をタイムコード格納域
１３に登録することで、利用者の切り出したショットを
登録するように処理するのである。

【００８８】ここで、誤り修正メニューを用意して、こ
の誤り修正メニューから追加要求が選択されるときにモ
ニターウィンドウ３０を表示するという構成を採るとき
には、誤り修正メニューの中から追加要求が選択される
ときにモニターウィンドウ３０を表示していくことで、
上述した追加処理を行っていくことになる。

【００８９】一方、ステップ１２で、ユーザ操作が代表
画像（アイコン）の追加要求でないことを判断するとき
には、ステップ１４に進んで、ユーザ操作がコメントの
入力要求であるのか否かを判断する。

【００９０】すなわち、図６に示すように、代表画像一
覧ウィンドウ２０にはコメント入力ボタン２４が用意さ
れており、利用者は、代表画像一覧ウィンドウ２０に表
示されている代表画像の指すショットにコメント情報を
割り付けたいと考えるときには、代表画像一覧ウィンド
ウ２０に表示される代表画像をマウス６で選択してか
ら、コメント入力ボタン２４を押下することによりコメ
ント入力要求を発行してくるので、ユーザ操作がこのコ
メント入力要求であるのか否かを判断するのである。

【００９１】この判断処理により、ユーザ操作がコメン
ト入力要求であることを判断するときには、ステップ１
５に進んで、図９に示すようなコメント入力ウィンドウ
４０を表示して利用者と対話することでコメント情報を
入力して、それをユーザの選択した代表画像の指すショ
ットに対応付けて格納（映像作業ファイル１２などに格
納する）してから、ステップ４に戻ることで次のユーザ
操作を待つ。

【００９２】このコメント入力ウィンドウ４０は、代表
画像を表示する代表画像表示エリア４１と、二つのテキ
スト入力エリア４２，４３と、ＯＫボタン４４、キャン
セルボタン４５とから構成される。

【００９３】映像処理プログラム１０は、利用者から代
表画像を選択してコメントの入力要求が発行されると、
キーボード５から入力されるテキストを、テキスト入力
エリア４２またはテキスト入力リエア４３に表示し、利
用者がＯＫボタン４４を押下すると、コメント入力処理
を終了して、選択された代表画像（アイコン）の指すシ
ョットと関連付けてコメント情報を保存して、コメント
入力ウィンドウ４０を閉じる。そして、利用者がキャン
セルボタン４５を押下するときには、入力したコメント
情報を保存しないで、コメント入力ウィンドウ４０を閉
じるように処理する。

【００９４】このようなコメント入力ウィンドウ４０の
インタフェースを設けることにより、ショット単位での
情報付与が効率化されるという効果がある。

【００９５】そして、ステップ１４で、ユーザ操作がコ
メント入力要求でないことを判断するときには、ステッ
プ１６に進んで、ユーザ操作の指定する処理を実行して
から、ステップ４に戻ることで次のユーザ操作を待つ。

【００９６】このようにして、映像処理プログラム１０
は、映像を複数のショットに分割して、それぞれのショ
ットから代表画像を一枚ずつ抽出しアイコンとして一覧
表示するとともに、利用者が注目するアイコンを検出し
て、注目アイコンが検出された場合には、注目アイコン
の指すショットに属する映像を注目アイコンに動画表示
していくように処理するのである。

【００９７】以上に説明した実施形態例では、映像をシ
ョットを単位にして分割することで説明したが、映像を
シーンに分割することでもよい。

【００９８】映像をシーンに分割する場合には、ショッ
ト切り替えだけでなく、カメラ操作の開始点・終了点
や、テロップ（字幕）の表示開始点・終了点や、ナレー
ションの開始点・終了点、音楽の開始点・終了点などと
いった音声の切り替えなどの情報を手がかりにして、映
像をシーンに分割することになる。勿論、ショットの切
り替えなどを手がかりにして、利用者と対話することで
映像をシーンに分割してもよい。

【００９９】また、利用者の注目するアイコンを検出す
る手順も、様々なものが考えられる。例えば、キーボー
ド操作により注目アイコンが切り替えられるようにとプ
ログラムしたり、視線検出装置などを使うことも可能で
ある。

【０１００】また、図４に示した処理フローでは、動画
更新手続きを繰り返し呼び出すようにしているが、実際
にはハードウェアタイマーなどを用いて一定時間おきに
更新手続きが呼び出されるような構成を用いることも可
能である。

【０１０１】

【発明の効果】以上説明したように、本発明では、映像
を複数のシーンに分割して処理するときにあって、利用
者が注目するアイコンを検出して、その注目アイコンの
みを動画表示することを特徴とする。

【０１０２】この構成に従って、一画面に多くのシーン
を表示しつつ、動画アイコンによる映像の確認を可能に
して、視点の移動が煩雑になるという問題点や、スクロ
ール操作などの増加により確認作業の効率が落ちるとい
う問題点や、表示処理に多くの計算パワーを要するとい
う問題点や、画面が騒がしくなりすぎ集中しずらくなる
という問題点や、目が疲れるといった問題点を解決し、
これにより効率的な作業を行えるという効果がある。

【０１０３】更に、本発明では、映像を複数のシーンに
分割する手順が、場面の切り替わりであるショット切り
替えを検出し、映像をショットに分割する手順を含むこ
とを特徴とする。

【０１０４】この構成に従って、ショットという映像制
作でよく用いられている単位毎に情報を付与できるなど
の効果がある。

【０１０５】このとき、動画表示する手順が、注目アイ
コンに対応する現ショットの先頭フレームから次ショッ
トの先頭フレームまでを繰り返し動画表示することを特
徴とする。

【０１０６】この構成に従って、現ショットの最後まで
ではなく、次のショットの先頭まで表示されることにな
ることで、ショット切り替えの検出もれを目視で効率的
に確認できるようになる。

【０１０７】更に、本発明では、注目アイコンを検出す
る手順が、コンピュータ画面上のポインティングカーソ
ルがアイコンに重なることを検出する手順であることを
特徴とする。

【０１０８】この構成に従って、マウスを利用可能なウ
ィンドウシステム（例えば、Ｘ−Ｗindow,Ｗindows）の
上に簡単に実装できるようになる。

【０１０９】更に、本発明では、動画表示する手順が、
予め設定した時間内に動画再生が一巡するように間引い
て表示することを特徴とする。

【０１１０】この構成に従って、長いシーンも、一定時
間内に動画再生されるようになるので、動画確認作業が
効率化される。

【０１１１】更に、本発明では、利用者にアイコンを選
択させる手順と、選択されたアイコンに対して利用者に
付加情報を入力させる手順と、入力された付加情報を、
選択されたアイコンの指す映像と関連付けて記録する手
順とを有することを特徴とする。

【０１１２】この構成に従って、アイコンに対するコメ
ントなどの付加情報を利用者が入力するインタフェース
が提供されることで、効率的に情報付加作業を行えるよ
うになる。

【図面の簡単な説明】

【図１】本発明を具備する映像処理装置の一実施形態例
である。

【図２】映像処理プログラムの実行する処理フローの一
実施形態例である。

【図３】映像処理プログラムの実行する処理フローの一
実施形態例である。

【図４】動画アイコン表示ルーチンの実行する処理フロ
ーの一実施形態例である。

【図５】ショット切り替えの検出処理の説明図である。

【図６】代表画像一覧ウィンドウの一実施形態例であ
る。

【図７】代表画像の表示形態の説明図である。

【図８】モニターウィンドウの一実施形態例である。

【図９】コメント入力ウィンドウの一実施形態例であ
る。

【図１０】従来技術の説明図である。

【図１１】従来技術の説明図である。

【符号の説明】

１ 映像処理装置 ２ 映像ファイル ３ 端末 ４ ディスプレイ ５ キーボード ６ マウス １０ 映像処理プログラム １１ 動画アイコン表示ルーチン １２ 映像作業ファイル １３ タイムコード格納域

───────────────────────────────────────────────────── フロントページの続き Ｆターム(参考） 5C023 AA02 AA14 AA16 AA18 AA31 AA38 BA01 BA12 CA03 CA05 DA04 DA08 EA03 5C025 AA30 CA02 CA09 CB10 DA10 5C052 AA01 AB03 AB04 AC08 DD04 EE02 EE03 5E501 AA02 AC16 AC33 AC34 BA02 BA03 BA05 BA14 CA02 CB02 CB09 EA05 EA11 EB05 EB19 FA15 FB04 FB32 FB43

Claims (8)

【特許請求の範囲】
1. 【請求項１】 映像を複数のシーンに分割する手順と、 分割したそれぞれのシーンから代表画像を一枚ずつ抽出
   しアイコンとして一覧表示する手順と、 利用者により選定される利用者が注目するアイコンを検
   出する手順と、 注目アイコンが検出された場合に、該注目アイコンの指
   すシーンに属する映像を該注目アイコンに動画表示する
   手順とを有することを、 特徴とする映像一覧方法。
2. 【請求項２】 請求項１記載の映像一覧方法において、 映像を複数のシーンに分割する手順が、場面の切り替わ
   りであるショット切り替えを検出し、映像をショットに
   分割する手順を含むことを、 特徴とする映像一覧方法。
3. 【請求項３】 請求項２記載の映像一覧方法において、 動画表示する手順が、注目アイコンに対応する現ショッ
   トの先頭フレームから次ショットの先頭フレームまでを
   繰り返し動画表示することを、 特徴とする映像一覧方法。
4. 【請求項４】 請求項１ないし３のいずれか１項に記載
   される映像一覧方法において、 注目アイコンを検出する手順が、コンピュータ画面上の
   ポインティングカーソルがアイコンに重なることを検出
   する手順であることを、 特徴とする映像一覧方法。
5. 【請求項５】 請求項１ないし４のいずれか１項に記載
   される映像一覧方法において、 動画表示する手順が、予め設定した時間内に動画再生が
   一巡するように間引いて表示することを、 特徴とする映像一覧方法。
6. 【請求項６】 請求項５記載の映像一覧方法において、 予め設定したフレーム数を再生対象の映像のフレーム数
   で除算して間引き率を算出し、該間引き率に従ってフレ
   ームを間引いて映像を再生することを、 特徴とする映像一覧方法。
7. 【請求項７】 請求項１ないし６のいずれか１項に記載
   される映像一覧方法において、 利用者にアイコンを選択させる手順と、 選択されたアイコンに対して利用者に付加情報を入力さ
   せる手順と、 入力された付加情報を、選択されたアイコンの指す映像
   区間と関連付けて記録する手順とを有することを、 特徴とする映像一覧方法。
8. 【請求項８】 請求項１ないし７のいずれか１項に記載
   される映像一覧方法をコンピュータに実行させるための
   プログラムを、コンピュータが読み取り可能な記録媒体
   に記録することを、 特徴とする映像一覧処理プログラムを記録した記録媒
   体。