JP2004260711A - ビデオ検索データベースを作成する方法及び記録媒体 - Google Patents

Abstract

【課題】ビデオ検索データベースを作成する方法及び記録媒体を提供する。
【解決手段】先ず、字幕が付いた画像データを複数のショットに分割する。複数のショット中のビデオに従って、複数のキーフレームを抽出する。複数のキーフレームにより、画像ブラウザ検索を設定する。続いて、画像データ中の画像特徴に従って、テキスト領域をとらえる。テキスト領域に対してテキストの分割を行い、複数のテキスト特徴を生成する。複数のテキスト特徴とデータベース中のテキストとを比較し、テキストデータを生成する。テキストデータにより、テキスト索引表を設定する。最後に、画像ブラウザ検索とテキスト索引表により、ビデオ検索データベースを作成する。
【選択図】 図１

Description

【０００１】
【発明の属する技術分野】
本発明は、語学教材製作に関するもので、特に、画像ブラウザ検索及びテキスト索引表を備える語学教材のインタラクティブビデオに関するものである。
【０００２】
【従来の技術】
国際化の趨勢下、様々な英語自己学習教材が発売され、中でも、インタラクティブ性が特に重視されている。しかし、語学教材は製作が難しく、かかる人力もコストも膨大で、又、消費者にとって、現在市販されているインタラクティブ式の画像語学教材は素材も限界があり、価格も高く、内容面から言っても、効果的に、しかも飽きずに学習を継続することが出来ない。
【０００３】
【発明が解決しようとする課題】
本発明は外国語ビデオをインタラクティブな語学教材ビデオに転換する、ビデオ検索データベースを作成する方法を提供することを目的とする。
【０００４】
【課題を解決するための手段】
上述の目的を達成するため、本発明はビデオ検索データベースを作成する方法を提供し、先ず、字幕が付いた画像データを複数のショットに分割する。複数のショット中のビデオに従って、複数のキーフレームを抽出する。複数のキーフレームにより、画像ブラウザ検索を設定する。続いて、画像データ中の画像特徴に従って、テキスト領域をとらえる。テキスト領域に対してテキストの分割を行い、複数のテキスト特徴を生成する。複数のテキスト特徴とデータベース中のテキストとを比較し、テキストデータを生成する。テキストデータにより、テキスト索引表を設定する。最後に、画像ブラウザ検索とテキスト索引表により、ビデオ検索データベースを作成する。
【０００５】
【発明の実施の形態】
上述した本発明の目的、特徴、及び長所をいっそう明瞭にするため、以下に本発明の好ましい実施の形態を挙げ、図を参照にしながらさらに詳しく説明する。
【０００６】
図１は、本発明の実施例による、ビデオ検索データベースを作成する方法のフローチャートであり、操作工程は以下の通りである。
【０００７】
先ず、工程Ｓ１０において、例えば、中国語字幕や英語字幕を含む外国語ビデオを分析し、工程Ｓ１２において、コンピューターシステムにより、自動的、且つ快速にショット検出を行い、ショット切り換えタイミングに従って、ビデオファイルを複数のショットに分割する。
【０００８】
工程Ｓ１４において、各ショット中、フレームの画面変化に基づいて、複数のキーフレームをとらえる。キーフレームは一ショットを代表する。工程Ｓ１６において、画像ブラウザ検索を設定し、一時間ちょっとのビデオは数千のショットを含み、キーフレームは一ショットを代表することにより、複数のキーフレームを用いて、速やかに画像ブラウザ検索の設定を完成することが出来、ユーザーはこのキーフレームの時間位置及び内容により、速やかに閲覧したいビデオ個所を探し出すことが出来る。
【０００９】
工程Ｓ２２において、画像データ中のビデオに対し強化を施し、即ち、ビデオ中のエッジを強化し、続いて、エッジ検出により、テキスト領域をとらえる。ビデオ中のイメージ部分のエッジは大きな弧度を備え、不規則で、ビデオ中の字幕部分のエッジは直線が多いため、この画像特徴に従って、画像中のテキスト領域をとらえる。
【００１０】
工程Ｓ２４において、テキスト領域はテキストの分割が行われ、テキスト領域を検出し、テキストの長さ、広さ、高さ、線の密度、構造に従って、テキスト領域中のテキストを複数のテキスト領域に分割し、ニ値化を用いて、それぞれのテキスト領域中の色を白黒の２色に分ける。一般のビデオ中のテキストは、大部分が複雑な画面上にあるため、複雑な背景を除去、つまりそれぞれのテキスト領域を白地に黒文字に転換して、テキストと背景を分け、テキスト特徴を生成する。
【００１１】
工程Ｓ２６において、それぞれのテキスト特徴とテキスト特徴データベース中のテキストを比較して、テキスト識別を実行し、類似のテキストを探し、テキストデータを作成する。
【００１２】
工程Ｓ２８において、テキストデータとビデオの対応関係を用いて、テキスト索引表を設定し、再生したいビデオ個所を探す。
【００１３】
工程Ｓ３２において、テキストデータにより、辞書データベースを作成する。
【００１４】
工程Ｓ３０において、画像ブラウザ検索とテキスト索引表を保存し、ビデオ検索データベースを作成する。
【００１５】
図２は本発明の実施例による、ビデオ検索データベースを示す図で、検索データベース４０中の画像ブラウザ検索５０により、ユーザーは画像ブラウザ検索中の任意のキーフレームを選択し、このキーフレームがあるビデオ個所を再生すると同時に、検索データベース４０中のテキスト索引表６０を用いて、テキスト索引表６０中の任意の検索フィールドを選択し、検索フィールドと対応するビデオ個所を再生することが出来る。この他、ユーザーはキーボード入力字幕個所を検索データとし、再生したいビデオを探すことが出来る。
【００１６】
また、ビデオを再生する時、辞書データベース機能を実行し、スクリーン画面を２つのウィンドウに分割し、ビデオを再生するのに用いられるビデオ再生区７５中のツールバー６７により、ビデオの一時停止、再生、早送り、巻き戻しの機能を操作することが出来る。
【００１７】
この他、字幕マスク６５により、ビデオ中のテキスト領域を遮蔽、即ちビデオ中の字幕を遮蔽し、字幕マスク６５を切り換え及び制御する機能により、字幕の遮蔽、或いは表示が選択できる。字幕ディスプレイ８０となるもう一つのウィンドウでビデオ中の字幕を表示し、字幕ディスプレイ８０中のテキストは、ビデオ中の字幕を分析して得られるテキストデータで、字幕ディスプレイ８０中のテキストデータを選択し、辞書データベース７０により、テキスト意義、語彙性質、熟語などを備えるテキストの注解を表示し、画像ディスプレイ８５で、字幕ディスプレイ８０中のテキストに対応するショットを表示する。
【００１８】
本発明が提供するビデオ検索データベースを作成する方法により、ユーザーは効果的に外国語ビデオをインタラクティブな語学教材に転換することが出来、ビデオ中の字幕に基づいて、索引データを作成し、ユーザーに最良のビデオブラウザ制御方法及び便利な語学教材道具を提供する。
【００１９】
本発明では好ましい実施例を前述の通り開示したが、これらは決して本発明に限定するものではなく、当該技術を熟知する者なら誰でも、本発明の精神と領域を脱しない範囲内で各種の変動や潤色を加えることができ、従って本発明の保護範囲は、特許請求の範囲で指定した内容を基準とする。
【００２０】
【発明の効果】
インタラクティブな語学ビデオ教材が得られる。
【図面の簡単な説明】
【図１】本発明の実施例によるビデオ検索データベースを作成する方法を示すフローチャートである。
【図２】本発明の実施例によるビデオ検索データベースを示す図である。
【符号の説明】
４０ 検索データベース
５０ 画像ブラウザ検索
６０ テキスト索引表
６５ 字幕マスク
６７ ツールバー
７０ 辞書データベース
７５ ビデオ再生区
８０ 字幕ディスプレイ
８５ 画像ディスプレイ

Claims (16)

1. 字幕を備える画像データを、複数のショットに分割する工程と、
   前記複数のショット中のビデオの変化に従って、複数のキーフレームを抽出する工程と、
   前記複数のキーフレームを用いて、画像ブラウザ検索を設定する工程と、
   前記画像データ中の画像特徴に従って、テキスト領域をとらえる工程と、
   前記テキスト領域に対し、テキスト分割を施し、複数のテキスト特徴を生成する工程と、
   前記複数のテキスト特徴とデータベース中のテキストとを比較して、テキストデータを作成する工程と、
   前記テキストデータを用いて、テキスト索引表を設定する工程と、
   前記画像ブラウザ検索と前記テキスト索引表を用いて、ビデオ検索データベースを作成する工程と、
   からなることを特徴とするビデオ検索データベース作成方法。
2. 前記字幕は、中国語、英語字幕であることを特徴とする請求項１に記載の方法。
3. 画面変化が大きいビデオに従って、前記複数のキーフレームを生成することを特徴とする請求項１に記載の方法。
4. 前記テキスト索引表中の任意の検索フィールドを選択することにより、前記検索フィールドが代表するビデオ個所を再生することを特徴とする請求項１に記載の方法。
5. キーボード入力装置を用いて、入力文字データを検索データとして、対応するビデオ個所を得ることを特徴とする請求項１に記載の方法。
6. 前記画像索引表中の任意のキーフレームを選択することにより、前記キーフレームがあるショットを再生することを特徴とする請求項１に記載の方法。
7. 前記テキスト領域を遮蔽することにより、前記テキスト字幕の遮蔽、或いは表示を選択することを特徴とする請求項１に記載の方法。
8. 前記テキストデータを用いて、辞書データベースを作成することを特徴とする請求項１に記載の方法。
9. コンピュータにビデオ検索データベースを作成する方法を実行させるプログラムを記録する記録媒体であって、
   字幕を備える画像データを、複数のショットに分割する工程と、
   前記複数のショット中のビデオの変化に従って、複数のキーフレームを抽出する工程と、
   前記複数のキーフレームを用いて、画像ブラウザ検索を設定する工程と、
   前記画像データ中の画像特徴に従って、テキスト領域をとらえる工程と、
   前記テキスト領域に対し、テキスト分割を施し、複数のテキスト特徴を生成する工程と、
   前記複数のテキスト特徴とデータベース中のテキストとを比較して、テキストデータを作成する工程と、
   前記テキストデータを用いて、テキスト索引表を設定する工程と、
   前記画像ブラウザ検索と前記テキスト索引表を用いて、ビデオ検索データベースを作成する工程と、
   からなることを特徴とする記録媒体。
10. 前記字幕は、中国語、英語字幕であることを特徴とする請求項９に記載の記録媒体。
11. 画面変化が大きいビデオに従って、前記複数のキーフレームを生成することを特徴とする請求項９に記載の記録媒体。
12. 前記テキスト索引表中の任意の検索フィールドを選択することにより、前記検索フィールドが代表するビデオ個所を再生することを特徴とする請求項９に記載の記録媒体。
13. キーボード入力装置を用いて、入力文字データを検索データとして、対応するビデオ個所を得ることを特徴とする請求項９に記載の記録媒体。
14. 前記画像索引表中の任意のキーフレームを選択することにより、前記キーフレームがあるショットを再生することを特徴とする請求項９に記載の記録媒体。
15. 前記テキスト領域を遮蔽することにより、前記テキスト字幕の遮蔽、或いは表示を選択することを特徴とする請求項９に記載の記録媒体。
16. 前記テキストデータを用いて、辞書データベースを作成することを特徴とする請求項９に記載の記録媒体。

Images