JP2004208210A - 画像編集システム - Google Patents

Abstract

【課題】この発明の課題は、静止画像および動画像の編集を容易に行うことができる携帯端末により構成する画像編集システムを提供することにある
【解決手段】効果的なユーザインターフェースを構築することで、携帯電話４単体や、携帯電話４と拡張装置５を接続して利用する小型の携帯端末においても動画像の編集を行うことができる。携帯端末における記憶容量や処理能力に係る問題は、インターネット３を介したサーバサイドオーサリングにより、基地局２を活用することで解決できる。また、基地局２を利用することで、様々なデータの利用や、作成した動画像の他の端末６への配信を行うこともできる。
【選択図】 図１

Description

【０００１】
【発明の属する技術分野】
この発明は、画像編集システムに関する。
【０００２】
【従来の技術】
近年、動画像について、撮影だけでなく、編集や作成に係る技術も大きく発展し、様々な機器やシステムが利用されている。
【０００３】
動画像の撮影機器としては、デジタルビデオカメラの利用が多かったが、最近では、静止画像の撮影機能に加えて、動画像の撮影機能を持つデジタルスチルカメラや、携帯電話、ＰＤＡ（Ｐｅｒｓｏｎａｌ Ｄｉｇｉｔａｌ Ａｓｓｉｓｔａｎｔｓ）などの携帯端末、携帯ゲーム機などが登場し、これらの端末も利用されるようになっている。
【０００４】
また、撮影した動画像だけでなく、静止画像を利用して動画像を作成し利用することもある。例えば、複数枚の静止画像を用いて動画像を生成する、モーフィング処理と呼ばれる技術などが利用されている（特許文献１，２参照）。
【０００５】
撮影または作成された動画像の編集には、主に、コンピュータ装置または専用のハードウェアと、専用のソフトウェアプログラムとから構成される動画像編集システムが利用されている。
【０００６】
そして、ネットワーク技術の発達に伴い、編集を行い完成した動画像は、個人で楽しむだけでなく、作品として、インターネットを利用して公開されることも多くなっている。例えば、動画像の公開方法として、ネットワークに接続されたサーバ上に動画像ファイルを保管し、これを、利用者が任意のときに閲覧する、ビデオ・オン・デマンドと呼ばれるシステムがある。
【０００７】
【特許文献１】
特願平０７−２２９７７８号公報
【特許文献２】
特願平２０００−３８６４２１号公報
【０００８】
【発明が解決しようとする課題】
従来の動画像編集システムは、容易に利用できるようになった撮影機器に比べ、複雑な操作系から成る上に、これを利用するためには動画像の編集やシステムに係る専門的な知識を必要とするため、撮影機器のように多くの人に利用されることはなかった。また、動画像の編集に用いる音声や映像などはデータ容量が大きく、編集作業には大容量記憶装置が不可欠であった。さらに、編集処理には高い処理能力を持つ処理装置を必要とし、高価なコンピュータ装置や専用のハードウェア以外で処理することは困難であった。
【０００９】
そのため、内蔵する記憶装置の容量が小さく、コンピュータ装置に比べて処理能力の低い携帯電話や携帯ゲーム機など小型の携帯端末においては、静止画像や動画像を撮影できる機能が搭載され、その撮影は容易に行えるようになっても、静止画像からの動画像の作成や、動画像の編集などの作業を行うことは非常に困難であった。例えば、撮影した静止画像や動画像を、そのまま他の携帯端末やコンピュータ装置と送受信することや、簡単なテキストや背景画像の挿入などを行うことしかできなかった。
【００１０】
そこで、この発明の課題は、静止画像および動画像の編集を容易に行うことができる携帯端末により構成する画像編集システムを提供することにある。
【００１１】
【課題を解決するための手段】
上記課題を解決すべく、請求項１に記載の発明は、携帯端末を利用して動画像を編集する画像編集システムであって、動画像を蓄積する記憶装置を備える基地局と、前記基地局とネットワークを介して接続される前記携帯端末と、を備え、前記携帯端末は、前記ネットワークを介して前記基地局とデータの送受信を行う通信手段と、前記通信手段を利用して前記基地局から受信した前記動画像を編集する編集手段と、を備えることを特徴とするものである。
【００１２】
請求項２に記載の発明は、請求項１に記載の画像編集システムであって、前記携帯端末は、さらに、動画像を撮像する撮像手段、を備え、前記編集手段は、当該撮像手段により撮像した前記動画像を編集する手段、を含むことを特徴とするものである。
【００１３】
請求項３に記載の発明は、請求項１または請求項２に記載の画像編集システムであって、前記編集手段は、さらに、静止画像から動画像を作成する疑似動画作成手段を備えることを特徴とするものである。
【００１４】
請求項４に記載の発明は、請求項１ないし請求項３のいずれかに記載の画像編集システムであって、前記記憶装置は、さらに、前記編集手段の動作を規定する情報データを蓄積し、前記携帯端末は、前記通信手段を利用して前記基地局から受信した当該情報データに基づき、前記編集手段による編集を実行することを特徴とするものである。
【００１５】
請求項５に記載の発明は、請求項１ないし請求項４のいずれかに記載の画像編集システムであって、前記携帯端末は、上下左右の各キーを備える十字カーソルキーと、少なくとも２つ以上のボタンと、前記動画像を表示する表示装置と、前記ボタンの操作に応答して、メイントラックである前記動画像と、サブトラックである別の前記動画像とを切り替えて前記表示装置上に表示する表示手段と、を備え、前記編集手段は、さらに、前記表示手段により表示した前記動画像に対し、前記左右キーと前記ボタンとの操作に応答して、始点時刻と終点時刻とを指定し、前記下キーの操作に応答して、前記始点時刻から前記終点時刻に至る前記動画像の一部を削除する削除手段、を備えることを特徴とするものである。
【００１６】
請求項６に記載の発明は、請求項５に記載の画像編集システムであって、前記編集手段は、さらに、前記左右キーと前記ボタンとの操作に応答して、前記メイントラック上で時刻を指定し、前記下キーの操作に応答して、前記メイントラックを前記時刻で切断し、当該切断部に前記サブトラックを挿入する挿入手段、を備えることを特徴とするものである。
【００１７】
請求項７に記載の発明は、請求項５に記載の画像編集システムであって、前記編集手段は、さらに、前記左右キーと前記ボタンとの操作に応答して、前記メイントラックと前記サブトラック上で、始点時刻と終点時刻とを指定し、前記上キーの操作に応答して、前記終点時刻を後端とする前記メイントラックと、前記始点時刻を前端とする前記サブトラックとを、前記始点時刻から前記終点時刻に至る一部を重複させて接続し、当該重複部に視覚効果を適用する接続手段、を備えることを特徴とするものである。
【００１８】
請求項８に記載の発明は、請求項１ないし請求項４のいずれかに記載の画像編集システムであって、前記基地局は、さらに、前記動画像を編集する基地局側編集手段、を備え、前記携帯端末は、前記通信手段を利用して、前記動画像を前記基地局に送信するとともに、前記基地局側編集手段に対して、送信した前記動画像の編集を指示することを特徴とするものである。
【００１９】
請求項９に記載の発明は、請求項１ないし請求項８のいずれかに記載の画像編集システムであって、前記携帯端末は、携帯電話であることを特徴とするものである。
【００２０】
請求項１０に記載の発明は、請求項１ないし請求項８のいずれかに記載の画像編集システムであって、前記携帯端末は、前記撮像手段を備える携帯電話と、前記携帯電話に接続され前記通信手段および前記編集手段を備える携帯ゲーム機と、を備えることを特徴とするものである。
【００２１】
請求項１１に記載の発明は、携帯端末を利用して動画像を編集する画像編集システムであって、前記携帯端末は、静止画像を撮像する撮像手段と、前記撮像手段により撮像した静止画像から動画像を作成する疑似動画作成手段と、を備えることを特徴とするものである。
【００２２】
請求項１２に記載の発明は、請求項１１に記載の画像編集システムであって、前記撮像手段は、動画像を撮像する手段、を備え、前記携帯端末は、さらに、前記撮像手段により撮像した動画像を編集する編集手段、を備えることを特徴とするものである。
【００２３】
請求項１３に記載の発明は、請求項１１または請求項１２に記載の画像編集システムであって、前記携帯端末は、前記撮像手段を備える携帯電話と、前記疑似動画作成手段および前記編集手段を備える前記携帯電話に接続された携帯ゲーム機と、を備えることを特徴とするものである。
【００２４】
【発明の実施の形態】
図１は、本発明の一の実施の形態を示すシステム構成図である。図１の如く、本発明である画像編集システム１は、基地局２と、インターネット（ネットワーク）３を介して接続された携帯電話（携帯端末）４を基本構成とする。そして、必要により携帯電話４に拡張装置５を接続して利用する。以下に、各構成要素について説明する。
【００２５】
｛基地局｝
基地局２は、コンピュータ装置により構成され、内部に大容量の記憶装置を備えている。携帯電話４から、インターネット３を介して、各種データのダウンロードやアップロードを行うサーバとして機能し、記憶装置上には、動画像の編集に素材データとして利用する静止画像、動画像および音楽データや、編集作業で利用する設定値から成る情報データなどを蓄積している。また、携帯電話４により編集し完成した作品である動画像を、データとして保管し、インターネット３を介して、携帯電話や専用機などの携帯端末６に対して配信する機能も有している。さらに、静止画像や動画像の編集機能も有する。
【００２６】
｛携帯電話｝
従来から、通信機能（通信手段）に加えて静止画像や動画像の撮影機能（撮像手段）を有し、撮影した静止画像および動画像を内蔵する記憶装置内に蓄積することができる携帯電話が存在する。本システムの携帯電話４は、このような従来の機能に、さらに、本システムで必要とする機能を追加したものである。具体的には、内蔵する記憶装置から読み出した、またはインターネット３を介して基地局２からダウンロードした静止画像や動画像を利用し、動画像の編集や作成を行う編集機能（編集手段）を有する。さらに、完成した動画像を、内蔵する記憶装置内に保存するほか、インターネット３を介して、基地局２にアップロードする通信機能も有する。
【００２７】
尚、携帯電話４の撮影機能は、静止画像または動画像いずれかしか撮影できなくてもよいし、上述した撮影機能、編集機能および通信機能を有し、携帯可能な小型の端末であれば、ＰＨＳ（Ｐｅｒｓｏｎａｌ Ｈａｎｄｙｐｈｏｎｅ Ｓｙｓｔｅｍ）や、専用のハードウェアおよびソフトウェアからなる端末であっても構わない。また、内蔵する記憶装置は、携帯電話４の内部に固定されたものではなく、着脱自在な態様であっても構わない。さらに、これらの機能を実現するものであれば、端末は、図２（ａ）のように単体で利用する場合に限らず、図２（ｂ）〜（ｄ）のように複数の装置を接続して利用する態様であっても構わない。
【００２８】
｛拡張装置｝
拡張装置５は、本システムを構成する携帯端末が必要とする、撮影機能、編集機能および通信機能を補完することを目的とする装置である。
【００２９】
例えば、携帯電話４よりも早い処理速度と、高い操作性を実現する拡張装置５を、図２（ｂ）のように携帯電話４に接続して利用し、動画像の編集に係る機能や操作性を向上する目的で利用する。
【００３０】
あるいは、図２（ｃ）のように、編集機能および通信機能を有する拡張装置５Ａを、携帯電話、デジタルスチルカメラ、ＰＤＡおよび携帯ゲーム機など静止画像および動画像の撮影機能のみを有する装置７と接続して利用し、拡張装置５Ａが、これらの装置７で撮影した静止画像および動画像の編集と、基地局２とのデータ通信とを行う態様であってもよい。また、図２（ｄ）のように、編集機能を有する拡張装置５を、撮影機能および通信機能を有する携帯電話８と接続して利用し、拡張装置５が、携帯電話８で撮影した静止画像や動画像の編集と、携帯電話８を利用した基地局２とのデータ通信とを行う態様であってもよい。さらに、このとき、カメラなどの必要な機器と、専用のソフトウェアとを追加した携帯ゲーム機９を、拡張装置５として利用する態様であってもよい。
【００３１】
尚、拡張装置５は、専用のハードウェアおよびソフトウェアにより構成され、上述した各機能を実現している。また、本実施例では、通信機能を利用する態様を示しているが、通信機能を利用せず、携帯電話４単体、または上述した拡張装置５を利用し複数の機器から構成される携帯端末単体であっても、撮影した静止画像や動画像を用いて動画像の作成や編集を行うことが可能である。
【００３２】
次に、本システムで行う動画像の編集内容について説明する。
【００３３】
｛編集機能｝
図３は、本システムで行う、一の編集操作の概要を示す。図３（ａ）は、複数の動画像を用いて編集を行っている様子を示し、図３（ｂ）は編集により完成した動画像を示す。
【００３４】
タイムライン１０は、右方向に時間の進行方向を示しており、Ｔａ〜Ｔｉは、タイムライン上の時刻を示している。また、トラックＡ〜Ｃ（１１〜１３）は、それぞれ動画像を示している。トラックＡを例とすると、図３（ａ）では、動画像を再生したときに、時間の経過に伴って連続的に動画像が再生される様子を、時間の経過を示すタイムライン１０の下に、動画像を時間の経過を示す右方向に伸びる帯状のトラックＡ（１１）として示している。
【００３５】
本システムで行う複数の動画像を対象とした主な編集機能は、主に、パンチイン（挿入手段）、パンチアウト（削除手段）、ＡＢロール（接続手段）の３つである。
【００３６】
パンチインは、基本となる動画像に、別の動画像の一部を挿入する編集作業を言う。例えば、図３（ａ）では、基本となる動画像であるトラックＡ（１１）の時刻Ｔａの位置に、別の動画像であるトラックＣ（１２）の時刻Ｔｆ〜Ｔｇに至る範囲をパンチインしている。その結果、編集後の動画像は、図３（ｂ）に示すように、トラックＡ（１１）がＴａまで再生された後、トラックＣ（１２）が始点Ｔｆから終点Ｔｇまで再生され、続いてトラックＡ（１１）のＴａから後ろの動画像が再生される。
【００３７】
パンチアウトは、基本となる動画像の一部を削除する編集作業を言う。例えば図３（ａ）では、基本となる動画像であるトラックＡ（１１）の時刻ＴｂからＴｃに至る範囲の動画像をパンチアウトしている。その結果、編集後の動画像は、図３（ｂ）のようにトラックＡ（１１）がＴｂまで再生された後、続いてＴｃから後ろの動画像が再生されることになる。
【００３８】
ＡＢロールは、基本となる動画像と、別の動画像とを接続する編集作業を言う。２つの動画像の一部を重ね合わせて接続し、重ね合わせた部分について、様々な視覚効果であるエフェクトを適用する編集方法である。場面転換や、トランジションとも呼ばれる編集方法で、重ね合わせた部分に適用するエフェクトを特にトランジションエフェクトと呼ぶこともある。例えば、図３（ａ）では、基本となる動画像であるトラックＡ（１１）の時刻ＴｄからＴｅに至る範囲に、別の動画像であるトラックＢ（１３）の時刻ＴｈからＴｉに至る範囲を重ね合わせて接続している。その結果、編集後の動画像は、図３（ｂ）のように、トラックＡ（１１）が、Ｔｄまで再生された後、続いてＴｄからＴｅに至る間は、エフェクトを加えて合成されたトラックＡ（１１）およびトラックＢ（１３）の動画像が再生され、続いてＴｉから後ろのトラックＢ（１３）が再生される。ここで、エフェクトとしては、ロール、ディゾルブ、ワイプおよびスライドなどを基本とした様々な種類のものを利用することができる。具体的には、例えば、先に再生されている動画像の映像が徐々に消えるのに伴って、続いて再生される動画像の映像が徐々に現れるクロスフェードや、本のページをめくるように動画像が切り替わるページターンなどがある。
【００３９】
その他、単体の動画像に対する編集として、テキストやテロップの挿入、明るさやコントラストなどの画質調整などを行うこともできる。
【００４０】
次に、この編集機能を、携帯電話４のような小型の端末で利用するための、本システムにおけるトラックの利用方法について説明する。
【００４１】
｛メイントラックとサブトラック｝
従来の、動画像編集システムで、図３（ａ）で示したような編集を行う場合、ユーザインターフェース上に、編集に利用する全てのトラックを表示し、作業を行っていた。しかし、本システムでは、携帯電話４のような小型の携帯端末での編集操作を行うため、トラックを以下のように利用する。
【００４２】
図４は、編集に利用するトラックデータの概念図、および携帯電話４のユーザインターフェースを示している。まず、動画像の編集の基本動作を確保しつつ、編集動作を簡略化するために、携帯電話４の表示装置上に表示するトラックは１本のみとする。そして、図４の上段に示したように、編集に利用するトラックを、編集の対象となる動画像であるメイントラック１４と、素材として編集に利用する動画像であるサブトラック１６との２種類に分け、編集操作は、いずれか１本のトラックを、携帯電話４の表示装置上に呼び出してから行うものとする。
【００４３】
メイントラック１４は、図３（ａ）のトラックＡ（１１）に、サブトラック１６は、図３（ａ）のトラックＢ（１３）およびトラックＣ（１２）に相当する。編集操作の対象となる動画像を、適宜サブトラック１６上に読み出して利用することで、従来の動画像編集システムと同様に、複数の動画像を素材として利用することができる。
【００４４】
サブトラック１６は、コンピュータ装置で行うコピーまたはカット・アンド・ペーストに例えれば、バッファに相当する。則ち、コピーまたはカットされバッファ内に格納されたデータが、その状態ではデータとして現れないとの同様、サブトラック１６上にある動画像は、サブトラック１６である限り動画像として再生されることはない。しかし、ペーストされるとバッファ内のデータが現れるように、メイントラック１４上に置かれると、動画像データとして再生されるデータとなる。
【００４５】
尚、メイントラック１４およびサブトラック１６上で利用する動画像は、携帯電話４の内蔵する記憶装置から読み出してもよいし、インターネット３を介して、基地局２からダウンロードして利用してもよい。
【００４６】
次に、本システムのユーザインターフェースと、これを利用した動画像の具体的な編集方法について説明する。
【００４７】
｛ユーザインターフェースと編集操作｝
動画像の編集操作には、携帯電話４の備える十字カーソルキー１７と、ボタン１８とを利用する。十字カーソルキー１７は、上下左右の４方向のキー１７Ａ〜１７Ｄで構成され、ボタン１８は２つのボタン１８Ａおよび１８Ｂから構成されている。
【００４８】
まず、編集の対象となる動画像データを、メイントラック１４として呼び出し、表示装置上に表示する。このとき表示装置上には、動画像データの１コマが、静止画像として表示される。そして、左のカーソルキー１７Ｃを押せば動画像が正方向に再生され、右のカーソルキー１７Ａを押すと通常の再生とは逆方向に再生される。また、左右のカーソルキー１７Ａ，１７Ｃを、所定の時間以上押し続けると、それぞれ巻き戻しおよび早送りが開始され、さらに、そのまま押し続けると送りの速度が速くなる。また、左右のカーソルキー１７Ａ，１７Ｃを、２回連続して押すと、動画像データの始点および終点へに移動することができる。このように、再生や送りにより正逆の方向へ移し、表示装置上に表示される動画像を確認しながら、編集を行う位置を探し出すことができる。所望の位置になれば、操作したカーソルキー１７を再度押せば、動画像の再生または送りが停止する。さらに、右１７Ｃまたは左１７Ａのカーソルキーを押しながら、左１７Ａまたは右１７Ｃのカーソルキーを押すと、１コマずつの送りを行うことができ、選択位置の微調整を行うこともできる。これらは、メイントラック１４上で、現在の再生位置を示すマーカー１５の位置を移動させる操作に相当する。
【００４９】
パンチアウトを行う場合、まず、上述したように再生および送りを行って、メイントラック１４上で、パンチアウトの対象となる範囲の始点を探し出す。見つかれば、ボタン１８Ａを押して開始地点１４Ｂを設定する。続いて、同様に、パンチアウトする範囲の終点を探し出し、見つかればボタン１８Ａを押して範囲の終点１４Ｃを設定する。そして、下のカーソルキー１７Ｄを押すと、選択した範囲１４Ｂ〜１４Ｃの動画像データを、削除するか、またはサブトラック１６へ移動するかを選択する画面が現れる。この中からいずれかをカーソルキー１７で選択し、ボタン１８Ａを押して決定すると、始点１４Ｂおよび終点１４Ｃで選択した範囲の動画像が、メイントラック１４から、パンチアウトされ、削除またはサブトラック１６への移動が実行される。
【００５０】
パンチインを行う場合は、同様に再生および送りを行って、メイントラック１４上で、パンチインを行う位置を探し出し、見つかれば、ボタン１８Ａを押して、その位置１４Ａを設定する。続いて、ボタン１８Ａを所定の時間以上押し続けると、操作の対象となる動画像データがサブトラック１６に切り替えられ、表示装置上に、サブトラック１６が表示される（表示手段）。サブトラック１６として利用する動画像データは、上述したように、携帯電話４の内蔵する記憶装置から読み出したものや、インターネット３を介して基地局２からダウンロードしたものでもよいし、メイントラック１４上からパンチアウトしたものであってもよい。ここで、パンチアウトで始点および終点を選択したのと同様の方法で、サブトラック１６の中から、メイントラック１４に挿入したい範囲１６Ａ〜１６Ｂを選択する。そして、上のカーソルキー１７Ｂを押すと、サブトラック１６上で選択した範囲１６Ａ〜１６Ｂの動画像データが、メイントラック１４で指定した位置１４Ａにパンチインされる。
【００５１】
ＡＢロールを行う場合は、同様にメイントラック１４上で、サブトラック１６と重ね合わせる範囲１４Ｂ〜１４Ｃを選択する。そして、サブトラック１６に切り替えて、サブトラック１６の重ね合わせの開始点１６Ａを選択する。そして、パンチインと同様に、上のカーソルキー１７Ｂを押すと、メイントラック１４上では範囲が、そしてサブトラック上では範囲ではなく位置が指定されていることから、パンチインではなくＡＢロールの実行命令であると判断され、続いて、選択した範囲に適用するトランジションエフェクトの種類がメニュー表示される。カーソルキー１７により適用したいエフェクトを選択し、ボタン１８Ａを押して決定すると、メイントラック１４上に、選択した１４Ｂからサブトラック１６の動画像データが重ねられ、範囲１４Ｂ〜１４Ｃには選択したエフェクトが適用される。また、サブトラック１６での位置指定を行わずに上述の操作を行うと、メイントラック１４上では範囲が指定され、サブトラック１６上では何も指定されていないことから、メイントラックへのエフェクトの適用であると判断され、続いて、選択した範囲に適用するエフェクトの種類がメニュー表示される。カーソルキー７で適用したいエフェクトを選択し、ボタン１８Ａを押して実行すると、メイントラック１４上で指定した範囲にエフェクトを適用することもできる。
【００５２】
ボタン１８Ｂは、全ての編集操作を通じて、操作のキャンセルに利用する。ボタン１８Ｂを押すと操作中の内容はキャンセルされる。また、ある編集操作を実行した直後に、ボタン１８Ｂを所定の時間以上押し続けると、直前に行った編集操作がキャンセルされ、編集操作の実行前の状態に戻すことができる。
【００５３】
本システムにおいて、携帯端末で行う動画像の基本操作は以上の通りであり、携帯電話４の他、携帯ゲーム機など、限られたキーまたはボタンしか持たない端末であっても動画像の編集を行うことを可能としている。
【００５４】
しかし、利用する端末が、携帯電話４、ＰＤＡ、拡張装置５など、テンキー１９を備える場合には、これを利用した編集操作を行ってもよい。例えば、複数の動画像データをサブトラック１６として利用する場合、テンキー１９の各キーにサブトラック１６を割り当てておけば、対応するキーを押すだけで、所望のサブトラック１６を呼び出すことができる。あるいは、ＡＢロールなどで適用するエフェクトにおいて、エフェクトの各種類をテンキー１９の各キーに割り当てておけば、対応するキーを押すだけで、所望のエフェクトを適用することができる。
【００５５】
尚、表示装置上には、動画像だけでなく、タイムライン１０およびマーカー１５が表示され、動画像データ全体の中の、どの位置を再生または選択しているのかを確認できる態様であってもよい。同様に、編集操作により選択した範囲がタイムライン１０上に表示され、動画像データ全体における対象範囲の位置と割り合いを確認できる態様であってもよい。また、範囲の選択操作は、始点だけを選択すれば、予め設定した時間に相当する範囲が自動的に選択される態様であっても構わない。また、ここで説明したカーソルキー１７およびボタン１８の利用方法は一例であり、各キーおよびボタンに割り当てる操作が異なっていてもよいし、さらに多くのボタンを利用する態様や、メニューや階層的なサブメニューを利用した選択操作によって編集を行う態様であっても構わない。また、サブトラック１６として利用するデータは、動画像以外に静止画像や音楽データであってもよい。例えば、音楽データであれば、動画像と同様に再生して位置や範囲を選択し、ＡＢロールを利用してメイントラック１４に音楽データを重ね合わせ、メイントラック１４の動画像を再生すると音楽が鳴るというような編集も可能であるし、静止画像を利用しアルファチャンネルを指定することで、全面の動画像の一部を透過させ、静止画像を背景とした動画像を作成することもできる。
【００５６】
このように、動画像の編集を、メイントラックとサブトラックの２本のトラックを基本として考え、限られたキーおよびボタンを利用する効果的なユーザインターフェースを構築することで、携帯電話のような小型の端末であっても、効率的かつ簡便な動画像の編集を行うことが可能である。
【００５７】
｛モーフィング処理｝
本システムでは、上述した動画像を利用した編集だけではなく、静止画像を利用した動画像の作成を行う（疑似動画作成手段）ことも可能である。具体的には、任意の２枚以上の静止画像を選択し、これらの静止画像の補完処理を行うことで擬似的な動画を作成するモーフィング処理を行うことができる。
【００５８】
図５は、携帯電話４で、モーフィング処理を行うときの処理手順を示している。まず、内蔵する記憶装置から読み出した、またはインターネット３を介して基地局２からダウンロードした静止画像２０を、表示装置上に一覧表示２１し、使用する静止画像を選択する。そして、モーフィング処理の実行を命令し、続いて始点となる静止画像２２Ａおよび終点となる静止画像２２Ｂを指定する。すると、始点および終点の静止画像について、それぞの対応位置を演算し、その間に用いる複数の静止画像を補完して、静止画像２２Ａから静止画像２２Ｂに徐々に変化する動画像２３が作成される。モーフィング処理を施す静止画像は２枚に限らず、さらに多くの静止画像を選択して、選択した順番に連続的に変化する動画像を作成してもよい。
【００５９】
モーフィング処理は、従来のように、始点および終点の静止画像の対応位置を手動で指定し、ベクトル演算により補完を行う方法ではなく、画像認識技術を利用して自動的に演算および補完が行われる。具体的には、例えば、人物の写真を利用する図５の場合であれば、始点および終点の静止画像において、背景と輪郭とを分離し、さらに、対応する目、鼻および口などの部分的な対応を自動的に認識する。そして、その間で徐々に変化する複数枚の静止画像を作成し、これらの静止画像を連続的に再生することで動画像を完成させる。
【００６０】
また、静止画像から動画像を作成する方法として、モーフィング処理以外の方法を利用することもできる。例えば、背景となる静止画像と、動きを与える別の静止画像を選択し、動きの種類を指定することで、背景となる静止画像に対し、別の静止画像が、徐々に拡大または縮小したり、あるいは移動したりすることで擬似的な動画像を作成することができる。その他にも、１枚の静止画像を拡大して、カメラがその一部を撮影しながらパンニングしているように見せる方法や、多数の静止画像を短時間ずつ連続的に切り替えて表示するアニメーションのような方法など、様々な方法を利用できる。
【００６１】
作成した動画像は、全て、一旦サブトラック１６上に置かれ、上述した編集操作を行うことによって、メイントラック１４上で利用することができる。
【００６２】
このようにして、静止画像を様々な方法で利用して、擬似的な動画像を作成することによって、利用者は、静止画像のみから動画像を作成し、楽しむこともできる。
【００６３】
｛基地局データベースの利用｝
携帯電話４のような小型の端末では、コンピュータ装置に比べ記憶装置の容量が小さく、利用できるデータは限られている。そのため、本システムでは、多くの種類または大容量のデータの利用や、編集作業の補助、および作成した動画像の保管や公開などを目的として、基地局２を利用する。
【００６４】
図６は、基地局２の基本構成図である。基地局２は、コンテンツデータベース２４、エフェクトデータベース２５、およびアップロードデータベース２６の３つのデータベースと、各データベースの保管するデータを検索する検索処理部２７（検索手段）と、を備えており、ネットワークインターフェース２８およびインターネット３を介して、携帯電話４と接続される。
【００６５】
コンテンツデータベース２４は、動画像の編集および作成に素材として利用する静止画像、動画像、および音楽データなど、様々なデータを格納している。利用者は、携帯電話４から、インターネット３を介して、これらのデータをダウンロードして利用することができる。また、検索処理部２７を利用して、携帯電話４上から、素材の検索を行うことが可能である。例えば、クリスマスのメッセージに利用する動画像を作成するために、「クリスマス」というキーワードで検索を実行すると、ツリー、サンタクロース、トナカイなどの静止画像データや動画像データ、あるいは、ジングルベルやホワイトクリスマスといった楽曲や鈴の音などの効果音である音楽データが、検索結果として携帯電話４の表示装置上に一覧表示される。そして、利用者は、所望のデータをダウンロードして利用することができる。また、コンテンツデータベース２４にデータを追加するだけで、全ての利用者に提供することが可能であり、基地局２とは別にある、外部コンテンツデータベース２９とデータを共有すれば、このデータベース２９にあるデータも利用できるようになる。
【００６６】
エフェクトデータベース２５は、様々なエフェクトをプラグインとして格納している他、各種エフェクトの設定値を情報データとして格納している。利用者は、携帯電話４から、インターネット３を介して、これらのプラグインおよび情報データをダウンロードして利用することができる。プラグインをダウンロードすれば、これまで携帯電話４の持つ機能にはなかった、新しいエフェクトを利用できるようになる。また、通常は、携帯電話４上で編集を行う際に設定していたエフェクトの各種の設定値を、情報データとしてダウンロードし利用すれば、設定に係る手間がなくなり、複雑なエフェクトも容易に適用できるようになる。ここでも、検索処理部２７を利用して、携帯電話４上から検索を行うことが可能であり、利用者は、キーワードを元に所望のプラグインやデータを検索することができる。例えば、映画のタイトルをキーワードにして検索を実行すると、その映画で利用されていたタイトルやテロップの形状や動作などの他、利用されていた視覚効果などを実現するための情報データが、検索結果として携帯電話４の表示装置上に表示される。そして、利用者は、所望の情報データを、ダウンロードして実行するだけで、作成したテキストを映画と同様のタイトルやテロップにしたり、静止画像および動画像に対して映画と同様の視覚効果を適用することができる。
【００６７】
アップロードデータベース２６は、利用者が作成した素材や作品、およびエフェクトに使用した設定値などを、携帯電話４から、インターネット３を介して、基地局２にアップロードして保管するために利用する。これにより、利用者が、一度利用したデータを、再度、別な機会に利用したり、他の利用者が流用するといったことが可能となる。また、利用者が基地局２にあるデータを任意のときに閲覧するビデオ・オン・デマンドを利用したり、指定した複数の利用者に配信することで、基地局２に保管した作品を公開することもできる。ここでも、検索処理部２７が利用可能であり、過去にアップロードした素材や作品およびエフェクトの設定値などのデータを、キーワードを用いて検索することができる。
【００６８】
尚、検索処理部２７は、基地局２内の各データベース２４〜２６を検索するだけでなく、所定の条件に従って、インターネット３上で公開されている全ての静止画像および動画像を対象とした検索を行う態様であってもよい。
【００６９】
このように、基地局２を、データベース、または作品の公開を行うためのサーバとして利用することで、携帯電話４のような記憶容量の小さい端末でも、多種多様なデータやエフェクトを利用した動画像の編集、データの保管および公開を行うことができる。
【００７０】
また、基地局２により、提供する素材や完成作品などのデータを一元的に管理することで、著作権の管理や、認証あるいは課金に係る管理も、基地局２にこれらの機能を実現する処理部３０，３１を追加するだけで、容易に行うことができる。
【００７１】
｛サーバサイドオーサリング｝
携帯電話４のような小形の端末は、コンピュータ装置に比べて処理能力が低く、動画像の編集を行うことは困難である場合がある。そこで、本システムでは、基地局２を利用したサーバサイドオーサリング（基地局側編集手段）を行えるようにしている。ここで、サーバサイドオーサリングとは、携帯電話４で行いたい編集作業を、基地局２に委ねることを言う。上述したモーフィング処理を例として、図７を用いて、具体的な動作について説明する。
【００７２】
まず、携帯電話４上では、高い処理能力を必要としない、始点および終点となる静止画像２２Ａ，２２Ｂの選択作業のみを行う。そして、携帯電話４上で、モーフィング処理の実行を命令すると、選択した静止画像２２Ａ，２２Ｂが、インターネット３を介して基地局２に転送され、基地局２の備える入力バッファ領域３２に格納される。そして、編集処理部３３によりモーフィング処理が施され、作成した動画像は出力バッファ領域３４に保存される。完成した動画像データは、インターネット３を介して、携帯電話４に、ダウンロード配信またはストリーミング配信される。こうして、利用者は、サーバサイドオーサリングにより編集を施した動画像を、携帯電話４上で利用することができる。
【００７３】
尚、モーフィング処理だけでなく、所定の操作を行うことで、任意の編集処理についてサーバサイドオーサリングを行うことが可能である。また、通常は携帯電話４上で行う編集処理に限らず、携帯電話４などの携帯端末の処理能力では不可能である複雑な編集処理を基地局２に登録しておき利用しても良い。具体的には、利用者は、インターネット３を介して基地局２から、利用可能な編集処理の種類を読み出して、携帯電話４の表示装置上に一覧表示し、所望の編集処理を指定することで、利用者の指定した動画像に対して、上述したような手順でサーバサイドオーサリングが実行される態様であってもよい。
【００７４】
また、複数の利用者が、基地局２に対し、同時にサーバサイドオーサリングを要求した場合には、基地局２の編集処理部３３は、入力バッファ領域３２に格納したデータを、適宜バッチ処理またはパイプライン処理にて処理する機能を有している。
【００７５】
このように、基地局２を利用したサーバサイドオーサリングを行うことで、動画像の編集に係る時間の短縮だけではなく、処理能力の低い端末を利用した動画像の編集や、小型の端末では不可能な複雑な編集処理も可能となる。また、携帯電話４を変更することなく基地局２の機能を更新するだけで、編集処理の種類の追加や処理速度の向上といった効果を利用者に提供することもできる。
【００７６】
【発明の効果】
請求項１に記載の発明によれば、携帯端末を利用して動画像を編集する画像編集システムであって、動画像を蓄積する記憶装置を備える基地局と、基地局とネットワークを介して接続される携帯端末と、を備え、携帯端末は、ネットワークを介して前記基地局とデータの送受信を行う通信手段と、通信手段を利用して前記基地局から受信した動画像を編集する編集手段と、を備えることで、小さい容量の記憶装置しか持たない端末を利用する場合でも様々なデータを利用することができ、さらに、携帯可能な小型の携帯端末を利用して動画像の編集を行うことができる。
【００７７】
請求項２に記載の発明によれば、請求項１に記載の画像編集システムであって、携帯端末は、さらに、動画像を撮像する撮像手段、を備え、編集手段は、当該撮像手段により撮像した動画像を編集する手段、を含むことで、携帯端末単体で動画像データの撮影と、編集を行うことができる。
【００７８】
請求項３に記載の発明によれば、請求項１または請求項２に記載の画像編集システムであって、編集手段は、さらに、静止画像から動画像を作成する疑似動画作成手段を備えることで、静止画像から動画像を作成し、利用することができる。
【００７９】
請求項４に記載の発明によれば、請求項１ないし請求項３のいずれかに記載の画像編集システムであって、記憶装置は、さらに、編集手段の動作を規定する情報データを蓄積し、携帯端末は、通信手段を利用して基地局から受信した当該情報データに基づき、編集手段による編集を実行することで、各種設定を行うことなく容易に動画像の編集を行うことができる。
【００８０】
請求項５から請求項７に記載の発明によれば、請求項１ないし請求項４のいずれかに記載の画像編集システムであって、携帯端末は、上下左右の各キーを備える十字カーソルキーと、少なくとも２つ以上のボタンと、動画像を表示する表示装置と、ボタンの操作に応答して、メイントラックである動画像と、サブトラックである別の動画像とを切り替えて表示装置上に表示する表示手段と、を備え、編集手段は、さらに、削除手段、挿入手段、および接続手段を備えることで、限られたキーやボタンのみを備える小型の携帯端末を利用する場合でも、容易に動画像の編集操作を行うことができる。
【００８１】
請求項８に記載の発明によれば、請求項１ないし請求項４のいずれかに記載の画像編集システムであって、基地局は、さらに、動画像を編集する基地局側編集手段、を備え、携帯端末は、通信手段を利用して、動画像を基地局に送信するとともに、基地局側編集手段に対して、送信した動画像の編集を指示することで、処理能力の低い携帯端末であっても、基地局を利用し、複雑な編集処理を実行することができる。
【００８２】
請求項９に記載の発明によれば、請求項１ないし請求項８のいずれかに記載の画像編集システムであって、携帯端末は、携帯電話であることで、従来の携帯電話に、動画像編集という付加価値を与え、撮影した動画像を有効に活用することができる。
【００８３】
請求項１０に記載の発明によれば、請求項１ないし請求項８のいずれかに記載の画像編集システムであって、携帯端末は、撮像手段を備える携帯電話と、携帯電話に接続され通信手段および前記編集手段を備える携帯ゲーム機と、を備えることで、従来の携帯電話と、新たな機能を追加した携帯ゲーム機を利用して動画像の作成や編集、データの送受信を行うことができる。
【００８４】
請求項１１に記載の発明によれば、携帯端末を利用して動画像を編集する画像編集システムであって、携帯端末は、静止画像を撮像する撮像手段と、撮像手段により撮像した静止画像から動画像を作成する疑似動画作成手段と、を備えることで、静止画像の撮像機能しか持たない携帯端末単体であっても動画像の作成を行うことができる。
【００８５】
請求項１２に記載の発明は、請求項１１に記載の画像編集システムであって、撮像手段は動画像を撮像する手段を備え、携帯端末は、さらに撮像手段により撮像した動画像を編集する編集手段を備えることで、携帯端末単体であっても動画像を撮影し、編集を行うことができる。
【００８６】
請求項１３に記載の発明は、請求項１１または請求項１２に記載の画像編集システムであって、携帯端末は、撮像手段を備える携帯電話と、疑似動画作成手段および編集手段を備える前記携帯電話に接続された携帯ゲーム機と、を備えることで、従来の携帯電話と、新たな機能を追加した携帯ゲーム機を利用して動画像の作成や編集を行うことができる。
【図面の簡単な説明】
【図１】この発明の一の実施例に係る画像編集システムの基本構成図である。
【図２】この発明の一の実施例に係る携帯端末の構成を示す図である。
【図３】この発明の一の実施例に係る編集機能を示す図である。
【図４】この発明の一の実施例に係るトラックの概念図およびユーザインターフェースを示す図である。
【図５】この発明の一の実施例に係るモーフィング処理の動作を示す図である。
【図６】この発明の一の実施例に係る基地局の構成図である。
【図７】この発明の一の実施例に係るサーバサイドオーサリングの動作を示す図である。
【符号の説明】
１ 画像編集システム
２ 基地局
３ インターネット
４ 携帯電話
５ 拡張装置
６ 通信手段を有する携帯端末群
７ 撮像手段を有する携帯端末群
８ 編集手段を有しない携帯電話
９ 携帯ゲーム機
１０ タイムライン
１１ トラックＡ
１２ トラックＣ
１３ トラックＢ
１４ メイントラック
１５ マーカー
１６ サブトラック
１７ カーソルキー
１８ ボタン
１９ テンキー
２０ 静止画像
２１ 表示装置
２２ モーフィング処理の始点および終点
２３ 疑似動画像
２４ コンテンツデータベース
２５ エフェクトデータベース
２６ アップロードデータベース
２７ 検索処理部
２８ ネットワークインターフェース
２９ 外部コンテンツデータベース
３０ 著作権管理部
３１ 認証課金処理部
３２ 入力バッファ領域
３３ 編集処理部
３４ 出力バッファ領域

Claims (13)

1. 携帯端末を利用して動画像を編集する画像編集システムであって、
   動画像を蓄積する記憶装置を備える基地局と、
   前記基地局とネットワークを介して接続される前記携帯端末と、
   を備え、
   前記携帯端末は、
   前記ネットワークを介して前記基地局とデータの送受信を行う通信手段と、
   前記通信手段を利用して前記基地局から受信した前記動画像を編集する編集手段と、
   を備えることを特徴とする画像編集システム。
2. 請求項１に記載の画像編集システムであって、
   前記携帯端末は、さらに、動画像を撮像する撮像手段、を備え、
   前記編集手段は、当該撮像手段により撮像した前記動画像を編集する手段、を含むことを特徴とする画像編集システム。
3. 請求項１または請求項２に記載の画像編集システムであって、
   前記編集手段は、さらに、静止画像から動画像を作成する疑似動画作成手段を備えることを特徴とする画像編集システム。
4. 請求項１ないし請求項３のいずれかに記載の画像編集システムであって、
   前記記憶装置は、さらに、前記編集手段の動作を規定する情報データを蓄積し、前記携帯端末は、前記通信手段を利用して前記基地局から受信した当該情報データに基づき、前記編集手段による編集を実行することを特徴とする画像編集システム。
5. 請求項１ないし請求項４のいずれかに記載の画像編集システムであって、
   前記携帯端末は、
   上下左右の各キーを備える十字カーソルキーと、
   少なくとも２つ以上のボタンと、
   前記動画像を表示する表示装置と、
   前記ボタンの操作に応答して、メイントラックである前記動画像と、サブトラックである別の前記動画像とを切り替えて前記表示装置上に表示する表示手段と、
   を備え、
   前記編集手段は、さらに、
   前記表示手段により表示した前記動画像に対し、前記左右キーと前記ボタンとの操作に応答して、始点時刻と終点時刻とを指定し、前記下キーの操作に応答して、前記始点時刻から前記終点時刻に至る前記動画像の一部を削除する削除手段、
   を備えることを特徴とする画像編集システム。
6. 請求項５に記載の画像編集システムであって、
   前記編集手段は、さらに、
   前記左右キーと前記ボタンとの操作に応答して、前記メイントラック上で時刻を指定し、前記下キーの操作に応答して、前記メイントラックを前記時刻で切断し、当該切断部に前記サブトラックを挿入する挿入手段、
   を備えることを特徴とする画像編集システム。
7. 請求項５に記載の画像編集システムであって、
   前記編集手段は、さらに、
   前記左右キーと前記ボタンとの操作に応答して、前記メイントラックと前記サブトラック上で、始点時刻と終点時刻とを指定し、前記上キーの操作に応答して、前記終点時刻を後端とする前記メイントラックと、前記始点時刻を前端とする前記サブトラックとを、前記始点時刻から前記終点時刻に至る一部を重複させて接続し、当該重複部に視覚効果を適用する接続手段、
   を備えることを特徴とする画像編集システム。
8. 請求項１ないし請求項４のいずれかに記載の画像編集システムであって、
   前記基地局は、さらに、
   前記動画像を編集する基地局側編集手段、
   を備え、
   前記携帯端末は、前記通信手段を利用して、前記動画像を前記基地局に送信するとともに、前記基地局側編集手段に対して、送信した前記動画像の編集を指示することを特徴とする画像編集システム。
9. 請求項１ないし請求項８のいずれかに記載の画像編集システムであって、
   前記携帯端末は、携帯電話であることを特徴とする画像編集システム。
10. 請求項１ないし請求項８のいずれかに記載の画像編集システムであって、
    前記携帯端末は、
    前記撮像手段を備える携帯電話と、
    前記携帯電話に接続され前記通信手段および前記編集手段を備える携帯ゲーム機と、
    を備えることを特徴とする画像編集システム。
11. 携帯端末を利用して動画像を編集する画像編集システムであって、
    前記携帯端末は、
    静止画像を撮像する撮像手段と、
    前記撮像手段により撮像した静止画像から動画像を作成する疑似動画作成手段と、
    を備えることを特徴とする画像編集システム。
12. 請求項１１に記載の画像編集システムであって、
    前記撮像手段は、
    動画像を撮像する手段、
    を備え、
    前記携帯端末は、さらに、
    前記撮像手段により撮像した動画像を編集する編集手段、
    を備えることを特徴とする画像編集システム。
13. 請求項１１または請求項１２に記載の画像編集システムであって、
    前記携帯端末は、
    前記撮像手段を備える携帯電話と、
    前記携帯電話に接続され前記疑似動画作成手段および前記編集手段を備える携帯ゲーム機と、
    を備えることを特徴とする画像編集システム。

Images