JP4672561B2 - 画像処理装置、受信装置、放送システム、画像処理方法、画像処理プログラム、および記録媒体 - Google Patents

Description

本発明は、デジタルコンテンツデータの画像を処理して出力する画像処理装置、受信装置、放送システム、画像処理方法、画像処理プログラム、および記録媒体に関する。

従来、デジタル放送では、ビデオデータがＭＰＥＧ−２（Motion Picture Experts Group-2）で圧縮され、パケット化されて送信する方法が広く用いられている。ＭＰＥＧ−２では、画像データをＤＣＴ（Discrete Cosine Transform）変換することで、データを周波数領域に変換して圧縮符号化する。さらに、動き補償された隣接フレームまたはフィールドとの差分を符号化することによって、データは圧縮符号化される。

ＭＰＥＧ−２で用いられる各ピクチャについて、図１１を参照して説明する。図１１は、デジタルコンテンツをエンコードおよびデコードする際の各画像データの様子を示す概略図である。ＭＰＥＧ−２では、Ｉピクチャ、Ｐピクチャ、およびＢピクチャの３種類のピクチャが存在する。Ｉピクチャは、同一のフレームまたはフィールド内で符号化されたピクチャである。

Ｐピクチャは、同一フレームまたはフィールドから順方向予測を行い、差分を符号化したピクチャである。Ｂピクチャは、過去および未来の２つのフレームから双方向予測を行い、差分を符号化したピクチャである。Ｂピクチャは、過去のＩピクチャまたはＰピクチャを予測時の参照画面として用いるだけでなく、未来のＩピクチャまたはＰピクチャも予測時の参照画面として用いる。そのため、ＩピクチャおよびＰピクチャは先に処理され、ＩピクチャとＰピクチャとの間にあるＢピクチャは後で処理される。

以下では、図１１を参照しながら、入力された入力動画シーケンスを符号化するエンコードが行われ、符号化されたデータを復号化するデコードを再び行うことで、再生動画シーケンスを得る処理の手順について説明する。

Ｉピクチャの前のＢピクチャはＩピクチャがエンコードされるまではバッファにためて待つ必要がある。図１１では、Ｂ０およびＢ１のＢピクチャはＩ２のＩピクチャが符号化されるまでバッファに一時保存して出力を待つ必要がある。同様に、Ｂ３およびＢ４のＢピクチャは、Ｐ５のＰピクチャがエンコードされるまでバッファに一時保存して出力するのを待つ必要がある。

以下、同様に、Ｉ２、Ｂ０、Ｂ１、Ｐ５、Ｂ３、Ｂ４・・・という順にエンコードされる。すなわち、エンコーダ側では、Ｂピクチャを飛ばして次のＩピクチャまたはＰピクチャを先に処理し、その後、間にあるＢピクチャを処理する。

一方、エンコード処理されたものをデコード処理する場合、図１１に示すように、Ｉ２、Ｂ０、Ｂ１、Ｐ５、Ｂ３、Ｂ４・・・の順に符号化データを受け取ると、その順にデコード処理を行う。しかし、元の入力画像順で最初の画像Ｂ０が再生可能となるまでは画面提示は待たされるので、ここでは１フレーム分の遅延が生じる。すなわち、デコーダ側ではＢピクチャはデコード処理してすぐに表示するが、ＩピクチャとＰピクチャはデコードが完了しても、次のいくつかのＢピクチャを処理して、当該処理が完了するまで表示しないため、画面提示が行われるまでの遅延が生じる。

このため、ユーザがデジタル放送を視聴している際に、チャンネルを切り替えた場合、チャンネル切り替え後の映像がすぐに表示されずに、切り替え後の映像が表示装置に表示されるまでは長い時間が必要となる。上記の時間は、映像が表示されるまで待っているという心理的負担をユーザに与えてしまうので、次々とチャンネルを切り替えながらコンテンツを視聴する、いわゆるザッピング視聴には不向きである。

そこで、特許文献１には、チャンネル切り替えによる出力待ち時間に、切り替え前のチャンネルと切り替え後のチャンネルとを繋ぐ静止画像を出力するデジタル放送用テレビ受信機が開示されている。

上記のデジタル放送用テレビ受信機では、チャンネル切り替えの際に切り替え後の映像が映し出されるまでに、チャンネル切り替え前の静止画が画面上で徐々に小さくなっていき、その後にチャンネル切り替え後の動画が徐々に大きくなっていく様子が表示される。上記の一連の出力処理で、チャンネル切り替えに生じる時間を埋めることで、チャンネル切り替え時間の長さによるユーザの心理的負担を軽減している。

また、特許文献１のデジタル放送用テレビ受信機では、メモリに保存されているチャンネル切り替え前の複数の画像データを使って複数の画像を作り出し、チャンネル切り替え時にその動画を映し出す。これにより、チャンネル切り替えに生じる時間を埋めることで、チャンネル切り替え時間の長さによるユーザの心理的負担を軽減している。
特開平９−１３５３９４号公報（１９９７年５月２０日公開）

しかしながら、特許文献１で開示されているデジタル放送用テレビ受信機では、メモリに保存されているチャンネル切り替え前の画像を加工し、徐々に小さくしていく複数の画像を作成して画面に出力するため、ユーザはチャンネル切り替えた後もしばらくの間、チャンネル切り替え前の画像または動画をもとにした画像を見続けなければならないという問題を生じる。そのため、ユーザはチャンネルを切り替える操作を行ったのに、切り替え前の画像を見ていることに対して違和感を感じ、心理的負担を感じることになる。

本発明は、上記の問題点に鑑みてなされたものであり、その目的は、デジタルコンテンツデータの出力を指示してから実際に画像が出力されるまでの間に、違和感の少ない画像を出力可能な画像処理装置、受信装置、放送システム、画像処理方法、画像処理プログラム、および記録媒体を実現することにある。

本発明の処理装置は、上記課題を解決するために、複数の画像から構成された映像をエンコードして作成された、複数の画像データから構成されたデジタルコンテンツデータを入力するための入力手段と、入力手段から受け取った前記デジタルコンテンツデータを再生画像にデコードする再生手段と、デコードした複数の前記再生画像を並び替えて映像として出力する出力手段とを備える画像処理装置において、デコードした時点ですぐに出力しない再生画像を先行画像として抽出する抽出手段と、前記先行画像にエフェクトを付加して付加画像を生成する付加手段と、前記デジタルコンテンツデータが入力された際、前記先行画像がデコードされてからデコードした複数の前記再生画像を並び替えて映像として出力するまでの期間、前記付加画像を出力するように前記出力手段を制御する出力制御手段とをさらに備え、前記入力手段に入力される前記デジタルコンテンツデータが変更された場合、最初にデコードされた再生画像を前記先行画像として抽出することを特徴としている。

上記の構成によれば、デジタルコンテンツデータをデコードし、再生画像を並び替えて、映像を出力する際に行う処理に要する時間に、デジタルコンテンツに対するデコード処理を行った結果、入力される前記デジタルコンテンツデータが変更された場合、最初に得られる再生画像に対してエフェクトを付加した付加画像を生成し、最初に出力するべき再生画像のデコード完了までの待ち時間に出力する。

これによって、再生画像が出力されるより前に、付加手段からの付加画像が出力されるように制御される。ここで、付加手段は、抽出手段によって抽出される先行画像、すなわち、上記映像での順序が前の再生画像が未だデコードされておらず、遅延して出力される再生画像である先行画像に対して映像効果を付加している。

したがって、付加手段は、先行画像がデコードされた時点より後であれば、本来であれば最初に出力すべき再生画像のデコードを完了可能な時点、および、その後に設定される先行画像の出力時点よりも早い時点で、当該先行画像に映像効果を付加する処理を施すことができる。よって、映像再生装置は、出力を指示されたデジタルコンテンツデータの最初に先行画像が配されていた場合に、上記再生手段が映像として最初に出力する画像をデコードして出力する時点よりも早い時点で、上記出力が指示されたデジタルコンテンツデータ中の画像データをデコードした先行画像に映像効果を付加した画像を示す信号を出力できる。

また、付加手段が出力する先行画像は、上記再生手段がデコードした再生画像を並び替えて映像を出力する時点よりも後で出力すべき再生画像であるが、上記出力が指示されたデジタルコンテンツデータ中の画像データをデコードして生成した画像に映像効果を付加した画像である。したがって、当該デジタルコンテンツデータの出力が指示されるよりも前に出力が指示されていた画像と比較すると、多くの場合は、映像として最初に出力する画像により類似しているので、ユーザに与える違和感を軽減することができる。

さらに、付加手段がエフェクトを付加する先行画像には映像効果が付されているので、映像として最初に出力すべき再生画像と若干相違していたとしてもユーザは、その相違に気付き難い。これらの結果、デジタルコンテンツデータの出力を指示してから実際に画像が出力されるまでの間に、違和感の少ない画像を出力可能な画像再生装置を実現できる。

本発明の画像処理装置では、前記先行画像は、画面内の画素を全てイントラ符号化するイントラ符号化画像データであることが好ましい。

上記の構成によれば、デコードは最初にデコードされるが出力するまでに時間がある先行画像を用いて、映像として最初に出力するべき画像である再生画像のデコード完了までの待ち時間に出力する画像を生成することができる。なお、具体例をあげると、上記のイントラ符号化された画像データは、例えば、ＭＰＥＧ２において、Ｉピクチャを用いてもよい。Ｉピクチャであれば、各ＧＯＰの最初にデコードされるフレームの画像データであるので、上記の条件を満たすことができる。

本発明の画像処理装置では、前記出力制御手段は、前記入力手段に入力されるデジタルコンテンツデータが変更された場合、前記先行画像を映像として最初に出力すべき再生画像として用い、当該再生画像を出力するまでの期間、前記付加画像を出力するように前記出力手段を制御してもよい。

上記の構成によれば、従来では、何も画像が出力されない期間、または、過去の画像を用いた画像が出力される期間および最初にデコードされる画像のデータより前に出力される画像が出力される期間において、これから出力する予定の、先行画像に基づいて作成した付加画像を、映像として最初に出力すべき再生画像が出力可能な状態になるまでの間出力することができる。これによって、何も画像が出力されない期間、または、過去の画像を用いた画像が出力される期間に違和感の少ない画像を出力し、さらに、時系列上の過去の画像が未来の画像よりも先に出力する可能性がなくなるので、ユーザの心理的負担をさらに減らすことができる。

前述の例と比較すると、付加手段が出力する再生画像は、上記再生手段が第２のデコードデータをデコードして出力する時点よりも後で出力すべき再生画像を先に出力することがなくなるため、さらに、ユーザに与える違和感を軽減することができる。

本発明の処理装置は、上記課題を解決するために、複数の画像から構成された映像をエンコードして作成された、複数の画像データから構成されたデジタルコンテンツデータを入力するための入力手段と、入力手段から受け取った前記デジタルコンテンツデータを再生画像にデコードする再生手段と、デコードした複数の前記再生画像を並び替えて映像として出力する出力手段とを備える画像処理装置において、前記入力手段に入力される前記デジタルコンテンツデータが変更された場合、完全な映像のデコードは不可能だが完全な映像の一部をデコードすることが可能な画像データから不完全な再生画像を先行画像として抽出する抽出手段と、前記先行画像にエフェクトを付加して付加画像を生成する付加手段と、前記デジタルコンテンツデータが入力された際、前記先行画像がデコードされてからデコードした複数の前記再生画像を並び替えて映像として出力するまでの期間、前記付加画像を出力するように前記出力手段を制御する出力制御手段とをさらに備えることを特徴としている。

上記の構成によれば、デジタルコンテンツデータをデコードし、映像を出力する際に行う処理に要する時間に、デジタルコンテンツに対するデコード処理を行った結果、入力される前記デジタルコンテンツデータが変更された場合、完全な映像のデコードは不可能だが完全な映像の一部をデコードすることが可能な画像データから不完全な再生画像に対してエフェクトを付加した付加画像を生成し、並べ替えを行った再生画像のデコードが完了するまでの待ち時間に出力する。これによって、上記再生手段からの並べ替えを行った再生画像が出力されるより前に、付加手段からの付加画像が出力されるように制御される。

さらに、付加手段がエフェクトを付加する先行画像には映像効果が付されているので、映像として不完全であったとしてもユーザは、その相違に気付き難いようにすることができる。これらの結果、デジタルコンテンツデータの出力を指示してから実際に画像が出力されるまでの間に、不完全ではあるが違和感の少ない画像を出力可能な画像再生装置を実現できる。

具体例をあげれば、入力されるデジタルコンテンツデータの変更等により、デジタルコンテンツデータのひとつのまとまりである映像のグループの途中から入力された、画像の一部しかデコードできないデータからデコードして生成された再生画像である先行画像に対して映像効果を付加している。

本発明の画像処理装置では、前記先行画像は、画面内の画素にイントラ符号化されたデータを含むフレーム間順方向予測画像データであることが好ましい。

上記の構成によれば、デコードを完全に行うことは出来ないが、一部をデコードすることができる画像データから不完全なデコードを行った映像を先行画像に用いて、完全な再生画像のデコード完了までの待ち時間に出力する画像を生成することができる。具体例をあげると、上記のイントラ符号化されたデータを含む画像データは、例えば、ＭＰＥＧ２において、Ｐピクチャを用いてもよい。

本発明の画像処理装置では、前記先行画像は、画面内の画素にイントラ符号化されたデータを含む双方向予測符号化画像データであることが好ましい。

上記の構成によれば、デコードを完全に行うことは出来ないが、一部をデコードすることができる画像データからデコードした不完全な映像を先行画像に用いて、完全な再生画像のデコード完了までの待ち時間に出力する画像を生成することができる。具体例をあげると、上記のイントラ符号化されたデータを含む画像データは、例えば、ＭＰＥＧ２において、Ｂピクチャを用いてもよい。

本発明の画像処理装置では、前記付加手段は、前記先行画像のパラメータを変更するエフェクトを付加することで、１つ以上の付加画像を生成し、前記出力制御手段は、前記先行画像との近似度が高くなって行く順序で前記付加画像を出力するように制御することが好ましい。

上記の構成によれば、付加手段は、最初にデコードされる再生画像を用いて、段階的にエフェクトの強度がことなる複数の画像を作成し、段階的に元の再生画像に近づいてゆく動画を生成することができる。これによって、徐々に元の再生画像近づいて行く連続する画像を用いて画面をなだらかに連続させることができるので、さらに、ユーザに与える違和感を軽減することができる。

なお、上記の近似度は、エフェクトを付加する前の先行画像と、エフェクトを付加した後の付加画像とを、予め定められた画像の特性を示すパラメータの観点から比較した結果、両画像がどの程度近似しているかを示すためのものであって、両画像の特性を示すパラメータ同士がより近い値である程、近似度は高くなるものとする。

具体例をあげると、上記画像の特性を示すパラメータが解像度の場合、解像度に差があれば有るほど近似度は低くなり、解像度が同じ場合に近似度は最大になる。また、上記画像の特性を示すパラメータが明度であれば、明度をより多量に変化させるエフェクトを付せば付す程、近似度が低下し、明度が同じであれば、近似度が最大になるものとする。

本発明の画像処理装置では、前記エフェクトは、解像度、明度、彩度、およびぼかし度のうち少なくても１つのパラメータを変更するエフェクトであってもよい。

なお、前記エフェクトは上記の例に限定されない。徐々に元の画像に近づいてゆく複数の画像を構成できるエフェクトであれば、どのようなものであってもよい。

本発明の受信装置は、上記の画像処理装置と、ユーザの指示に基づいてデジタルコンテンツデータを受信し、受信した当該デジタルコンテンツデータを前記入力手段に入力する受信手段を備えたこと特徴としている。

さらに、上記の受信装置と、当該受信装置へデジタルコンテンツデータを送信する送信装置とを備えることによって放送システムを構成することができる。

上記の構成を用いれば、上記と略同様の効果を奏する受信装置および放送システムを実現することができる。

本発明の画像処理方法は、複数の画像から構成された映像をエンコードして作成された、複数の画像データから構成されたデジタルコンテンツデータを入力するステップと、入力された前記デジタルコンテンツデータを再生画像にデコードするステップと、デコードした複数の前記再生画像を並び替えて映像として出力するステップとを備える画像処理方法において、デコードした時点ですぐに出力しない再生画像を先行画像として抽出するステップと、前記先行画像にエフェクトを付加して付加画像を生成するステップと、前記デジタルコンテンツデータが入力された際、前記先行画像がデコードされてからデコードした複数の前記再生画像を並び替えて映像として出力するまでの期間、前記付加画像を出力するように制御するステップとをさらに備え、前記入力するステップに入力される前記デジタルコンテンツデータが変更された場合、最初にデコードされた再生画像を前記先行画像として抽出することを特徴としている。

上記の構成によれば、デジタルコンテンツデータをデコードし、再生画像を並び替えて、映像を出力する際に行う処理に要する時間に、デジタルコンテンツに対するデコード処理を行った結果、最初に得られる再生画像に対してエフェクトを付加した付加画像を生成し、映像として最初に出力するべき再生画像のデコード完了までの待ち時間に出力する。

これによって、再生画像が出力されるより前に、付加画像が出力されるように制御される。ここで、抽出するステップに抽出され、一時的に記憶される先行画像、すなわち、上記映像での順序が前の映像として最初に出力すべき再生画像が未だデコードされておらず、遅延して出力される再生画像である先行画像に対して映像効果を付加している。

したがって、付加画像を生成するステップでは、先行画像がデコードされた時点より後であれば、映像として最初に出力すべき再生画像がデコードされる時点、および、その後に設定される先行画像の出力時点よりも早い時点で、当該先行画像に映像効果を付加する処理を施すことができる。よって、出力を指示されたデジタルコンテンツデータの最初に先行画像が配されていた場合に、上記デコードするステップで映像として最初に出力すべき再生画像をデコードして出力する時点よりも早い時点で、上記出力が指示されたデジタルコンテンツデータ中の画像データをデコードした先行画像に映像効果を付加した画像を示す信号を出力できる。

また、付加画像を生成するステップで出力する先行画像は、上記再生手段が映像として最初に出力すべき再生画像をデコードして出力する時点よりも後で出力すべき再生画像であるが、上記出力が指示されたデジタルコンテンツデータ中の画像データをデコードして生成した画像に映像効果を付加した画像である。したがって、当該デジタルコンテンツデータの出力が指示されるよりも前に出力が指示されていた画像と比較すると、多くの場合は、映像として最初に出力すべき再生画像により類似しているので、ユーザに与える違和感を軽減することができる。

さらに、付加画像を生成するステップでエフェクトを付加する先行画像には映像効果が付されているので、映像として最初に出力すべき再生画像と若干相違していたとしてもユーザは、その相違に気付き難い。これらの結果、デジタルコンテンツデータの出力を指示してから実際に画像が出力されるまでの間に、違和感の少ない画像を出力可能な画像処理方法を実現できる。

本発明の画像処理方法は、複数の画像から構成された映像をエンコードして作成された、複数の画像データから構成されたデジタルコンテンツデータを入力するためのステップと、入力された前記デジタルコンテンツデータを再生画像にデコードするステップと、デコードした複数の前記再生画像を並び替えて映像として出力するステップとを備える画像処理方法であって、入力される前記デジタルコンテンツデータが変更された場合、完全な映像のデコードは不可能だが完全な映像の一部をデコードすることが可能な画像データから不完全な再生画像を先行画像として抽出するステップと、前記先行画像にエフェクトを付加して付加画像を生成するステップと、前記デジタルコンテンツデータが入力された際、前記先行画像がデコードされてからデコードした複数の前記再生画像を並び替えて映像として出力するまでの期間、前記付加画像を出力するように制御するステップとをさらに備えることを特徴としている。

上記の構成によれば、デジタルコンテンツデータをデコードし、映像を出力する際に行う処理に要する時間に、デジタルコンテンツに対するデコード処理を行った結果、入力される前記デジタルコンテンツデータが変更された場合、完全な映像のデコードは不可能だが完全な映像の一部をデコードすることが可能な画像データから不完全な再生画像を先行画像として抽出し、先行画像に対してエフェクトを付加した付加画像を生成し、再生画像を並び替えて映像として出力するまでの期間、出力する。

これによって、並び替えられた映像が出力されるより前に、付加画像が出力されるように制御される。ここで、映像効果は抽出される先行画像、すなわち、完全な映像のデコードは不可能だが完全な映像の一部をデコードすることが可能な画像データからデコードした不完全な再生画像に対して付加している。

よって、上記再生するステップで映像として出力する画像をデコードし、並び替えて出力する時点よりも早い時点で、上記出力が指示されたデジタルコンテンツデータ中の画像データをデコードした先行画像に映像効果を付加した画像を示す信号を出力できる。

さらに、エフェクトを付加するステップにおいて、先行画像には映像効果が付されているので、先行画像が映像として不完全であったとしても、ユーザはその相違に気付き難いようにすることができる。これらの結果、デジタルコンテンツデータの出力を指示してから実際に画像が出力されるまでの間に、不完全ではあるが違和感の少ない画像を出力可能な画像再生方法を実現できる。

なお、上記画像処理装置における各手段を、プログラムによりコンピュータ上で実行させることができる。さらに、上記画像処理プログラムをコンピュータ読み取り可能な記録媒体に記憶させることにより、任意のコンピュータ上で上記プログラムを実行させることができる。

本発明の処理装置は、デジタルコンテンツデータを出力する際に行う処理に要する時間に、デジタルコンテンツに対するデコード処理を行った結果、最初に得られる画像データに対して、画像データを出力する際のエフェクトを付加した画像を生成し、エフェクトが付加された画像データを時系列に沿った画像データのデコード完了までの待ち時間に出力する。

これによって、デコード終了後に出力する画像になだらかに繋がる、違和感の少ない画像を生成して出力するので、チャンネル切り替えなどの際に生じるデジタルコンテンツデータのデコードなどの処理に要する時間にユーザが感じる心理的負担を軽減することができる処理装置を実現することができる。

すなわち、ユーザはチャンネル切り替え後の映像を鑑賞するまでの間、エフェクトが付加された画像データを鑑賞することができるので、チャンネル切り替え時間の長さにより生じるユーザの心理的負担を軽減することができる処理装置を実現することができる。

〔実施形態１〕
本発明の一実施形態について図１〜図１０に基づいて説明すると以下の通りである。以下、図面を参照しつつ本発明の一実施の形態について説明する。なお、以下の説明に用いる図面では、同一の部品に同一の符号を付してある。それらの名称および機能も同一である。従って、それらについての詳細な説明は繰り返さない。

図１は、本実施形態に係る放送システム１の要部構成を示す概略図である。図２は、当該放送システム１の受信装置１０に設けられた画像処理装置２０の要部構成を示すブロック図である。図３は、上記画像処理装置２０に設けられた効果付加処理部（付加手段）３０の要部構成を示すブロック図であって、当該効果付加処理部３０は、デコードした画像に対して効果（エフェクト）を付加できる。以下、各機能ブロックについて、詳細を説明する。

図１に示すように、本実施形態に係る放送システム１は、ユーザ４８の操作に応じたデジタルコンテンツをユーザに提供するものであって、受信装置１０、デジタルコンテンツ提供サーバ（送信装置）４２、外部機器４４、表示装置４６を備えている。

上記受信装置１０は、ユーザ４８からの操作指示に従ってデジタルコンテンツ提供サーバ４２からデジタルコンテンツ５０を受信し、外部機器４４および表示装置４６に画像処理を行った映像を出力するものであって、当該受信装置１０は、コンテンツ受信部（受信手段）１２、チャンネル切り替え部１４、コンテンツ表示処理部（出力手段）１６、および画像処理装置２０を備えている。

上記コンテンツ受信部１２は、チャンネル切り替え部１４からの指示に従ってデジタルコンテンツ５０を受信し、画像処理装置２０に送信できる。一方、チャンネル切り替え部１４は、ユーザからの操作を入力するためのインタフェースを含んでおり、ユーザ４８によるチャンネル切り替え指示を受け付け、受信すべきデジタルコンテンツ５０をコンテンツ受信部１２へ指定できる。上記インタフェースとしては、例えば、リモートコントローラ（以下、リモコン）からの信号を受信する回路などが挙げられる。この場合、ユーザ４８がリモコンを操作して現在鑑賞しているコンテンツのチャンネルを切り替えると、ユーザ４８が行ったチャンネル切り替えの指示を示す信号がリモコンからチャンネル切り替え部１４に入力され、チャンネル切り替え指示がコンテンツ受信部１２に送られる。

上記画像処理装置２０は、上記コンテンツ受信部１２がチャンネル切り替え部１４からの指示に基づいて受信したデジタルコンテンツ５０をデコードし、デコードにより得られた画像データを外部機器４４に出力したり、コンテンツ表示処理部１６を介して表示装置４６に出力したりできる。また、画像処理装置２０は、デコードにより得られた画像データを出力するだけではなく、デコードにより得られた画像データに映像効果を付加した画像データも、外部機器４４に出力したり、コンテンツ表示処理部１６を介して表示装置４６に出力したりできる。なお、コンテンツ表示処理部１６は、画像処理装置２０から出力された画像データを表示装置４６へ出力するための処理（表示装置４６に合った信号への変換など）を行っている。

上記外部機器４４は、例えば、ハードディスクレコーダやビデオ録画装置などの記録装置であり、図示しない表示装置を備えていてもよい。一方、表示装置４６は、例えば、ディスプレイ装置などである。当該外部機器４４および表示装置４６は、受信装置１０に含まれていてもよいし、それぞれが別体に設けられていてもよい。また、両者の一方のみが受信装置１０に含まれていてもよい。なお、図１では、放送システム１に外部機器４４および表示装置４６の双方が含まれている場合を例示しているが、一方のみが含まれていてもよい。

また、デジタルコンテンツ５０は、例えば、デジタル放送などで配信されているようなＭＰＥＧ２などの動画像データをさす。デジタルコンテンツ５０はネットワークを通じてストリーミングで配信されていてもよいし、各放送局から配信されチャンネル切り替えによって受信を行うものでもよい。以下では、デジタルコンテンツ提供サーバ４２からデジタルコンテンツ５０が配信される場合を例に説明する。

なお、放送システム１は、外部のデジタルコンテンツ提供サーバ４２から配信される形態に限らず、ホームサーバなどの記録装置に蓄積されたデジタルコンテンツ５０を各部屋に設置されたディスプレイ、再生装置、ＰＣ、携帯電話機などに配信するものであってもよい。デジタルコンテンツ提供サーバ４２は、再生装置の内部の記録装置または外部から挿入された記録媒体からデジタルコンテンツを読み出すものであってもよい。画像処理装置２０に入力されるデジタルコンテンツ５０が、画像データをデコードして画像を出力する順序と、エンコードされた画像データが入力される順序とが異なる画像データを含むデジタルコンテンツデータであればよい。

次に、画像処理装置２０の各処理部について、図２を参照して説明する。図２に示すように、画像処理装置２０は、入力部（入力手段）２２、コンテンツ蓄積部２４、デコード処理部（再生手段）２６、画像データ保管部２８、効果付加処理部（付加手段）３０、および画像データ出力処理部（出力制御手段）４０を備えている。なお、図２では、説明の便宜上、画像データ出力処理部４０から外部機器４４への信号経路のみを図示しているが、画像データ出力処理部４０の出力信号は、コンテンツ表示処理部１６を介し、図１に示す表示装置４６にも出力されている。

入力部２２は、情報を入力するためのインタフェースである。入力部２２は、外部から入力されたデジタルコンテンツ５０を、コンテンツ蓄積部２４に出力する。コンテンツ蓄積部２４は、入力部２２を介して入力されたデジタルコンテンツ５０を蓄積する。コンテンツ蓄積部２４は、ハードディスクなどの記録媒体でもよいし、フラッシュＲＯＭなどの半導体メモリでもよい。コンテンツ蓄積部２４は、デジタルコンテンツ５０を記録し蓄積できれば、どのような記録媒体であってもよい。

デコード処理部２６は、入力部２２を介して入力され、コンテンツ蓄積部２４に蓄積されているデジタルコンテンツを画像データにデコードする。デコード処理部２６は、デコードした画像データを画像データ保管部２８に出力する。画像データ保管部２８は、デコード処理部２６におけるデコード処理により得られた画像データを保管する。デコード処理部２６に保管された画像データは、効果付加処理部３０および画像データ出力処理部４０によって、任意のタイミングで参照される。

効果付加処理部３０は、画像データ保管部２８にて保管された画像データを外部機器４４に出力する際の効果を付加する処理を行う。効果付加処理部３０で行う処理について、詳細は後述する。画像データ出力処理部４０は、画像データ保管部２８にて保管されている画像データを外部機器４４に出力する。また、画像データ出力処理部４０は効果付加処理部３０にて効果が付加された画像データを外部機器４４および表示装置４６に出力できる。したがって、画像データ出力処理部４０が効果付加処理部３０にて効果が付加された画像データを出力した場合、ユーザ４８は、表示装置４６、および、外部機器４４に表示装置が設けられているときは当該表示装置において、効果が付加された画像データを鑑賞できる。

次に、効果付加処理部３０の機能的構成について、図３を参照して説明する。図３に示すように、効果付加処理部３０は、解像度調整処理部３１、明度調整処理部３３、彩度調整処理部３５、ぼかし度調整処理部３７、画像データ処理部３２・３４・３６・３８、および画像データ結合処理部３９を備えている。なお、効果付加処理部３０は、必ずしもこれら全てを備えている必要はないし、ここに記載されている以外の機能を備えていても構わない。効果付加処理部３０は、入力された画像データ６０に対して、出力する際の効果を付加することができる機能が備わっていればどのような機能を持っていてもよい。

解像度調整処理部３１は、入力された画像データ６０に対して解像度を調整する処理を行い、画像データ処理部３２は、解像度を調整した画像データを作成する。ここで、解像度を調整する方法としては、例えば入力された画像データを間引くことで解像度を落とす方法などが挙げられるが、必ずしもこれに限定されない。

なお、解像度調整処理部３１および画像データ処理部３２は、それぞれ解像度の異なる１または複数の画像データを作成できる。また、解像度調整処理部３１および画像データ処理部３２は、入力された画像データ６０よりも解像度の低い画像データを作成できる。

明度調整処理部３３は、入力された画像データ６０に対して明度を調整する処理を行い、画像データ処理部３４は明度を調整した画像データを作成する。ここで、明度を調整する方法としては、ＲＧＢの階調を調整して明度を調整する方法、または、ガンマ補正をかけて明度を調整する方法などが挙げられるが、必ずしもこれらに限定されない。

なお、明度調整処理部３３および画像データ処理部３４は、それぞれ明度の異なる１または複数の画像データを作成できる。また、明度調整処理部３３および画像データ処理部３４は、入力された画像データ６０の明度よりも明度の低い画像データを作成するものであっても構わないし、入力された画像データ６０の明度よりも明度の高い画像データを作成するものであっても構わない。

彩度調整処理部３５は、入力された画像データ６０に対して彩度を調整する処理を行い、画像データ処理部３６は、彩度を調整した画像データを作成する。ここで、彩度を調整する方法としては、ＲＧＢの階調を調整して彩度を調整する方法などが挙げられるが、必ずしもこれに限定されない。

なお、彩度調整処理部３５および画像データ処理部３６は、それぞれ彩度の異なる１または複数の画像データを作成できる。また、彩度調整処理部３５および画像データ処理部３６は、入力された画像データ６０の彩度よりも彩度の低い画像データを作成するものであっても構わないし、入力された画像データ６０の彩度よりも彩度の高い画像データを作成するものであっても構わない。

ぼかし度調整処理部３７は、入力された画像データ６０に対してぼかし度を調整する処理を行い、画像データ処理部３８は、ぼかし度を調整した画像データを作成する。ここで、ぼかし度を調整する方法としては、フィルタ処理を行う方法があるが、必ずしもこれに限定されない。

なお、ぼかし度調整処理部３７および画像データ処理部３８は、それぞれぼかし具合の異なる１または複数の画像データを作成できる。

画像データ処理部３２、３４、３６および３８において、複数の画像データが作成された場合、画像データ結合処理部３９は、それぞれの複数データの画像を結合して一つの動画像データを作成できる。

例えば、解像度調整処理部３１および画像データ処理部３２が解像度の異なる複数の画像データを作成した場合、画像データ結合処理部３９は、解像度の低い画像データから解像度の高い画像データへの順になるように、複数の当該画像データを結合して一つの動画像データを作成する。これにより、ユーザ４８が画像データ結合処理部３９にて作成された一つの動画像データを例えば表示装置４６で鑑賞すると、解像度の低い画像から徐々に解像度の高い画像が出力されているように見える。すなわち、ユーザ４８は、画像の解像度が、低い解像度から、徐々に入力された画像データの解像度に近づいていくように感じる。

同様に、明度調整処理部３３および画像データ処理部３４が入力された画像データ６０の明度よりも明度の低い複数の画像データを作成した場合、画像データ結合処理部３９は、明度の低い画像データから明度の高い画像データへの順になるように、複数の当該画像データを結合して一つの動画像データを作成する。これにより、ユーザ４８が画像データ結合処理部３９にて作成された一つの動画像データを例えば表示装置４６で鑑賞すると、明度の低い画像から徐々に明度が高い画像が出力されているように見える。すなわち、ユーザ４８は、画像の明度が、低い明度からから徐々に入力された画像データの明度に近づいていくように感じる。

逆に、明度調整処理部３３および画像データ処理部３４が入力された画像データ６０の明度よりも明度の高い複数の画像データを作成した場合、画像データ結合処理部３９は明度の高い画像データから明度の低い画像データへの順になるように、複数の当該画像データを結合して一つの動画像データを作成する。これにより、ユーザ４８が画像データ結合処理部３９にて作成された一つの動画像データを例えば表示装置４６で鑑賞すると、明度の高い画像から徐々に明度が低い画像が出力されているように見える。すなわち、ユーザ４８は、画像の明度が、高い明度から徐々に入力された画像データの明度に近づいていくように感じる。

また、彩度調整処理部３５および画像データ処理部３６が入力された画像データ６０の彩度よりも彩度の低い複数の画像データを作成した場合、画像データ結合処理部３９は、彩度の低い画像データから彩度の高い画像データへの順になるように、複数の当該画像データを結合して一つの動画像データを作成する。これにより、ユーザ４８が画像データ結合処理部３９にて作成された一つの動画像データを例えば表示装置４６で鑑賞すると、彩度の低い画像から徐々に彩度が高い画像が出力されているように見える。すなわち、ユーザ４８は、画像の彩度が、低い彩度から徐々に入力された画像データの彩度に近づいていくように感じる。

逆に、彩度調整処理部３５および画像データ処理部３６が入力された画像データ６０の彩度よりも彩度の高い複数の画像データを作成した場合、画像データ結合処理部３９は、彩度の高い画像データから彩度の低い画像データへの順になるように、複数の当該画像データを結合して一つの動画像データを作成する。これにより、ユーザ４８が画像データ結合処理部３９にて作成された一つの動画像データを例えば表示装置４６で鑑賞すると、彩度の高い画像から徐々に彩度が低い画像が出力されているように見える。すなわち、ユーザ４８は、画像の彩度が、高い彩度から徐々に入力された画像データの彩度に近づいていくように感じる。

さらに、ぼかし度調整処理部３７および画像データ処理部３８がぼかし度の異なる複数の画像データを作成した場合、画像データ結合処理部３９は、ぼかし度の大きい画像データからぼかし度の小さい画像データへの順になるように、複数の当該画像データを結合して一つの動画像データを作成する。これにより、ユーザ４８が画像データ結合処理部３９にて作成された一つの動画像データを例えば表示装置４６で鑑賞すると、ぼかし度の大きい画像データから徐々にぼかし度が小さい画像データが出力されているように見える。すなわち、ユーザ４８はぼかし度の大きい画像データから徐々に入力された画像データに近づいていくように感じる。

次に、映像効果を付加した画像を出力するタイミングについて、図４を参照して説明する。図４は、各実施形態におけるデジタルコンテンツ５０をエンコードおよびデコードする際の各画像データの様子を示す概略図である。図４では、上から順に、時間、受信画像、復号画像、実施形態１の画面出力を、時系列にそって左から右に示している。また、時間は、左から右に順に、時刻Ｔ１〜Ｔ２６までの各時刻を示している。なお、図４では、実施形態２の画面出力も併記しているが、これについては、実施形態２において説明する。

上述したように、本実施形態に係るデジタルコンテンツ５０は、映像を構成する各画像をそれぞれエンコードした画像データから構成されている。各画像データは、Ｉピクチャ、ＰピクチャまたはＢピクチャのいずれかである。画像データがＩピクチャである場合、デコード処理部２６は、当該画像データのみから、その画像データをデコードしたデータを生成できる。一方、画像データがＰまたはＢピクチャである場合、デコード処理部２６は、その画像データをエンコードする際に参照した他の画像データを参照して、その画像データをデコードする。

ここで、仮に、デジタルコンテンツ５０における各画像データが、それぞれに対応する画像の上記映像での時系列順に並べられており、これらの各画像データを含むデジタルコンテンツ５０が送信されたとすると、ＰまたはＢピクチャの画像データを受信した時点では、その画像データをデコードする際に必要な他の画像データが受信されていない場合がある。この場合、受信した画像データをデコード処理部２６がデコードできないため、デコード処理部２６がいずれの画像データをも処理できない期間が生じる虞がある。

これに対して、本施形態に係るデジタルコンテンツ５０では、ＰまたはＢピクチャの画像データは、その画像データをデコードする際に必要な他の画像データよりも後になるように並べられており、受信装置１０は、受信したデジタルコンテンツに含まれる各画像データをデコードした後、デコードされた画像データの順序を並べ替え、当該各画像データを、それぞれに対応する画像の、上記映像における時系列順に出力している。これにより、デコード処理部２６を効率良く動作させている。

一例として、図４の例では、デジタルコンテンツ５０において、各画像データが、Ｉ２、Ｂ０、Ｂ１、Ｐ５、Ｂ３…の順で並べられている。なお、各画像データには、Ｉピクチャ、ＰピクチャまたはＢピクチャのいずれであるかを示す英文字（Ｉ、ＰまたはＢ）に、映像における時系列順を示す数値を連結した参照符号が付されている。また、以下では、説明の便宜上、画像データに対応する画像も、当該画像データと同じ参照符号を付して参照する。なお、本実施形態に係るデジタルコンテンツ５０は、複数のＧＯＰ（Group of Pictures）から構成されているが、図４では、１つのＧＯＰのみを例示している。図４の例では、当該ＧＯＰがＢ０〜Ｐ１１の１２フレームから構成されている。

ここで、映像効果が付された画像の出力タイミングについて説明する前に、特に映像効果を付さない画像の出力タイミングと、その画像を示す画像データの処理とについて説明する。

時刻Ｔ１〜Ｔ２において、受信装置１０は、画像データＩ２を受信しデコードする。画像データＩ２は、イントラ符号化された画像データであり、画像データＩ２のみを用いて画面全体をデコードすることが可能なデータである。しかしながら、画面Ｉ２の出力タイミングは、画面Ｂ０・Ｂ１の出力の後である。したがって、受信装置１０（より詳細には、受信装置１０のデコード処理部２６）は、当該デコードした画像データＩ２を、一時記憶用のメモリとしての画像データ保管部２８に保存する。

また、時刻Ｔ３〜Ｔ４において、受信装置１０は、画像データＢ０を受信し、デコード処理部２６は、画像データＩ２のデコード結果および画像データＢ０に基づいて、画像データＢ０をデコードする。さらに、受信装置１０は、当該デコードされた画像データＢ０を表示装置４６などの表示装置（以下では、単に表示装置と称する）に出力し、表示装置は、画像データＢ０の示す画像Ｂ０を出力する。

ここで、画像Ｂ０は、デジタルコンテンツ５０の最初の画像であり、例えば、チャンネル切り替えなど、デジタルコンテンツ５０の出力指示を受けた場合、即座に出力することが望まれる。ただし、上述したように、画像データＢ０は、画像データＩ２のデコード結果および画像データＢ０に基づいてデコードされるデータであって、デジタルコンテンツ５０では、画像データＩ２の次に並べられている。したがって、受信装置１０は、デジタルコンテンツ５０の出力指示を受けた場合、画像Ｂ０を即座に出力することができず、少なくとも時刻Ｔ１〜Ｔ２における１フレーム分の遅延の後に、表示装置に出力する。

同様に、時刻Ｔ５〜Ｔ６において、受信装置１０は、画像データＢ１を受信し、デコード処理部２６は、画像データＩ２および画像データＢ１のデータに基づいて、画面データＢ１をデコードする。それにより、画面データＢ１の示す画面Ｂ１が表示装置から出力される。

一方、画像データ保管部２８に保存しておいた画面データＩ２の出力タイミング、すなわち、時刻Ｔ７〜Ｔ８になると、デコード処理部２６は、画像データ保管部２８に保存しておいた画面データＩ２を、表示装置に出力する。また、時刻Ｔ７〜Ｔ８では、受信装置１０は、画像データＰ５を受信し、デコードする。ただし、画面Ｐ５の出力タイミングは、画面Ｂ３・Ｂ４の後であるため、デコード処理部２６は、画像データＰ５をデコードした後、画像データ保管部２８に保存する。

時刻Ｔ９〜Ｔ１０において、受信装置１０は、画像データＢ３を受信し、デコード処理部２６は、画像データＰ５のデコード結果および画像データＢ３に基づいて、画像データＢ３をデコードする。その後、画像データＢ３の示す画面Ｂ３が表示装置に出力される。時刻Ｔ１１〜Ｔ１２において、受信装置１０は、画像データＢ４を受信し、デコード処理部２６は、画像データＰ５のデコード結果および画像データＢ４に基づいて、画面データＢ４をデコードする。その後、画像データＢ４の示す画面Ｂ４が表示装置に出力される。

また、上記画面データＰ５の出力タイミング、すなわち、時刻Ｔ１３〜Ｔ１４になると、デコード処理部２６は、画像データ保管部２８に保存しておいた画面データＰ５を表示装置に出力する。また、時刻Ｔ１３〜Ｔ１４において、受信装置１０は、画像データＰ８を受信しデコードする。ただし、画面Ｐ８の出力タイミングは、画面Ｂ６・Ｂ７の後であるため、デコード処理部２６は、画像データＰ８をデコードした後、画像データ保管部２８に保存する。

同様に、時刻Ｔ１５〜Ｔ１６において、画像データＢ６は受信装置１０に受信され、画像データＰ８および画像データＢ６のデータに基づいて、デコード処理部２６は画面Ｂ６のデコードを行う。その後、画面Ｂ６が表示装置に出力される。時刻Ｔ１７〜Ｔ１８において、画像データＢ７は受信装置１０に受信され、画像データＰ８および画像データＢ６のデータに基づいて、デコード処理部２６は画面Ｂ７のデコードを行う。その後、画面Ｂ７が表示装置に出力される。

時刻Ｔ１９〜Ｔ２０において、画面Ｐ８が表示装置に出力される。そして、画像データＰ１１が受信装置１０に受信されるが、画面Ｐ１１の出力タイミングは画面Ｂ９・Ｂ１０の後であるため、画像データＰ１１はデコードされた後、画像データ保管部２８に保存される。

時刻Ｔ２１〜Ｔ２２において、画像データＢ９は受信装置１０に受信され、画像データＰ１１および画像データＢ９のデータに基づいて、デコード処理部２６は画面Ｂ９のデコードを行う。その後、画面Ｂ９が表示装置に出力される。時刻Ｔ２３〜Ｔ２４において、画像データＢ１０は受信装置１０に受信され、画像データＰ１１および画像データＢ９のデータに基づいて、デコード処理部２６は画面Ｂ９のデコードを行う。その後、画面Ｂ９が表示装置に出力される。

時刻Ｔ２５〜Ｔ２６において、画像データ保管部２８に一時保存しておいた画面Ｐ１１が表示装置に出力される。以降、次のＧＯＰについても、同様に出力を繰り返す。

ところで、受信装置１０がＩ２を受信し、デコード処理部２６が画像データＩ２をデコードした時点では、画像データＩ２のデコードが終了しているにも拘わらず、未だ画像データＢ０がデコードされていないため、当該画像データＩ２は、画像データ保管部２８に記憶される。そして、当該画像データＩ２の示す画像Ｉ２は、デジタルコンテンツ５０の示す映像において最初の画像Ｂ０、および、その次の画像Ｂ１が出力された後で出力される。

ここで、従来では、画像Ｂ０を出力する前の時刻Ｔ１〜Ｔ２において、空白画像やブランクの黒い画面、または過去の画面などを表示装置に出力していた。

これに対して、本実施形態に係る受信装置１０は、画像データＩ２をデコードしてから画像Ｂ０を出力するまでの期間（時刻Ｔ１〜Ｔ２）において、これから出力する画面Ｉ２の画像データＩ２に映像効果を付加して出力する。

具体的には、効果付加処理部３０は、画像データＩ２に基づいて、近似度が低い画面Ｉ２ａ、および画面Ｉ２ａよりも近似度が高くかつ画面Ｉ２よりも近似度が低い画面Ｉ２ｂを生成し、時刻Ｔ１において画面Ｉ２ａを、時刻Ｔ２において画面Ｉ２ｂを出力する。これにより、画面Ｉ２ａ→画面Ｉ２ｂ→画面Ｂ０と徐々に画面Ｉ２と同一の画像に近づいてゆくように画像が出力される。

ここで、画面Ｉ２ａおよび画面Ｉ２ｂは、画面Ｂ０よりも未来の画像であるが、画面Ｂ０は画像データＩ２に基づいてデコードされる画像であり、画面Ｂ０および画面Ｉ２は似た画像である可能性が高いため、ユーザが感じる違和感は少ない。そのため、従来１フレーム分の遅延が生じる時刻Ｔ１〜Ｔ２において、時刻Ｔ３に出力される画面Ｂ０に自然に繋がる画像を出力することができるので、ユーザに与える心理的負担を軽減することができる。

また、画面Ｂ０の前に挿入される画面Ｉ２ａ…は、画面Ｉ２に映像効果を付加して生成された画面であり、画面Ｉ２を含む本来のデジタルコンテンツ５０よりも近似度が低く設定されている。したがって、画面Ｉ２が画面Ｂ０と若干相違していたとしても、ユーザは、その相違に気付きにくい。この結果、ユーザに与える違和感を抑制でき、ユーザに与える心理的負担を軽減できる。

〔実施形態２〕
次に、実施形態２における別の画面出力方法について、説明する。なお、実施形態２に係る受信装置１０は、実施形態１に係る受信装置１０と比較して、効果付加処理部３０および画像データ出力処理部の動作タイミングおよび効果の付加方法が異なっているが、動作タイミングおよび効果の付加方法を除けば、両受信装置１０は、互いに同じ構造である。したがって、実施形態２では、受信装置、および、それを構成する各部材を、実施形態１と同じ参照符号を付して参照する。

実施形態２では、受信装置１０がＩ２を受信し、デコード処理部２６がＩ２をデコードし、従来では外部機器４４には何も出力されない時刻Ｔ１〜Ｔ２および画面Ｂ０・Ｂ１が出力される時刻Ｔ３〜Ｔ６において、これから出力する画面Ｉ２の画像を用いて効果を付加した画像を作成し、出力する。すなわち、画面Ｉ２が出力される時刻Ｔ７〜Ｔ８まで、効果を付加した画面を出力する。

具体的には、効果付加処理部３０は、画像データＩ２に基づいて、近似度が順に高くなっていくように、画面Ｉ２ａ・Ｉ２ｂ・Ｉ２ｃ・Ｉ２ｄ・Ｉ２ｅ・Ｉ２ｆを生成し、時刻Ｔ１・Ｔ２・Ｔ３・Ｔ４・Ｔ５・Ｔ６において、それぞれ画面Ｉ２ａ・Ｉ２ｂ・Ｉ２ｃ・Ｉ２ｄ・Ｉ２ｅ・Ｉ２ｆを出力する。これにより、画面Ｉ２ａ→画面Ｉ２ｂ→画面Ｉ２ｃ→画面Ｉ２ｄ→画面Ｉ２ｅ→画面Ｉ２ｆ→画面Ｉ２と徐々に画面が近似し、画面Ｉ２と同一の画面に近づいてゆくように画像が出力される。

実施形態１の画面の出力方法と比較して、時系列に沿わない画像を出力することがなくなるため、より自然に繋がる画像を順に出力することができるので、ユーザに与える心理的負担をより軽減することができる。

次に、画像処理装置２０で実際に行われる画像処理について、図５〜図９を参照して説明する。図５は、画像処理装置２０の主要動作Ｓ１０１〜Ｓ１０７の概要を示すフロー図である。図６は、図５に示すＳ１０３で実行される解像度調整処理を示すフロー図である。図７は、図５に示すＳ１０４で実行される明度調整処理を示すフロー図である。図８は、図５に示すＳ１０５で実行される彩度調整処理を示すフロー図である。図９は、図５に示すＳ１０６で実行されるぼかし度調整処理を示すフロー図である。

図５を参照して、主要動作の処理の流れについて説明を行う。画像処理装置２０の電源が入れられると、画像処理が開始され、処理はＳ１０１へ進む。

Ｓ１０１において、画像処理装置２０は入力されたデジタルコンテンツ５０に対して効果を付加する指示があるか否かの判断を行う。効果を付加する指示がある場合（Ｓ１０１でＹＥＳ）Ｓ１０２へ進み、効果を付加する指示がない場合（Ｓ１０１でＮＯ）、処理を終了する。なお、効果を付加するか否かの情報は、予め画像処理装置２０が保持しているものであっても構わないし、ユーザ４８が画像処理装置２０に対して適宜指示または設定するものであっても構わない。

Ｓ１０２において、効果付加処理部３０は、画像データ６０に対して付加する効果を決定する。画像データ６０に対して解像度を調整することで効果を付加する場合（Ｓ１０２で解像度調整）、処理はＳ１０３へ進む。画像データ６０に対して明度を調整することで効果を付加する場合（Ｓ１０２で明度調整）、処理はＳ１０４へ進む。画像データ６０に対して彩度を調整することで効果を付加する場合（Ｓ１０２で彩度調整）、処理はＳ１０５へ進む。画像データ６０に対してぼかし度を調整することで効果を付加する場合（Ｓ１０２でぼかし度調整）、処理はＳ１０６へ進む。

なお、画像データ６０に対してどの効果を付加するかの情報は、予め効果付加処理部３０が保持しているものであっても構わないし、ユーザ４８が画像処理装置２０に対して適宜指示または設定するものであっても構わない。

Ｓ１０３において、解像度調整処理部３１および画像データ処理部３２は、画像データ６０に対して解像度を調整することで解像度の異なる１つ以上の画像データを作成し、処理はＳ１０７へ進む。解像度調整処理の詳細については、後述する。Ｓ１０４において、明度調整処理部３３および画像データ処理部３４は、画像データ６０に対して明度を調整することで明度の異なる１つ以上の画像データを作成し、処理はＳ１０７へ進む。明度調整処理の詳細については、後述する。

Ｓ１０５において、彩度調整処理部３５および画像データ処理部３６は、画像データ６０に対して彩度を調整することで彩度の異なる１つ以上の画像データを作成し、処理はＳ１０７へ進む。なお、彩度調整処理の詳細については後述する。Ｓ１０６において、ぼかし度調整処理部３７および画像データ処理部３８は、画像データ６０に対してぼかし度を調整することでぼかし度の異なる１または複数の画像データを作成してＳ１０７へ進む。なお、ぼかし度調整処理の詳細については後述する。

Ｓ１０７において、画像データ出力処理部４０はＳ１０３、Ｓ１０４、Ｓ１０５およびＳ１０６において効果が付加された画像データを出力して処理を終了する。

次に、図６を参照して、解像度調整処理について説明する。解像度調整処理が開始されると、Ｓ２０１において、解像度調整処理部３１はデコード処理部２６におけるデコード処理により得られた画像データ６０に対して、当該画像データ６０よりも解像度を落とした画像データを作成するか否かの判定を行う。解像度を落とした画像データを作成する場合はＳ２０２へ進み、解像度を落とした画像データを作成しない場合はＳ２０３へ進む。なお、解像度調整処理部３１が解像度を落とした画像データを作成するか否かを判定する基準は、予め画像処理装置２０が保持しているものであっても構わない。

具体的には、作成する画像データの枚数が予め決められているものであっても構わないし、Ｓ２０５において、作成された複数の画像データを結合して一つの動画像データを作成するが、作成する動画像データの時間に応じて、作成する画像データの枚数が決定されるものであっても構わない。そして、当該枚数以内であれば画像データを作成し、当該枚数に達した場合は画像データを作成しないものであっても構わない。

Ｓ２０２において、画像データ処理部３２は、デコード処理部２６におけるデコード処理により得られた画像データ６０の解像度よりも解像度を落とした画像データを作成する。ただし、Ｓ２０１およびＳ２０２において繰り返しの処理が行われており、かつＳ２０２における処理が複数回行われている場合、Ｓ２０２において画像データ処理部３２が作成する画像データの解像度は全て異なるように制御される。

具体的には、解像度調整処理部３１が、Ｓ２０２において作成された画像データの解像度を全て管理しておくことで、Ｓ２０２において画像データ処理部３２による画像データの作成処理が行われるたびに、解像度調整処理部３１が当該画像データの解像度を決定すればよい。なお、解像度調整処理部３１が解像度を決定する方法は限定しないが、例えば一つ前に作成した画像データの解像度から一定量または一定割合ずつ減じていくことで、解像度を決定するものであっても構わない。

なお、画像データ処理部３２が行う解像度を落とす方法としては、例えば入力された画像データ６０を間引くことで実現することができるが、必ずしもこれに限定されない。入力された画像データ６０よりも解像度を落とすことができるものであれば、何でも構わない。

Ｓ２０３において、画像データ結合処理部３９はＳ２０２において作成された解像度を落とした画像データが複数枚存在するか否かを判定する。複数の画像データが存在する場合はＳ２０４へ進み、複数の画像データが存在しない場合は処理を終了する。

Ｓ２０４において、画像データ結合処理部３９はＳ２０２において作成された複数の画像データを解像度が低い画像データから解像度が高い画像データの順になるようにソートして、Ｓ２０５へ進む。

Ｓ２０５において、画像データ結合処理部３９はＳ２０４においてソートされた順に画像データを結合し、一つの動画像データを作成して処理を終了する。これは、この動画像データは、解像度が低い画像データから徐々に解像度が高い画像データになるように作成されている。すなわち、この動画像データは、デコード処理により得られた画像データよりも解像度が非常に低い画像データから徐々にデコード処理により得られた画像データに近づくように作成されている。

次に、図７を参照して、明度調整処理について説明する。明度調整処理が開始されると、Ｓ３０１において、明度調整処理部３３はデコード処理部２６におけるデコード処理により得られた画像データ６０に対して、当該画像データ６０よりも明度を高くした画像データを作成するか、あるいは当該画像データ６０よりも明度を低くした画像データを作成するかどうかを判定する。明度を高くした画像データを作成する場合はＳ３０２へ進み、明度を低くした画像データを作成する場合はＳ３０７へ進む。

なお、明度調整処理部３３が明度を高くした画像データを作成するか、あるいは明度を低くした画像データを作成するかどうかを判定する基準は、予め画像処理装置２０が保持しているものであっても構わない。

Ｓ３０２において、明度調整処理部３３はデコード処理部２６におけるデコード処理により得られた画像データ６０の明度よりも明度を高くした画像データを作成するか否かの判定を行う。明度を高くした画像データを作成する場合はＳ３０３へ進み、明度を高くした画像データを作成しない場合はＳ３０４へ進む。

なお、明度調整処理部３３が画像データを作成するか否かを判定する基準は、予め画像処理装置２０が保持しているものであっても構わない。具体的には、作成する画像データの枚数が予め決められているものであっても構わないし、Ｓ３０６において、作成された複数の画像データを結合して一つの動画像データを作成するが、作成する動画像データの時間に応じて、作成する画像データの枚数が決定されるものであっても構わない。そして、当該枚数以内であれば画像データを作成し、当該枚数に達した場合は画像データを作成しないものであっても構わない。

Ｓ３０３において、画像データ処理部３４は、デコード処理部２６におけるデコード処理により得られた画像データ６０の明度よりも明度を高くした画像データを作成する。ただし、Ｓ３０２およびＳ３０３において繰り返しの処理が行われており、かつＳ３０３における処理が複数回行われている場合、Ｓ３０３において画像データ処理部３４が作成する画像データの明度は全て異なるように制御される。

具体的には、明度調整処理部３３が、Ｓ３０３において作成された画像データの明度を全て管理しておくことで、Ｓ３０３において画像データ処理部３４による画像データの作成処理が行われるたびに、明度調整処理部３３が当該画像データの明度を決定すればよい。なお、明度調整処理部３３が明度を決定する方法は限定しないが、例えば一つ前に作成した画像データの明度から一定量または一定割合ずつ高くしていくことで、明度を決定するものであっても構わない。

なお、画像データ処理部３４が行う明度を高くする方法としては、例えばＲＧＢの階調を徐々に上げていくことで、明度を高くすることができる。例えば、シアン（Ｒ＝０、Ｇ＝２５５、Ｂ＝２５５）から緑（Ｇの値）と青（Ｂの値）を減らさずに、赤（Ｒの値）だけを徐々に増やすと、光の量が増えていき、最後は白（Ｒ＝２５５、Ｇ＝２５５、Ｂ＝２５５）となる。このように、ＲＧＢの階調を調整することで、明度を調整することができる。なお、明度を調整する方法は必ずしもこれに限定されない。例えば、ガンマ補正をかけることで、明度をあげることができる。

Ｓ３０４において、画像データ結合処理部３９はＳ３０３において作成された明度を高くした画像データが複数枚存在するか否かを判定する。複数の画像データが存在する場合はＳ３０５へ進み、複数の画像データが存在しない場合は処理を終了する。Ｓ３０５において、画像データ結合処理部３９はＳ３０３において作成された複数の画像データを明度が高い画像データから明度が低い画像データの順になるようにソートして、Ｓ３０６へ進む。

Ｓ３０６において、画像データ結合処理部３９はＳ３０５においてソートされた順に画像データを結合し、一つの動画像データを作成して処理を終了する。これは、この動画像データは、明度が高い画像データから徐々に明度が低い画像データになるように作成されている。すなわち、この動画像データは、デコード処理により得られた画像データよりも明度が非常に高い画像データから徐々にデコード処理により得られた画像データに近づくように作成されている。

Ｓ３０７において、明度調整処理部３３はデコード処理部２６におけるデコード処理により得られた画像データ６０の明度よりも明度を低くした画像データを作成するか否かの判定を行う。明度を低くした画像データを作成する場合はＳ３０８へ進み、明度を低くした画像データを作成しない場合はＳ３０９へ進む。なお、明度調整処理部３３が画像データを作成するか否かを判定する基準は、予め画像処理装置２０が保持しているものであっても構わない。

具体的には、作成する画像データの枚数が予め決められているものであっても構わないし、Ｓ３１１において、作成された複数の画像データを結合して一つの動画像データを作成するが、作成する動画像データの時間に応じて、作成する画像データの枚数が決定されるものであっても構わない。そして、当該枚数以内であれば画像データを作成し、当該枚数に達した場合は画像データを作成しないものであっても構わない。

Ｓ３０８において、画像データ処理部３４は、デコード処理部２６におけるデコード処理により得られた画像データ６０の明度よりも明度を低くした画像データを作成する。ただし、Ｓ３０７およびＳ３０８において繰り返しの処理が行われており、かつＳ３０８における処理が複数回行われている場合、Ｓ３０８において画像データ処理部３４が作成する画像データの明度は全て異なるように制御される。

具体的には、明度調整処理部３３が、Ｓ３０８において作成された画像データの明度を全て管理しておくことで、Ｓ３０８において画像データ処理部３４による画像データの作成処理が行われるたびに、明度調整処理部３３が当該画像データの明度を決定すればよい。なお、明度調整処理部３３が明度を決定する方法は限定しないが、例えば一つ前に作成した画像データの明度から一定量または一定割合ずつ低くしていくことで、明度を決定するものであっても構わない。

なお、画像データ処理部３４が行う明度を低くする方法としては、上記にあげた明度を高くする方法の逆を行えばよい。すなわち、ＲＧＢの階調を徐々に下げていくことで、明度を低くすることができる。

Ｓ３０９において、画像データ結合処理部３９はＳ３０８において作成された明度を低くした画像データが複数枚存在するか否かを判定する。複数の画像データが存在する場合はＳ３１０へ進み、複数の画像データが存在しない場合は処理を終了する。

Ｓ３１０において、画像データ結合処理部３９はＳ３０８において作成された複数の画像データを明度が低い画像データから明度が高い画像データの順になるようにソートして、Ｓ３１１へ進む。

Ｓ３１１において、画像データ結合処理部３９はＳ３１０においてソートされた順に画像データを結合し、一つの動画像データを作成して処理を終了する。これは、この動画像データは、明度が低い画像データから徐々に明度が高い画像データになるように作成されている。すなわち、この動画像データは、デコード処理により得られた画像データよりも明度が非常に低い画像データから徐々にデコード処理により得られた画像データに近づくように作成されている。

次に、図８を参照して、彩度調整処理について説明する。彩度調整処理が開始されると、Ｓ４０１において、彩度調整処理部３５はデコード処理部２６におけるデコード処理により得られた画像データ６０に対して、当該画像データ６０よりも彩度を高くした画像データを作成するか、あるいは当該画像データ６０よりも彩度を低くした画像データを作成するかどうかを判定する。彩度を高くした画像データを作成する場合はＳ４０２へ進み、彩度を低くした画像データを作成する場合はＳ４０７へ進む。

なお、彩度調整処理部３５が彩度を高くした画像データを作成するか、あるいは彩度を低くした画像データを作成するかどうかを判定する基準は、予め画像処理装置２０が保持しているものであっても構わない。

Ｓ４０２において、彩度調整処理部３５はデコード処理部２６におけるデコード処理により得られた画像データ６０の彩度よりも彩度を高くした画像データを作成するか否かの判定を行う。彩度を高くした画像データを作成する場合はＳ４０３へ進み、彩度を高くした画像データを作成しない場合はＳ４０４へ進む。なお、彩度調整処理部３５が画像データを作成するか否かを判定する基準は、予め画像処理装置２０が保持しているものであっても構わない。

具体的には、作成する画像データの枚数が予め決められているものであっても構わないし、Ｓ４０６において、作成された複数の画像データを結合して一つの動画像データを作成するが、作成する動画像データの時間に応じて、作成する画像データの枚数が決定されるものであっても構わない。そして、当該枚数以内であれば画像データを作成し、当該枚数に達した場合は画像データを作成しないものであっても構わない。

Ｓ４０３において、画像データ処理部３６は、デコード処理部２６におけるデコード処理により得られた画像データ６０の彩度よりも彩度を高くした画像データを作成する。ただし、Ｓ４０２およびＳ４０３において繰り返しの処理が行われており、かつＳ４０３における処理が複数回行われている場合、Ｓ４０３において画像データ処理部３６が作成する画像データの彩度は全て異なるように制御される。

具体的には、彩度調整処理部３５が、Ｓ４０３において作成された画像データの彩度を全て管理しておくことで、Ｓ４０３において画像データ処理部３６による画像データの作成処理が行われるたびに、彩度調整処理部３５が当該画像データの彩度を決定すればよい。なお、彩度調整処理部３５が彩度を決定する方法は限定しないが、例えば一つ前に作成した画像データの彩度から一定量または一定割合ずつ高くしていくことで、彩度を決定するものであっても構わない。

なお、画像データ処理部３６が行う彩度を高くする方法としては、例えばＲＧＢの階調を調整することで彩度を高くすることができる。例えば、グレー（Ｒ＝３９、Ｇ＝３９、Ｂ＝３９）から青（Ｂの値）を徐々に増していき、増やした分だけ赤（Ｒの値）と緑（Ｇの値）を減らしていくと、色は鮮やかになり、シアン（Ｒ＝０、Ｇ＝２５５、Ｂ＝２５５）に近づいていく。この結果、彩度を高くすることができる。

Ｓ４０４において、画像データ結合処理部３９はＳ４０３において作成された彩度を高くした画像データが複数枚存在するか否かを判定する。複数の画像データが存在する場合はＳ４０５へ進み、複数の画像データが存在しない場合は処理を終了する。

Ｓ４０５において、画像データ結合処理部３９はＳ４０３において作成された複数の画像データを彩度が高い画像データから彩度が低い画像データの順になるようにソートして、Ｓ４０６へ進む。

Ｓ４０６において、画像データ結合処理部３９はＳ４０５においてソートされた順に画像データを結合し、一つの動画像データを作成して処理を終了する。これは、この動画像データは、彩度が高い画像データから徐々に彩度が低い画像データになるように作成されている。すなわち、この動画像データは、デコード処理により得られた画像データよりも彩度が非常に高い画像データから徐々にデコード処理により得られた画像データに近づくように作成されている。

Ｓ４０７において、彩度調整処理部３５はデコード処理部２６におけるデコード処理により得られた画像データ６０の彩度よりも彩度を低くした画像データを作成するか否かの判定を行う。彩度を低くした画像データを作成する場合はＳ４０８へ進み、彩度を低くした画像データを作成しない場合はＳ４０９へ進む。

なお、彩度調整処理部３５が画像データを作成するか否かを判定する基準は、予め画像処理装置２０が保持しているものであっても構わない。例えば、作成する画像データの枚数が予め決められているものであっても構わないし、Ｓ４１１において、作成された複数の画像データを結合して一つの動画像データを作成するが、作成する当該動画像データの時間に応じて、作成する画像データの枚数が決定されるものであっても構わない。そして、当該枚数以内であれば画像データを作成し、当該枚数に達した場合は画像データを作成しないものであっても構わない。

Ｓ４０８において、画像データ処理部３６は、デコード処理部２６におけるデコード処理により得られた画像データ６０の彩度よりも彩度を低くした画像データを作成する。ただし、Ｓ４０７およびＳ４０８において繰り返しの処理が行われており、かつＳ４０８における処理が複数回行われている場合、Ｓ４０８において画像データ処理部３６が作成する画像データの彩度は全て異なるように制御される。

具体的には、彩度調整処理部３５が、Ｓ４０８において作成された画像データの彩度を全て管理しておくことで、Ｓ４０８において画像データ処理部３６による画像データの作成処理が行われるたびに、彩度調整処理部３５が当該画像データの彩度を決定すればよい。なお、彩度調整処理部３５が彩度を決定する方法は限定しないが、例えば、一つ前に作成した画像データの彩度から一定量または一定割合ずつ低くしていくことで、彩度を決定するものであっても構わない。

なお、画像データ処理部３６が行う彩度を低くする方法としては、例えばＲＧＢの階調を調整することで彩度を低くすることができる。例えば、シアン（Ｒ＝０、Ｇ＝２５５、Ｂ＝２５５）から赤（Ｒの値）を徐々に増やしていき、増やした分だけ緑（Ｇの値）と青（Ｂの値）を減らしていくと、色は鮮やかさを失い、グレー（Ｒ＝３９、Ｇ＝３９、Ｂ＝３９）に近づいていく。この結果、彩度を低くすることができる。

Ｓ４０９において、画像データ結合処理部３９はＳ４０８において作成された彩度を低くした画像データが複数枚存在するか否かを判定する。複数の画像データが存在する場合はＳ４１０へ進み、複数の画像データが存在しない場合は処理を終了する。

Ｓ４１０において、画像データ結合処理部３９はＳ４０８において作成された複数の画像データを彩度が低い画像データから彩度が高い画像データの順になるようにソートして、Ｓ４１１へ進む。

Ｓ４１１において、画像データ結合処理部３９はＳ４１０においてソートされた順に画像データを結合し、一つの動画像データを作成して処理を終了する。これは、この動画像データは、彩度が低い画像データから徐々に彩度が高い画像データになるように作成されている。すなわち、この動画像データは、デコード処理により得られた画像データよりも彩度が非常に低い画像データから徐々にデコード処理により得られた画像データに近づくように作成されている。

次に、図９を参照して、ぼかし度調整処理について説明する。ステップＳ５０１において、ぼかし度調整処理部３７はデコード処理部２６におけるデコード処理により得られた画像データ６０に対して、ぼかした画像データを作成するか否かの判定を行う。ぼかした画像データを作成する場合はステップＳ５０２へ進み、ぼかした画像データを作成しない場合はステップＳ５０３へ進む。

なお、ぼかし度調整処理部３７がぼかした画像データを作成するか否かを判定する基準は、予め画像処理装置２０が保持しているものであっても構わない。例えば、作成する画像データの枚数が予め決められているものであっても構わないし、ステップＳ５０５において、作成された複数の画像データを結合して一つの動画像データを作成するが、作成する動画像データの時間に応じて、作成する画像データの枚数が決定されるものであっても構わない。そして、当該枚数以内であれば画像データを作成し、当該枚数に達した場合は画像データを作成しないものであっても構わない。

ステップＳ５０２において、画像データ処理部３８は、デコード処理部２６におけるデコード処理により得られた画像データ６０に対してぼかした画像データを作成する。ただし、ステップＳ５０１およびステップＳ５０２において繰り返しの処理が行われており、かつステップＳ５０２における処理が複数回行われている場合、ステップＳ５０２において画像データ処理部３８が作成する画像データのぼかし具合は全て異なるように制御される。

例えば、ぼかし度調整処理部３７が、ステップＳ５０２において作成された画像データのぼかし度を全て管理しておくことで、ステップＳ５０２において画像データ処理部３８による画像データの作成処理が行われるたびに、ぼかし度調整処理部３７が当該画像データのぼかし度を決定すればよい。

なお、ぼかし度調整処理部３７がぼかし度を決定する方法は限定しないが、例えば一つ前に作成した画像データのぼかし度から一定量または一定割合ずつ大きくしていくことで、ぼかし度を決定するものであっても構わない。また、画像データ処理部３８が行うぼかした画像データを作成する方法としては、例えばフィルタ処理を行う方法がある。例えば、フィルタ処理後の注目画素濃度値を隣接する画素の平均値とするようなフィルタをかけることで当該画像データをぼかすことができる。

ステップＳ５０３において、画像データ結合処理部３９はステップＳ５０２において作成されたぼかした画像データが複数枚存在するか否かを判定する。複数の画像データが存在する場合はステップＳ５０４へ進み、複数の画像データが存在しない場合は処理を終了する。

ステップＳ５０４において、画像データ結合処理部３９はステップＳ５０２において作成された複数の画像データをぼかし度が大きい画像データからぼかし度が小さい画像データの順になるようにソートして、ステップＳ５０５へ進む。

ステップＳ５０５において、画像データ結合処理部３９はステップＳ５０４においてソートされた順に画像データを結合し、一つの動画像データを作成して処理を終了する。これは、この動画像データは、ぼかし度が大きい画像データから徐々にぼかし度が小さい画像データになるように作成されている。すなわち、この動画像データは、デコード処理により得られた画像データにぼかしが入った画像データから徐々にデコード処理により得られた画像データに近づくように作成されている。

次に、画像処理装置２０の具体的な動作として、実施例１から実施例４を例示する。

以下に示す実施例１において、デコード処理により得られた画像データに対して、解像度を調整した複数の画像データを作成し、作成した複数の画像データを結合することで一つの動画像データを作成して出力する際の画像処理装置２０の動作を例示する。

例えば、ａ×ｂの解像度の画像データＡ０が入力された場合について、図６に示すフロー図に従って説明する。Ｓ２０１およびＳ２０２において、解像度調整処理部３１は入力された画像データＡ０に対して、ａ×ｂの解像度よりも低い解像度の画像データを作成する。ここで、解像度調整処理部３１が解像度を落とした画像データを作成する方法として、例えば入力された画像データＡ０を間引くことで、解像度を落とした画像データを作成するものであっても構わない。水平方向および垂直方向の解像度を半分にする場合、水平方向成分において偶数ラインを間引き、かつ垂直方向成分において偶数ラインを間引くことで、ａ／２×ｂ／２の解像度の画像データを作成することができる。

ここで、Ｓ２０１およびＳ２０２において、画像データＡ０の解像度よりも解像度を落とした画像データを５枚作成するものとする。この場合、水平方向および垂直方向の解像度がそれぞれ５／６、４／６、３／６、２／６および１／６となる画像データを作成する。なお、上記のような解像度にする理由は、５枚の画像データを結合して一つの動画像データを作成してそれをユーザ４８が鑑賞した際に、違和感を与えないようにするためである。すなわち、解像度の変化を規則的に行うことで、そこから作成された動画像データを鑑賞したユーザ４８に違和感を与えないようにするためである。

Ｓ２０２において、画像データ処理部３２は、５ａ／６×５ｂ／６の解像度からなる画像データＡ１、４ａ／６×４ｂ／６の解像度からなる画像データＡ２、３ａ／６×３ｂ／６の解像度からなる画像データＡ３、２ａ／６×２ｂ／６の解像度からなる画像データＡ４、および１ａ／６×１ｂ／６の解像度からなる画像データＡ５の５枚の画像データを作成する。

Ｓ２０３、Ｓ２０４およびＳ２０５において、５枚の画像データが存在するため、５枚の画像データを結合して、一つの動画像データを作成する。ここで、画像データ結合処理部３９は、Ａ１からＡ５の５枚の画像データを解像度が低い画像データから解像度が高い画像データの順になるようにソートするため、Ａ５−Ａ４−Ａ３−Ａ２−Ａ１の順にソートされる。

Ｓ２０５において、画像データ結合処理部３９はソートされた順に５枚の画像データを結合して、一つの動画像データＡ１０を作成する。

そして、図５に示すＳ１０７において、画像データ出力処理部４０は動画像データＡ１０を外部機器４４に出力する。なお、外部機器４４に表示装置が備わっているような場合は、動画像データＡ１０が出力され、ユーザ４８は動画像データＡ１０を鑑賞することができる。動画像データＡ１０は解像度の低い画像データから徐々に解像度が高い画像データになるように構成されているため、ユーザ４８は解像度の低い画像データから始まり徐々に元の画像データＡ０に近づいていくように感じることができる。

次に、上記のような入力された画像データに対して解像度を調整した画像データを作成することができる画像処理装置２０を備えた受信装置１０の動作を例示する。例えば、ユーザ４８がデジタル放送のデジタルコンテンツＡ１００を鑑賞している際に、チャンネルを切り替えてデジタルコンテンツＡ２００を鑑賞しようとした場合について説明する。

チャンネル切り替え部１４は、ユーザ４８からのチャンネル切り替え指示を受け取り、コンテンツ受信部１２はユーザ４８から指示されたチャンネル切り替え後のコンテンツであるデジタルコンテンツＡ２００を受信する。なお、デジタルコンテンツＡ２００は図１１に示すような形でエンコード処理およびデコード処理されるものとする。すなわち、Ｉ２、Ｂ０、Ｂ１、Ｐ５、Ｂ３、Ｂ４・・・という順にエンコードされたデジタルコンテンツＡ２００がコンテンツ受信部１２を介して入力され、デコード処理部２６はＩ２、Ｂ０、Ｂ１、Ｐ５、Ｂ３、Ｂ４・・・という順にデコード処理を行う。

そこで、効果付加処理部３０を構成する解像度調整処理部３１および画像データ処理部３２は、最初にデコード処理されたＩ２に対して、解像度を調整した画像データを作成して、解像度の低い画像データから解像度の高い画像データの順に結合して一つの動画像データＡ２０１を作成する。なお、これら一連の処理は上述で説明した通りである。

そして、コンテンツ表示処理部１６は、ユーザ４８によるチャンネル切り替え後の映像が映し出されるまでの間、動画像データＡ２０１を出力する。すなわち、図１１に示すように、Ｉ２の次のＢ０がデコードされて再生処理されるまでの間、動画像データＡ２０１を出力する。

または、動画像データＡ２０１を作成する際に使用したＩ２が再生処理されるまでの間、動画像データＡ２０１を出力するものであっても構わない。この場合、Ｂ０およびＢ１は出力されない。これにより、ユーザ４８はチャンネル切り替え後の映像が出力されるまで待っている必要はなく、チャンネル切り替え後の映像が出力されるまで動画像データＡ２０１を鑑賞することができるため、映像が出力されるまで待っているというユーザ４８の心理的負担を軽減することができる。

さらに、動画像データＡ２０１は解像度の低い画像データから徐々に元の画像データに近づいていくように作成されているため、動画像データＡ２０１からチャンネル切り替え後の映像へもスムーズに切り替わることができ、ユーザ４８に違和感を与えることはない。

なお、解像度を落とした画像データは必ずしも複数枚作成する必要はなく、１枚であっても構わない。この場合、動画像データは作成されないため、チャンネル切り替え後の映像が出力されるまで当該画像データが表示される。

以上のように、本実施例１の構成において、デコード処理により得られた画像データに対して、元の画像データよりも解像度を落とした画像データを作成し、作成した画像データを結合して一つの動画像データを作成する。そして、ユーザ４８によるチャンネル切り替え後の映像が映し出されるまでの間、作成した動画像データを出力することで、ユーザ４８は当該動画像データを鑑賞することができる。これにより、チャンネル切り替え後の映像が映し出されるまで待っているというユーザ４８の心理的負担を軽減することができる。

以下に示す実施例２において、デコード処理により得られた画像データに対して、明度を調整した複数の画像データを作成し、作成した複数の画像データを結合することで一つの動画像データを作成して出力する際の画像処理装置２０の動作を例示する。

例えば、画像データＣ０が入力された場合について説明する。Ｓ３０１において、明度調整処理部３３はデコード処理により得られた画像データに対して、明度を高くした画像データを作成するのか、あるいは明度を低くした画像データを作成するのかを判定する。ここにおいて、明度を高くした画像データを作成するものとする。

このとき、Ｓ３０２およびＳ３０３において、明度調整処理部３３は入力された画像データＣ０に対して、画像データＣ０よりも明度の高い画像データを作成する。ここで、明度調整処理部３３が明度を高くした画像データを作成する方法として、例えばＲＧＢの階調を徐々に上げていくことで、明度の高い画像データを作成するものであっても構わない。また、ガンマ補正をかけることで、明度の高い画像データを作成するものであっても構わない。なお、明度の高い画像データを複数枚作成する場合、明度の変化が徐々になるように画像データを作成する。

Ｓ３０５において、画像データ結合処理部３９は、作成された画像データを明度が高い画像データから明度の低い画像データの順になるようにソートし、Ｓ３０６にて、ソートされた順に画像データを結合して、一つの動画像データＣ１０を作成する。

そして、図５に示すＳ１０７において、画像データ出力処理部４０は動画像データＣ１０を外部機器４４に出力する。なお、外部機器４４に表示装置が備わっているような場合は、動画像データＣ１０が出力され、ユーザ４８は動画像データＣ１０を鑑賞することができる。動画像データＣ１０は明度の高い画像データから徐々に明度の低い画像データになるように構成されているため、ユーザ４８は明度の高い画像データから始まり徐々に元の画像データＣ０に近づいていくように感じることができる。

次に、上記のように入力された画像データに対して明度を調整した画像データを作成することができる画像処理装置２０を備えた受信装置１０の動作を例示する。例えば、ユーザ４８がデジタル放送のデジタルコンテンツＣ１００を鑑賞している際に、チャンネルを切り替えてデジタルコンテンツＣ２００を鑑賞しようとした場合について説明する。

チャンネル切り替え部１４は、ユーザ４８からのチャンネル切り替え指示を受け取り、コンテンツ受信部１２はユーザ４８から指示されたチャンネル切り替え後のコンテンツであるデジタルコンテンツＣ２００を受信する。なお、デジタルコンテンツＣ２００は図１１に示すような形でエンコード処理およびデコード処理されるものとする。すなわち、Ｉ２、Ｂ０、Ｂ１、Ｐ５、Ｂ３、Ｂ４・・・という順にエンコードされたデジタルコンテンツＣ２００がコンテンツ受信部１２を介して入力され、デコード処理部２６はＩ２、Ｂ０、Ｂ１、Ｐ５、Ｂ３、Ｂ４・・・という順にデコード処理を行う。

そこで、効果付加処理部３０を構成する明度調整処理部３３および画像データ処理部３４は、最初にデコード処理されたＩ２に対して、明度を調整した画像データを作成して、明度の高い画像データから明度の低い画像データの順に結合して一つの動画像データＣ２０１を作成する。なお、これら一連の処理は上述で説明した通りである。

そして、コンテンツ表示処理部１６は、ユーザ４８によるチャンネル切り替え後の映像が映し出されるまでの間、動画像データＣ２０１を出力する。すなわち、図１１に示すように、Ｉ２の次のＢ０がデコードされて再生処理されるまでの間、動画像データＣ２０１を出力する。または、動画像データＣ２０１を作成する際に使用したＩ２が再生処理されるまでの間、動画像データＣ２０１を出力するものであっても構わない。この場合、Ｂ０およびＢ１は出力されない。これにより、ユーザ４８はチャンネル切り替え後の映像が出力されるまで待っている必要はなく、チャンネル切り替え後の映像が出力されるまで動画像データＣ２０１を鑑賞することができるため、映像が出力されるまで待っているというユーザ４８の心理的負担を軽減することができる。さらに、動画像データＣ２０１は明度の高い画像データから徐々に元の画像データに近づいていくように作成されているため、動画像データＣ２０１からチャンネル切り替え後の映像へもスムーズに切り替わることができ、ユーザ４８に違和感を与えることはない。

なお、明度を高くした画像データは必ずしも複数枚作成する必要はなく、１枚であっても構わない。この場合、動画像データは作成されないため、チャンネル切り替え後の映像が出力されるまで当該画像データが出力される。

また、上記において、入力された画像データよりも明度を高くした画像データを作成した場合について説明したが、入力された画像データよりも明度を低くした画像データを作成するものであっても構わない。この場合、Ｓ３１０において、画像データ結合処理部３９は、作成された画像データを明度が低い画像データから明度の高い画像データの順になるようにソートし、Ｓ３１１にて、ソートされた順に画像データを結合して、一つの動画像データを作成する。

そして、この動画像データをユーザ４８がチャンネル切り替え指示を出して切り替え後の映像が映し出されるまでの間に出力することで、ユーザ４８はそれを鑑賞することができ、映像が出力されるまで待っているというユーザ４８の心理的負担を軽減することができる。さらに、動画像データは明度の低い画像データから徐々に元の画像データに近づいていくように作成されているため、動画像データからチャンネル切り替え後の映像へもスムーズに切り替わることができ、ユーザ４８に違和感を与えることはない。

以上のように、本実施例２の構成において、デコード処理により得られた画像データに対して、明度を調整した画像データを作成し、作成した画像データを結合して一つの動画像データを作成する。そして、ユーザ４８によるチャンネル切り替え後の映像が映し出されるまでの間、作成した動画像データを出力することで、ユーザ４８は当該動画像データを鑑賞することができる。これにより、チャンネル切り替え後の映像が映し出されるまで待っているというユーザ４８の心理的負担を軽減することができる。

以下に示す実施例３において、デコード処理により得られた画像データに対して、彩度を調整した複数の画像データを作成し、作成した複数の画像データを結合することで一つの動画像データを作成して出力する際の画像処理装置２０の動作を例示する。

例えば、画像データＤ０が入力された場合について説明する。Ｓ４０１において、彩度調整処理部３５はデコード処理により得られた画像データに対して、彩度を高くした画像データを作成するのか、あるいは彩度を低くした画像データを作成するのかを判定する。ここにおいて、彩度を高くした画像データを作成するものとする。

このとき、Ｓ４０２およびＳ４０３において、彩度調整処理部３５は入力された画像データＤ０に対して、画像データＤ０よりも彩度の高い画像データを作成する。ここで、彩度調整処理部３５が彩度を高くした画像データを作成する方法として、例えばＲＧＢの階調を調整し、画像データに入る光の量を増やすことで、彩度の高い画像データを作成するものであっても構わない。なお、彩度の高い画像データを複数枚作成する場合、彩度の変化が徐々になるように、画像データを作成する。

Ｓ４０５において、画像データ結合処理部３９は、作成された画像データを彩度が高い画像データから彩度の低い画像データの順になるようにソートし、Ｓ４０６にて、ソートされた順に画像データを結合して、一つの動画像データＤ１０を作成する。

そして、図５に示すＳ１０７において、画像データ出力処理部４０は動画像データＤ１０を外部機器４４に出力する。なお、外部機器４４に表示装置が備わっているような場合は、動画像データＤ１０が出力され、ユーザ４８は動画像データＤ１０を鑑賞することができる。動画像データＤ１０は彩度の高い画像データから徐々に彩度の低い画像データになるように構成されているため、ユーザ４８は彩度の高い画像データから始まり徐々に元の画像データＤ０に近づいていくように感じることができる。

次に、上記のように入力された画像データに対して彩度を調整した画像データを作成することができる画像処理装置２０を備えた受信装置１０の動作を例示する。例えば、ユーザ４８がデジタル放送のデジタルコンテンツＤ１００を鑑賞している際に、チャンネルを切り替えてデジタルコンテンツＤ２００を鑑賞しようとした場合について説明する。

チャンネル切り替え部１４は、ユーザ４８からのチャンネル切り替え指示を受け取り、コンテンツ受信部１２はユーザ４８から指示されたチャンネル切り替え後のコンテンツであるデジタルコンテンツＤ２００を受信する。なお、デジタルコンテンツＤ２００は図１１に示すような形でエンコード処理およびデコード処理されるものとする。すなわち、Ｉ２、Ｂ０、Ｂ１、Ｐ５、Ｂ３、Ｂ４・・・という順にエンコードされたデジタルコンテンツＤ２００がコンテンツ受信部１２を介して入力され、デコード処理部２６はＩ２、Ｂ０、Ｂ１、Ｐ５、Ｂ３、Ｂ４・・・という順にデコード処理を行う。

そこで、効果付加処理部３０を構成する彩度調整処理部３５および画像データ処理部３６は、最初にデコード処理されたＩ２に対して、彩度を調整した画像データを作成して、彩度の高い画像データから彩度の低い画像データの順に結合して一つの動画像データＤ２０１を作成する。なお、これら一連の処理は上述で説明した通りである。

そして、コンテンツ表示処理部１６は、ユーザ４８によるチャンネル切り替え後の映像が映し出されるまでの間、動画像データＤ２０１を出力する。すなわち、図１１に示すように、Ｉ２の次のＢ０がデコードされて再生処理されるまでの間、動画像データＤ２０１を出力する。または、動画像データＤ２０１を作成する際に使用したＩ２が再生処理されるまでの間、動画像データＤ２０１を出力するものであっても構わない。この場合、Ｂ０およびＢ１は出力されない。

これにより、ユーザ４８はチャンネル切り替え後の映像が出力されるまで待っている必要はなく、チャンネル切り替え後の映像が出力されるまで動画像データＤ２０１を鑑賞することができるため、映像が出力されるまで待っているというユーザ４８の心理的負担を軽減することができる。さらに、動画像データＤ２０１は彩度の高い画像データから徐々に元の画像データに近づいていくように作成されているため、動画像データＤ２０１からチャンネル切り替え後の映像へもスムーズに切り替わることができ、ユーザ４８に違和感を与えることはない。

なお、彩度を高くした画像データは必ずしも複数枚作成する必要はなく、１枚であっても構わない。この場合、動画像データは作成されないため、チャンネル切り替え後の映像が出力されるまで当該画像データが出力される。

また、上記において、入力された画像データよりも彩度を高くした画像データを作成した場合について説明したが、入力された画像データよりも彩度を低くした画像データを作成するものであっても構わない。

この場合、Ｓ４１０において、画像データ結合処理部３９は、作成された画像データを彩度が低い画像データから彩度の高い画像データの順になるようにソートし、Ｓ４１１にて、ソートされた順に画像データを結合して、一つの動画像データを作成する。そして、この動画像データをユーザ４８がチャンネル切り替え指示を出して切り替え後の映像が映し出されるまでの間に出力することで、ユーザ４８はそれを鑑賞することができ、映像が出力されるまで待っているというユーザ４８の心理的負担を軽減することができる。

さらに、動画像データは彩度の低い画像データから徐々に元の画像データに近づいていくように作成されているため、動画像データからチャンネル切り替え後の映像へもスムーズに切り替わることができ、ユーザ４８に違和感を与えることはない。

以上のように、本実施例３の構成において、デコード処理により得られた画像データに対して、彩度を調整した画像データを作成し、作成した画像データを結合して一つの動画像データを作成する。そして、ユーザ４８によるチャンネル切り替え後の映像が映し出されるまでの間、作成した動画像データを出力することで、ユーザ４８は当該動画像データを鑑賞することができる。これにより、チャンネル切り替え後の映像が映し出されるまで待っているというユーザ４８の心理的負担を軽減することができる。

以下に示す実施例４において、デコード処理により得られた画像データに対して、ぼかした複数の画像データを作成し、作成した複数の画像データを結合することで一つの動画像データを作成して出力する際の画像処理装置２０の動作を例示する。

例えば、画像データＥ０が入力された場合について説明する。ステップＳ５０１およびステップＳ５０２において、ぼかし度調整処理部３７は入力された画像データＥ０に対して、画像データＥ０をぼかした画像データを作成する。ここで、ぼかし度調整処理部３７がぼかした画像データを作成する方法として、例えばフィルタ処理を行うものであっても構わない。

この場合に使用するフィルタとしては、フィルタ処理後の注目画素の濃度値を、注目画素の、周りの画素の平均値とするようなものであっても構わない。例えば、フィルタの「縦×横」が３×３画素とした場合、全９個のフィルタの数値を１／９とすればよい。ただし、フィルタは必ずしもこれに限定されない。さらに大きなフィルタを用いても構わない。なお、大きなフィルタを用いるほど、ぼかし度の大きい画像データを作成することができる。

また、ぼかした画像データを作成する方法として、モザイク処理であっても構わない。モザイク処理をする方法としては、例えばある矩形範囲のうち、１点の画素の濃度値をその矩形全体の濃度値にすることで、モザイク処理された画像データを作成することができる。なお、ぼかした画像データを複数枚作成する場合、ぼかし度の変化が徐々になるように画像データを作成する。

ステップＳ５０４において、画像データ結合処理部３９は、作成された画像データをぼかし度が大きい画像データからぼかし度の小さい画像データの順になるようにソートし、ステップＳ５０５にて、ソートされた順に画像データを結合して、一つの動画像データＥ１０を作成する。

そして、図５に示すＳ１０７において、画像データ出力処理部４０は動画像データＥ１０を外部機器４４に出力する。なお、外部機器４４に表示装置が備わっているような場合は、動画像データＥ１０が出力され、ユーザ４８は動画像データＥ１０を鑑賞することができる。動画像データＥ１０はぼかし度の大きい画像データから徐々にぼかし度の小さい画像データになるように構成されているため、ユーザ４８はぼかし度の大きい画像データから始まり徐々に元の画像データＥ０に近づいていくように感じることができる。

次に、上記のように入力された画像データに対してぼかし度を調整した画像データを作成することができる画像処理装置２０を備えた受信装置１０の動作を例示する。例えば、ユーザ４８がデジタル放送のデジタルコンテンツＥ１００を鑑賞している際に、チャンネルを切り替えてデジタルコンテンツＥ２００を鑑賞しようとした場合について説明する。

チャンネル切り替え部１４は、ユーザ４８からのチャンネル切り替え指示を受け取り、コンテンツ受信部１２はユーザ４８から指示されたチャンネル切り替え後のコンテンツであるデジタルコンテンツＥ２００を受信する。

なお、デジタルコンテンツＥ２００は図１１に示すような形でエンコード処理およびデコード処理されるものとする。すなわち、Ｉ２、Ｂ０、Ｂ１、Ｐ５、Ｂ３、Ｂ４・・・という順にエンコードされたデジタルコンテンツＥ２００がコンテンツ受信部１２を介して入力され、デコード処理部２６はＩ２、Ｂ０、Ｂ１、Ｐ５、Ｂ３、Ｂ４・・・という順にデコード処理を行う。

そこで、効果付加処理部３０を構成するぼかし度調整処理部３７および画像データ処理部３８は、最初にデコード処理されたＩ２に対して、ぼかし度を調整した画像データを作成して、ぼかし度の大きい画像データからぼかし度の小さい画像データの順に結合して一つの動画像データＥ２０１を作成する。なお、これら一連の処理は上述で説明した通りである。

そして、コンテンツ表示処理部１６は、ユーザ４８によるチャンネル切り替え後の映像が映し出されるまでの間、動画像データＥ２０１を出力する。すなわち、図１１に示すように、Ｉ２の次のＢ０がデコードされて再生処理されるまでの間、動画像データＥ２０１を出力する。または、動画像データＥ２０１を作成する際に使用したＩ２が再生処理されるまでの間、動画像データＥ２０１を出力するものであっても構わない。この場合、Ｂ０およびＢ１は出力されない。

これにより、ユーザ４８はチャンネル切り替え後の映像が出力されるまで待っている必要はなく、チャンネル切り替え後の映像が出力されるまで動画像データＥ２０１を鑑賞することができるため、映像が出力されるまで待っているというユーザ４８の心理的負担を軽減することができる。さらに、動画像データＥ２０１はぼかし度の大きい画像データから徐々に元の画像データに近づいていくように作成されているため、動画像データＥ２０１からチャンネル切り替え後の映像へもスムーズに切り替わることができ、ユーザ４８に違和感を与えることはない。

なお、ぼかした画像データは必ずしも複数枚作成する必要はなく、１枚であっても構わない。この場合、動画像データは作成されないため、チャンネル切り替え後の映像が出力されるまで当該画像データが出力される。

以上のように、本実施例４の構成では、デコード処理により得られた画像データに対して、ぼかし度を調整した画像データを作成し、作成した画像データを結合して一つの動画像データを作成する。そして、ユーザ４８によるチャンネル切り替え後の映像が映し出されるまでの間、作成した動画像データを出力することで、ユーザ４８は当該動画像データを鑑賞することができる。これにより、チャンネル切り替え後の映像が映し出されるまで待っているというユーザ４８の心理的負担を軽減することができる。

このように、本実施形態に係る画像処理装置は、複数の画像から構成された映像を示すデジタルコンテンツデータをデコードする再生手段を備え、上記デジタルコンテンツデータでは、映像における画像の順序とは異なる順序で、各画像をエンコードした画像データが並べられており、上記再生手段は、上記デジタルコンテンツデータに含まれる画像データをデコードして再生画像を生成した後、当該処理対象の再生画像に対応する画像と比較して、上記映像における順序が前の画像に対応する再生画像が未だデコードされていなければ、上記処理対象の再生画像を一時的に記憶し、上記未だデコードされていない再生画像をデコードした後に出力する画像再生装置において、上記一時的に記憶される再生画像に対して映像効果を付加する画像処理を施して出力する付加手段と、上記デジタルコンテンツデータの出力が指示された場合、上記付加手段からの出力を付加した後に上記再生手段からの出力を出力する出力制御手段とを備えている。

上記の構成によれば、上記再生手段からの出力が出力されるようにも前に、付加手段からの出力が出力される。ここで、付加手段は、一時的に記録される先行画像、すなわち、上記映像での順序が前の画像の映像として最初に出力すべき再生画像が未だデコードされておらず、遅延して出力される再生画像に対して映像効果を付加している。したがって、付加手段は先行画像がデコードされた時点よりも後であれば、映像として最初に出力すべき再生画像がデコードされる時点、および、その後に設定される先行画像の出力時点よりも早い時点で、当該先行画像に映像効果を付加する処理を施すことができる。

したがって、映像再生装置は、出力を指示されたデジタルコンテンツデータの最初に先行画像が配されていた場合に、上記再生手段が映像として最初に出力すべき再生画像をデコードして出力する時点よりも早い時点で、上記出力が指示されたデジタルコンテンツデータ中の画像データをデコードして生成した画像に映像効果を付加した再生画像を示す信号を出力できる。

また、付加手段が出力する画像は、上記再生手段が映像として最初に出力すべき再生画像をデコードして出力する時点よりも後で出力すべき再生画像であるが、上記出力が指示されたデジタルコンテンツデータ中の画像データをデコードして生成した再生画像に映像効果を付加した画像である。したがって、当該デジタルコンテンツデータの出力が指示されるよりも前に出力が指示されていた画像と比較すると、多くの場合は、映像として最初に出力すべき再生画像に、より類似しているので、ユーザに与える違和感を軽減できる。

さらに、付加手段が出力する画像には映像効果が付されているので、映像として最初に出力すべき再生画像と若干相違していたとしてもユーザは、その相違に気付き難い。これらの結果、デジタルコンテンツデータの出力を指示してから実際に画像が表示されるまでの間に、違和感の少ない画像を出力可能な画像再生装置を実現できる。

本発明は上述した各実施形態に限定されるものではなく、請求項に示した範囲で種々の変更が可能であり、異なる実施形態にそれぞれ開示された技術的手段を適宜組み合わせて得られる実施形態についても本発明の技術的範囲に含まれる。

なお、上記の実施形態では、イントラ符号化するイントラ符号化画像データ、すなわちＩピクチャを用い、当該Ｉピクチャに対して、効果を付加した画像データを作成したが、必ずしもこれに限定されない。例えば、ＰピクチャおよびＢピクチャを使用するものであっても構わない。ＰピクチャおよびＢピクチャはそれ単体では完全に復号することはできないが、Ｐピクチャ及びＢピクチャを使用することで、最初に出力するべき完全な画像に段階的に近似してゆく画像データを得ることができ、それらの画像をチャンネル切り替え時間の間に出力することで、上述と同様の効果を奏することが可能である。

さらにＰピクチャやＢピクチャを用いる場合には、前記入力手段に入力される前記デジタルコンテンツデータが変更された場合、最初にデコードされたＰピクチャまたはＢピクチャから不完全な再生画像を抽出し、前記先行画像として出力してもよい。ＰピクチャやＢピクチャ単体から完全な映像のデコードは不可能であるが、完全な映像の一部をデコードすることができる。このような不完全な再生画像を抽出し、エフェクトを付加することで前記先行画像として用いることが可能である。

具体的には、デコード処理部２６において、入力されたデータから不完全にデコードされた再生画像を画像データ保管部２８に出力して保管する。デコード処理部２６に保管された画像データは、上述の実施形態と同様に、効果付加処理部３０および画像データ出力処理部４０によって、任意のタイミングで参照される。効果付加処理部３０は、画像データ保管部２８にて保管された画像データを外部機器４４に出力する際の効果を付加する処理を行う。

上記の構成によれば、上述の実施形態よりもさらに早く先行画像を出力することができ、かつ、不完全な再生画像に対してエフェクトを付加することによる違和感を軽減した映像を出力する画像処理装置２０および受信装置１０を実現することができる。

より詳細には、複数の画像から構成された映像をエンコードして作成された、複数の画像データから構成されたデジタルコンテンツ５０を入力するための入力部２２と、入力部２２から受け取ったデジタルコンテンツ５０を再生画像にデコードするデコード処理部２６と、デコードした複数の再生画像を並び替えて映像として出力する画像データ出力処理部４０とを備える画像処理装置２０において、入力部２２に入力されるデジタルコンテンツ５０が変更された場合、完全な映像のデコードは不可能だが完全な映像の一部をデコードすることが可能な画像データから不完全な再生画像を先行画像として抽出する画像データ保管部２８と、先行画像にエフェクトを付加して付加画像を生成する効果付加処理部３０と、デジタルコンテンツ５０が入力された際、先行画像がデコードされてからデコードした複数の再生画像を並び替えて映像として出力するまでの期間、付加画像を出力するように前記出力手段を制御するコンテンツ表示処理部１６とをさらに備えている。

上記の構成によれば、デジタルコンテンツ５０をデコードし、映像を出力する際に行う処理に要する時間に、デジタルコンテンツ５０に対するデコード処理を行った結果、入力される前記デジタルコンテンツ５０が変更された場合、完全な映像のデコードは不可能だが完全な映像の一部をデコードすることが可能な画像データから不完全な再生画像に対してエフェクトを付加した付加画像を生成し、並べ替えを行った再生画像のデコードが完了するまでの待ち時間に出力する。これによって、並べ替えを行った再生画像が画像データ出力処理部４０から出力されるより前に、効果付加処理部３０からの付加画像が出力されるように制御される。

最後に、受信装置１０の各ブロック、特に画像処理装置２０に含まれるデコード処理部２６、画像データ保管部２８、効果付加処理部３０、および画像データ出力処理部４０は、ハードウェアロジックによって構成してもよいし、次のようにＣＰＵを用いてソフトウェアによって実現してもよい。

すなわち、本実施の形態に係る画像処理装置２０は、実質的には、コンピュータハードウェアと、そのコンピュータハードウェアにより実行されるプログラムと、コンピュータハードウェアに格納されるデータとにより実現される。図１０は、このコンピュータシステム２００の内部構成を示すブロック図である。

図１０を参照して、このコンピュータシステム２００は、光ディスクドライブ２０１および磁気ディスクドライブ２０２を有するコンピュータ２２０と、モニタ２０３と、リモートコントローラ（以下、「リモコン」と呼ぶ）２０４とを含む。

コンピュータ２２０は、光ディスクドライブ２０１および磁気ディスクドライブ２０２に加えて、リモコン２０４からの信号を受信するリモコンインタフェース（Ｉ／Ｆ）２０５と、ＣＰＵ（中央処理装置）２０６と、リモコンインタフェース２０５、ＣＰＵ２０６、光ディスクドライブ２０１および磁気ディスクドライブ２０２に接続されたバス２０７と、バス２０７に接続され、ブートアッププログラム等を記憶する読出専用メモリ（ＲＯＭ）２０８と、同じくバス２０７に接続され、プログラム命令、システムプログラム、および作業データ等を記憶するランダムアクセスメモリ（ＲＡＭ）２０９とを含む。

ここでは示さないが、コンピュータ２２０はさらにローカルエリアネットワーク（ＬＡＮ）への接続を提供するネットワークアダプタボードを含んでいてもよい。

コンピュータシステム２００に画像処理装置２０の機能を実現させるためのプログラム、デジタルコンテンツ５０、および画像データ６０はいずれも、光ディスクドライブ２０１又は磁気ディスクドライブ２０２に挿入される光ディスク２１０又は磁気ディスク２１１に記憶され、さらにハードディスク２１２に転送される。又は、プログラム、デジタルコンテンツ５０、および画像データ６０は図示しないネットワークを通じてコンピュータ２２０に送信されハードディスク２１２に記憶されてもよい。プログラムは実行の際にＲＡＭ２０９にロードされる。光ディスク２１０から、磁気ディスク２１１から、又はネットワークを介して、直接にＲＡＭ２０９にプログラムをロードしてもよい。

このプログラムは、コンピュータ２２０に本実施の形態に係る画像処理装置２０の機能を実現させる複数の命令を含む。これら機能を実現させるのに必要な基本的機能のいくつかはコンピュータ２２０上で動作するオペレーティングシステム（ＯＳ）又はサードパーティのプログラム、若しくはコンピュータ２２０にインストールされる各種ツールキットのモジュールにより提供される。したがって、このプログラムはこの実施の形態に係る画像処理装置２０の機能を実現するのに必要な機能全てを必ずしも含まなくてよい。このプログラムは、命令のうち、所望の結果が得られるように制御されたやり方で適切な機能又は「ツール」を呼出すことにより、上記した画像処理装置２０の制御を実行する命令のみを含んでいればよい。コンピュータシステム２００の動作は周知であるので、ここでは繰り返さない。

なお、画像処理装置２０の機能を実現するためのプログラム、デジタルコンテンツ５０、および画像データ６０が記録される記録媒体は、ＣＤ−ＲＯＭ（Compact Disc Read Only Memory）、ＭＯ（Magneto Optical Disk）、ＭＤ（Mini Disc）、およびＤＶＤ（Digital Versatile Disk）等の光ディスク２１０、ＦＤ（Floppy（登録商標） Disk）およびハードディスク等の磁気ディスク２１１に限らない。

あるいは、磁気テープおよびカセットテープ等のテープ、ＩＣカードおよび光カード等のカード型記録媒体、並びにマスクＲＯＭ、ＥＰＲＯＭ（Erasable Programable Read Only Memory）、ＥＥＰＲＯＭ（Electrically Erasable Programable Read Only Memory）、およびフラッシュＲＯＭ等の半導体メモリのいずれかでもよい。ただし、コンピュータシステム２００は、これら記録媒体からの読出を行うための読出装置が必要となる。

なお、本発明は、上記プログラムコードが電子的な伝送で具現化された、搬送波に埋め込まれたコンピュータデータ信号の形態でも実現され得る。

なお、上記外部機器と表示装置とに出力する映像データが異なっていてもよい。

本発明は、デコード終了後に出力する画像になだらかに繋がる、違和感の少ない画像を生成して出力するので、チャンネル切り替えなどの際に生じる、デジタルコンテンツデータのデコードなどの処理に要する時間に、ユーザが感じる心理的負担を軽減することができるので、デジタルコンテンツをデコードするデコード装置、およびデジタル放送を鑑賞するためのデジタル放送受信端末装置などの用途にも適用することができる。

本発明の一実施形態を示すもので、ユーザの操作によってデジタルコンテンツを提供する放送システムの要部構成を示す概略図である。 上記の放送システムにおける受信装置内の画像処理装置の要部構成を示すブロック図である。 上記の画像処理装置における効果付加処理部の要部構成を示すブロック図である。 上記の画像処理装置におけるデジタルコンテンツをエンコードおよびデコードする際の各画像データの様子を示す概略図である 上記の画像処理装置における各処理Ｓ１０１〜Ｓ１０７の流れを示すフロー図である。 図５におけるＳ１０３で実行される解像度調整処理を示すフロー図である。 図５におけるＳ１０４で実行される明度調整処理を示すフロー図である。 図５におけるＳ１０５で実行される彩度調整処理を示すフロー図である。 図５におけるＳ１０６で実行されるぼかし度調整処理を示すフロー図である。 上記の受信装置および放送システムをコンピュータシステムで実現する場合の内部構成を示すブロック図である。 デジタルコンテンツをエンコードする際、およびエンコードされたデジタルコンテンツをデコードする際の様子を示す概略図である。

符号の説明

１ 放送システム
１０ 受信装置
１２ コンテンツ受信部（受信手段）
１４ チャンネル切り替え部
１６ コンテンツ表示処理部（出力手段）
２０ 画像処理装置
２２ 入力部（入力手段）
２４ コンテンツ蓄積部
２６ デコード処理部（再生手段）
２８ 画像データ保管部（抽出手段）
３０ 効果付加処理部（付加手段）
３１ 解像度調整処理部
３２ 画像データ処理部
３３ 明度調整処理部
３４ 画像データ処理部
３５ 彩度調整処理部
３６ 画像データ処理部
３７ ぼかし度調整処理部
３８ 画像データ処理部
３９ 画像データ結合処理部
４０ 画像データ出力処理部（出力制御手段）
４２ デジタルコンテンツ提供サーバ（送信装置）
４４ 外部機器
４６ 表示装置
４８ ユーザ
５０ デジタルコンテンツ
６０ 画像データ
２００ コンピュータシステム
２０１ 光ディスクドライブ
２０２ 磁気ディスクドライブ
２０３ モニタ
２０４ リモートコントローラ
２０４ リモコン
２０５ リモコンインタフェース
２０６ ＣＰＵ
２０７ バス
２０８ 読出専用メモリ
２０９ ＲＡＭ
２０９ ランダムアクセスメモリ
２１０ 光ディスク
２１１ 磁気ディスク
２１２ ハードディスク
２２０ コンピュータ

Claims (14)

1. 複数の画像から構成された映像をエンコードして作成された、複数の画像データから構成されたデジタルコンテンツデータを入力するための入力手段と、入力手段から受け取った前記デジタルコンテンツデータを再生画像にデコードする再生手段と、デコードした複数の前記再生画像を並び替えて映像として出力する出力手段とを備える画像処理装置において、
   デコードした時点ですぐに出力しない再生画像を先行画像として抽出する抽出手段と、
   前記先行画像にエフェクトを付加して付加画像を生成する付加手段と、
   前記デジタルコンテンツデータが入力された際、前記先行画像がデコードされてからデコードした複数の前記再生画像を並び替えて映像として出力するまでの期間、前記付加画像を出力するように前記出力手段を制御する出力制御手段とをさらに備え、
   前記入力手段に入力される前記デジタルコンテンツデータが変更された場合、最初にデコードされた再生画像を前記先行画像として抽出することを特徴とする画像処理装置。
2. 前記先行画像は、画面内の画素を全てイントラ符号化するイントラ符号化画像データであることを特徴とする請求項１に記載の画像処理装置。
3. 前記出力制御手段は、前記入力手段に入力されるデジタルコンテンツデータが変更された場合、前記先行画像を並び替えて出力する映像の最初の再生画像として用い、当該再生画像を出力するまでの期間、前記付加画像を出力するように前記出力手段を制御することを特徴とする請求項１に記載の画像処理装置。
4. 複数の画像から構成された映像をエンコードして作成された、複数の画像データから構成されたデジタルコンテンツデータを入力するための入力手段と、入力手段から受け取った前記デジタルコンテンツデータを再生画像にデコードする再生手段と、デコードした複数の前記再生画像を並び替えて映像として出力する出力手段とを備える画像処理装置において、
   前記入力手段に入力される前記デジタルコンテンツデータが変更された場合、完全な映像のデコードは不可能だが完全な映像の一部をデコードすることが可能な画像データから不完全な再生画像を先行画像として抽出する抽出手段と、
   前記先行画像にエフェクトを付加して付加画像を生成する付加手段と、
   前記デジタルコンテンツデータが入力された際、前記先行画像がデコードされてからデコードした複数の前記再生画像を並び替えて映像として出力するまでの期間、前記付加画像を出力するように前記出力手段を制御する出力制御手段とをさらに備えることを特徴とする画像処理装置。
5. 前記先行画像は、画面内の画素にイントラ符号化されたデータを含むフレーム間順方向予測画像データであることを特徴とする請求項１または４に記載の画像処理装置。
6. 前記先行画像は、画面内の画素にイントラ符号化されたデータを含む双方向予測符号化画像データであることを特徴とする請求項１または４に記載の画像処理装置。
7. 前記付加手段は、前記先行画像のパラメータを変更するエフェクトを付加することで、１つ以上の付加画像を生成し、
   前記出力制御手段は、前記先行画像との近似度が高くなって行く順序で前記付加画像を出力するように制御することを特徴とする請求項１または４に記載の画像処理装置。
8. 前記エフェクトは、解像度、明度、彩度、およびぼかし度のうち少なくても１つのパラメータを変更するエフェクトであることを特徴とする請求項７に記載の画像処理装置。
9. 請求項１ないし８のいずれか１項に記載の画像処理装置と、ユーザの指示に基づいてデジタルコンテンツデータを受信し、受信した当該デジタルコンテンツデータを前記入力手段に入力する受信手段を備えたこと特徴とする受信装置。
10. 請求項９に記載の受信装置と、当該受信装置へデジタルコンテンツデータを送信する送信装置とを備えることを特徴とする放送システム。
11. 複数の画像から構成された映像をエンコードして作成された、複数の画像データから構成されたデジタルコンテンツデータを入力するステップと、入力された前記デジタルコンテンツデータを再生画像にデコードするステップと、デコードした複数の前記再生画像を並び替えて映像として出力するステップとを備える画像処理方法において、
    デコードした時点ですぐに出力しない再生画像を先行画像として抽出するステップと、
    前記先行画像にエフェクトを付加して付加画像を生成するステップと、
    前記デジタルコンテンツデータが入力された際、前記先行画像がデコードされてからデコードした複数の前記再生画像を並び替えて映像として出力するまでの期間、前記付加画像を出力するように制御するステップとをさらに備え、
    前記入力するステップに入力される前記デジタルコンテンツデータが変更された場合、最初にデコードされた再生画像を前記先行画像として抽出することを特徴とする画像処理方法。
12. 複数の画像から構成された映像をエンコードして作成された、複数の画像データから構成されたデジタルコンテンツデータを入力するためのステップと、入力された前記デジタルコンテンツデータを再生画像にデコードするステップと、デコードした複数の前記再生画像を並び替えて映像として出力するステップとを備える画像処理方法であって、
    入力される前記デジタルコンテンツデータが変更された場合、完全な映像のデコードは不可能だが完全な映像の一部をデコードすることが可能な画像データから不完全な再生画像を先行画像として抽出するステップと、
    前記先行画像にエフェクトを付加して付加画像を生成するステップと、
    前記デジタルコンテンツデータが入力された際、前記先行画像がデコードされてからデコードした複数の前記再生画像を並び替えて映像として出力するまでの期間、前記付加画像を出力するように制御するステップとをさらに備えることを特徴とする画像処理方法。
13. 請求項１から８のいずれか１項に記載の画像処理装置の各手段として、コンピュータを機能させるための画像処理プログラム。
14. 請求項１３に記載の画像処理プログラムを記録したコンピュータ読み取り可能な記録媒体。

Images