JP2010268046A - 映像信号処理装置及び映像信号処理装置の制御方法及び制御プログラム - Google Patents

Abstract

【課題】 映像信号処理装置及び音声出力装置及び映像音声信号再生装置で構成されるホームシアターシステムにおいて、自動リップシンク処理を行えない状況下でもユーザが映像と音声の同期を取り易くすることを可能にした映像信号処理装置を提供すること。
【解決手段】 本発明の映像信号処理装置は、映像処理に変更があった場合、音声出力装置がＨＤＭＩ１．３ａに対応しているかを判断する（Ｓ１０２）。ＨＤＭＩ１．３ａに対応していない場合には、映像処理の変化で生じた映像遅延時間の変化量（差分時間）を規定時間と比較する（Ｓ１０５）。比較の結果に従って、映像遅延時間の表示を行う（Ｓ１０６）。
【選択図】 図３

Description

本発明は、映像と音声を同期させて再生するホームシアターシステムの映像信号処理装置に関し、特に映像信号処理装置の映像信号処理方法が変更されることに応じて生じる映像と音声の同期が合わなくなる状況を解消することを目的とした、映像信号処理装置及び映像信号処理装置の制御方法及び制御プログラムに関する。

ＨＤＤレコーダーなどの映像音声信号再生装置、オーディオアンプなどの音声出力装置、テレビ受像機などの映像信号処理装置で構成された、いわゆるホームシアターシステムがある。

映像信号処理装置によって映像処理をされ出力される映像信号と音声出力装置から出力される音声信号との再生タイミングがずれないように同期調整する処理をリップシンク処理と表現することがある。通常、ホームシアターシステムでは、視聴するユーザがオーディオアンプ側の調整機能を用いて音声の出力を遅延させるリップシンク処理を手動で行う。

一方、昨今のテレビ受像機では、コンテンツのジャンル毎にそのジャンルに適合した映像処理を施すのが一般的となっている。例えば、映画のコンテンツであれば映画館に類似したフィルムの質感や明るさとなるような映像処理を施す。つまり、コンテンツが変化することで映像処理に要する時間が変化する。そのため、ユーザが手動でリップシンク処理することで調整された同期状態がコンテンツの変化によって合わなくなることがある。

そこで、特許文献１には、コンテンツが切り替わることで自動的にリップシンク処理を行い出力される映像信号と出力される音声信号との同期を取る方法が開示されている。

上記特許文献に開示された発明は、コンテンツの変更によって映像信号処理装置の映像処理にかかる時間が変化した場合、映像の処理にかかる時間、すなわち映像処理時間を遅延情報として音声出力装置および映像音声信号再生装置へと通知し音声信号を制御させるものである。

また、ホームシアターシステムで再生されるコンテンツの同期を取る方法としては、映像音声の伝送規格であるＨＤＭＩ１．３ａを用いた方法がある。ＨＤＭＩ１．３ａは、リップシンク処理を行うために必要な映像遅延時間を映像信号処理装置から音声出力装置に送信できる仕様を有する規格である。そのため音声出力装置は、受信した映像遅延時間に基づいて自動的にリップシンク処理を行う、いわゆる自動リップシンク処理を実行する。ここでＨＤＭＩとはＨｉｇｈ−Ｄｅｆｉｎｉｔｉｏｎ Ｍｕｌｔｉｍｅｄｉａ Ｉｎｔｅｒｆａｃｅの略語である。

特開２００７−２７４４０９号公報

しかしながら、ホームシアターシステムの環境や状態によっては必ずしも自動リップシンク処理を行えるわけではない。

例えば、ホームシアターシステムを構成する映像信号処理装置または音声出力装置のどちらかがＨＤＭＩ１．３ａに対応していない場合には、出力される映像信号と出力される音声信号との同期に関する情報の送受信ができない。従って、自動リップシンク処理が行えない。

また、ホームシアターシステムを構成する映像信号処理装置及び音声出力装置の双方が、自動リップシンク処理に利用する情報を送受信できる構成であったとしても、音声出力装置において自動リップシンク処理の設定が無効になっている場合には、自動リップシンク処理を実行することができない。

そこで、本発明は、ホームシアターシステムを構成する装置が、出力される映像信号と出力される音声信号との同期に関する情報の送受信ができない状態または自動リップシンク処理の設定が無効になっている状態において、映像処理時間が変化した場合であってもユーザがリップシンク処理を適切に行うことを可能とする映像信号処理装置及び映像信号処理装置の制御方法及び制御プログラムを提供することを目的とする。

上記課題を解決するために、本発明における映像信号処理装置は、外部装置に接続可能な映像信号処理装置において、映像信号の映像信号処理を行う映像信号処理手段と、映像信号の映像信号処理に変化があるかを判定する判定手段と、外部装置が自動リップシンク処理を行えるかを判断する判断手段と、前記判断手段により外部装置が自動リップシンク処理を行えないと判断され、かつ、前記判定手段により映像信号処理に変更があると判定された場合に映像処理時間が変更されたことを出力部に出力する制御を行う。

本発明によれば、ホームシアターシステムを構成する装置が、出力される映像信号と出力される音声信号との同期に関する情報の送受信ができない状態または自動リップシンク処理の設定が無効になっている状態において、映像処理時間が変化した場合であっても、ユーザがリップシンク処理を適切に行うことが可能となる。

実施例１及び実施例２の形態に係るホームシアターシステムの構成を例示するブロック図である。 映像信号処理方法に対応した映像処理レベルと映像遅延時間を示すテーブルの内容を例示する概念図である。 実施例１の表示制御処理を示すフローチャートである。 映像信号処理に関する情報を表示する画面の一例を示した図である。 実施例２の表示制御処理を示すフローチャートである。

以下に、本発明の好ましい実施の形態を、添付の図面に基づいて詳細に説明する。

以下、図１を参照して本発明の第一の実施例における映像信号処理装置を含む映像音声処理システム、いわゆる、ホームシアターシステムの構成について詳細に説明する。ここで、図１は、本実施例の形態に係るホームシアターシステムの構成を例示するブロック図である。

図１に示すようにホームシアターシステムは、映像信号処理装置１００及び音声出力装置２００及び映像音声信号再生装置３００を備える。映像信号処理装置１００は、表示画面上に映像を表示するテレビジョン受信装置である。

図１に示す映像信号処理装置１００は、ＨＤＭＩＩ／Ｆ部１０、メタデータ処理部１１、映像信号処理部１２、映像表示部１３、制御部１４、操作部１５を備える。

ＨＤＭＩＩ／Ｆ部１０は、音声出力装置２００から供給される映像信号及び音声信号を受信する。また、図１において点線で示した制御信号線により音声出力装置２００と制御信号を送受信する。なお、本実施例におけるＨＤＭＩのバージョンは１．３ａであるとする。従って、上述した通り、映像信号処理装置１００は映像信号処理において発生する映像遅延時間を音声出力装置２００に送信可能な構成を備えている。

メタデータ処理部１１は、ＨＤＭＩＩ／Ｆ部１０にて受信した制御信号から映像や音声のフォーマット情報及び映像や音声のモード情報、また放送信号の場合にはＥＰＧ（Ｅｌｅｃｔｒｉｃ Ｐｒｏｇｒａｍ Ｇｕｉｄｅ）に含まれる番組のジャンル情報などを取り出すユニットである。制御信号から取り出した各種情報は、制御部１４へ送信され映像信号処理部１２で行う映像信号処理内容の決定に使用される。

映像信号処理部１２は、映像信号処理ＬＳＩで構成されており、いわゆる高画質処理などの映像信号処理を行うユニットである。具体的には、映像信号処理部１２は、制御部１４から指示された映像信号処理内容に基づき映像信号処理を行う。

制御部１４が指示する映像信号処理内容とは、映像モード情報から決定される。また、映像モード情報は、ユーザが指定する場合や、再生するコンテンツのメタデータの情報、またはＥＰＧ情報に含まれるジャンル情報などによって指定される。なお、ユーザが任意に映像モードを指定した場合は、メタデータに含まれる映像モード情報やＥＰＧ情報よりも優先してユーザが指定した映像モードの映像信号処理内容を実行するようにしてもよい。

映像表示部１３は、映像信号処理部１２で映像信号処理された映像信号に基づいた映像を表示出力するユニットである。また、映像表示部１３は、映像信号処理部１２にて映像信号処理内容が変更されたことによって生じる映像遅延時間を表示する。なお、映像遅延時間は、ユーザが操作部１５にて映像遅延時間の表示指示をした際に随時表示してもよい。ユーザは、音声出力装置２００の音声出力の遅延調整、即ちリップシンク処理を映像表示部１３に表示された映像遅延時間を参考にして行うことで音声遅延の設定を正確に行うことができる。また、映像遅延時間が表示されることで映像処理内容が変更されるので、結果として、映像と音声の再生タイミングがずれてしまった可能性があることを認識することができる。

制御部１４は、映像信号処理装置１００の動作を中央制御するユニットである。具体的には、制御部１４は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）を有する構成である。なお、制御部１４の詳細構成の図示は省略する。制御部１４では、操作部１５でユーザが指定した映像モード情報に基づき映像信号処理部１２で行う映像信号処理内容を決める。

例えば、制御部１４は、操作部１５から映画モードが指定された場合、制御部１４のＣＰＵが映画モードに応じた高画質処理を行う。また、制御部１４は、前述のとおりメタデータ処理部１１が制御信号から取り出した各種情報を受け取って映像信号処理部１２で行う映像信号処理内容を決めてもよい。決定された映像信号処理内容は、映像信号処理部１２に伝送され、その内容に基づいた映像信号処理が映像信号処理部１２によって行われる。

また、制御部１４は、映像信号処理部１２で行う映像信号処理で要する予め定められた映像遅延時間を制御部１４内のＲＯＭから読み取り、映像表示部１３に表示させる制御を行う。図２は、映像信号処理方法及び映像信号処理レベルに応じた映像遅延時間の一例である。本実施例では、制御部１４内のＲＯＭに、図２に示したような映像遅延時間と映像モードとが少なくとも対応付けられたテーブルを予め備えている。

なお、本実施例では上述したテーブルを予め備える構成としたが、制御部１４が再生されるコンテンツの遅延時間を測定して映像遅延時間とする構成を採用してもよい。また、制御部１４は、映像遅延時間のみならず映像信号処理装置が有する各種の機能を設定するための情報やユーザへの警告等を映像表示部１３に表示させるよう制御することもできる。

操作部１５は、映像信号処理装置１００の操作入力を行うユニットであり、ユーザの入力を電気信号に変換し制御部１４に伝送するものである。具体的には、電源ボタン、数字ボタン、映像モード設定ボタン、音声モード設定ボタン、ＨＤＭＩ−ＣＥＣ（Ｈｉｇｈ−Ｄｅｆｉｎｉｔｉｏｎ Ｍｕｌｔｉｍｅｄｉａ Ｉｎｔｅｒｆａｃｅ−Ｃｏｎｓｕｍｅｒ Ｅｌｅｃｔｒｏｎｉｃｓ Ｃｏｎｔｒｏｌ）コマンドを指示するボタンを備えている。ＨＤＭＩ−ＣＥＣコマンドには、例えば、音声出力装置２００および映像音声信号再生装置３００の電源を入れたり、操作したりするための汎用コマンドがある。こうしたコマンドを利用するためのボタンを、ＨＤＭＩ−ＣＥＣコマンドを指示するボタンと称する。

次に、図１に示す音声出力装置２００の説明を行う。音声出力装置はいわゆるＡＶアンプである。具体的に音声出力装置２００は、映像音声信号再生装置３００からの出力を受信するＨＤＭＩＩ／Ｆ部２０、映像信号処理装置１００に映像信号を出力するＨＤＭＩＩ／Ｆ部２１、音声処理部２２、音声遅延部２３、音声出力部２４、制御部２５、スピーカ２６、操作部２７を備える。

ＨＤＭＩＩ／Ｆ部２０は、映像音声信号再生装置３００から供給される映像信号及び音声信号を受信する。また、図１において点線で示した制御信号線により映像音声信号再生装置３００と制御信号を送受信する。なお、ＨＤＭＩＩ／Ｆ部２０のバージョンは、ＨＤＭＩ１．２ａに対応するものとする。

ＨＤＭＩＩ／Ｆ部２１は、映像信号処理装置１００へ供給する映像信号及び音声信号を送信する。また、図１において点線で示した制御信号線により映像信号処理装置１００と制御信号を送受信する。なお、ＨＤＭＩＩ／Ｆ部２１のバージョンは、ＨＤＭＩ１．２ａに対応するものとする。

音声処理部２２は、ＨＤＭＩＩ／Ｆ部２０が受信した音声信号の音質処理を行うユニットである。音質処理の内容は、ユーザが操作部２７または、音声出力装置の操作も可能な操作部１５にて所望の音質処理が選択されることに応じて実行してもよいし、あるいは、ＨＤＭＩＩ／Ｆ部２０にて受信した制御信号に含まれる情報によって音質処理の内容を決定してもよい。

音声遅延部２３は、ユーザが操作部２７または、操作部１５にて入力された映像遅延時間に基づいて音声信号の遅延処理を行うユニットである。例えば、ユーザは、映像表示部１３に表示された映像遅延時間を操作部２７にて入力することで音声信号の遅延処理を行う。

音声出力部２４は、再生される音声信号を出力するためのユニットであり、スピーカ２６を駆動するための増幅部から構成される。

制御部２５は、音声出力装置２００の動作を中央制御するユニットである。具体的には、制御部２５は、ＣＰＵ、ＲＡＭ、ＲＯＭを有する構成である。なお、制御部２５の詳細構成の図示は省略する。制御部２５は、ユーザが操作部２７、または操作部１５にて入力した所望の遅延時間に基づき音声遅延部２３に対して音声遅延制御を指示する。

また、ユーザが操作部２７、または操作部１５にて所望の音質処理内容を選択した場合、制御部２５は、ＣＰＵにより音質処理内容の判断を行い音声処理部２２に対して音質処理内容の変更を指示する。また、制御部２５は、ユーザが操作部２７、または操作部１５にて入力した所望の音量値に基づき音声出力部２４に対して音量調整指示を行う、などの制御を行う。

スピーカ２６は、音声出力部２４から受け取る音声信号を音声として再生するユニットである。

操作部２７は、音声出力装置２００の操作入力を行うユニットである。具体的には、電源ボタン、数字ボタン、音声モード設定ボタン、各種ファンクションボタンを備えており、ユーザの入力を電気信号に変換し制御部２５に伝送するものである。

続いて、図１に示す映像音声信号再生装置３００の説明を行う。本実施例では映像音声信号再生装置をＨＤＤレコーダーとしている。

具体的には、映像音声信号再生装置３００は、ＨＤＭＩＩ／Ｆ部３０、映像音声信号再生部３１、および制御部３２で構成される。

ＨＤＭＩＩ／Ｆ部３０は、音声出力装置２００へ供給する映像信号及び音声信号を送信する。また、図１において点線で示した制御信号線により音声出力装置２００と制御情報を送受信する。なお、ＨＤＭＩＩ／Ｆ部３０のバージョンは、ＨＤＭＩ１．２ａに対応するものとする。

映像音声信号再生部３１は、ユーザが再生指示を行ったコンテンツの映像音声信号を再生し、ＨＤＭＩＩ／Ｆ部３０へ供給するユニットである。再生されるコンテンツはＤＶＤ、またはＨＤＤレコーダー内のＨＤＤに蓄積されているものとする。また、映像音声信号再生装置３００がチューナー部（不図示）を備えている場合は、デジタルテレビジョン放送信号を再生してもよい。

制御部３４は、映像音声信号再生装置３００の動作を中央制御するユニットである。具体的には、制御部３２は、ＣＰＵ、ＲＡＭ、ＲＯＭを有する構成である。なお、制御部３４の詳細構成の図示は省略する。制御部３２は、映像音声信号再生装置３００の操作部（不図示）、または映像音声信号再生装置３００を操作可能な操作部１５にてユーザが操作した内容に基づき、各構成要素に対してＣＰＵが判断処理し制御指示を行う。

次に、映像信号処理装置１００内の制御部１４によって実施される映像遅延時間を映像表示部に出力する制御処理について図３を参照して詳細に説明する。ここで図３は、制御部１４が行う制御処理を示すフローチャートである。

図３のフローチャートを実行するためのプログラムは、制御部１４のＲＯＭに保持されており映像処理の内容が変更されることに応じて実行される。制御部１４は、映像信号処理内容の変更指示に基づき映像信号処理部１４で行う映像信号処理内容を決定する。

音声出力装置２００から送信された制御信号の情報に基づいて映像モードを切り替える場合、ＨＤＭＩＩ／Ｆ部１０は、制御部１４に対して映像モード情報を送信する。つまり、映像信号処理装置１００には音声出力装置２００から制御信号線を介して映像モード情報を含む制御信号が送信される。映像モード情報を受信した制御部１４は、制御信号に含まれる映像モード情報により映像信号処理内容を決定する。

制御部１４は、映像信号処理内容の変更によって映像信号処理部１２における処理演算時間、すなわち映像遅延時間に変更が発生するか否かについて判定する（Ｓ１００）。映像遅延時間は、例えば、一般的にコントラスト調整や明るさ調整などのみを行う場合の変更量は少ないことが多い。しかし、映画モードなど高画質処理モードからニュースモードなどのさほど高画質処理を要求されない中程度の画質処理モードへ変更された場合などは映像処理時間が変更されることが多い。

ステップＳ１００において、制御部１４は、映像信号処理内容の変更に伴い映像遅延時間が変化すると判定した場合、音声出力装置２００からＨＤＭＩによって映像信号の入力を受けているかどうかを判断する（Ｓ１０１）。この判断は、複数種類存在する映像信号の入力Ｉ／Ｆ部を択一的に選択するスイッチングユニット（不図示）を制御部１４が制御しているため、選択されたＩ／Ｆ部がどの種別のＩ／Ｆ部であるかを識別すれば良い。なお、入力される端子がＨＤＭＩのみしか有していない装置である場合には、この判断は不要である。

ステップＳ１０１において、ＨＤＭＩＩ／Ｆ部１０で映像信号の入力を受けていると判断した場合、制御部１４は、映像信号処理装置１００と接続する音声出力装置２００のＨＤＭＩＩ／Ｆ部２１がＨＤＭＩ１．３ａに対応しているかを判断する（Ｓ１０２）。Ｓ１０２は、映像と音声の同期を自動で調整可能、つまり、音声出力装置２００において音声の遅延時間を自動で調整可能であるか否かを判断するためのステップである。音声出力装置２００のＨＤＭＩＩ／Ｆ部２１がＨＤＭＩ１．３ａに対応していないバージョンである場合は、映像信号処理装置１００から音声出力装置２００に対して後述する映像遅延時間の情報と自動リップシンク処理を実行するコマンドを送信しても、音声出力装置２００でその情報やコマンドを処理することができない。

ＨＤＭＩ１．３ａに対応しているかの判断方法としては、例えば、ホームシアターシステムを構成している音声出力装置２００が備えるＨＤＭＩＩ／Ｆ部２１のバージョン情報から判断する方法がある。映像信号処理装置１００は、ＨＤＭＩ−ＣＥＣの汎用コマンドであるＧｅｔ ＣＥＣ Ｖｅｒｓｉｏｎコマンドを音声出力装置２００へ送信する。そのコマンドを受けて、音声出力装置２００は、ＨＤＭＩ−ＣＥＣのバージョンが記述された情報を映像信号処理装置１００へ送信する。映像信号処理装置１００の制御部１４は、取得したバージョン情報から音声出力装置２００のＨＤＭＩＩ／Ｆ部２１がＨＤＭＩ１．３ａに対応しているかどうかを判断する。

ステップＳ１０２において、音声出力装置２００のＨＤＭＩＩ／Ｆ部２１がＨＤＭＩ１．３ａに対応していると判定された場合、制御部１４は、自動リップシンク処理を行う指示を出す（Ｓ１０３）。具体的には、制御部１４は音声出力装置２００に対して映像信号処理によって発生する映像遅延時間の情報と、自動リップシンク処理を実行するコマンドとを音声出力装置２００に対して送信する。次に、制御部１４は、例えば、図４（ａ）に示したような映像信号処理方法が切り替わった旨を映像表示部１３に表示出力させる制御を行い終了とする（Ｓ１０４）。なお、この表示は必ずしも必要な表示ではない。

ステップＳ１０１において、音声出力装置２００からＨＤＭＩで映像信号を入力していないと判定された場合、または、ステップＳ１０２において音声出力装置２００のＨＤＭＩＩ／Ｆ部２１がＨＤＭＩ１．３ａに対応していないと判定された場合、制御部１４は、映像信号処理方法の変更前と変更後での映像遅延時間の差分時間が規定時間以下かどうかを判断する（Ｓ１０５）。この遅延時間は、図２に示した映像遅延時間と映像モードとが対応付けられたテーブルの情報を制御部１４が参照することで実行できる。ここで、規定時間とは予め定めておいてもよいし、ユーザが設定できるようにしてもよい。

例えば、規定時間を２０ｍｓｅｃと設定し、映像モードをニュースからスポーツに切り替えた場合、図２に示したテーブルより差分時間は１０ｍｓｅｃであることが判明するので、制御部１４は、映像遅延時間の差分時間が規定時間以下と判断する。制御部１４は、差分時間が規定時間以下であるという判断により図４（ａ）に示すような映像信号処理内容が切り替わった旨を表示出力する制御をして終了とする（Ｓ１０４）。

つまり、映像信号処理の変化に伴って映像遅延時間が変化することがあるが、その時間の変化が映像と音声の同期合わせにおいて視聴者にとって気にならないと考えられるレベルでは、リップシンク処理を積極的に促す構成としない。但し、映像信号処理の変化が規定時間以下でも、その遅延時間の累積によって、音声出力装置２００に設定された音声遅延量と映像遅延時間との乖離が大きくなることも想定される。そのため、本実施例では、差分時間が規定時間以下であったとしても、映像信号処理内容が切り替わった旨の映像を表示出力する構成としている。これにより、ユーザは映像と音声が同期しているか否かをその表示を元に考慮することができ、音声遅延時間の設定を行うか否かを決定することが可能となる。

映像モードをニュースから映画に切り替えた場合、図２に示したテーブルより変化量は６０ｍｓｅｃであることが判明するので、制御部１４は、差分時間が規定時間以上と判断する。

ステップＳ１０５において、制御部１４が、差分時間が規定時間以上と判断した場合、制御部１４は、図４（ｂ）に示すような映像信号処理内容が切り替わったこと及び映像遅延時間と差分時間に関する情報を表示出力する制御を行い、出力される映像信号と出力される音声信号との同期が合っていないことをユーザに伝える処理を行う（Ｓ１０６）。

このように図１に示すようなホームシアターシステムにおいてＨＤＭＩ１．３ａに対応していない装置が含まれている場合、映像信号処理内容の変更によってリップシンクが合わない（映像と音声の同期が合っていない）状態になっても、ユーザは、出力される映像信号と出力される音声信号の同期が合っていないことを認識することができる。

また、映像遅延時間の映像遅延時間と映像信号処理内容の切り替わりによって発生する差分時間をユーザに伝えることで、ユーザは音声出力装置２００に対してより精度の高いリップシンク設定（音声遅延時間設定）を行うことができる。

よってユーザは、操作部１５、または操作部２７を用いて音声出力装置２００の音声遅延時間を映像遅延時間に基づいて設定することで出力される映像と出力される音声の同期がより適正に取れた状態で視聴することができる。

また、本実施例では、差分時間を表示する構成としたが、映像信号処理内容の変更前と変更後の映像処理に要する時間を夫々表示するようにしてもよく、ユーザに差分時間がわかるように表示する構成であれば表示方法は特に限定されるものではない。さらに、映像表示部１３に表示する映像遅延時間に関する情報は、ユーザからの表示指示があるたびに表示してもよい。

本実施例では、出力される映像信号と出力される音声信号との同期が合っていないことを表示部に出力することでユーザに伝える構成としたが、表示部に出力することに限らず、例えば、映像信号処理装置に内蔵されているスピーカ（不図示）に出力することにより音声でユーザに伝えることもできる。

また、本実施例では、出力される映像信号と出力される音声信号との同期が合っていないことを表示部に出力する条件として、差分時間が規定時間以下としたが差分時間が発生すること、つまり規定時間をゼロとした設定を用いて出力する構成にしてもよい。

次に、図１及び図５を参照して本発明の第２の実施例による、映像信号処理装置１００内の制御部１４の下で実施される映像遅延時間を映像表示部に出力する制御処理について説明する。ここで図１は、本実施例の形態に係るホームシアターシステムの構成を示すブロック図である。また図５は、本実施例の形態に係る映像信号処理に要する時間が変更したことを映像表示部に出力する制御処理を示すフローチャートである。

本実施例のホームシアターシステムの装置構成は、図１で示した構成と同様である。しかし、実施例１のホームシアターシステムと比較して、音声出力装置２００のＨＤＭＩＩ／Ｆ部２１のバージョンが、ＨＤＭＩ１．２ａではなくＨＤＭＩ１．３ａであるという点で実施例１のホームシアターシステムとは異なる。

図５に示すフローチャートでは、実施例１と比較してホームシアターシステムを構成している装置の自動リップシンク処理の実行が有効となっているかどうかを判断する処理が追加されている。また、制御部１４が、映像遅延時間の差分時間が規定時間以下かどうかを判定する処理が削除されている。その他、図５に示すフローチャートの処理フローは基本的に実施例１と同様である。

以下、図５に示すフローチャートに従って詳細を説明する。図５のフローチャートを実行するためのプログラムは、制御部１４のＲＯＭに保持されており、映像処理の内容が変更することに応じて実行される。制御部１４は、映像信号処理内容の変更指示に基づき映像信号処理部１４で行う映像信号処理内容を決定する。

制御部１４は、映像信号処理内容の変更によって映像信号処理部１４における処理演算時間、すなわち映像遅延時間に変更が発生する否かについて判定する（Ｓ２００）。

ステップＳ２００において、制御部１４は、映像遅延時間が変更されると判断した場合、ホームシアターシステムを構成する音声出力装置から映像信号の入力をＨＤＭＩで受けているかどうかを判断する（Ｓ２０１）。

ステップＳ２０１において、ＨＤＭＩで受けていると判断した場合、制御部１４は、音声出力装置２００がＨＤＭＩ１．３ａに対応しているかを判断する（Ｓ２０２）。

ステップＳ２０２において、制御部１４が、音声出力装置２００がＨＤＭＩ１．３ａに対応していると判断した場合、制御部１４は、音声出力装置２００の自動リップシンク処理の設定が有効になっているか、すなわち自動リップシンク処理を実行する設定が有効になっているかどうかを判断する（Ｓ２０３）。

自動リップシンク処理の実行が有効になっているかを判断する方法として、例えば、自動リップシンク処理の設定を確認するためのコマンドをＨＤＭＩ−ＣＥＣのベンダーコマンドとして定義し、そのコマンドを用いて確認する方法がある。映像信号処理装置１００は自動リップシンク処理の設定を確認するコマンドを音声出力装置２００に対して送信する。そのコマンドを受信した音声出力装置２００は、自動リップシンク処理の設定が有効になっているかを確認し、自動リップシンク処理の設定が有効か無効かを示す設定通知情報を映像信号処理装置１００に送信する。映像信号処理装置１００の制御部１４は、受信した設定通知情報から自動リップシンク処理の設定状態を確認し、自動リップシンク処理の実行が可能かを判断する。

音声出力装置２００がＨＤＭＩ１．３ａに対応しており、かつ、自動リップシンク処理が有効な設定になっている場合、制御部１４は、映像信号処理部１２の映像遅延時間とリップシンクを調整するためのコマンドを音声出力装置２００に伝送する。音声出力装置２００は、ＨＤＭＩＩ／Ｆ２１にて映像遅延時間に関する情報を入手し、制御部２５は、この映像遅延時間に関する情報に基づいて自動リップシンク処理を行う（Ｓ２０４）。

ステップＳ２００において、制御部１４が、映像遅延時間の変更がないと判定した場合、またはステップＳ２０４において、自動リップシンク処理を行った場合、図４（ａ）に示すような映像信号処理内容に関する情報を表示するよう処理をする（Ｓ２０５）。

ステップＳ２０１において、音声出力装置２００がＨＤＭＩで映像信号を入力していないと判断された場合、またはステップＳ２０２において音声出力装置２００がＨＤＭＩ１．３ａに対応していないと判定された場合、またはステップＳ２０３において音声出力装置２００の自動リップシンク処理の設定が無効とされている場合、制御部１４は、図４（ｂ）に示すような映像信号処理内容が切り替わったこと及び差分時間に関する情報をユーザに伝える処理を行う（Ｓ２０６）。なお、実施例１と同様、映像遅延時間の差分時間と規定時間とを比較し、規定時間を超える場合に図４（ｂ）に示す表示を行うように構成することでも良い。

これにより、自動リップシンク処理の設定が無効の状態で映像信号処理内容の変更によって再生されるコンテンツの映像と音声が合わない状態になった場合でも、ユーザは、出力される映像信号と出力される音声信号の同期が合っていないことを認識することができる。

また、実施例２において、音声出力装置２００がＨＤＭＩ１．３ａに対応しているかを確認してから自動リップシンク処理の設定を確認するという処理を行ったが、自動リップシンク処理の設定確認を行うだけでも本実施例で説明したものと同様の効果を得ることが可能である。これは、自動リップシンク処理の設定が有効であればＨＤＭＩ１．３ａに対応するものであるし、設定が無効またはコマンドに対する応答が無ければ自動リップシンク処理を実行できないと判断できるためである。

実施例１及び実施例２は、映像の出力部として映像信号処理装置１００内の映像表示部１３としているが、例えば、映像信号処理装置からプロジェクション機能のみを持つ映像表示装置等に情報を映像出力しても本発明は実施できる。

以上、本発明の好ましい実施形態について説明したが、本発明はこれらの実施形態に限定されずその要旨の範囲内で種々の変形及び変更が可能である。

（変形例）
上述した実施例１または実施例２の変形例を以下に記載する。実施例１及び実施例２のフローチャートの説明では、音声出力装置２００から送信された映像モード情報によって映像信号処理内容が決定されるように開示した。しかしながら、映像信号処理内容は映像信号処理装置１００側で自動または手動で変更することができる。そのため、映像信号処理装置１００が、入力された映像を解析して映像信号処理内容を自動で決定するような機能を有する場合、または、映像信号処理装置１００に対してユーザが手動で映像信号処理内容を設定するような機能を有する場合にも、変更された映像信号処理内容によって映像遅延時間の差分が生じることになる。従って、これらの機能を有する映像信号処理装置であっても実施例１及び実施例２は有効である。

また、実施例１では、映像信号処理の変化によって発生する映像遅延時間の変化が規定時間以下か否かによって表示する内容を切り替えていた。これは実施例２においても同様である。しかし、上述した通り、映像遅延時間の変化が規定時間以下であっても、その変化が数回連続で発生することで、音声出力装置の音声遅延時間との乖離が大きくなることが考えられる。例えば、差分時間と比較するための規定時間が３０ｍｓｅｃである場合、映像遅延時間が例えば１００ｍｓｅｃの映像モードから映像遅延時間が８０ｍｓｅｃに変更されたとする。このとき、差分時間は２０ｍｓｅｃであり規定時間は３０ｍｓｅｃであるので、ステップＳ１０５の判断はＮｏとなる。この状態から、さらに、映像遅延時間が６０ｍｓｅｃの映像モードに移行すると、差分時間は２０ｍｓｅｃとなるので、やはり規定時間以下となり、ステップＳ１０５の判断はＮｏとなる。しかしながら、当初の映像遅延時間である１００ｍｓｅｃからは４０ｍｓｅｃの差分時間が生じてしまったことになる。

こうした場合にはリップシンク処理を促すべきである。そこで、実施例１のステップＳ１０５で実施する制御を以下のように変更する。まず、映像信号処理内容が変化した場合、１回の変化で規定時間以下だった場合には、ステップＳ１０４に移行するとともに、制御部１４のＲＯＭにその変化によって生じた映像信号の遅延時間から計算される差分時間を記憶する。その後、さらに映像信号処理内容が変化した場合、その変化で生じた遅延時間が規定時間以下の場合には、ＲＯＭに記憶された差分時間と加算し、累積差分時間を求める。ステップＳ１０５において、制御部１４はこの累積差分時間が規定時間以上であると判断した場合には、ステップＳ１０６に移行し、累積差分時間を画面上に表示する制御を行う。この構成によれば、１回の変化では規定時間以下の遅延時間の変化であっても、その遅延時間の累積により映像と音声の同期がずれることが想定される場合には、ユーザに対してリップシンク調整を促すことができる。また、調整量の目安となる差分時間を表示することで、リップシンク調整をより適切にユーザが実行しやすくなる。なお、累積差分時間が規定時間を超えた場合には、ＲＯＭに記憶された差分時間をリセットすれば良い。

また、実施例１及び実施例２では、映像信号の処理方法が変更されたこと、つまり、映像信号処理によって生じる映像遅延時間の変化が生じたことを制御開始のトリガとしていた。そして、映像遅延時間の変化が生じた後に、音声出力装置がＨＤＭＩ１．３ａに対応しているか否か等の判定を行うものとして説明した。しかしながら、予め、ＨＤＭＩで接続されているか否か、音声出力装置はＨＤＭＩ１．３ａに対応しているか否かを判定しておき、その判定結果を記憶しておくことが可能である。そのため、例えば、ＨＤＭＩ１．３ａに対応していることが予め記憶されていれば、映像遅延時間の変化が生じた場合には、即座に自動リップシンク処理を実行することが可能となる。つまり、映像遅延時間の変更が生じなければ、ＨＤＭＩのバージョンの判断を行わない手順で実施例１及び実施例２を説明したが、本発明はこの手順に限定されるものではない。

１００ 映像信号処理装置
１０ ＨＤＭＩＩ／Ｆ部
１１ メタデータ処理部
１２ 映像信号処理部
１３ 映像表示部
１４ 制御部
２００ 音声出力装置
３００ 映像音声信号再生装置

Claims (7)

1. 出力する音声の遅延時間を調整できる音声出力装置に接続可能な映像信号処理装置において、
   映像信号の映像信号処理を行う映像信号処理手段と、
   映像信号の映像信号処理が行われることで発生する映像遅延時間が変更されているかを判定する判定手段と、
   前記音声出力装置が自動で音声の遅延時間を調整できるかを判断する判断手段と、
   前記判定手段により映像遅延時間が変更されていると判定され、かつ、前記判断手段により音声出力装置が自動で音声の遅延時間を調整できないと判断されたことに応じて、映像遅延時間が変更されたことを出力部が出力するように制御を行う制御手段と、
   を有する映像信号処理装置。
2. 前記判断手段は、前記音声出力装置が備える、当該音声出力装置と前記映像信号処理装置とを接続する通信手段のインタフェース部のバージョンが、音声信号の遅延時間に関する情報を処理できるバージョンであるかを判断することで、前記音声出力装置が自動で音声の遅延時間を調整できるかを判断することを特徴とする請求項１に記載の映像信号処理装置。
3. 出力する音声の遅延時間を調整できる音声出力装置に接続可能な映像信号処理装置において、
   映像信号の映像信号処理を行う映像信号処理手段と、
   映像信号の映像信号処理が行われることで発生する映像遅延時間が変更されているかを判定する判定手段と、
   前記音声出力装置から受信した設定通知情報から該音声出力装置が自動で音声の遅延時間を調整する設定が有効となっているかどうかを判断する判断手段と、
   前記判定手段により映像遅延時間が変更されていると判定され、かつ、前記判断手段により自動で音声の遅延時間を調整する設定が有効でないと判断されたことに応じて、映像遅延時間が変更されたことを出力部が出力するように制御を行う制御手段と、
   を有する映像信号処理装置。
4. 前記判定手段により映像遅延時間に変更があると判定された場合、変更前の映像遅延時間と変更後の映像遅延時間との差分時間を判断する差分時間判断手段と、
   前記差分時間判断手段により判断された差分時間と前記制御手段による出力制御を行うかを決定するための基準となる規定時間とを比較する比較手段と、を有し、
   前記制御手段は、前記比較手段により前記差分時間が規定時間以下と判断された場合に、差分時間を出力部が出力するように制御することを特徴とする請求項１乃至３のいずれか１項に記載の映像信号処理装置。
5. 出力する音声の遅延時間を調整できる音声出力装置に接続可能な映像信号処理装置を制御する映像信号処理方法において、
   映像信号の映像信号処理を行う映像信号処理工程と、
   映像信号の映像信号処理が行われることで発生する映像遅延時間が変更されているかを判定する判定工程と、
   前記音声出力装置が自動で音声の遅延時間を調整できるかを判断する判断工程と、
   前記判定工程により映像遅延時間が変更されていると判定され、かつ、前記判断工程により音声出力装置が自動で音声の遅延時間を調整できないと判断されたことに応じて、映像遅延時間が変更されたことを出力部が出力するように制御を行う制御工程と、
   を含む映像信号処理方法。
6. 出力する音声の遅延時間を調整できる音声出力装置に接続可能な映像信号処理装置を制御する映像信号処理方法において、
   映像信号の映像信号処理を行う映像信号処理工程と、
   映像信号の映像信号処理が行われることで発生する映像遅延時間が変更されているかを判定する判定工程と、
   前記音声出力装置から受信した設定通知情報から該音声出力装置が自動で音声の遅延時間を調整する設定が有効となっているかどうかを判断する判断工程と、
   前記判定工程により映像遅延時間が変更されていると判定され、かつ、前記判断工程により自動で音声の遅延時間を調整する設定が有効でないと判断されたことに応じて、映像遅延時間が変更されたことを出力部が出力するように制御を行う制御工程と、
   を含む映像信号処理方法。
7. 請求項５または請求項６に記載の映像信号処理方法を映像信号処理装置に実行させるための制御プログラム。