JP4871635B2 - デジタル放送受信装置及びその制御方法 - Google Patents

Description

本発明は、デジタル放送受信装置に関し、詳しくはデジタルテレビ放送の字幕表示に関する。

デジタルテレビ放送の伝送プロトコルは社団法人 電波産業会（ＡＲＩＢ）の定めた運用規格に則っている。このＡＲＩＢ規格によれば、映像や音声の信号はＭＰＥＧ（Ｍｏｖｉｎｇ Ｐｉｃｔｕｒｅ Ｃｏｄｉｎｇ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）２−ＴＳ（Ｔｒａｎｓｐｏｒｔ Ｓｔｒｅａｍ）のシステムで、送信される。放送波で信号を伝送する場合は、トランスポートストリーム（ＴＳ： Ｔｒａｎｓｐｏｒｔ Ｓｔｒｅａｍ）と呼ばれる多重信号形式で信号を多重化する。ＴＳは、ＰＥＳ（Ｐａｃｋｅｔｉｚｅｄ Ｅｌｅｍｅｎｔａｒｙ Ｓｔｒｅａｍ）を分割し、３２ｂｉｔのヘッダを含む１８８ｂｙｔｅ単位のパケットにパケット化したデータから構成される。ＴＳの各パケットには、パケットの属性を示す１３ビットのパケット識別子（ＰＩＤ）と呼ばれる情報が含まれる。

デジタルテレビ放送における字幕・文字スーパーの情報は、映像や音声と同様に同じＰＩＤ番号を持つ複数のＴＳパケットに分割して伝送される。字幕はメインの映像・音声・データと同期したサービス（例、訳字字幕など）であり、文字スーパーはメインの映像・音声・データと非同期なサービス（例、速報ニュースなど）である。

ＴＳには、主に番組選択のための基本情報であるＰＳＩ（Ｐｒｏｇｒａｍ Ｓｐｅｃｉｆｉｃ Ｉｎｆｏｒｍａｔｉｏｎ）情報や、番組に関する付属情報であるＳＩ（Ｓｅｒｖｉｃｅ Ｉｎｆｏｒｍａｔｉｏｎ）情報のパケットが含まれる。このＳＩ情報に含まれるＥＩＴ（Ｅｖｅｎｔ Ｉｎｆｏｒｍａｔｉｏｎ Ｔａｂｌｅ）には番組の名称や内容・ジャンル情報などが記述されており、受信装置側では番組の検索や選局を行うのに利用することができる。

放送波に含まれる字幕・文字スーパーは、図２（ａ）に示されるように、表示画面上に適正に表示されていないと、コンテンツ内のオープンキャプションと重なりが生じてしまい視聴が困難になる。

字幕・文字スーパー情報には文字コード、フォントサイズなどのほかに、画面上の表示座標などの情報も含まれている。受信側でこれらの情報をデコードすることにより番組制作者が意図した態様で字幕・文字スーパーを表示する事が可能となる。

しかし、バラエティのようなオープンキャプションを多用するコンテンツでは、図２（ｂ）に示されるように、オープンキャプションに重ならないように表示位置を設定された字幕が、画面の中央付近に表示される事が多い。通常、画面の中央付近には主要な映像が表示されている場合が多いので、視聴者に対して妨害感を与えることになる。

また、ニュース等の生放送番組においては、リアルタイムに字幕生成・送信を行っているため、字幕の表示位置や表示タイミングを必ずしも最適には設定出来ない。映像に含まれているオープンキャプションの表示位置と字幕の表示位置が重なってしまう場合もあり、このときは、オープンキャプションが字幕の下に隠れてしまうので、視聴者がオープンキャプションを視認できなくなる。

オープンキャプションを多用するコンテンツに対する対策として、動画を受信機にあらかじめ設定された値に縮小表示することにより、妨害感を低減することが知られている（例えば、下記非特許文献）。

また、リアルタイムに字幕生成・送信を行うコンテンツに対しては、オープンキャプションの表示位置を検出し、字幕の表示位置を変更する方法が下記特許文献に開示されている。
特開２００４−２０８０１４号公報 ＡＲＩＢ ＴＲ−Ｂ１４ 地上デジタルテレビジョン放送運用規定 技術資料

しかしながら、上記非特許文献に記載の字幕アウトスクリーン表示機能は、映像を縮小表示するため、画像の精細性が損なわれるという問題点があった。

また、上記特許文献に記載の方法は、データＰＥＳに含まれている字幕データ文及び字幕表示位置情報と、画像認識より映像信号に含まれているオープンキャプションの表示位置情報とを解析し、字幕データ文と表示すべき位置の修正を行映像と合成することで、字幕とオープンキャプションとの重なりを回避していた。そのため、修正された字幕の表示位置によっては、動画の中心により近い場所に表示され、妨害感が十分に回避できないという問題点があった。また画像認識の処理を行うため、回路規模が大きくなってしまうという問題点もあった。

放送信号を受信して、該放送信号に基づいた映像を表示画面に表示可能とするデジタル放送受信装置において、該放送信号から字幕情報及び番組のジャンル情報をそれぞれ抽出する抽出部と、該ジャンル情報の種別に基づいて、字幕の表示形態を決定する決定部と、前記決定部で決定された表示形態で、前記字幕情報に基づいて字幕を表示させる制御部とを有し、前記抽出部で抽出したジャンル情報が、番組の視聴者傾向において高齢者が多いジャンルである場合に、前記決定部は前記字幕の文字サイズを拡大して表示するように前記字幕の表示形態を決定することを特徴とする。

本発明によれば、放送コンテンツのジャンルに最適なように字幕・文字スーパーのレイアウトを変更することができるので、必ずしも表示画像を縮小する必要がない。即ち、放送コンテンツ映像を精細性を落とさずに視聴可能とすることができるとともに、字幕・文字スーパーの表示による妨害感も回避することができる。

また、本発明によれば、放送中のコンテンツのジャンル判定にもとづいて、字幕・文字スーパーのレイアウトを決定しているので、リアルタイムに字幕生成・送信を行っているコンテンツに対しても、字幕の表示位置や表示タイミングを最適には設定できる。

また、本発明によれば、画像認識の処理を必ずしも必要としないので、回路規模を小さくすることができる。

本発明の実施の形態について、図１を用いて以下に具体的に説明する。

デジタル放送信号は受信部１０１により受信される。受信部１０１で受信される放送信号は、デジタル放送信号の他に、インターネットを介して配信されるストリーミング放送や、サーバー型放送の信号であってもよい。

受信部１０１から抽出部に相当するデマルチプレクサ１０２へＭＰＥＧ２−ＴＳが入力される。ＭＰＥＧ２−ＴＳにはビデオやオーディオ、字幕等のデータパケットの他に、ＰＳＩやＳＩの情報パケットが含まれている。デマルチプレクサ１０２はそれぞれのパケットのヘッダ部にあるパケット識別子（ＰＩＤ）に基づいて、ＴＳパケットを、ビデオパケット、オーディオパケット、データパケット、ＰＳＩ及びＳＩパケットに分離する。

オーディオパケットはオーディオデコーダー１０３に送られ、ＭＰＥＧ２−ＡＡＣのデコード処理を行って、オーディオ信号を形成し、オーディオ信号にもとづいた音声がスピーカー１１８から出力される。

ビデオパケットはビデオデコーダー１０４に送られ、ＭＰＥＧ２方式のデコード処理を行って、ビデオ信号を再生する。再生されたビデオ信号は解像度変換部１０５によって適宜解像度変換が行われ、表示プレーンは動画プレーン１０７が割り当てられる。

静止画、字幕のデータパケットは、それぞれ静止画デコーダ１０６、文字・図形デコーダ１１１に送られ、デコード処理される。表示プレーンは静止画プレーン１０８、文字図形プレーン１０９、字幕プレーン１１０がそれぞれ割り当てられる。各プレーンのデータは、放送規格に則って、アルファブレンドを含めた合成処理がなされ、合成処理された映像データにもとづいた映像がディスプレイ１１９に表示される。

また、デマルチプレクサ１０２は、ＳＩパケット内のＥＩＴを抽出してジャンル判定部１１７に送る。ジャンル判定部１１７は、ＥＩＴのジャンル情報より視聴中のコンテンツのジャンル判定を行う。ＥＩＴには番組名称や番組の内容情報と一緒に番組のジャンル情報が記述されており、その情報を基に表示／ジャンル検索等に利用できる。図３は、ジャンル情報の構成の一例を示したものである。ジャンル情報は番組ジャンル大分類と中分類ごとにそれぞれ所定のコードが割り当てられるが、大分類のみでもよい。また、このジャンル情報は地上デジタルテレビジョン放送、ＢＳデジタル放送、広帯域ＣＳデジタル放送間で共通に一元管理される。

レイアウト決定部１１５は、ジャンル判定部で判定されたジャンル情報と、ビデオデコーダーより動画の動ベクトルを受け取る。レイアウト決定部は、ジャンルに応じたレイアウトをレイアウトテーブル１１４より、動ベクトルに応じたレイアウトを動ベクトルテーブルより、それぞれ選択する。これらのテーブルは、前記ジャンル情報に対応した字幕（文字スーパーも含む）の表示形態情報として各々記憶部１１３、１１４に格納される。これらの記憶部は、別個のメモリでもよいし、同一メモリ内の異なる記憶領域でもよい。

ここで、レイアウトテーブルの作成方法について説明する。

レイアウトテーブルには、あらかじめ、放送コンテンツのジャンルに最適な字幕の表示位置が関連付けて保持されている。ジャンルに最適な字幕の表示位置は、あるジャンルにおけるコンテンツの画面上での表示形態の傾向や、視聴者の要求などのパラメータにもとづいて決定される。例えば、ジャンルの特徴を表すパラメータを以下の５点とする。即ち、字幕の付加をリアルタイムで行っている事が多いか、オープンキャプションが多用されているか、動画像を高解像度で表示させたいコンテンツが多いか、注目領域が中央であることが多いか、高齢者がよく見るか、の５点である。５つのパラメータに優先順位を設け、図４のようなフローチャートにしたがってジャンル毎のレイアウト変更箇所を決定していく。

例としてニュース番組の場合は、リアルタイムによる字幕付加が行われ（ステップ４１）、バラエティの場合は、オープンキャプションが多用される（ステップ４２）ため、アウトスクリーン表示が設定される（ステップ４３）。更に、どちらのジャンルも高解像度で見る必要はないため（ステップ４４）、動画の縮小表示を解除する必要がない。また、注目領域もなく（ステップ４６）、高齢者がよく見るとはいえない（ステップ４８）ため、字幕の文字サイズは通常のまま、解像度変換によってできた映像非表示領域へ表示する。図５（ａ）は、この場合の表示例である。

高齢者が見るようなジャンルの場合（ステップ４８）は、図５（ｂ）に示すように、字幕の文字サイズを拡大表示に変更する（ステップ４９）。

落語・演芸の場合は、リアルタイムでの字幕の付加は行われず（ステップ４１）、オープンキャプションはあまり使われない（ステップ４２）と考えられるため、アウトスクリーン表示は行わない。高画質で視聴する要求も高くないと考えられるため、動画の解像度変換は行わない。また、注目領域は画面の中央であることが多い（ステップ４６）と考えられるため、字幕を画面の左右に配置するように字幕のレイアウト変更を行う（ステップ４７）。さらに、高齢者が見ることも多い（ステップ４８）ため、字幕の文字サイズは拡大表示に変更する（ステップ４９）。図５（ｃ）は、この場合の表示例である。

ドラマのようなジャンルでは、例に挙げた５つのパラメータの判定（ステップ４１、４２、４４、４６、４８）に関して、全ての判定に該当しないため送局側で規定された標準のまま出力する（図５（ｄ））。

ここで、パラメータ項目や、その数、パラメータ同士の優先度は、設計時に任意に決めることができる。

このように各ジャンルに属する番組の映像表示形態または視聴者傾向の少なくとも一方に係る特徴に基いて、字幕（文字スーパーも含む）の表示形態を決定することにより、各々のコンテンツに対して最適な字幕の表示形態が選択される。

ところで、番組ジャンルは一つのコンテンツに対して、複数ジャンル定義されていることも少なくない。例えば、コンテンツの内容が『ドキュメンタリードラマ』であれば、付与されるジャンル情報の大分類が“ドラマ”と“ドキュメンタリー／教養”である場合がある。中分類まで含めれば、更に重複して定義されている場合もある。

１つのコンテンツに対して複数のジャンル情報が付与されている場合の字幕表示の設定方法について以下に示す。

予め動ベクトルテーブルに、ジャンルと動ベクトルの出現率を関連付けて記憶しておくことで、付与された複数のジャンルの中から最も適切なジャンルを選べるようにすることができる。動ベクトルテーブルの作成方法について説明する。

あるジャンルの信号を受信時に、画像を複数エリアに分割する。このときの画像は字幕表示を行わない、動画プレーンに表示される画像である。

分割されたエリアにおいて、一定時間ごとに動きベクトルを取得する。この画像１枚における動きの分布を所定時間取得し、出現率がある一定間隔であるといった特徴的な動ベクトルの傾向をジャンルと関連付けてテーブル化する。動きベクトルの分布情報は、１つのジャンルに対して、複数対応付けてもよい（図６）。また、小エリアを複数個連結し、代表動きを作成し、動き分布情報としてもよい。例えば、ニュースはオープンキャプションがある一定間隔で変更されるので、そのオープンキャプションを示す動ベクトルの出現間隔とジャンルと関連付けて保持する。字幕のレイアウトを設定する際には、動画像の動ベクトルの傾向から、そのコンテンツに対応した最適なジャンルを選択することができる。

本発明においては、レイアウト決定部はリモコン制御信号入力装置１１６からの信号によって、レイアウト変更を解除し放送信号送出側が指定したレイアウトに戻すことも可能である。

以上のように、レイアウト変更制御部１１３は、レイアウト決定部１１５の指示に従って、文字図形デコーダーから受け取った字幕データの表示方法を適宜変更する。このような構成とすることにより、テレビ画面上に表示される字幕が、番組そのものの視聴を妨害せず、且つオープンキャプション表示とも重ならないように表示される。

本発明のデジタル放送受信装置のブロック図である。 従来の字幕の表示例を示した説明図である。 ジャンル情報の構成を示した説明図である。 本発明の処理を表したフローチャートである。 本発明の字幕の表示例を示した説明図である。 本発明の動ベクトルテーブルの生成方法を説明するための説明図である。

符号の説明

１０１ 受信部
１０２ デマルチプレクサ
１０３ オーディオデコーダー
１０４ ビデオデコーダー
１０５ 解像度変換部
１０６ 静止画デコーダー
１０７ 動画プレーン
１０８ 静止画プレーン
１０９ 文字図形プレーン
１１０ 字幕プレーン
１１１ 文字図形デコーダー
１１２ レイアウト変更制御部
１１３ 動ベクトルテーブル記憶部
１１４ レイアウトテーブル記憶部
１１５ レイアウト決定部
１１６ リモコン制御信号入力装置
１１７ ジャンル判定部

Claims (5)

1. 放送信号を受信して、該放送信号に基づいた映像を表示画面に表示可能とするデジタル放送受信装置において、
   該放送信号から字幕情報及び番組のジャンル情報をそれぞれ抽出する抽出部と、
   該ジャンル情報の種別に基づいて、字幕の表示形態を決定する決定部と、
   前記決定部で決定された表示形態で、前記字幕情報に基づいて字幕を表示させる制御部と、を有し、
   前記抽出部で抽出したジャンル情報が、番組の視聴者傾向において高齢者が多いジャンルである場合に、前記決定部は前記字幕の文字サイズを拡大して表示するように前記字幕の表示形態を決定することを特徴とするデジタル放送受信装置。
2. 前記決定部は、前記ジャンル情報と、前記放送信号より復号された映像信号の動ベクトルとに基づいて、前記字幕の表示形態を決定することを特徴とする請求項１記載のデジタル放送受信装置。
3. 前記決定部で決定された前記字幕の表示形態を、前記ジャンル情報に対応した情報として格納する記憶部を更に有することを特徴とする請求項１または２に記載のデジタル放送受信装置。
4. 前記字幕の表示形態は、前記字幕がオープンキャプションと重ならないで表示されるように決定されることを特徴とする請求項１から３のいずれか一項に記載のデジタル放送受信装置。
5. 放送信号を受信して、該放送信号に基づいた映像を表示可能とするデジタル放送受信装置の制御方法において、
   該放送信号から字幕情報及び番組のジャンル情報をそれぞれ抽出する抽出ステップと、該ジャンル情報の種別に基づいて、字幕の表示形態を決定する決定ステップと、決定された表示形態で、前記字幕情報に基づいて字幕を表示させる制御ステップと、を有し、
   前記抽出ステップで抽出したジャンル情報が、番組の視聴者傾向において高齢者が多いジャンルである場合に、前記決定ステップでは前記字幕の文字サイズを拡大して表示するように前記字幕の表示形態を決定することを特徴とするデジタル放送受信装置の制御方法。

Images