JP2011101230A - 表示制御装置、表示制御方法、プログラム、出力装置、および送信装置 - Google Patents
表示制御装置、表示制御方法、プログラム、出力装置、および送信装置 Download PDFInfo
- Publication number
- JP2011101230A JP2011101230A JP2009254958A JP2009254958A JP2011101230A JP 2011101230 A JP2011101230 A JP 2011101230A JP 2009254958 A JP2009254958 A JP 2009254958A JP 2009254958 A JP2009254958 A JP 2009254958A JP 2011101230 A JP2011101230 A JP 2011101230A
- Authority
- JP
- Japan
- Prior art keywords
- content
- image
- playback
- section
- image data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
- H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
- G09G3/001—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background
- G09G3/003—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background to produce spatial visual effects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/356—Image reproducers having separate monoscopic and stereoscopic modes
- H04N13/359—Switching between monoscopic and stereoscopic modes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/4104—Peripherals receiving signals from specially adapted client devices
- H04N21/4122—Peripherals receiving signals from specially adapted client devices additional display device, e.g. video projector
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
- H04N21/4147—PVR [Personal Video Recorder]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/432—Content retrieval operation from a local storage medium, e.g. hard-disk
- H04N21/4325—Content retrieval operation from a local storage medium, e.g. hard-disk by playing back content from the storage medium
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2320/00—Control of display operating conditions
- G09G2320/06—Adjustment of display parameters
- G09G2320/0613—The adjustment depending on the type of the information to be displayed
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/79—Processing of colour television signals in connection with recording
- H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
- H04N9/82—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
- H04N9/8205—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
- H04N9/8227—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal the additional signal being at least another television signal
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- Computer Hardware Design (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
Abstract
【課題】疲労感を軽減しつつ、3Dコンテンツを効果的に視聴させることができるようにする。
【解決手段】表示制御装置1においては、左目用画像のデータと右目用画像のデータを含む3Dコンテンツの再生が行われる。現在の再生位置がCM区間の位置になった場合、画像の再生方式が、それまで採用されていた3D再生から2D再生に切り替えられ、番組に含まれるCM区間の画像が2D画像として表示される。また、CM区間の再生が終了し、現在の再生位置が番組本編区間の位置になったとき、画像の再生方式が2D再生から3D再生に戻され、番組本編区間の画像が3D画像として表示される。本発明は動画のコンテンツを再生する録画機器に適用することができる。
【選択図】図1
【解決手段】表示制御装置1においては、左目用画像のデータと右目用画像のデータを含む3Dコンテンツの再生が行われる。現在の再生位置がCM区間の位置になった場合、画像の再生方式が、それまで採用されていた3D再生から2D再生に切り替えられ、番組に含まれるCM区間の画像が2D画像として表示される。また、CM区間の再生が終了し、現在の再生位置が番組本編区間の位置になったとき、画像の再生方式が2D再生から3D再生に戻され、番組本編区間の画像が3D画像として表示される。本発明は動画のコンテンツを再生する録画機器に適用することができる。
【選択図】図1
Description
本発明は、表示制御装置、表示制御方法、プログラム、出力装置、および送信装置に関し、特に、疲労感を軽減しつつ、3Dコンテンツを効果的に視聴させることができるようにした表示制御装置、表示制御方法、プログラム、出力装置、および送信装置に関する。
近年、LCD(Liquid Crystal Display)などのディスプレイの画素数の向上やフレームレートの向上に伴い実現可能になった画像の表示方式として、視聴者が画像を立体的に認識できるようにする3D(3次元)表示方式が注目されている。
以下、適宜、それを見ることによって被写体を立体的に認識できる画像を3D画像といい、3D画像のデータを含むコンテンツを3Dコンテンツという。また、3D画像を表示するための再生を3D再生という。通常の2D画像(被写体を立体的に認識できない平面的な画像)を表示するための再生は2D再生となる。
3D画像を鑑賞する方式としては、偏光フィルタメガネやシャッタメガネを用いるメガネ方式と、レンチキュラー方式等の、メガネを用いない裸眼方式とがある。また、3D画像を表示するための再生方式として、視差のある左目用画像(L画像)と右目用画像(R画像)を交互に表示するフレームシーケンシャル方式がある。左目用画像と右目用画像をシャッタメガネ等によって視聴者の左右のそれぞれの目に届けることにより、立体感を視聴者に感じさせることが可能になる。
臨場感のある表現が可能になることから、このような3D再生の技術の開発がさかんに行われている。また、通常の2D再生に用いられるコンテンツ(2Dコンテンツ)に基づいて3Dコンテンツを生成し、3D画像を表示する技術の開発も行われている。2Dコンテンツから3Dコンテンツを生成する手法としては、画像の視差を利用した技術がある(例えば、特許文献1)。
3D画像と2D画像は画像の性質が異なるため、3D画像を長時間にわたって視聴した場合、2D画像を視聴したときより疲労が蓄積してしまう可能性がある。3D画像は従来の2D画像に較べてよりリアルに感じるため、ユーザは無意識のうちにコンテンツを長時間にわたって視聴してしまう可能性もある。
そのため、通常の2D画像を視聴している時よりも、気付かないうちに疲労感が増加してしまうことがある。このことから、3D画像を視聴するときの疲労感を軽減する技術が各種提案されている(例えば、特許文献2)。
ところで、近年販売等されているハードディスクレコーダ等の通常の2Dコンテンツを記録する記録装置の中には、記録済みのコンテンツの再生モードとして、特定のシーンのみを再生するモードが用意されているものがある。
3Dコンテンツを再生する場合にもこのような再生モードを用いることができるものと考えられる。また、このとき、特定のシーンのみを3D表示方式で表示し、他のシーンを2D表示方式で表示すれば、コンテンツ全区間を3D表示方式で表示する場合に較べてユーザの疲労感を軽減させることができるものと考えられる。
さらに、3D画像は2D画像に較べてリアルに表現できることから、表示方式をシーンに応じて切り替えることで、2D画像を見ているときとの違いをユーザにより確実に認識させることができ、その特定のシーンを効果的に視聴させることができるものと考えられる。
本発明はこのような状況に鑑みてなされたものであり、疲労感を軽減しつつ、3Dコンテンツを効果的に視聴させることができるようにするものである。
本発明の第1の側面の表示制御装置は、コンテンツの画像データと音声データのうちの少なくとも一方の特徴を抽出する抽出手段と、前記抽出手段により抽出された特徴に基づいて、前記コンテンツの所定のシーンを検出する検出手段と、前記コンテンツを再生する再生手段と、前記コンテンツの再生位置が、前記検出手段により検出された前記所定のシーンの区間の位置である場合、前記コンテンツの画像を2次元画像として認識させるように表示し、前記コンテンツの再生位置が前記所定のシーンの区間以外の位置である場合、前記コンテンツの画像を3次元画像として認識させるように表示する表示制御手段とを備える。
再生対象として入力された前記コンテンツが、画像データとして2次元画像を表示するための画像データのみを含むコンテンツである場合、入力された前記コンテンツを、3次元画像を表示するための、相互に視差を含む左目用画像のデータと右目用画像のデータを含むコンテンツに変換する変換手段をさらに設けることができる。この場合、前記表示制御手段には、前記所定のシーンの区間以外の前記コンテンツの画像を、前記変換手段により変換された前記コンテンツに基づいて表示させ、前記所定のシーンの前記コンテンツの画像を、入力された前記コンテンツに基づいて表示させることができる。
再生対象として入力された前記コンテンツが、画像データとして相互に視差を含む左目用画像のデータと右目用画像のデータを含むコンテンツである場合、前記表示制御手段には、前記所定のシーンの区間以外の前記コンテンツの画像を、入力された前記コンテンツに基づいて表示させ、前記所定のシーンの前記コンテンツの画像を、左目用画像のデータと右目用画像のデータのうちの一方に基づいて表示させることができる。
前記コンテンツはテレビジョン番組のデータであり、前記所定のシーンの区間はテレビジョン番組に含まれるCM区間であるようにすることができる。
本発明の第1の側面の表示制御方法は、コンテンツの画像データと音声データのうちの少なくとも一方の特徴を抽出し、抽出した特徴に基づいて、前記コンテンツの所定のシーンを検出し、前記コンテンツを再生し、前記コンテンツの再生位置が、検出した前記所定のシーンの区間の位置である場合、前記コンテンツの画像を2次元画像として認識させるように表示し、前記コンテンツの再生位置が前記所定のシーンの区間以外の位置である場合、前記コンテンツの画像を3次元画像として認識させるように表示するステップを含む。
本発明の第1の側面のプログラムは、コンテンツの画像データと音声データのうちの少なくとも一方の特徴を抽出し、抽出した特徴に基づいて、前記コンテンツの所定のシーンを検出し、前記コンテンツを再生し、前記コンテンツの再生位置が、検出した前記所定のシーンの区間の位置である場合、前記コンテンツの画像を2次元画像として認識させるように表示し、前記コンテンツの再生位置が前記所定のシーンの区間以外の位置である場合、前記コンテンツの画像を3次元画像として認識させるように表示するステップを含む。
本発明の第2の側面の出力装置は、コンテンツの画像データと音声データのうちの少なくとも一方の特徴を抽出する抽出手段と、前記抽出手段により抽出された特徴に基づいて、前記コンテンツの所定のシーンを検出する検出手段と、前記コンテンツを再生する再生手段と、前記コンテンツの再生位置が、前記検出手段により検出された前記所定のシーンの区間の位置である場合、前記コンテンツの画像を2次元画像として出力し、前記コンテンツの再生位置が前記所定のシーンの区間以外の位置である場合、前記コンテンツの画像を3次元画像として出力する出力手段とを備える。
本発明の第3の側面の送信装置は、相互に視差を含む左目用の画像データと右目用の画像データを含むコンテンツの画像データと音声データのうちの少なくとも一方の特徴を抽出する抽出手段と、前記抽出手段により抽出された特徴に基づいて、前記コンテンツの所定のシーンを検出する検出手段と、検出した前記所定のシーンに関するデータを、前記コンテンツの画像データとともに送信する送信手段とを備える。
本発明の第4の側面の表示制御装置は、少なくとも画像データを含むコンテンツのデータを受信するとともに、前記コンテンツの画像データと音声データのうちの少なくとも一方の特徴に基づいて検出された所定のシーンに関するデータを受信する受信手段と、前記コンテンツを再生する再生手段と、前記コンテンツの再生位置が、前記所定のシーンの区間の位置である場合、前記コンテンツの画像を2次元画像として認識させるように表示し、前記コンテンツの再生位置が前記所定のシーンの区間以外の位置である場合、前記コンテンツの画像を3次元画像として認識させるように表示する表示制御手段とを備える。
本発明の第1の側面においては、コンテンツの画像データと音声データのうちの少なくとも一方の特徴が抽出され、抽出された特徴に基づいて、前記コンテンツの所定のシーンが検出される。前記コンテンツの再生位置が、検出された前記所定のシーンの区間の位置である場合、前記コンテンツの画像が2次元画像として認識させるように表示され、前記コンテンツの再生位置が前記所定のシーンの区間以外の位置である場合、前記コンテンツの画像が3次元画像として認識させるように表示される。
本発明の第2の側面においては、コンテンツの画像データと音声データのうちの少なくとも一方の特徴が抽出され、抽出された特徴に基づいて、前記コンテンツの所定のシーンが検出される。また、前記コンテンツが再生され、前記コンテンツの再生位置が、前記所定のシーンの区間の位置である場合、前記コンテンツの画像が2次元画像として出力され、前記コンテンツの再生位置が前記所定のシーンの区間以外の位置である場合、前記コンテンツの画像が3次元画像として出力される。
本発明の第3の側面においては、相互に視差を含む左目用の画像データと右目用の画像データを含むコンテンツの画像データと音声データのうちの少なくとも一方の特徴が抽出され、抽出された特徴に基づいて、前記コンテンツの所定のシーンが検出される。また、検出された前記所定のシーンに関するデータが、前記コンテンツの画像データとともに送信される。
本発明の第4の側面においては、少なくとも画像データを含むコンテンツのデータを受信するとともに、前記コンテンツの画像データと音声データのうちの少なくとも一方の特徴に基づいて検出された所定のシーンに関するデータが受信され、前記コンテンツが再生される。また、前記コンテンツの再生位置が、前記所定のシーンの区間の位置である場合、前記コンテンツの画像が2次元画像として認識されるように表示され、前記コンテンツの再生位置が前記所定のシーンの区間以外の位置である場合、前記コンテンツの画像が3次元画像として認識されるように表示される。
本発明によれば、疲労感を軽減しつつ、3Dコンテンツを効果的に視聴させることができる。
[3D画像表示システム]
図1は、本発明の一実施形態に係る3D画像表示システムの構成例を示す図である。
図1は、本発明の一実施形態に係る3D画像表示システムの構成例を示す図である。
図1に示すように、この3D画像表示システムは、表示制御装置1、TV(テレビジョン受像機)2、およびシャッタメガネ3から構成される。すなわち、図1の3D画像表示システムによる3D画像の視聴方式はメガネを用いた方式である。シャッタメガネ3は、コンテンツの視聴者であるユーザが着用するものである。
表示制御装置1は、コンテンツを再生し、コンテンツの画像(動画像)をTV2に表示させ、それにあわせて、コンテンツの音声を図示せぬスピーカから出力させる。表示制御装置1とTV2は例えばHDMI(High Definition Multimedia Interface)規格のケーブルによって接続される。
表示制御装置1は、例えば、内蔵のHDDに記録されているコンテンツや、ドライブに挿入されたBlu-ray(商標) discに記録されているコンテンツを再生する。表示制御装置1による再生の対象になるコンテンツはテレビジョン番組のデータであり、画像データと音声データが含まれる。テレビジョン番組は番組本編とCMから構成される。
ここでは、再生対象のコンテンツには、画像データとして、表示順で連続する2つのフレームを較べた場合に視差のある、左目用画像のデータと右目用画像のデータが含まれている場合について説明する。
図1においては、TV2に左目用画像L1が表示されている。これに続けて、図1の右上に示すように、右目用画像R1、左目用画像L2、右目用画像R2、左目用画像L3、右目用画像R3、・・・と、左目用画像と右目用画像が交互に表示される。
シャッタメガネ3には、例えば、赤外線を用いた無線通信によって、画像の垂直同期信号の情報を含む制御信号が表示制御装置1から供給される。シャッタメガネ3の左目側の透過部と右目側の透過部は、その偏光特性を制御可能な液晶デバイスから構成される。
シャッタメガネ3は、制御信号に従って、左目オープンかつ右目クローズと左目クローズかつ右目オープンの2つのシャッタ開閉動作を交互に繰り返す。その結果、ユーザの右目には右目用画像のみが、左目には左目用画像のみが入力される。左目用画像と右目用画像には視差があり(被写体の表示位置に、視差に相当する分のずれがあり)、この視差のある左目用画像と右目用画像を交互に見ることによって、ユーザは番組の画像を3D画像として知覚することになる。
また、表示制御装置1は、コンテンツの画像データと音声データを解析し、番組に含まれるCM区間を検出する。
表示制御装置1は、現在の再生位置がCM区間の位置になった場合、画像の再生方式をそれまで採用していた3D再生から2D再生に切り替え、CM区間の画像を2D画像として表示させる。また、表示制御装置1は、左目側の透過部と右目側の透過部の特性が同じ特性になるようにシャッタメガネ3を制御する。
CM区間の再生が終了し、現在の再生位置が番組本編区間の位置になったとき、表示制御装置1は、画像の再生方式を2D再生から3D再生に戻し、番組本編区間の画像を3D画像として表示させる。また、表示制御装置1は、再度、ユーザの右目に右目用画像が、左目に左目用画像が入力されるようにシャッタメガネ3を制御する。
図2は、再生方式の切り替えの例を示す図である。
図2の例においては、再生対象のコンテンツがサッカー中継の番組とされ、時刻k1から時刻k2の区間がCM区間として検出されている。CM区間以外の区間が、番組本編区間である。図2に示すように、CM区間である時刻k1から時刻k2においては2D再生が行われ、番組本編区間においては3D再生が行われる。
このように、番組全体のうちの番組本編区間の画像だけを3D画像として表示することにより、番組全体の画像を3D画像として表示する場合に較べて、ユーザの疲労感を軽減させることが可能になる。CM区間においては、ユーザはいわば目を休めた状態でいることができる。
また、番組本編区間の画像を3D画像としてユーザに見せることによって、再生中の区間が番組本編区間であることをより強調することができ、効果的に番組の視聴を行わせることができる。
[表示制御装置1の構成]
図3は、表示制御装置1の構成例を示すブロック図である。
図3は、表示制御装置1の構成例を示すブロック図である。
システムコントローラ11は、ユーザI/F12から供給されるユーザの操作の内容を表す信号に従って、表示制御装置1の全体の動作を制御する。
例えば、システムコントローラ11は、特徴抽出部18から供給された特徴データに基づいて番組のCM区間を検出する。システムコントローラ11は、コンテンツの再生中、検出結果に基づいて、番組本編区間においては3D再生を行い、CM区間においては2D再生を行うように各部を制御する。
ユーザI/F12は、リモートコントローラからの信号を受光する受光部などにより構成される。ユーザI/F12は、リモートコントローラに対するユーザの操作を検出し、その内容を表す信号をシステムコントローラ11に出力する。
記録媒体制御部13は、記録媒体14に対するコンテンツの記録や、記録媒体14からのコンテンツの読み出しを制御する。記録媒体14は例えばHDD(Hard Disk Drive)であり、コンテンツを記録する。
また、記録媒体制御部13は、図示せぬアンテナからの信号に基づいて、放送されたコンテンツ(3Dコンテンツ)を受信し、記録媒体14に記録させる。記録媒体制御部13は、記録媒体14に記録されているコンテンツの中からユーザにより所定のコンテンツが選択され、その再生が指示された場合、再生が指示されたコンテンツを記録媒体14から再生処理部15に供給する。
再生処理部15は、記録媒体14から供給されたコンテンツに対して、圧縮されているデータを伸張するデコード処理等の再生処理を施す。再生処理部15は、再生処理を施すことによって得られた3D画像のデータ(左目用画像のデータと右目用画像のデータ)と音声データを特徴抽出部18に出力する。
また、再生処理部15は、3D画像のデータをコンテンツ制御部16に出力する。コンテンツの画像にあわせて音声を出力するために用いられる音声データは、図示せぬ回路を介して外部のスピーカ等に出力される。なお、特徴抽出部18に供給され、特徴抽出の対象になる画像データは、3Dコンテンツに含まれる左目用画像のデータと右目用画像のデータのうちの一方であってもよい。また、画像データと音声データのうちのいずれか一方が特徴抽出の対象として用いられるようにしてもよい。
コンテンツ制御部16は、現在の再生位置が番組本編区間の位置であり、3D画像を表示する場合、再生処理部15から供給された3D画像のデータを表示制御部17に出力する。
また、コンテンツ制御部16は、現在の再生位置がCM区間の位置であり、2D画像を表示する場合、3D画像のデータとして再生処理部15から供給された左目用画像のデータと右目用画像のデータのうちの一方を表示制御部17に出力する。
表示制御部17は、コンテンツ制御部16から供給された画像データに基づいて、番組本編区間の画像を3D画像としてTV2に表示させ、CM区間の画像を2D画像としてTV2に表示させる。
特徴抽出部18は、再生処理部15から供給された画像データと音声データの特徴を抽出し、抽出した特徴を表すデータである特徴データをシステムコントローラ11に出力する。例えば、画像データからはシーンチェンジの位置が検出され、音声データからは無音区間の位置が検出される。
信号出力部19は、システムコントローラ11から供給された制御信号をシャッタメガネ3に送信する。TV2に3D画像を表示する場合、左目用画像と右目用画像のそれぞれの表示タイミングにあわせてシャッタメガネ3のシャッタを動作させるための制御信号がシステムコントローラ11から供給される。また、TV2に2D画像を表示する場合、シャッタメガネ3の左目側の透過部と右目側の透過部の特性(シャッタ動作)を同じものにさせるための制御信号が供給される。
信号出力部19から送信された制御信号を受信したシャッタメガネ3においては、左目側の透過部と右目側の透過部のシャッタ動作が制御されたり、それらの特性を同じものにするような制御が行われたりする。左目側の透過部と右目側の透過部の特性が同じものになった場合、TV2に表示される画像は通常の2D画像としてユーザによって認識される。
図4は、シャッタメガネ3の制御の例を示す図である。
コンテンツの再生位置が番組本編区間からCM区間に切り替わった場合、図4Aに示すように、シャッタメガネ3の左右の透過部の特性が同じものになるように、シャッタメガネ3に対して制御信号が送信される。
図4Aの左側の画像は、シャッタメガネ3の左右の透過部の特性が異なる(クローズとオープンのタイミングが異なる)場合のシャッタメガネ3の状態を示している。この状態のとき、左目用画像が左目、右目用画像が右目にそれぞれ届くことになる。また、図4Aの右側の画像は、シャッタメガネ3の左右の透過部の特性が同じ(クローズとオープンのタイミングが同じ)である場合のシャッタメガネ3の状態を示している。この状態のとき、TV2に表示される画像が同時に右目と左目に届くことになる。
なお、左目用画像、右目用画像としてそれぞれ色を替えた画像をユーザに見せるカラーフィルタ方式で3D表示を実現するようにしてもよい。この場合、左目側の透過部が赤、右目側の透過部が青といったように、それぞれの透過部の色を制御可能なメガネが用いられる。
図4Bの左側の画像は、左目側の透過部と右目側の透過部の特性が異なる(色が異なる)場合のメガネの状態を示している。また、図4Bの右側の画像は、左右の透過部の特性が同じ(同じ色)である場合のメガネの状態を示している。再生位置が番組本編区間からCM区間の位置になったときにメガネの特性が図4Bの右側に示す状態に切り替わることにより、ユーザはCM区間の画像を2D画像として見ることができる。
図5は、図3のシステムコントローラ11の構成例を示すブロック図である。
図5に示すように、システムコントローラ11は、CM検出部31と制御部32から構成される。特徴抽出部18から出力された特徴データはCM検出部31に入力される。
CM検出部31は、特徴データに基づいてCM区間を検出する。日本で放送されるテレビCMを考えた場合、15秒の整数倍の時間毎に無音区間を検出できるという特徴がある。例えば、CM検出部31は、特徴データに含まれる無音区間の情報が、そのような15秒の整数倍の時間毎に無音区間が検出されたことを表すようなものである場合、無音区間と無音区間の間をテレビCMの区間として検出する。なお、CM区間の検出の方法は、無音区間を用いた方法に限られるものではなく、画像データから抽出される特徴と音声データから抽出される特徴を用いた方法であれば他の方法であってもよい。
CM検出部31は、検出したCM区間の情報を制御部32に出力する。また、CM検出部31は、CM区間以外の区間を番組本編区間として、その番組本編区間の情報を制御部32に出力する。
制御部32は、コンテンツの再生中、コンテンツの現在の再生位置を監視する。制御部32は、現在の再生位置が番組本編区間の位置である場合、左目用画像のデータと右目用画像のデータを出力するようにコンテンツ制御部16を制御する。また、制御部32は、現在の再生位置がCM区間の位置である場合、例えば左目用画像のデータを出力するようにコンテンツ制御部16を制御する。
なお、制御部32は、コンテンツの再生、表示を制御するとともに、制御信号を信号出力部19に出力してシャッタメガネ3の特性を制御することも行う。
[表示制御装置1の動作]
図6のフローチャートを参照して、表示制御装置1の処理について説明する。
図6のフローチャートを参照して、表示制御装置1の処理について説明する。
ステップS1において、システムコントローラ11は、ユーザによる操作に応じて動作モードを設定する。例えば、システムコントローラ11は、記録媒体14に記録されているコンテンツの再生が指示された場合、動作モードとして再生モードを設定し、放送中のコンテンツの録画が指示された場合、動作モードとして録画モードを設定する。
ステップS2において、システムコントローラ11は、設定しているモードが再生モードであるか否かを判定し、再生モードではないと判定した場合、いま設定されている動作モードに応じた処理を行う。
一方、設定しているモードが再生モードであるとステップS2において判定した場合、ステップS3において、システムコントローラ11は、ユーザにより選択されたコンテンツの読み出しを記録媒体制御部13に行わせる。記録媒体制御部13により読み出された再生対象のコンテンツは再生処理部15に供給される。
ステップS4において、システムコントローラ11の制御部32は、各部を制御し、再生対象のコンテンツの3D再生を行う。再生処理部15における再生処理によって得られた3D画像のデータは、コンテンツ制御部16を経由して表示制御部17に供給され、コンテンツの画像を3D画像として表示するために用いられる。また、再生処理部15における再生処理によって得られた画像データと音声データは特徴抽出部18にも供給される。
ステップS5において、特徴抽出部18は、画像データと音声データの特徴を抽出し、特徴データをシステムコントローラ11に出力する。システムコントローラ11のCM検出部31においては、CM区間の検出が行われ、その情報が制御部32に供給される。
ステップS6において、制御部32は、現在の再生位置がCM区間の位置であるか否かを判定する。
現在の再生位置がCM区間の位置であるとステップS6において判定した場合、ステップS7において、制御部32は、各部を制御し、コンテンツの再生方式を2D再生に切り替える。すなわち、再生処理部15における再生処理によって得られた左目用画像のデータと右目用画像のデータのうちの例えば左目用画像のデータがコンテンツ制御部16により選択され、表示制御部17に出力される。コンテンツ制御部16から供給されたデータに基づいて表示制御部17により画像の表示が行われることによって、TV2には、CM区間の画像が2D画像として表示される。2D再生は、CM区間が終了するまで続けられる。現在の再生位置がCM区間の位置ではないとステップS6において判定された場合、ステップS7はスキップされる。
ステップS8において、システムコントローラ11は、コンテンツの再生を終了するか否かを判定し、終了しないと判定した場合、ステップS9において、再生するコンテンツの変更がユーザにより指示されたか否かを判定する。
コンテンツの変更が指示されていないとステップS9において判定した場合、システムコントローラ11は、ステップS4以降の処理を行う。
変更が指示されたとステップS9において判定した場合、ステップS10において、システムコントローラ11は、再生処理部15を制御してコンテンツの再生を停止させる。その後、ステップS3に戻り、それ以降の処理が繰り返される。
コンテンツの再生を終了することがユーザにより指示されたことから、または、コンテンツを最後まで再生したことから、コンテンツの再生を終了するとステップS8において判定された場合、処理は終了される。
以上の処理により、ユーザの疲労感を軽減しつつ、3Dコンテンツを効果的に視聴させることができる。
[変形例]
以上においては、再生位置が番組本編区間であるかCM区間であるか、すなわち、シーンに応じて再生方式を切り替えるものとしたが、3Dコンテンツの再生開始からの時間によって再生方式を切り替えるようにしてもよい。
以上においては、再生位置が番組本編区間であるかCM区間であるか、すなわち、シーンに応じて再生方式を切り替えるものとしたが、3Dコンテンツの再生開始からの時間によって再生方式を切り替えるようにしてもよい。
図7は、表示制御装置1の他の構成例を示すブロック図である。
図7に示す構成のうち、図3に示す構成と同じ構成には同じ符号を付してある。重複する説明については適宜省略する。図7に示す構成は、図3の特徴抽出部18に替えて、時間計測部41が設けられている点で図3の構成と異なる。
システムコントローラ11は、例えばユーザによる指示に応じて、記録媒体14に記録されている所定の3Dコンテンツの3D再生を行い、TV2に3D画像を表示させる。システムコントローラ11は、時間計測部41を制御し、3D再生を行っている時間である3D再生時間の計測を開始させる。
システムコントローラ11は、3D再生時間が、1時間や2時間などの、あらかじめ設定されている時間を経過したと判定した場合、再生方式を2D再生に切り替え、2D画像を表示させる。
これにより、長時間にわたって3D画像を見続けることを強制的に終了させることができ、ユーザの疲労感を軽減させることができる。
[動作例1]
図8のフローチャートを参照して、時間に応じて再生方式を切り替える図7の表示制御装置1の処理について説明する。
図8のフローチャートを参照して、時間に応じて再生方式を切り替える図7の表示制御装置1の処理について説明する。
ステップS21において、システムコントローラ11は、ユーザによる操作に応じて動作モードを設定する。
例えば、システムコントローラ11は、記録媒体14に記録されているコンテンツの再生が指示された場合、動作モードとして再生モードを設定し、放送中のコンテンツの録画が指示された場合、動作モードとして録画モードを設定する。また、システムコントローラ11は、再生モードのうち、3D再生時間が所定の時間を経過した後に再生方式を2D再生に自動的に切り替えるモードである表示自動制御モードを設定することが指示された場合、表示自動制御モードを設定する。
ステップS22において、システムコントローラ11は、設定しているモードが表示自動制御モードであるか否かを判定し、表示自動制御モードではないと判定した場合、いま設定されている動作モードに応じた処理を行う。例えば、通常再生モード(表示自動制御モードではない再生モード)が設定されている場合、3D再生が開始され、3D画像の表示が時間的な制限無く続けられる。
一方、設定しているモードが表示自動制御モードであるとステップS22において判定した場合、ステップS23において、システムコントローラ11は、ユーザにより選択されたコンテンツの読み出しを記録媒体制御部13に行わせる。
ステップS24において、システムコントローラ11は、コンテンツの再生を開始することが指示されたか否かを判定する。
コンテンツの再生を開始することが指示されていないとステップS24において判定した場合、ステップS25において、システムコントローラ11は、処理を終了するか否かを判定し、終了すると判定した場合、処理を終了させる。一方、処理を終了しないとステップS25において判定した場合、システムコントローラ11は、ステップS24以降の処理を繰り返す。
コンテンツの再生を開始することが指示されたとステップS24において判定した場合、ステップS26において、システムコントローラ11は、時間計測部41が計測する3D再生時間tの初期設定(t=0)を行う。
ステップS27において、システムコントローラ11の制御部32は、各部を制御し、再生対象のコンテンツの3D再生を行う。
ステップS28において、システムコントローラ11は、時間計測部41を制御し、3D再生時間tをインクリメントさせる。
ステップS29において、システムコントローラ11は、3D再生時間tが、閾値としてあらかじめ設定されている時間である警告時間Thを超えたか否かを判定する。警告時間Thとして、例えば1時間や2時間などの時間が設定される。
3D再生時間tが警告時間Thを超えていないとステップS29において判定した場合、ステップS30において、システムコントローラ11は、コンテンツの再生を終了するか否かを判定する。
システムコントローラ11は、コンテンツの再生を終了するとステップS30において判定した場合、処理を終了させ、処理を終了しないとステップS30において判定した場合、ステップS27以降の処理を繰り返す。
一方、ステップS29において、3D再生時間tが警告時間Thを超えたと判定した場合、ステップS31において、システムコントローラ11は、表示制御部17を制御し、警告をTV2に表示させる。例えば、3D再生を終了することを通知するメッセージがTV2に表示される。
ステップS32において、システムコントローラ11は、再生方式を2D再生に切り替え、ステップS33において、2D再生を行う。システムコントローラ11による制御に従って、コンテンツ制御部16から表示制御部17に対して例えば左目用画像のデータだけが供給され、それに基づいてCM区間の画像が2D画像として表示される。
ステップS34において、システムコントローラ11は、コンテンツの再生を終了するか否かを判定し、終了しないと判定した場合、ステップS33に戻り、コンテンツの2D再生を繰り返す。
コンテンツの再生を終了することがユーザにより指示されたことから、または、コンテンツを最後まで再生したことから、コンテンツの再生を終了するとステップS34において判定された場合、処理は終了される。
以上の処理により、一定時間以上、3D画像を連続して視聴してしまうことを防止することができ、ユーザの疲労感を軽減させることが可能になる。
[動作例2]
図9のフローチャートを参照して、時間に応じて再生方式を切り替える図7の表示制御装置1の他の処理について説明する。
図9のフローチャートを参照して、時間に応じて再生方式を切り替える図7の表示制御装置1の他の処理について説明する。
この処理においては、3D再生を終了することの警告が表示されたとき、ユーザは、所定の時間だけ3D再生の時間を延長することができるようになされている。図9の処理は、そのような延長の処理が追加されている点を除いて、基本的に、図8を参照して説明した処理と同様の処理である。
ステップS41において、システムコントローラ11は、ユーザによる操作に応じて、動作モードを設定するとともに、3D再生を開始してから警告が表示されるまでの時間である警告時間Th(Th=t0)を設定する。
ステップS42において、システムコントローラ11は、設定しているモードが表示自動制御モードであるか否かを判定し、表示自動制御モードではないと判定した場合、いま設定されている動作モードに応じた処理を行う。
一方、設定しているモードが表示自動制御モードであるとステップS42において判定した場合、ステップS43において、システムコントローラ11は、ユーザにより選択されたコンテンツの読み出しを記録媒体制御部13に行わせる。
ステップS44において、システムコントローラ11は、コンテンツの再生を開始することが指示されたか否かを判定する。
コンテンツの再生を開始することが指示されていないとステップS44において判定した場合、ステップS45において、システムコントローラ11は、処理を終了するか否かを判定し、終了すると判定した場合、処理を終了させる。一方、処理を終了しないとステップS45において判定した場合、システムコントローラ11は、ステップS44以降の処理を繰り返す。
コンテンツの再生を開始することが指示されたとステップS44において判定した場合、ステップS46において、システムコントローラ11は、時間計測部41が計測する3D再生時間tの初期設定(t=0)を行う。
ステップS47において、システムコントローラ11の制御部32は、各部を制御し、再生対象のコンテンツの3D再生を行う。
ステップS48において、システムコントローラ11は、時間計測部41を制御し、3D再生時間tをインクリメントさせる。
ステップS49において、システムコントローラ11は、3D再生時間tが、いま設定されている警告時間Thを超えたか否かを判定する。
3D再生時間tが警告時間Thを超えていないとステップS49において判定した場合、ステップS50において、システムコントローラ11は、コンテンツの再生を終了するか否かを判定する。
システムコントローラ11は、コンテンツの再生を終了するとステップS50において判定した場合、処理を終了させ、処理を終了しないとステップS50において判定した場合、ステップS47以降の処理を繰り返す。
一方、ステップS49において、3D再生時間tが警告時間Thを超えたと判定した場合、ステップS51において、システムコントローラ11は、表示制御部17を制御し、警告をTV2に表示させる。
ここでは、例えば、3D再生を開始してからの時間が一定の時間を経過したことをユーザに通知するメッセージと共に、警告時間を更新して3D再生時間を延長するか否かをユーザに問い合わせるメッセージがTV2に表示される。ユーザは、リモートコントローラを操作するなどして、3D再生を終了させて2D再生を行わせるか、警告時間を更新して3D再生を続行させるかを選択することができる。
ステップS52において、システムコントローラ11は、警告時間を更新することが選択されたか否かを判定する。
警告時間を更新することが選択されていないとステップS52において判定した場合、ステップS53において、システムコントローラ11は、再生方式を2D再生に切り替える。
ステップS54において、システムコントローラ11は2D再生を行う。システムコントローラ11による制御に従って、コンテンツ制御部16から表示制御部17に対して例えば左目用画像のデータだけが供給され、それに基づいて2D画像の表示が行われる。
ステップS55において、システムコントローラ11は、コンテンツの再生を終了するか否かを判定し、終了しないと判定した場合、ステップS54に戻り、コンテンツの2D再生を繰り返す。
コンテンツの再生を終了することがユーザにより指示されたことから、または、コンテンツを最後まで再生したことから、コンテンツの2D再生を終了するとステップS55において判定された場合、処理は終了される。
一方、警告時間を更新することが選択されたとステップS52において判定した場合、ステップS56において、システムコントローラ11は、警告時間Thに所定の時間である時間Taを設定する。その後、ステップS46以降の処理が繰り返される。例えば、ステップS41で設定された警告時間Thより短い時間がステップS56において再設定される。
以上の処理により、一定時間以上、3D画像を連続して視聴してしまうことを防止することができ、ユーザの疲労感を軽減させることが可能になる。また、ユーザは、一定の時間だけ3D画像を連続して視聴していた場合であっても、自らの選択に応じて、3D再生を続行するか否かを選択することが可能になる。
[再生の対象となるコンテンツの例]
以上においては、再生対象になるコンテンツが、左目用画像のデータと右目用画像のデータがあらかじめ用意されている3Dコンテンツであるものとしたが、2Dコンテンツが再生対象として用いられるようにしてもよい。
以上においては、再生対象になるコンテンツが、左目用画像のデータと右目用画像のデータがあらかじめ用意されている3Dコンテンツであるものとしたが、2Dコンテンツが再生対象として用いられるようにしてもよい。
この場合、番組本編区間においては、2Dコンテンツに基づいて生成された3Dコンテンツを用いて3D再生が行われ、CM区間においては、再生対象の2Dコンテンツを用いて2D再生が行われる。
コンテンツの再生位置が番組本編区間であるときに行われる、2Dコンテンツの3Dコンテンツへの変換について説明する。2Dコンテンツの3Dコンテンツへの変換は、例えばコンテンツ制御部16において行われる。
図10は、コンテンツ制御部16の構成例を示すブロック図である。
2D画像のデータを3D画像のデータに変換することについては、例えば、特開平7−222203号公報に記載されている。図10に示す構成は、基本的に、当該公報に記載されているものと同様の構成である。
図10に示すように、コンテンツ制御部16は、動きベクトル検出部51とメモリ52から構成される。2Dコンテンツの再生処理が行われることによって再生処理部15から出力された2D画像のデータは、動きベクトル検出部51とメモリ52に入力されるとともに、表示制御部17にそのまま出力される。
コンテンツ制御部16からそのまま出力された2D画像のデータは、コンテンツの再生位置がCM区間の位置である場合、2D画像を表示するために表示制御部17により用いられる。また、コンテンツ制御部16からそのまま出力された2D画像のデータは、コンテンツの再生位置が番組本編区間の位置である場合、3D画像を表示するための例えば左目用画像のデータとして表示制御部17により用いられる。
動きベクトル検出部51は、入力された画像データに基づいて、フレーム間の被写体の動きを表す動きベクトルを検出し、システムコントローラ11に出力する。システムコントローラ11においては、動きベクトル検出部51により検出された動きベクトルの例えば水平方向の成分の大きさに応じて、メモリ52の遅延量を制御することが行われる。例えば、基準となる動きベクトルの水平方向の成分の大きさV0に対して遅延量T0が対応付けられている。検出された動きベクトルの水平方向の成分の大きさがV0より大きいV1のとき、T0より少ないT1が遅延量として選択され、メモリ52の遅延量が制御される。また、検出された動きベクトルの水平方向の成分の大きさがV0より小さいV2のとき、T0より多いT2が遅延量として選択され、メモリ52の遅延量が制御される。
メモリ52は、3D画像を表示する場合、入力された画像データを一時的に記憶し、システムコントローラ11から供給された遅延量の分だけ、遅延させて出力する。メモリ52から出力された画像データは、3D画像を表示する場合、右目用画像のデータとして用いられる。このような構成を有するコンテンツ制御部16から3D画像として出力された左目用画像と右目用画像を見たユーザは、左右の画像の時間差により、被写体を立体的に感じることになる。左右の画像の時間差により被写体を立体的に感じる現象と似た現象として、Mach-Dvorak現象が知られている。
図11は、コンテンツ制御部16の他の構成例を示すブロック図である。
この例においては、コンテンツ制御部16には動きベクトルを検出する構成は設けられず、メモリ52の遅延量を制御するための基準となる動きベクトルの情報が、再生処理部15からシステムコントローラ11に供給される。再生処理部15に入力される画像データの圧縮方式がMPEG(Moving Picture Experts Group)2やH.264/AVCなどの場合、画像データには動きベクトルの情報が含まれている。
再生処理部15は、入力された画像データに含まれる動きベクトルの情報をシステムコントローラ11に出力し、再生処理を施すことによって得られた2D画像のデータをコンテンツ制御部16に出力する。システムコントローラ11においては、動きベクトルに基づいて遅延量が決定され、決定された遅延量を表す情報がメモリ52に供給される。
再生処理部15から出力された2D画像のデータは、メモリ52に入力されるとともに、表示制御部17にそのまま出力される。コンテンツ制御部16からそのまま出力された2D画像のデータは、CM区間において2D画像を表示する場合に用いられる。また、番組本編区間において3D画像を表示する場合、例えば左目用画像のデータとして用いられる。
メモリ52は、3D画像を表示する場合、入力された画像データを一時的に記憶し、システムコントローラ11から供給された遅延量の分だけ、遅延させて出力する。メモリ52から出力された画像データは、3D画像を表示する場合、例えば右目用画像のデータとして用いられる。
このように、再生対象のコンテンツが2Dコンテンツである場合であっても、2Dコンテンツに基づいて左目用画像のデータと右目用画像のデータとを生成することができ、それに基づいて、番組本編区間の画像を3D画像として表示させることが可能になる。また、番組本編区間の画像を3D画像として表示させ、CM区間の画像を2D画像として表示させるといったように、再生中のシーンに応じて画像の再生方式を切り替えることが可能になる。
なお、コンテンツ制御部16が図10、図11の構成を有している場合、表示制御装置1においては、遅延量を変えることで左目用画像と右目用画像の視差を制御し、3D画像を見たユーザが感じる立体感を変えることが可能になる。
この場合、番組本編区間の画像を、被写体が大きく飛び出して見える3D画像として表示させ、CM区間の画像を、被写体が少しだけ飛び出して見える3D画像として表示させるといったように、シーンに応じて3D画像の立体感を切り替えるようにしてもよい。これによっても、ユーザはCM区間において目を休めることができ、疲労感を軽減することができる。
また、図10、図11における動きベクトル量vと視差パラメータ量(遅延量)dとの関係が下式(1)で表される場合、その係数kの値を再生時間に応じて制御することで、3D再生時間が長くなるにつれて立体感を小さくするようにしてもよい。
d=kv ・・・ (1)
d=kv ・・・ (1)
図1においては、表示制御装置1がTV2とは別の筐体の装置として用意され、現在の再生位置に応じて出力する画像データを切り替える出力装置として機能するものとしたが、表示制御装置1がTV2内に設けられるようにしてもよい。
また、図1においては、現在の再生位置が番組本編区間であるかCM区間であるかに応じて、出力する画像データを表示制御装置1が切り替えるものとしたが、画像データの切り替えがTV2側で行われるようにしてもよい。
図12は、3D画像表示システムの他の構成例を示す図である。
図12の3D画像表示システムは、送信装置61と表示制御装置62から構成される。表示制御装置62は、例えばTV2の内部に設けられる装置であり、HDMI規格のケーブルを介して、TV2とは別の筐体の装置として外部に設けられる送信装置61と通信を行う。
図12の3D画像表示システムにおいては、CM区間の検出が送信装置61により行われ、CM区間の情報が3Dコンテンツとともに送信装置61から表示制御装置62に送信される。表示制御装置62においては、送信装置61から送信されてきた3Dコンテンツが再生され、現在の再生位置が番組本編区間であるかCM区間であるかに応じて画像の表示が切り替えられる。
図12に示すように、送信装置61は、システムコントローラ71、ユーザI/F72、記録媒体制御部73、記録媒体74、再生処理部75、特徴抽出部76、および送信部77から構成される。ユーザI/F72、記録媒体制御部73、記録媒体74、再生処理部75、特徴抽出部76は、それぞれ、図3のユーザI/F12、記録媒体制御部13、記録媒体14、再生処理部15、および特徴抽出部18に対応する。
システムコントローラ71は、ユーザI/F72から供給されるユーザの操作の内容を表す信号に従って、送信装置61の全体の動作を制御する。
例えば、システムコントローラ71は、特徴抽出部76から供給された特徴データに基づいて、再生の対象とする番組のCM区間を検出する。システムコントローラ71は、検出したCM区間の情報を送信部77に出力する。
ユーザI/F72は、再生の対象とする番組の選択操作などの、リモートコントローラに対するユーザの操作を検出し、その内容を表す信号をシステムコントローラ71に出力する。
記録媒体制御部73は、図示せぬアンテナからの信号に基づいて、放送された3Dコンテンツを受信し、記録媒体74に記録させる。記録媒体制御部73は、記録媒体74に記録されている3Dコンテンツの再生が指示された場合、再生の対象とする3Dコンテンツを再生処理部75に出力させる。また、記録媒体制御部73は、再生の対象とする3Dコンテンツを送信部77に出力する。
再生処理部75は、再生の対象とする3Dコンテンツに対して、圧縮されているデータを伸張するデコード処理等の再生処理を施す。再生処理部75は、再生処理を施すことによって得られた3D画像のデータ(左目用画像のデータと右目用画像のデータ)と音声データを特徴抽出部76に出力する。なお、特徴抽出部76に供給され、特徴抽出の対象になる画像データは、3Dコンテンツに含まれる左目用画像のデータと右目用画像のデータのうちの一方であってもよい。また、画像データと音声データのうちのいずれか一方が特徴抽出の対象として用いられるようにしてもよい。
特徴抽出部76は、再生処理部75から供給された画像データと音声データの特徴を抽出し、抽出した特徴を表すデータである特徴データをシステムコントローラ71に出力する。例えば、画像データからはシーンチェンジの位置が検出され、音声データからは無音区間の位置が検出される。
送信部77は、記録媒体制御部73から供給された3DコンテンツをHDMI規格のケーブルを介して表示制御装置62に送信する。また、送信部77は、システムコントローラ71から供給されたCM区間の情報を、HDMI規格のversion1.4で規定されるHDMI Vender Specific InfoFrame Packetなどに格納して表示制御装置62に送信する。
HDMI Vender Specific InfoFrame Packetは、各ベンダーが規定した制御コマンドの送受信などに用いられるパケットであり、送信側の機器から受信側の機器に対して、HDMIのCEC(Consumer Electronics Control)線を介して送信される。CM区間の情報には、CM区間の位置(時刻)を表す情報が含まれる。なお、CM区間の情報ではなく、番組本編区間の情報が送信されるようにしてもよい。
表示制御装置62は、システムコントローラ81、受信部82、再生処理部83、コンテンツ制御部84、表示制御部85、ディスプレイ86、および信号出力部87から構成される。再生処理部83、コンテンツ制御部84、表示制御部85、信号出力部87は、それぞれ、図3の再生処理部15、コンテンツ制御部16、表示制御部17、信号出力部19に対応する。
システムコントローラ81は、表示制御装置62の全体の動作を制御し、送信装置61から送信されてきた3Dコンテンツの再生を行う。また、システムコントローラ81は、3Dコンテンツの再生中、現在の再生位置が番組本編区間であるかCM区間であるかを送信装置61から送信されてきたCM区間の情報に基づいて判定する。システムコントローラ81は、番組本編区間においては3D再生を行い、CM区間においては2D再生を行うように各部を制御する。
受信部82は、送信装置61から送信されてきた3DコンテンツとCM区間の情報を受信し、3Dコンテンツを再生処理部83に、CM区間の情報をシステムコントローラ81にそれぞれ出力する。
再生処理部83は、受信部82から供給された3Dコンテンツに対して、圧縮されているデータを伸張するデコード処理等の再生処理を施す。再生処理部83は、再生処理を施すことによって得られた3D画像のデータをコンテンツ制御部84に出力する。コンテンツの画像にあわせて音声を出力するために用いられる音声データは、図示せぬ回路を介して外部のスピーカ等に出力される。
コンテンツ制御部84は、現在の再生位置が番組本編区間の位置であり、3D画像を表示する場合、再生処理部83から供給された3D画像のデータを表示制御部85に出力する。
また、コンテンツ制御部84は、現在の再生位置がCM区間の位置であり、2D画像を表示する場合、3D画像のデータとして再生処理部83から供給された左目用画像のデータと右目用画像のデータのうちの一方を表示制御部85に出力する。
表示制御部85は、コンテンツ制御部84から供給された画像データに基づいて、番組本編区間の画像を3D画像としてディスプレイ86に表示させ、CM区間の画像を2D画像としてディスプレイ86に表示させる。
信号出力部87は、制御信号を送信し、図4を参照して説明したようにしてシャッタメガネ3のシャッタ動作を制御する。
このような構成を有する3D画像表示システムにおいても、番組本編区間の画像を3D画像として表示し、CM区間の画像を2D画像として表示することが可能になる。
以上においては、3D画像の視聴方式がメガネを用いた方式であるものとしたが、裸眼方式であってもよい。裸眼方式の場合であっても、番組本編区間においてはユーザが3D画像を見ることができるように画像の表示が制御され、CM区間においてはユーザが2D画像を見ることができるように画像の表示が制御される。
また、以上においては、2D画像に基づいて3D画像を生成する場合、1枚の画像を左目用画像とし、その画像を遅延させた画像を右目用画像とする場合について説明したが、1枚の画像を左目用画像とし、その画像に映る被写体の位置をずらした画像を右目用画像として用いるようにしてもよい。
上述した一連の処理は、ハードウェアにより実行することもできるし、ソフトウェアにより実行することもできる。一連の処理をソフトウェアにより実行する場合には、そのソフトウェアを構成するプログラムが、専用のハードウェアに組み込まれているコンピュータ、または汎用のパーソナルコンピュータなどに、プログラム記録媒体からインストールされる。
図13は、上述した一連の処理をプログラムにより実行するコンピュータのハードウェアの構成例を示すブロック図である。
CPU(Central Processing Unit)101、ROM(Read Only Memory)102、RAM(Random Access Memory)103は、バス104により相互に接続されている。
バス104には、さらに、入出力インタフェース105が接続されている。入出力インタフェース105には、キーボード、マウスなどよりなる入力部106、ディスプレイ、スピーカなどよりなる出力部107が接続される。また、入出力インタフェース105には、ハードディスクや不揮発性のメモリなどよりなる記憶部108、ネットワークインタフェースなどよりなる通信部109、リムーバブルメディア111を駆動するドライブ110が接続される。
以上のように構成されるコンピュータでは、CPU101が、例えば、記憶部108に記憶されているプログラムを入出力インタフェース105及びバス104を介してRAM103にロードして実行することにより、上述した一連の処理が行われる。
CPU101が実行するプログラムは、例えばリムーバブルメディア111に記録して、あるいは、ローカルエリアネットワーク、インターネット、デジタル放送といった、有線または無線の伝送媒体を介して提供され、記憶部108にインストールされる。
なお、コンピュータが実行するプログラムは、本明細書で説明する順序に沿って時系列に処理が行われるプログラムであっても良いし、並列に、あるいは呼び出しが行われたとき等の必要なタイミングで処理が行われるプログラムであっても良い。
本発明の実施の形態は、上述した実施の形態に限定されるものではなく、本発明の要旨を逸脱しない範囲において種々の変更が可能である。
1 表示制御装置, 2 TV, 3 シャッタメガネ, 11 システムコントローラ, 12 ユーザI/F, 13 記録媒体制御部, 14 記録媒体, 15 再生処理部, 16 コンテンツ制御部, 17 表示制御部, 18 特徴抽出部, 19 信号出力部, 31 CM検出部, 32 制御部
Claims (9)
- コンテンツの画像データと音声データのうちの少なくとも一方の特徴を抽出する抽出手段と、
前記抽出手段により抽出された特徴に基づいて、前記コンテンツの所定のシーンを検出する検出手段と、
前記コンテンツを再生する再生手段と、
前記コンテンツの再生位置が、前記検出手段により検出された前記所定のシーンの区間の位置である場合、前記コンテンツの画像を2次元画像として認識させるように表示し、前記コンテンツの再生位置が前記所定のシーンの区間以外の位置である場合、前記コンテンツの画像を3次元画像として認識させるように表示する表示制御手段と
を備える表示制御装置。 - 再生対象として入力された前記コンテンツが、画像データとして2次元画像を表示するための画像データのみを含むコンテンツである場合、入力された前記コンテンツを、3次元画像を表示するための、相互に視差を含む左目用画像のデータと右目用画像のデータを含むコンテンツに変換する変換手段をさらに備え、
前記表示制御手段は、前記所定のシーンの区間以外の前記コンテンツの画像を、前記変換手段により変換された前記コンテンツに基づいて表示し、前記所定のシーンの前記コンテンツの画像を、入力された前記コンテンツに基づいて表示する
請求項1に記載の表示制御装置。 - 再生対象として入力された前記コンテンツが、画像データとして相互に視差を含む左目用画像のデータと右目用画像のデータを含むコンテンツである場合、
前記表示制御手段は、前記所定のシーンの区間以外の前記コンテンツの画像を、入力された前記コンテンツに基づいて表示し、前記所定のシーンの前記コンテンツの画像を、左目用画像のデータと右目用画像のデータのうちの一方に基づいて表示する
請求項1に記載の表示制御装置。 - 前記コンテンツはテレビジョン番組のデータであり、前記所定のシーンの区間はテレビジョン番組に含まれるCM区間である
請求項1に記載の表示制御装置。 - コンテンツの画像データと音声データのうちの少なくとも一方の特徴を抽出し、
抽出した特徴に基づいて、前記コンテンツの所定のシーンを検出し、
前記コンテンツを再生し、
前記コンテンツの再生位置が、検出した前記所定のシーンの区間の位置である場合、前記コンテンツの画像を2次元画像として認識させるように表示し、前記コンテンツの再生位置が前記所定のシーンの区間以外の位置である場合、前記コンテンツの画像を3次元画像として認識させるように表示する
ステップを含む表示制御方法。 - コンテンツの画像データと音声データのうちの少なくとも一方の特徴を抽出し、
抽出した特徴に基づいて、前記コンテンツの所定のシーンを検出し、
前記コンテンツを再生し、
前記コンテンツの再生位置が、検出した前記所定のシーンの区間の位置である場合、前記コンテンツの画像を2次元画像として認識させるように表示し、前記コンテンツの再生位置が前記所定のシーンの区間以外の位置である場合、前記コンテンツの画像を3次元画像として認識させるように表示する
ステップを含むプログラム。 - コンテンツの画像データと音声データのうちの少なくとも一方の特徴を抽出する抽出手段と、
前記抽出手段により抽出された特徴に基づいて、前記コンテンツの所定のシーンを検出する検出手段と、
前記コンテンツを再生する再生手段と、
前記コンテンツの再生位置が、前記検出手段により検出された前記所定のシーンの区間の位置である場合、前記コンテンツの画像を2次元画像として出力し、前記コンテンツの再生位置が前記所定のシーンの区間以外の位置である場合、前記コンテンツの画像を3次元画像として出力する出力手段と
を備える出力装置。 - 相互に視差を含む左目用の画像データと右目用の画像データを含むコンテンツの画像データと音声データのうちの少なくとも一方の特徴を抽出する抽出手段と、
前記抽出手段により抽出された特徴に基づいて、前記コンテンツの所定のシーンを検出する検出手段と、
検出した前記所定のシーンに関するデータを、前記コンテンツの画像データとともに送信する送信手段と
を備える送信装置。 - 少なくとも画像データを含むコンテンツのデータを受信するとともに、前記コンテンツの画像データと音声データのうちの少なくとも一方の特徴に基づいて検出された所定のシーンに関するデータを受信する受信手段と、
前記コンテンツを再生する再生手段と、
前記コンテンツの再生位置が、前記所定のシーンの区間の位置である場合、前記コンテンツの画像を2次元画像として認識させるように表示し、前記コンテンツの再生位置が前記所定のシーンの区間以外の位置である場合、前記コンテンツの画像を3次元画像として認識させるように表示する表示制御手段と
を備える表示制御装置。
Priority Applications (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2009254958A JP2011101230A (ja) | 2009-11-06 | 2009-11-06 | 表示制御装置、表示制御方法、プログラム、出力装置、および送信装置 |
| US12/907,339 US8610763B2 (en) | 2009-11-06 | 2010-10-19 | Display controller, display control method, program, output device, and transmitter |
| CN201010532293XA CN102055999A (zh) | 2009-11-06 | 2010-11-02 | 显示控制器、显示控制方法、程序、输出设备和发送器 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2009254958A JP2011101230A (ja) | 2009-11-06 | 2009-11-06 | 表示制御装置、表示制御方法、プログラム、出力装置、および送信装置 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2011101230A true JP2011101230A (ja) | 2011-05-19 |
Family
ID=43959856
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2009254958A Withdrawn JP2011101230A (ja) | 2009-11-06 | 2009-11-06 | 表示制御装置、表示制御方法、プログラム、出力装置、および送信装置 |
Country Status (3)
| Country | Link |
|---|---|
| US (1) | US8610763B2 (ja) |
| JP (1) | JP2011101230A (ja) |
| CN (1) | CN102055999A (ja) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2012216971A (ja) * | 2011-03-31 | 2012-11-08 | Toshiba Corp | 電子機器、映像データの表示制御方法、およびプログラム |
Families Citing this family (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2012001992A1 (ja) * | 2010-07-02 | 2012-01-05 | パナソニック株式会社 | 映像信号変換装置、映像信号変換方法 |
| JP2012120057A (ja) * | 2010-12-02 | 2012-06-21 | Sony Corp | 画像処理装置、および画像処理方法、並びにプログラム |
| JP2012257022A (ja) * | 2011-06-08 | 2012-12-27 | Sony Corp | 画像処理装置および方法、並びにプログラム |
| CN102984529A (zh) * | 2011-09-05 | 2013-03-20 | 宏碁股份有限公司 | 眼镜式立体显示器及其显示方法 |
| JP5978573B2 (ja) * | 2011-09-06 | 2016-08-24 | ソニー株式会社 | 映像信号処理装置および映像信号処理方法 |
| KR101430985B1 (ko) * | 2013-02-20 | 2014-09-18 | 주식회사 카몬 | 2d-3d 복합 차원 콘텐츠 파일을 사용하는 복합 차원 콘텐츠 서비스 제공 시스템, 그 서비스 제공 방법 |
| KR102582841B1 (ko) * | 2016-07-07 | 2023-09-27 | 삼성디스플레이 주식회사 | 표시 장치 |
| TWI808670B (zh) * | 2022-03-07 | 2023-07-11 | 華碩電腦股份有限公司 | 視覺化顯示音訊的方法及其系統 |
Family Cites Families (15)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH07222203A (ja) | 1994-02-04 | 1995-08-18 | Sanyo Electric Co Ltd | 3次元映像ソフト変換方式 |
| JPH10224825A (ja) * | 1997-02-10 | 1998-08-21 | Canon Inc | 画像表示システム及び該システムにおける画像表示装置及び情報処理装置及びそれらの制御方法及び記憶媒体 |
| JP4149037B2 (ja) * | 1998-06-04 | 2008-09-10 | オリンパス株式会社 | 映像システム |
| TW521519B (en) * | 1999-11-26 | 2003-02-21 | Sanyo Electric Co | Apparatus and method for converting a two dimensional image to a three dimensional image |
| US8369607B2 (en) * | 2002-03-27 | 2013-02-05 | Sanyo Electric Co., Ltd. | Method and apparatus for processing three-dimensional images |
| WO2003092276A1 (en) * | 2002-04-25 | 2003-11-06 | Sony Corporation | Image processing apparatus, image processing method, and image processing program |
| JP2004040445A (ja) * | 2002-07-03 | 2004-02-05 | Sharp Corp | 3d表示機能を備える携帯機器、及び3d変換プログラム |
| JP4467574B2 (ja) * | 2004-08-18 | 2010-05-26 | シャープ株式会社 | 画像データ表示装置 |
| JP2006208407A (ja) | 2005-01-24 | 2006-08-10 | Olympus Medical Systems Corp | 立体画像観察用顕微鏡システム |
| JP2007027846A (ja) * | 2005-07-12 | 2007-02-01 | Oki Electric Ind Co Ltd | 動画再生システム及び動画再生方法 |
| JP4687515B2 (ja) * | 2006-03-13 | 2011-05-25 | セイコーエプソン株式会社 | 動画像表示装置および動画像表示方法 |
| US8466954B2 (en) * | 2006-04-03 | 2013-06-18 | Sony Computer Entertainment Inc. | Screen sharing method and apparatus |
| KR100893616B1 (ko) * | 2006-04-17 | 2009-04-20 | 삼성모바일디스플레이주식회사 | 전자 영상 기기, 2d/3d 영상 표시 장치 및 그 구동방법 |
| JP2008219788A (ja) * | 2007-03-07 | 2008-09-18 | Toshiba Corp | 立体画像表示装置、方法およびプログラム |
| CN102027749B (zh) * | 2008-11-18 | 2014-02-19 | 松下电器产业株式会社 | 考虑特殊再现的再现装置、集成电路、再现方法 |
-
2009
- 2009-11-06 JP JP2009254958A patent/JP2011101230A/ja not_active Withdrawn
-
2010
- 2010-10-19 US US12/907,339 patent/US8610763B2/en not_active Expired - Fee Related
- 2010-11-02 CN CN201010532293XA patent/CN102055999A/zh active Pending
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2012216971A (ja) * | 2011-03-31 | 2012-11-08 | Toshiba Corp | 電子機器、映像データの表示制御方法、およびプログラム |
Also Published As
| Publication number | Publication date |
|---|---|
| CN102055999A (zh) | 2011-05-11 |
| US20110109732A1 (en) | 2011-05-12 |
| US8610763B2 (en) | 2013-12-17 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP4772928B2 (ja) | 映像再生装置 | |
| JP4742174B1 (ja) | 3次元映像再生方法、および3次元映像再生装置 | |
| JP2011101230A (ja) | 表示制御装置、表示制御方法、プログラム、出力装置、および送信装置 | |
| JP2011109294A (ja) | 情報処理装置、情報処理方法、表示制御装置、表示制御方法、およびプログラム | |
| CN102143369B (zh) | 影像处理装置和影像处理方法 | |
| JP5362843B2 (ja) | 映像システム | |
| JP5387399B2 (ja) | 情報処理装置および情報処理方法 | |
| JP2011101229A (ja) | 表示制御装置、表示制御方法、プログラム、出力装置、および送信装置 | |
| JP2011138354A (ja) | 情報処理装置および情報処理方法 | |
| JP2012019386A (ja) | 再生装置、再生方法、およびプログラム | |
| JP2011114472A (ja) | 情報処理装置、情報処理方法、プログラム、表示制御装置、送信装置、および受信装置 | |
| JP2011216964A (ja) | 表示制御装置、表示制御方法、およびプログラム | |
| JP5550520B2 (ja) | 再生装置及び再生方法 | |
| JP5764895B2 (ja) | 電子機器、再生システム、再生方法、プログラム | |
| CN102196287A (zh) | 再现设备、再现控制方法和程序 | |
| JP5566179B2 (ja) | 立体映像表示装置及び立体映像表示システム | |
| US20120027376A1 (en) | Reproducing apparatus, reproducing method, and program therefor | |
| JP2012019329A (ja) | 記録装置、記録方法、再生装置、再生方法、プログラム、および記録再生装置 | |
| JP2011171862A (ja) | 再生装置、再生方法、およびプログラム | |
| JP5641953B2 (ja) | 電子機器、映像データの生成方法、およびプログラム | |
| JP5586403B2 (ja) | 映像データ送信装置及び映像データ送信方法 | |
| JP2013098878A (ja) | 映像変換装置、映像表示装置、テレビ受像装置、映像変換方法及びコンピュータプログラム | |
| JP2012222425A (ja) | 映像再生装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A300 | Application deemed to be withdrawn because no request for examination was validly filed |
Free format text: JAPANESE INTERMEDIATE CODE: A300 Effective date: 20130108 |