[go: up one dir, main page]

JP2012110068A - 映像送信及び受信方法と装置、及びその伝送ストリーム構造 - Google Patents

映像送信及び受信方法と装置、及びその伝送ストリーム構造 Download PDF

Info

Publication number
JP2012110068A
JP2012110068A JP2012058901A JP2012058901A JP2012110068A JP 2012110068 A JP2012110068 A JP 2012110068A JP 2012058901 A JP2012058901 A JP 2012058901A JP 2012058901 A JP2012058901 A JP 2012058901A JP 2012110068 A JP2012110068 A JP 2012110068A
Authority
JP
Japan
Prior art keywords
video
format
eye image
characteristic parameter
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2012058901A
Other languages
English (en)
Inventor
Pil-Ho Yu
弼 皓 兪
Tae-Hyeun Ha
泰 鉉 河
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of JP2012110068A publication Critical patent/JP2012110068A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/156—Mixing image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/194—Transmission of image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/356—Image reproducers having separate monoscopic and stereoscopic modes
    • H04N13/359—Switching between monoscopic and stereoscopic modes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/21805—Source of audio or video content, e.g. local disk arrays enabling multiple viewpoints, e.g. using a plurality of cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235—Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/23614—Multiplexing of additional data and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/2365—Multiplexing of several video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4347—Demultiplexing of several video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4348—Demultiplexing of additional data and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/816—Monomedia components thereof involving special video data, e.g 3D video
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/204—Image signal generators using stereoscopic image cameras
    • H04N13/239—Image signal generators using stereoscopic image cameras using two 2D image sensors having a relative position equal to or related to the interocular distance
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/204—Image signal generators using stereoscopic image cameras
    • H04N13/243—Image signal generators using stereoscopic image cameras using three or more 2D image sensors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/349—Multi-view displays for displaying three or more geometrical viewpoints without viewer tracking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/361—Reproducing mixed stereoscopic images; Reproducing mixed monoscopic and stereoscopic images, e.g. a stereoscopic image overlay window on a monoscopic image background

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

【課題】 映像送信及び受信方法と装置、及びその伝送ストリーム構造を提供する。
【解決手段】 映像データと、映像データが二次元映像であるか三次元映像であるかについての情報を表す映像特性パラメータとを含む映像信号を入力されてデコーディングするデコーディング部と、デコーディングされた映像信号を入力されて映像特性パラメータを抽出し、これを判断する映像特性パラメータ検出部と、映像特性パラメータ検出部から映像特性パラメータを入力され、映像特性パラメータにより、デコーディング部から入力される映像データをディスプレイするディスプレイ部とを備え、デジタル放送標準システムを利用して登場する三次元映像放送のような分野で、二次元映像と三次元映像とをディスプレイ可能とする。
【選択図】 図５

Description

本発明は、映像送信及び受信方法と装置、及びその伝送ストリーム構造に係り、さらに詳細には、二次元（２Ｄ）／三次元（３Ｄ）映像についての特性を表す映像特性パラメータをヘッダの所定位置に含む伝送ストリーム構造と、該伝送ストリームを送信する映像送信装置及び方法と、該映像送信装置から送信された伝送ストリームを受信してディスプレイする映像受信装置及び方法とに関する。
最近、デジタル放送（ＤＴＶ）を介して三次元立体映像を放送しようとする研究が進められている。ＤＴＶは、ビデオ、オーディオ及びその他データのようなアナログ信号をデジタル信号に変換して圧縮して伝送した後、これを受信し、さらにもとのビデオ、オーディオ及びその他データ信号に変換して再生する放送であり、従来のアナログ放送と比べて高画質のサービスを提供する。
また、前記のようなＤＴＶ技術を利用し、三次元映像を受信してディスプレイすることについての研究も進められている。三次元映像を具現する一般的な方法には、視聴者の両眼視差を利用するものである。両眼視差を利用した三次元映像具現方法には、偏光めがね、ＬＣシャッタめがねのような三次元映像を表示するためのめがねを着用する方法と、レンチキュラレンズ、視差バリア、視差イルミネーションなどの備わった装置を利用し、肉眼で観測する方法とがある。前者をステレオスコピー（ｓｔｅｒｅｏｓｃｏｐｙ）法といい、後者をオートステレオスコピー（ａｕｔｏｓｔｅｒｅｏｓｃｏｐｙ）法という。
前記ステレオスコピー法は、偏光プロジェクタを利用し、主に映画館のようなさまざまな人が視聴するところで応用されている。そして、前記オートステレオスコピー法は、個人や少数の人々が使用するゲーム用ディスプレイ、家庭用ＴＶ、展示用ディスプレイなどに応用されている。
現在の研究は、概してオートステレオスコピー法を利用して三次元映像を具現するところに集中しており、これと関連したさまざまな製品が販売されている。現在紹介されているほとんどの立体映像用ディスプレイ装置は、三次元映像だけを具現できるようになっており、価格も、二次元ディスプレイ装置より高価である。
ところで、三次元映像用コンテンツが活発に供給されていないために、高価な三次元映像専用のディスプレイ装置では、消費者の購買欲求を満足させられない。
これにより、最近二次元と三次元の映像を選択的に具現できる２Ｄ／３Ｄ兼用ディスプレイ装置を製作する方法に多くの研究がなされつつ、多様な製品が紹介されている。
人間の肉眼で見る実際映像と類似した三次元立体映像を放送するためには、多視点（マルチビュー）三次元映像を作って伝送し、そしてこれを受信して三次元ディスプレイ装置で再生せねばならない。しかし、多視点三次元立体映像は、データ量が非常に多いために、現在のＤＴＶシステムで使われるチャンネルの帯域幅では受入れ難い。従って、ステレオ映像の送信と受信とについての研究がまず進められている。
動映像圧縮標準化団体であるＭＰＥＧで進行中である立体映像と関連した部分について述べれば、１９９６年にＭＰＥＧ−２多視点プロファイルが制定され、現在は、ステレオ映像及び多視点映像の圧縮についての標準が完成段階にある。これにより、立体映像を研究する関連団体でも、デジタルテレビ放送を介した三次元立体映像の伝送及び受信についての研究が活発に進められているが、現在は、ＨＤ（高精細度）クラスステレオ映像の伝送及び受信を目標としている。
一方、ＤＴＶシステム、シミュレーションまたは医学的な分析システムなど、ほとんどの分野で三次元映像と共に選択的に二次元映像が具現される必要がある。しかし、現在、二次元映像と三次元映像とを選択的に具現するための伝送ストリーム構造と、該伝送ストリームの送信装置及び方法と、該伝送ストリームを受信してディスプレイする受信装置及び方法とについては、現在、規格として決まっておらず、これについての研究が進められねばならない状況である。
特開２００１−５４１４１号公報 特開平１１−３５３４９５号公報 特開平７−２７４２１６号公報 特開２００３−３３３６２４号公報
従って、本発明が解決しようとする技術的課題は、ＤＴＶシステムなどで二次元／三次元映像についての映像特性パラメータをヘッダの所定位置に含む伝送ストリーム構造と、該伝送ストリームを送信する映像送信装置及び方法と、該送信された伝送ストリームを受信してディスプレイする映像受信装置及び方法とを提供することである。
前記技術的課題を解決するための本発明の伝送ストリーム構造は、ＤＴＶシステムでの伝送ストリーム構造において、前記ＤＴＶシステムでの映像データが二次元映像であるか三次元映像であるかについての情報を表す映像特性パラメータを含むヘッダと、前記映像データを含むペイロードとを含むことを特徴に有する。
前記技術的課題を解決するための本発明の映像送信装置は、映像データを保存している保存部と、前記保存された映像データが二次元映像であるか三次元映像であるかについての情報を表す映像特性パラメータを生成する映像特性パラメータ生成部と、前記保存された映像データと前記生成された映像特性パラメータとを入力されて伝送ストリームに含まれるようにエンコーディングするエンコーディング部とを備えることを特徴に有する。
前記技術的課題を解決するための本発明の映像受信装置は、映像データと、前記映像データが二次元映像であるか三次元映像であるかについての情報を表す映像特性パラメータとを含む映像信号を入力されてデコーディングするデコーディング部と、前記デコーディングされた映像信号を入力され、前記映像特性パラメータを検出する映像特性パラメータ検出部と、前記映像特性パラメータ検出部から入力された映像特性パラメータにより、前記デコーディング部から入力される映像データをディスプレイするディスプレイ部とを備えることを特徴に有する。
また、前記技術的課題を解決するための本発明の映像送信方法は、（ａ）映像データを入力されるステップと、（ｂ）前記映像データが二次元映像であるか三次元映像であるかについての情報を表す映像特性パラメータを入力されるステップと、（ｃ）前記映像データと前記映像特性パラメータとが伝送ストリームに含まれるようにエンコーディングするステップとを含むことを特徴に有する。
また、前記技術的課題を解決するための本発明の映像受信方法は、（ａ）映像データと、前記映像データが二次元映像であるか三次元映像であるかについての情報を表す映像特性パラメータとを含む映像信号を入力されてデコーディングするステップと、（ｂ）前記デコーディングされた映像信号を入力され、前記映像特性パラメータを検出するステップと、（ｃ）前記（ｂ）ステップで検出された映像特性パラメータを入力されるステップと、（ｄ）前記（ｃ）ステップで入力された映像特性パラメータにより、前記（ａ）ステップでデコーディングされた映像データをディスプレイするステップとを含むことを特徴に有する。
そして、本発明による映像送信方法に記載された発明をコンピュータで実行させるためのプログラムを記録したコンピュータで読み取り可能な記録媒体を含むことを特徴に有する。
また、本発明による映像受信方法に記載された発明をコンピュータで実行させるためのプログラムを記録したコンピュータで読み取り可能な記録媒体を含むことを特徴に有する。
本発明によれば、さらに進歩した映像情報の重要性が要求される多くの分野、例えば、医学、工学及びシミュレーションが使われる分野、並びに今後ＤＴＶ標準システムを利用して登場する立体映像（三次元映像）放送のような分野で、二次元映像と三次元映像とをディスプレイできる映像送信及び受信の方法と装置、及びその伝送ストリーム構造を提供できる。
本発明の一実施形態による伝送ストリーム構造である。 図１での三次元映像の撮像視点数についての一例を図示した図である。 図１での三次元映像の撮像視点数についての一例を図示した図である。 図１での三次元映像のディスプレイフォーマット方式の一例を図示した図である。 図１での三次元映像のディスプレイフォーマット方式の一例を図示した図である。 図１での三次元映像のディスプレイフォーマット方式の一例を図示した図である。 図１での三次元映像のディスプレイフォーマット方式の一例を図示した図である。 本発明の望ましい一実施形態による映像送信装置のブロック図である。 本発明の望ましい一実施形態による映像受信装置のブロック図である。 本発明の望ましい一実施形態による映像送信方法のフローチャートである。 本発明の望ましい一実施形態による映像受信方法のフローチャートである。
以下、添付された図面を参照しつつ、本発明の望ましい一実施形態について詳細に説明する。
図１は、本発明の一実施形態による伝送ストリーム構造である。図１について述べれば、伝送ストリームは、ヘッダ１００とペイロード１２０とから構成される。
伝送ストリームのヘッダ１００には、ペイロード１２０に含まれている映像をディスプレイできる多様な制御情報が含まれている。かような伝送ストリームヘッダ１００の所定位置には、ペイロード１２０に含まれている映像データの特性を表す映像特性パラメータ１０２が含まれている。
映像特性パラメータ１０２は、ペイロード１２０に保存されている映像データが二次元（２Ｄ）映像（例えば、一般ＴＶ信号、ＶＣＲ信号）であるか、三次元（３Ｄ）映像であるかについての２Ｄ／３Ｄ区分情報１０２ａを含んでいる。
そして、ペイロード１２０に保存されている映像が三次元映像である場合に、映像特性パラメータは、三次元映像の撮像視点数情報１０２ｂをさらに含むことができる。ここで、三次元映像の撮像視点数とは、１つの対象物体をカメラで撮像して製作する過程で、何点の相異なる角度で撮像されているかということと関連した情報である。かような三次元映像の撮像視点数については、図２でさらに詳細に説明する。
また、ペイロード１２０に保存されている映像が三次元映像である場合に、映像特性パラメータは、三次元映像のディスプレイフォーマット情報１０２ｃをさらに含むことができる。ここで、ディスプレイフォーマットとは、三次元映像を合成する過程で、１つの場面についていかなる形態でフォーマットを行ったかについての情報である。さらに具体的に、三次元映像のディスプレイフォーマットとしては、ライン−バイ−ラインフォーマット、ピクセル−バイ−ピクセルフォーマット、トップダウンフォーマット及びサイド−バイ−サイドフォーマットなどがある。かような三次元映像のディスプレイフォーマット情報については、図３でさらに詳細に説明する。
図２Ａと図２Ｂは、図１での三次元映像の撮像視点数についての一例を図示した図である。
図２Ａについて述べれば、１つの対象物体２００を相異なる位置にある２台のカメラ２２１，２２２でもって撮像したものである。すなわち、三次元映像の撮像視点数は、２視点である。ここで、対象物体は、静止している物体でもあり、動いている物体でもありうる。２台のカメラ２２１，２２２は、１つの対象物体２００に対し、それぞれ左眼映像と牛眼映像とを別々に撮像する。
図２Ｂについて述べれば、１つの対象物体２００を相異なる位置にある４台のカメラ２２１，２２２，２２３，２２４でもって撮像したものである。すなわち、三次元映像の撮像視点数は、４視点である。
図２Ａと図２Ｂとで、対象物体は静止している物体でもあり、動いている物体でもありうる。図２Ａと図２Ｂとでは、三次元映像の撮像視点数と関連し、２視点と４視点とについて述べたが、１つの対象物体２００に対してさらに多様な撮像視点数を有するように撮像できる。
図３Ａないし図３Ｄは、図１での三次元映像のディスプレイフォーマット方式の一例を図示した図である。図３Ａないし図３Ｄについて述べれば、図３Ａは、ライン−バイ−ラインフォーマットについての映像を表し、図３Ｂは、ピクセル−バイ−ピクセルフォーマットについての映像を表し、図３Ｃは、トップダウンフォーマット映像を表し、図３Ｄは、サイド−バイ−サイドフォーマットについての映像を表す。
さらに具体的に、以下では、ステレオ映像（左眼映像、右眼映像）についてのディスプレイフォーマット方式を説明する。そして、左眼映像と右眼映像は、それぞれ（ＮｘＭ）サイズを有することとする。
図３Ａのライン−バイ−ラインフォーマットの映像は、左眼映像と右眼映像とをそれぞれ垂直方向に１／２サブサンプリングし、左眼映像の画素と右眼映像の画素とをラインごとに交互に位置させて三次元映像を作る。図３Ｂのピクセル−バイ−ピクセルフォーマットの映像は、左眼映像と右眼映像とをそれぞれ水平方向に１／２サブサンプリングし、左眼映像の画素と右眼映像の画素とを１画素ずつ交互に位置させて三次元映像を作る。図３Ｃのトップダウンフォーマットの映像は、左眼映像と右眼映像とをそれぞれ垂直方向に１／２サブサンプリングし、サンプリングした左眼映像を上部に、サンプリングした右眼映像を下部に位置させて１つの三次元映像を作る。すなわち、（ＮｘＭ）サイズの左眼映像と右眼映像とをそれぞれ（ＮｘＭ／２）サイズにサブサンプリングした後でこれを上下に位置させることにより、１つの（ＮｘＭ）サイズの三次元映像を作る。
図３Ｄは、サイド−バイ−サイドフォーマットの映像であり、左眼映像と右眼映像とをそれぞれ水平方向に１／２サブサンプリングし、サンプリングした左眼映像を左側に、サンプリングした右眼映像を右側に位置させて１つの三次元映像を作る。すなわち、（ＮｘＭ）サイズの左眼映像と右眼映像とをそれぞれ（Ｎ／２ｘＭ）サイズにサブサンプリングした後でこれを左右側に位置させることにより、１つの（ＮｘＭ）サイズの三次元映像を作る。
前述のように、三次元映像合成フォーマットにはさまざまあるが、このうち、図３Ｃに図示したようなトップダウンフォーマットと、図３Ｄに図示したようなサイド−バイ−サイドフォーマットとが、ＭＰＥＧなどで圧縮して伝送時に効率的なために、多用されうる。
図４は、本発明の望ましい一実施形態による映像送信装置のブロック図である。図４について述べれば、映像送信装置は、保存部４００、映像特性パラメータ生成部４１０、ユーザインターフェース部４２０、エンコーディング部４３０及び送信部４４０を備えてなる。
保存部４００は、対象物体を撮像して得られた映像データを保存している。保存部４００に保存されている映像データは、１つの対象物体を１台のカメラで撮像して得られる映像でもあり、または１つの対象物体を複数台のカメラで撮像して得られる映像でもありうる。
すなわち、保存部４００に保存されている映像データは、二次元映像でもあり、複数台のカメラで撮った左眼映像と右眼映像とがサブサンプリングされて合成され、図３Ａないし図３Ｄを参照して説明したようなディスプレイフォーマットのうち、いずれか１つのフォーマットの三次元映像であることもある。
映像特性パラメータ生成部４１０は、保存部４００に保存されている映像データの特性を表す映像特性パラメータを生成する役割を果たす。ここで、映像特性パラメータは、二次元映像であるか三次元映像であるかを示す情報を含む。さらに、三次元映像である場合に、撮像視点数情報またはディスプレイフォーマット情報を含むことができる。
ユーザインターフェース部４２０は、映像特性パラメータ生成部４１０を制御する命令をユーザから受信し、前記映像特性パラメータについて受信する入出力インターフェースを提供する。ユーザは、保存部４００に保存されている映像データの特性を表す映像特性パラメータをユーザインターフェース部４２０を介して設定することによって生成可能である。
本発明の一実施形態では、かようにユーザインターフェース部４２０を設けて映像特性パラメータを生成するとしているが、これと係っては、映像を撮像する過程で直ちに映像特性パラメータを生成する方法など、多様な実施形態が可能である。
エンコーディング部４３０は、保存部４００から対象物体を撮像して得られた映像データと、映像特性パラメータ生成部４１０から生成された映像特性パラメータとを入力される。そして、エンコーディング部４３０は、保存部４００から入力された映像データと、映像特性パラメータ生成部４１０から入力された映像特性パラメータとを符号化し、伝送ストリーム形態で示すように変換する。ここで、エンコーディング部４３０は、保存部４００から入力された映像は、伝送ストリームのペイロードに含め、映像特性パラメータは、伝送ストリームのヘッダの所定位置に含める。また、エンコーディング部４３０は、ＭＰＥＧまたはその他さまざまな方法で符号化を行う。
送信部４４０は、エンコーディングされた伝送ストリームをＤＴＶ規格や、その他のさまざまな伝送規格によって送信する。
図５は、本発明の望ましい一実施形態による映像受信装置のブロック図である。図５について述べれば、映像受信装置は、受信部５００、デコーディング部５１０、映像特性パラメータ検出部５２０及びディスプレイ部５３０を備えてなる。
受信部５００は、映像送信装置から伝送された映像信号を受信する。ここで、受信部５００を介して受信される映像信号は、伝送ストリーム形態の映像信号である。
デコーディング部５１０は、映像送信装置で符号化した規格に対応する復号化を行う。例えば、ＭＰＥＧ−２規格によって符号化されているならば、それによって復号化を行う。さらに具体的に、デコーディング部５１０は、映像信号の時空間的な相関性を考慮し、エンコーディングされた映像信号を可変長デコーディング、逆離散コサイン変換（Ｉｎｖｅｒｓｅ ＤＣＴ）、逆量子化及びモーション補償のような復号化技法を利用し、符号化以前のもとの映像と映像特性パラメータとに復元する。
映像特性パラメータ検出部５２０は、デコーディングされた伝送ストリームのヘッダ所定位置に含まれた情報のうちから映像特性パラメータを検出する。ここで、映像特性パラメータは、ペイロードに含まれている映像が二次元映像であるか三次元映像であるかということを示す情報を含む。さらに、三次元映像である場合に、撮像視点数情報またはディスプレイフォーマット情報をさらに含むことができる。
ディスプレイ部５３０は、映像特性パラメータ検出部５２０から伝送された映像特性パラメータと、デコーディング部５１０からデコーディングされた映像データとを入力される。そして、ディスプレイ部５３０は、映像特性パラメータによってデコーディングされた映像データを画面上にディスプレイする。
さらに具体的に、映像特性パラメータが、二次元映像であると示された場合、ディスプレイ部５３０は、デコーディング部５１０から入力されるデコーディングされた映像データを二次元に画面上にディスプレイする。そして、映像特性パラメータが三次元映像であると示された場合、ディスプレイ部５３０は、デコーディング部５１０から入力されるデコーディングされた映像データを三次元に画面上にディスプレイする。さらに、ディスプレイ部５３０は、映像特性パラメータが三次元映像であり、撮像視点数情報またはディスプレイフォーマット情報をさらに含むと示された場合、前記撮像視点数情報またはディスプレイフォーマット情報に該当するように、前記デコーディングされた映像データを所定方式に変換してディスプレイする。
ここで、ディスプレイ部５３０は、２Ｄ／３Ｄ兼用ディスプレイ装置で構成される。２Ｄ／３Ｄ兼用ディスプレイ装置を具現する方法は、多様でありえる。さらに具体的な方法としては、本発明のディスプレイ部５３０は、大韓民国特許公開第１０−０４４０９５６号公報（発明の名称：２Ｄ／３Ｄ兼用ディスプレイ）に記述されているように、イメージ形成パネルディスプレイと、レンズ部と、前記レンズ部に対して選択的に電源を供給させることができる電源供給部とを備えて具現できる。そして、ＴＦＴ−ＬＣＤの後側に液晶シャッタを具備し、これを利用して二次元映像と三次元映像とを選択的に表示する２Ｄ／３Ｄ兼用ディスプレイ装置がある。しかし、前記で挙げた例は、１つの一例として挙げたものであり、本発明のディスプレイ部５３０は、それらに限定されずに多様な方法で具現されうる。
図６は、本発明の望ましい一実施形態による映像送信方法のフローチャートである。図６について述べれば、まず、対象物体を撮像して得られた映像データを入力される（Ｓ６００）。ここで、映像データは、１つの対象物体を１台のカメラで撮像して得られる映像データ、または１つの対象物体を複数台のカメラで撮像して得られる映像データでありうる。
次に、前記映像データの特性を表すように生成された映像特性パラメータを入力される（Ｓ６１０）。ここで、映像特性パラメータは、ステップＳ６００で入力された映像データが二次元映像であるか三次元映像であるかについての情報を含む。さらに、三次元映像である場合に、撮像視点数情報またはディスプレイフォーマット情報をさらに含むことができる。
次に、ステップＳ６００で入力された映像データと、ステップＳ６１０で入力された映像特性パラメータとを符号化し、伝送ストリーム形態に変換する（Ｓ６２０）。ここで、映像データは、伝送ストリームのペイロードに含め、映像特性パラメータは、伝送ストリームのヘッダ所定位置に含める。ステップＳ６２０での符号化は、ＭＰＥＧまたはその他さまざまな方法で符号化を行う。
次に、ステップＳ６２０でエンコーディングされた伝送ストリームをＤＴＶ規格や、その他のさまざま伝送規格によって送信する（Ｓ６３０）。
図６で未説明の部分は、図４を参照する。
図７は、本発明の望ましい一実施形態による映像受信方法のフローチャートである。図７について述べれば、まず、アンテナを介して映像データと、前記映像データについての映像特性パラメータとを含む映像信号を受信する（Ｓ７００）。ここで、受信される映像信号は、伝送ストリーム形態の映像信号である。
次に、ステップＳ７００で受信された映像信号をデコーディングする（Ｓ７１０）。次に、ステップＳ７１０でデコーディングされた映像信号を入力され、前記映像データについての映像特性パラメータを検出する（Ｓ７２０）。ここで、映像特性パラメータは、ペイロードにある映像データが二次元映像であるか三次元映像であるかを示す情報を含む。さらに、三次元映像である場合、撮像視点数情報またはディスプレイフォーマット情報をさらに含むことができる。
次に、ステップＳ７２０で検出された映像特性パラメータをディスプレイ装置に出力する（Ｓ７３０）。
次に、ステップＳ７３０で伝送された映像特性パラメータにより、ステップＳ７１０でデコーディングされた映像データを画面上にディスプレイする（Ｓ７４０）。
図７で未説明の部分は、図５を参照する。
本発明は、また、コンピュータで読み取り可能な記録媒体にコンピュータで読み取り可能なコードでもって具現することが可能である。コンピュータで読み取り可能な記録媒体は、コンピュータシステムによって読み取り可能なデータが保存されるあらゆる種類の記録装置を含む。コンピュータで読み取り可能な記録媒体の例としては、ＲＯＭ、ＲＡＭ、ＣＤ−ＲＯＭ、磁気テープ、フロッピー（登録商標）ディスク及び光データ保存装置などがあり、またキャリアウェーブ（例えば、インターネットを介した伝送）の形態で具現されるものも含む。また、コンピュータで読み取り可能な記録媒体は、ネットワークに連結されたコンピュータシステムに分散され、分散方式でコンピュータで読み取り可能なコードでもって保存されて実行されうる。
以上のように、図面と明細書とで最適の実施形態が開示された。ここで、特定の用語が使われたが、それらは、単に本発明を説明するための目的で使われたものであり、意味限定や特許請求範囲に記載された本発明の範囲を制限するために使われたものではない。従って、本技術分野の当業者ならば、それらから多様な変形及び均等な他の実施形態が可能であるという点を理解できるであろう。従って、本発明の真の技術的な保護範囲は、特許請求の範囲の技術的思想によってのみ決まるのである。
本発明の映像送信及び受信方法と装置、及びその伝送ストリーム構造は、例えば、ＤＴＶ関連の技術分野に効果的に適用可能である。
１００ ヘッダ
１０２ 映像特性パラメータ
１０２ａ ２Ｄ／３Ｄ区分情報
１０２ｂ 映像視点数情報
１０２ｃ ディスプレイフォーマット情報
１２０ ペイロード
２００ 対象物体
２２１，２２２，２２３，２２４ カメラ
４００ 保存部
４１０ 映像特性パラメータ生成部
４２０ ユーザインターフェース部
４３０ エンコーディング部
４４０ 送信部
５００ 受信部
５１０ デコーディング部
５２０ 映像特性パラメータ検出部
５３０ ディスプレイ部

Claims (19)

  1. 映像データと該映像データが二次元映像であるか三次元映像であるかに対する情報を表す映像特性パラメータを含む映像信号を入力されて復元するステップと、
    前記復元された映像信号を入力されて前記映像特性パラメータを検出するステップとを含み、
    前記映像特性パラメータは前記三次元映像のディスプレイフォーマットに対する情報を含む、
    ことを特徴とする復元方法。
  2. 前記三次元映像のディスプレイフォーマットはライン-バイ-ラインフォーマットであり、
    前記ライン-バイ-ラインフォーマットは左眼映像と右眼映像をそれぞれ垂直方向に１/２サブサンプリングして、前記左眼映像の画素及び前記右眼映像の画素がライン毎に交代に位置するようにして前記三次元映像を生成するフォーマットである、
    ことを特徴とする請求項１記載の復元方法。
  3. 前記三次元映像のディスプレイフォーマットはピクセル-バイ-ピクセルフォーマットであり、
    前記ピクセル-バイ-ピクセルフォーマットは左眼映像と右眼映像をそれぞれ水平方向に１/２サブサンプリングして、前記左眼映像の画素及び前記右眼映像の画素が一画素ずつ交代に位置するようにして前記三次元映像を生成するフォーマットである、
    ことを特徴とする請求項１記載の復元方法。
  4. 前記三次元映像のディスプレイフォーマットはトップダウンフォーマットであり、
    前記トップダウンフォーマットは左眼映像と右眼映像をそれぞれ垂直方向に１/２サブサンプリングして、前記サブサンプリングした左眼映像を上部に及び前記サブサンプリングした右眼映像を下部に位置させて前記三次元映像を生成するフォーマットである、
    ことを特徴とする請求項１記載の復元方法。
  5. 前記三次元映像のディスプレイフォーマットはサイド-バイ-サイドフォーマットであり、
    前記サイド-バイ-サイドフォーマットは左眼映像と右眼映像をそれぞれ水平方向に１/２サブサンプリングして、前記サブサンプリングした左眼映像を左側に及び前記サブサンプリングした右眼映像を右側に位置させて前記三次元映像を生成するフォーマットである、
    ことを特徴とする請求項１記載の復元方法。
  6. 前記検出された映像特性パラメータによって前記復元された映像データをディスプレイするステップをさらに含む、
    ことを特徴とする請求項１記載の復元方法。
  7. 前記映像特性パラメータは、三次元映像の撮像視点数に対する情報をさらに含む、
    ことを特徴とする請求項１記載の復元方法。
  8. 前記映像信号はヘッダに前記映像特性パラメータを含み、ペイロードに前記映像データを含む伝送ストリームである、
    ことを特徴とする請求項１記載の復元方法。
  9. 前記映像データはデジタル放送システムに適用されるデータである、
    ことを特徴とする請求項１記載の復元方法。
  10. 映像データと該映像データが二次元映像であるか三次元映像であるかをに対する情報を表す映像特性パラメータを含む映像信号を入力されて復元するデコーダ部と、
    前記復元された映像信号を入力されて前記映像特性パラメータを検出する映像特性パラメータ検出部とを含み、
    前記映像特性パラメータは、三次元映像のディスプレイフォーマットに対する情報を含む、
    ことを特徴とする復元装置。
  11. 前記三次元映像のディスプレイフォーマットはライン-バイ-ラインフォーマットであり、
    前記ライン-バイ-ラインフォーマットは左眼映像と右眼映像をそれぞれ垂直方向に１/２サブサンプリングして、前記左眼映像の画素及び前記右眼映像の画素がライン毎に交代に位置するようにして前記三次元映像を生成するフォーマットである、
    ことを特徴とする請求項１０記載の復元装置。
  12. 前記三次元映像のディスプレイフォーマットはピクセル-バイ-ピクセルフォーマットであり、
    前記ピクセル-バイ-ピクセルフォーマットは左眼映像と右眼映像をそれぞれ水平方向に１/２サブサンプリングして、前記左眼映像の画素及び前記右眼映像の画素が一画素ずつ交代に位置するようにして前記三次元映像を生成するフォーマットである、
    ことを特徴とする請求項１０記載の復元装置。
  13. 前記三次元映像のディスプレイフォーマットはトップダウンフォーマットであり、
    前記トップダウンフォーマットは左眼映像と右眼映像をそれぞれ垂直方向に１/２サブサンプリングして、前記サブサンプリングした左眼映像を上部に及び前記サブサンプリングした右眼映像を下部に位置させて前記三次元映像を生成するフォーマットである、
    ことを特徴とする請求項１０記載の復元装置。
  14. 前記三次元映像のディスプレイフォーマットはサイド-バイ-サイドフォーマットであり、
    前記サイド-バイ-サイドフォーマットは左眼映像と右眼映像をそれぞれ水平方向に１/２サブサンプリングして、
    前記サブサンプリングした左眼映像を左側に及び前記サブサンプリングした右眼映像を右側に位置させて前記三次元映像を生成するフォーマットである、
    ことを特徴とする請求項１０記載の復元装置。
  15. 前記検出された映像特性パラメータによって前記復元された映像データをディスプレイするディスプレイ部をさらに含む、
    ことを特徴とする請求項１０記載の復元装置。
  16. 前記映像特性パラメータは三次元映像の撮像視点数に対する情報をさらに含む、
    ことを特徴とする請求項１０記載の復元装置。
  17. 前記映像信号はヘッダに前記映像特性パラメータを含み、ペイロードに前記映像データを含む伝送ストリームである、
    ことを特徴とする請求項１０記載の復元装置。
  18. 前記映像データはデジタル放送システムに適用されるデータである、
    ことを特徴とする請求項１０記載の復元装置。
  19. 映像データと該映像データが二次元映像であるか三次元映像であるかに対する情報を表す映像特性パラメータを含む映像信号を入力されて復元するステップと、
    前記復元された映像信号を入力されて前記映像特性パラメータを検出するステップとを含み、
    前記映像特性パラメータは前記三次元映像のディスプレイフォーマットに対する情報を含む、
    復元方法を実行するためのプログラムを記録したコンピュータ読取り可能な記録媒体。
JP2012058901A 2005-06-14 2012-03-15 映像送信及び受信方法と装置、及びその伝送ストリーム構造 Pending JP2012110068A (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020050051135A KR100813961B1 (ko) 2005-06-14 2005-06-14 영상 수신장치
KR10-2005-0051135 2005-06-14

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2006163838A Division JP5328082B2 (ja) 2005-06-14 2006-06-13 映像送信及び受信方法と装置、及びその伝送ストリーム構造

Publications (1)

Publication Number Publication Date
JP2012110068A true JP2012110068A (ja) 2012-06-07

Family

ID=36952656

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2006163838A Expired - Fee Related JP5328082B2 (ja) 2005-06-14 2006-06-13 映像送信及び受信方法と装置、及びその伝送ストリーム構造
JP2012058901A Pending JP2012110068A (ja) 2005-06-14 2012-03-15 映像送信及び受信方法と装置、及びその伝送ストリーム構造

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2006163838A Expired - Fee Related JP5328082B2 (ja) 2005-06-14 2006-06-13 映像送信及び受信方法と装置、及びその伝送ストリーム構造

Country Status (5)

Country Link
US (2) US20070008575A1 (ja)
EP (1) EP1734766A3 (ja)
JP (2) JP5328082B2 (ja)
KR (1) KR100813961B1 (ja)
CN (1) CN100586178C (ja)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015005807A (ja) * 2013-06-19 2015-01-08 沖電気工業株式会社 立体映像符号化装置、立体映像復号装置及び立体映像符号化システム、並びに、立体映像符号化プログラム及び立体映像復号プログラム
WO2015083451A1 (ja) 2013-12-04 2015-06-11 オリンパス株式会社 ワイヤレス伝送システム
JP2017505035A (ja) * 2013-12-19 2017-02-09 ソニー インタラクティブ エンタテインメント アメリカ リミテッド ライアビリテイ カンパニー 映像待ち時間の短縮

Families Citing this family (125)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100777447B1 (ko) * 2006-02-06 2007-11-21 삼성전자주식회사 디지털 방송 송신 및 수신 장치 그리고 그에 적용되는로버스트 스트림 코딩 및 디코딩 방법
KR100842582B1 (ko) * 2007-01-08 2008-07-01 삼성전자주식회사 디지털 멀티미디어 데이터를 송수신하는 디지털 방송 시스템 및 그 방법
KR101360264B1 (ko) * 2007-05-07 2014-02-21 한국전자통신연구원 방송 서비스 방법
US20080303832A1 (en) * 2007-06-11 2008-12-11 Samsung Electronics Co., Ltd. Method of generating two-dimensional/three-dimensional convertible stereoscopic image bitstream and method and apparatus for displaying the same
KR101450145B1 (ko) * 2007-06-11 2014-10-13 삼성전자 주식회사 스테레오스코픽 영상 비트스트림 생성 방법 및 장치
WO2008153294A2 (en) 2007-06-11 2008-12-18 Samsung Electronics Co., Ltd. Method and apparatus for generating header information of stereoscopic image
US8416247B2 (en) 2007-10-09 2013-04-09 Sony Computer Entertaiment America Inc. Increasing the number of advertising impressions in an interactive environment
KR101457893B1 (ko) * 2007-10-10 2014-11-04 삼성전자주식회사 3차원 영상 시청시 발생하는 피로도 감소 방법 및 장치,그리고 저피로도 3차원 영상 데이터 스트림 생성 방법 및장치
US8390674B2 (en) 2007-10-10 2013-03-05 Samsung Electronics Co., Ltd. Method and apparatus for reducing fatigue resulting from viewing three-dimensional image display, and method and apparatus for generating data stream of low visual fatigue three-dimensional image
WO2009075495A1 (en) 2007-12-10 2009-06-18 Samsung Electronics Co., Ltd. System and method for generating and reproducing image file including 2d image and 3d stereoscopic image
KR101480186B1 (ko) * 2007-12-10 2015-01-07 삼성전자주식회사 2ｄ 영상과 3ｄ 입체영상을 포함하는 영상파일을 생성 및재생하기 위한 시스템 및 방법
US11792538B2 (en) 2008-05-20 2023-10-17 Adeia Imaging Llc Capturing and processing of images including occlusions focused on an image sensor by a lens stack array
US8866920B2 (en) 2008-05-20 2014-10-21 Pelican Imaging Corporation Capturing and processing of images using monolithic camera array with heterogeneous imagers
EP4336447B1 (en) 2008-05-20 2025-05-07 Adeia Imaging LLC Capturing and processing of images using monolithic camera array with heterogeneous imagers
KR101490689B1 (ko) * 2008-05-27 2015-02-06 삼성전자주식회사 카메라 파라미터를 이용한 스테레오스코픽 영상데이터스트림 생성 방법 및 그 장치와 스테레오스코픽 영상복원 방법 및 그 장치
WO2010038365A1 (ja) 2008-09-30 2010-04-08 パナソニック株式会社 3d映像に係る記録媒体、再生装置、システムlsi、再生方法、眼鏡、表示装置
WO2010076933A1 (ko) * 2008-12-30 2010-07-08 (주)엘지전자 이차원 영상과 3d 영상의 통합 서비스가 가능한 디지털 방송 수신방법, 및 이를 이용한 디지털 방송 수신장치
JP5694952B2 (ja) * 2009-01-20 2015-04-01 コーニンクレッカ フィリップス エヌ ヴェ ３ｄ画像データの転送
US10742953B2 (en) 2009-01-20 2020-08-11 Koninklijke Philips N.V. Transferring of three-dimensional image data
EP2389666A2 (en) * 2009-01-20 2011-11-30 Koninklijke Philips Electronics N.V. Transferring of 3d image data
EP2382793A4 (en) 2009-01-28 2014-01-15 Lg Electronics Inc BROADCAST RECEIVER AND METHOD FOR PROCESSING VIDEO DATA THEREFOR
US9041772B2 (en) * 2009-04-07 2015-05-26 Lg Electronics Inc. Broadcast transmitter, broadcast receiver, and 3D video data processing method thereof
JP5274359B2 (ja) 2009-04-27 2013-08-28 三菱電機株式会社 立体映像および音声記録方法、立体映像および音声再生方法、立体映像および音声記録装置、立体映像および音声再生装置、立体映像および音声記録媒体
WO2010131313A1 (ja) 2009-05-14 2010-11-18 パナソニック株式会社 ビデオデータのパケット伝送方法
JP5463747B2 (ja) * 2009-06-15 2014-04-09 ソニー株式会社 受信装置、送信装置、通信システム、表示制御方法、プログラム、及びデータ構造
TW201119353A (en) 2009-06-24 2011-06-01 Dolby Lab Licensing Corp Perceptual depth placement for 3D objects
WO2010151555A1 (en) 2009-06-24 2010-12-29 Dolby Laboratories Licensing Corporation Method for embedding subtitles and/or graphic overlays in a 3d or multi-view video data
KR101347744B1 (ko) * 2009-08-19 2014-01-03 서울시립대학교 산학협력단 영상 처리 장치 및 방법
JP5433862B2 (ja) * 2009-09-30 2014-03-05 日立マクセル株式会社 受信装置及び表示制御方法
KR20110043503A (ko) * 2009-10-20 2011-04-27 삼성전자주식회사 스트림 생성 방법 및 장치와, 스트림 처리 방법 및 장치
JP5482254B2 (ja) * 2009-11-05 2014-05-07 ソニー株式会社 受信装置、送信装置、通信システム、表示制御方法、プログラム、及びデータ構造
EP2502115A4 (en) 2009-11-20 2013-11-06 Pelican Imaging Corp RECORDING AND PROCESSING IMAGES THROUGH A MONOLITHIC CAMERA ARRAY WITH HETEROGENIC IMAGE CONVERTER
US9247286B2 (en) * 2009-12-31 2016-01-26 Broadcom Corporation Frame formatting supporting mixed two and three dimensional video data communication
US8964013B2 (en) * 2009-12-31 2015-02-24 Broadcom Corporation Display with elastic light manipulator
JP5450118B2 (ja) 2010-01-14 2014-03-26 ソニー株式会社 映像伝送装置、映像表示装置、映像表示システム、映像伝送方法及びコンピュータプログラム
CN102763421B (zh) * 2010-02-15 2015-08-26 汤姆森许可贸易公司 处理视频内容的装置和方法
US9426441B2 (en) * 2010-03-08 2016-08-23 Dolby Laboratories Licensing Corporation Methods for carrying and transmitting 3D z-norm attributes in digital TV closed captioning
JP5559614B2 (ja) * 2010-04-21 2014-07-23 日立マクセル株式会社 受信装置および受信方法
EP2569935B1 (en) 2010-05-12 2016-12-28 Pelican Imaging Corporation Architectures for imager arrays and array cameras
WO2011148554A1 (ja) * 2010-05-28 2011-12-01 日立コンシューマエレクトロニクス株式会社 受信装置および出力方法
US10917624B2 (en) 2010-06-02 2021-02-09 Maxell, Ltd. Reception device, display control method, transmission device, and transmission method for program content type
JP5710895B2 (ja) * 2010-06-02 2015-04-30 日立マクセル株式会社 デジタルコンテンツ受信装置およびデジタルコンテンツ受信方法
WO2011151960A1 (ja) * 2010-06-02 2011-12-08 日立コンシューマエレクトロニクス株式会社 受信装置および出力方法
WO2011151958A1 (ja) * 2010-06-02 2011-12-08 日立コンシューマエレクトロニクス株式会社 受信装置および出力方法
JP5510097B2 (ja) * 2010-06-16 2014-06-04 ソニー株式会社 信号伝送方法、信号送信装置および信号受信装置
JP5882896B2 (ja) * 2010-06-23 2016-03-09 パナソニック株式会社 コンテンツ配信システム、再生装置、配信サーバ、再生方法及び配信方法
JP2012034138A (ja) * 2010-07-29 2012-02-16 Toshiba Corp 信号処理装置及び信号処理方法
WO2012017687A1 (ja) * 2010-08-05 2012-02-09 パナソニック株式会社 映像再生装置
JP2012039340A (ja) * 2010-08-06 2012-02-23 Hitachi Consumer Electronics Co Ltd 受信装置および受信方法
EP2608547B1 (en) * 2010-08-17 2018-03-21 LG Electronics Inc. Apparatus and method for receiving digital broadcasting signal
JP5602539B2 (ja) * 2010-08-20 2014-10-08 日立マクセル株式会社 受信装置
KR20120019635A (ko) * 2010-08-26 2012-03-07 삼성전자주식회사 방송 채널 전환 방법 및 이를 수행하는 방송 수신 장치
JP5483357B2 (ja) * 2010-08-27 2014-05-07 アルパイン株式会社 デジタルテレビ受信装置及びデジタルテレビ受信装置を設けた車載装置
JP2012114575A (ja) * 2010-11-22 2012-06-14 Sony Corp 画像データ送信装置、画像データ送信方法、画像データ受信装置および画像データ受信方法
KR20120065943A (ko) * 2010-12-13 2012-06-21 한국전자통신연구원 스테레오스코픽 비디오 서비스 위한 시그널링 방법 및 이러한 방법을 사용하는 장치
US8878950B2 (en) 2010-12-14 2014-11-04 Pelican Imaging Corporation Systems and methods for synthesizing high resolution images using super-resolution processes
JP2012148055A (ja) * 2010-12-27 2012-08-09 Fujifilm Corp 撮影画像表示装置および撮影画像表示方法
US20130314514A1 (en) * 2011-03-18 2013-11-28 Kazuhiro Mochinaga Display apparatus, 3d glasses, and 3d-video viewing system
EP2697975A1 (en) 2011-04-15 2014-02-19 Dolby Laboratories Licensing Corporation Systems and methods for rendering 3d images independent of display size and viewing distance
EP2708019B1 (en) * 2011-05-11 2019-10-16 FotoNation Limited Systems and methods for transmitting and receiving array camera image data
JP5814619B2 (ja) * 2011-05-18 2015-11-17 任天堂株式会社 表示制御プログラム、表示制御装置、表示制御システム、及び表示制御方法
US20130265459A1 (en) 2011-06-28 2013-10-10 Pelican Imaging Corporation Optical arrangements for use with an array camera
CN102263977B (zh) * 2011-08-01 2013-06-12 清华大学 一种用于移动终端的立体视频获取的方法和装置
WO2013043761A1 (en) 2011-09-19 2013-03-28 Pelican Imaging Corporation Determining depth from multiple views of a scene that include aliasing using hypothesized fusion
WO2013049699A1 (en) 2011-09-28 2013-04-04 Pelican Imaging Corporation Systems and methods for encoding and decoding light field image files
CN103096014B (zh) 2011-10-28 2016-03-30 华为技术有限公司 一种视频呈现方法和系统
CN103260038A (zh) * 2012-02-20 2013-08-21 山东沃飞电子科技有限公司 三维内容发送和接收的方法、装置和系统
WO2013126578A1 (en) 2012-02-21 2013-08-29 Pelican Imaging Corporation Systems and methods for the manipulation of captured light field image data
US9210392B2 (en) 2012-05-01 2015-12-08 Pelican Imaging Coporation Camera modules patterned with pi filter groups
JP2015534734A (ja) 2012-06-28 2015-12-03 ペリカン イメージング コーポレイション 欠陥のあるカメラアレイ、光学アレイ、およびセンサを検出するためのシステムおよび方法
US20140002674A1 (en) 2012-06-30 2014-01-02 Pelican Imaging Corporation Systems and Methods for Manufacturing Camera Modules Using Active Alignment of Lens Stack Arrays and Sensors
CN104662589B (zh) 2012-08-21 2017-08-04 派力肯影像公司 用于使用阵列照相机捕捉的图像中的视差检测和校正的系统和方法
CN104685513B (zh) 2012-08-23 2018-04-27 派力肯影像公司 根据使用阵列源捕捉的低分辨率图像的基于特征的高分辨率运动估计
US9214013B2 (en) 2012-09-14 2015-12-15 Pelican Imaging Corporation Systems and methods for correcting user identified artifacts in light field images
EP4307659A1 (en) 2012-09-28 2024-01-17 Adeia Imaging LLC Generating images from light fields utilizing virtual viewpoints
US9143711B2 (en) 2012-11-13 2015-09-22 Pelican Imaging Corporation Systems and methods for array camera focal plane control
WO2014101102A1 (zh) * 2012-12-28 2014-07-03 华为技术有限公司 对视频内容的摄像机参数的编码和解码方法与装置
WO2014130849A1 (en) 2013-02-21 2014-08-28 Pelican Imaging Corporation Generating compressed light field representation data
US9374512B2 (en) 2013-02-24 2016-06-21 Pelican Imaging Corporation Thin form factor computational array cameras and modular array cameras
WO2014138695A1 (en) 2013-03-08 2014-09-12 Pelican Imaging Corporation Systems and methods for measuring scene information while capturing images using array cameras
US8866912B2 (en) 2013-03-10 2014-10-21 Pelican Imaging Corporation System and methods for calibration of an array camera using a single captured image
US9521416B1 (en) 2013-03-11 2016-12-13 Kip Peli P1 Lp Systems and methods for image data compression
US9888194B2 (en) 2013-03-13 2018-02-06 Fotonation Cayman Limited Array camera architecture implementing quantum film image sensors
US9106784B2 (en) 2013-03-13 2015-08-11 Pelican Imaging Corporation Systems and methods for controlling aliasing in images captured by an array camera for use in super-resolution processing
US9519972B2 (en) 2013-03-13 2016-12-13 Kip Peli P1 Lp Systems and methods for synthesizing images from image data captured by an array camera using restricted depth of field depth maps in which depth estimation precision varies
WO2014164550A2 (en) 2013-03-13 2014-10-09 Pelican Imaging Corporation System and methods for calibration of an array camera
US9100586B2 (en) 2013-03-14 2015-08-04 Pelican Imaging Corporation Systems and methods for photometric normalization in array cameras
US9578259B2 (en) 2013-03-14 2017-02-21 Fotonation Cayman Limited Systems and methods for reducing motion blur in images or video in ultra low light with array cameras
US9497429B2 (en) 2013-03-15 2016-11-15 Pelican Imaging Corporation Extended color processing on pelican array cameras
US10122993B2 (en) 2013-03-15 2018-11-06 Fotonation Limited Autofocus system for a conventional camera that uses depth information from an array camera
US9445003B1 (en) 2013-03-15 2016-09-13 Pelican Imaging Corporation Systems and methods for synthesizing high resolution images using image deconvolution based on motion and depth information
FI2973476T3 (fi) 2013-03-15 2025-05-22 Adeia Imaging Llc Järjestelmiä ja menetelmiä stereokuvaukseen kameraryhmillä
WO2014150856A1 (en) 2013-03-15 2014-09-25 Pelican Imaging Corporation Array camera implementing quantum dot color filters
US9716885B2 (en) 2013-07-31 2017-07-25 Empire Technology Development Llc Encoding scheme
CN104427378B (zh) * 2013-09-09 2018-03-23 杭州海康威视数字技术股份有限公司 多类型业务数据流传输装置
US9898856B2 (en) 2013-09-27 2018-02-20 Fotonation Cayman Limited Systems and methods for depth-assisted perspective distortion correction
WO2015070105A1 (en) 2013-11-07 2015-05-14 Pelican Imaging Corporation Methods of manufacturing array camera modules incorporating independently aligned lens stacks
US10119808B2 (en) 2013-11-18 2018-11-06 Fotonation Limited Systems and methods for estimating depth from projected texture using camera arrays
EP3075140B1 (en) 2013-11-26 2018-06-13 FotoNation Cayman Limited Array camera configurations incorporating multiple constituent array cameras
JP2014082769A (ja) * 2013-11-27 2014-05-08 Sony Corp 受信装置、表示制御方法、プログラム、及びデータ構造
JP5684415B2 (ja) * 2014-01-27 2015-03-11 日立マクセル株式会社 デジタル放送信号受信装置およびデジタル放送信号受信方法
MX362017B (es) * 2014-02-07 2019-01-04 Sony Corp Dispositivo de transmision, metodo de transmision, dispositivo de recepcion, metodo de recepcion, dispositivo de visualizacion, y metodo de visualizacion.
US10089740B2 (en) 2014-03-07 2018-10-02 Fotonation Limited System and methods for depth regularization and semiautomatic interactive matting using RGB-D images
US9521319B2 (en) 2014-06-18 2016-12-13 Pelican Imaging Corporation Array cameras and array camera modules including spectral filters disposed outside of a constituent image sensor
JP2017531976A (ja) 2014-09-29 2017-10-26 フォトネイション ケイマン リミテッド アレイカメラを動的に較正するためのシステム及び方法
US9942474B2 (en) 2015-04-17 2018-04-10 Fotonation Cayman Limited Systems and methods for performing high speed video capture and depth estimation using array cameras
CN107635130A (zh) * 2016-07-18 2018-01-26 中兴通讯股份有限公司 一种实现3d图像显示的方法及装置
WO2018211854A1 (ja) * 2017-05-19 2018-11-22 オリンパス株式会社 ３ｄ内視鏡装置、及び、３ｄ映像処理装置
US10482618B2 (en) 2017-08-21 2019-11-19 Fotonation Limited Systems and methods for hybrid depth regularization
BR112022004811A2 (pt) 2019-09-17 2022-06-21 Boston Polarimetrics Inc Sistemas e métodos para modelagem de superfície usando indicações de polarização
MX2022004163A (es) 2019-10-07 2022-07-19 Boston Polarimetrics Inc Sistemas y metodos para la deteccion de estandares de superficie con polarizacion.
DE112020005932T5 (de) 2019-11-30 2023-01-05 Boston Polarimetrics, Inc. Systeme und verfahren zur segmentierung von transparenten objekten mittels polarisationsmerkmalen
EP4081933A4 (en) 2020-01-29 2024-03-20 Intrinsic Innovation LLC Systems and methods for characterizing object pose detection and measurement systems
KR20220133973A (ko) 2020-01-30 2022-10-05 인트린식 이노베이션 엘엘씨 편광된 이미지들을 포함하는 상이한 이미징 양식들에 대해 통계적 모델들을 훈련하기 위해 데이터를 합성하기 위한 시스템들 및 방법들
WO2021243088A1 (en) 2020-05-27 2021-12-02 Boston Polarimetrics, Inc. Multi-aperture polarization optical systems using beam splitters
US12069227B2 (en) 2021-03-10 2024-08-20 Intrinsic Innovation Llc Multi-modal and multi-spectral stereo camera arrays
US12020455B2 (en) 2021-03-10 2024-06-25 Intrinsic Innovation Llc Systems and methods for high dynamic range image reconstruction
US11954886B2 (en) 2021-04-15 2024-04-09 Intrinsic Innovation Llc Systems and methods for six-degree of freedom pose estimation of deformable objects
US11290658B1 (en) 2021-04-15 2022-03-29 Boston Polarimetrics, Inc. Systems and methods for camera exposure control
US12067746B2 (en) 2021-05-07 2024-08-20 Intrinsic Innovation Llc Systems and methods for using computer vision to pick up small objects
US12175741B2 (en) 2021-06-22 2024-12-24 Intrinsic Innovation Llc Systems and methods for a vision guided end effector
US12340538B2 (en) 2021-06-25 2025-06-24 Intrinsic Innovation Llc Systems and methods for generating and using visual datasets for training computer vision models
US12172310B2 (en) 2021-06-29 2024-12-24 Intrinsic Innovation Llc Systems and methods for picking objects using 3-D geometry and segmentation
US11689813B2 (en) 2021-07-01 2023-06-27 Intrinsic Innovation Llc Systems and methods for high dynamic range imaging using crossed polarizers
US12293535B2 (en) 2021-08-03 2025-05-06 Intrinsic Innovation Llc Systems and methods for training pose estimators in computer vision

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004166195A (ja) * 2002-09-27 2004-06-10 Sharp Corp 画像データ生成装置、画像データ再生装置、画像データ生成方法、画像データ再生方法

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AUPN732395A0 (en) * 1995-12-22 1996-01-25 Xenotech Research Pty Ltd Image conversion and encoding techniques
US5978029A (en) * 1997-10-10 1999-11-02 International Business Machines Corporation Real-time encoding of video sequence employing two encoders and statistical analysis
JPH11353495A (ja) 1998-06-10 1999-12-24 Nec Corp グラフィックス装置とグラフィック方法
KR100585058B1 (ko) * 1999-02-01 2006-06-01 삼성전자주식회사 캡션 디스플레이를 위한 엠펙 디코더 및 디코딩 방법
JP4497497B2 (ja) * 2001-01-22 2010-07-07 日本テレビ放送網株式会社 立体映像信号の伝送方法及び、そのシステム
KR100397511B1 (ko) * 2001-11-21 2003-09-13 한국전자통신연구원 양안식/다시점 3차원 동영상 처리 시스템 및 그 방법
US20040218269A1 (en) * 2002-01-14 2004-11-04 Divelbiss Adam W. General purpose stereoscopic 3D format conversion system and method
EP2262273A3 (en) * 2002-04-25 2013-12-04 Sharp Kabushiki Kaisha Image data creation device, image data reproduction device, and image data recording medium
AU2003231508A1 (en) * 2002-04-25 2003-11-10 Sharp Kabushiki Kaisha Multimedia information generation method and multimedia information reproduction device
AU2003235940A1 (en) * 2002-04-25 2003-11-10 Sharp Kabushiki Kaisha Image encodder, image decoder, record medium, and image recorder
JP2003333624A (ja) * 2002-05-10 2003-11-21 Sharp Corp 電子機器
JP4259884B2 (ja) * 2003-01-20 2009-04-30 シャープ株式会社 画像データ作成装置およびそのデータを再生する画像データ再生装置
JP2004274253A (ja) * 2003-03-06 2004-09-30 Sharp Corp 映像記録装置および映像送信装置
JP4324435B2 (ja) * 2003-04-18 2009-09-02 三洋電機株式会社 立体視用映像提供方法及び立体映像表示装置
JP4190357B2 (ja) * 2003-06-12 2008-12-03 シャープ株式会社 放送データ送信装置、放送データ送信方法および放送データ受信装置
KR100716982B1 (ko) * 2004-07-15 2007-05-10 삼성전자주식회사 다차원 영상 포맷의 변환장치 및 방법

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004166195A (ja) * 2002-09-27 2004-06-10 Sharp Corp 画像データ生成装置、画像データ再生装置、画像データ生成方法、画像データ再生方法

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015005807A (ja) * 2013-06-19 2015-01-08 沖電気工業株式会社 立体映像符号化装置、立体映像復号装置及び立体映像符号化システム、並びに、立体映像符号化プログラム及び立体映像復号プログラム
WO2015083451A1 (ja) 2013-12-04 2015-06-11 オリンパス株式会社 ワイヤレス伝送システム
US9584795B2 (en) 2013-12-04 2017-02-28 Olympus Corporation Wireless transfer system
JP2017505035A (ja) * 2013-12-19 2017-02-09 ソニー インタラクティブ エンタテインメント アメリカ リミテッド ライアビリテイ カンパニー 映像待ち時間の短縮

Also Published As

Publication number Publication date
EP1734766A3 (en) 2013-01-23
US20120224025A1 (en) 2012-09-06
JP5328082B2 (ja) 2013-10-30
CN100586178C (zh) 2010-01-27
US20070008575A1 (en) 2007-01-11
JP2006352876A (ja) 2006-12-28
CN1882080A (zh) 2006-12-20
KR20060130450A (ko) 2006-12-19
EP1734766A2 (en) 2006-12-20
KR100813961B1 (ko) 2008-03-14

Similar Documents

Publication Publication Date Title
JP5328082B2 (ja) 映像送信及び受信方法と装置、及びその伝送ストリーム構造
JP5137340B2 (ja) 映像ディスプレイモードの転換方法及び装置
RU2528080C2 (ru) Кодирующее устройство для сигналов трехмерного видеоизображения
US20100265315A1 (en) Three-dimensional image combining apparatus
EP2559257B1 (en) Method for generating and rebuilding a stereoscopic-compatible video stream and related coding and decoding devices
US9979961B2 (en) Image processing device and image processing method
US20170154407A1 (en) Image processing device and image processing method
JP2007536825A (ja) 立体テレビジョン信号処理方法、送信システムおよびビユーア拡張装置
US20180343437A1 (en) Encoding device and encoding method, and decoding device and decoding method
TW201145977A (en) Method and system for synchronizing 3D glasses with 3D video displays
JPWO2011118215A1 (ja) 映像処理装置
JP5390017B2 (ja) 映像処理装置
KR100940209B1 (ko) 영상 디스플레이 모드 전환 방법, 장치, 및 그 방법을실행하기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는기록매체
CN102447863A (zh) 一种多视点立体视频字幕处理方法
KR101044952B1 (ko) 영상 송신 및 수신 방법과 장치 및 이의 전송 스트림 구조
KR101086437B1 (ko) 영상 송신 및 수신 방법과 장치 및 이의 전송 스트림 구조
JP2012134885A (ja) 画像処理装置及び画像処理方法
JPH11103473A (ja) 立体映像表示装置
KR101556149B1 (ko) 수신 시스템 및 데이터 처리 방법
KR101659623B1 (ko) 입체영상 재생 장치 및 데이터 처리 방법
Inoue et al. Multiple-angle 3D video technology for distant live concerts

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20120413

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20130812

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130910

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20131210

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20140212

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140612

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20140624

A912 Re-examination (zenchi) completed and case transferred to appeal board

Free format text: JAPANESE INTERMEDIATE CODE: A912

Effective date: 20140718