CN107566823A - 发送设备及方法、接收设备及方法以及发送/接收系统 - Google Patents
发送设备及方法、接收设备及方法以及发送/接收系统 Download PDFInfo
- Publication number
- CN107566823A CN107566823A CN201711033069.4A CN201711033069A CN107566823A CN 107566823 A CN107566823 A CN 107566823A CN 201711033069 A CN201711033069 A CN 201711033069A CN 107566823 A CN107566823 A CN 107566823A
- Authority
- CN
- China
- Prior art keywords
- data
- information
- audio
- image data
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/172—Processing image signals image signals comprising non-image signal components, e.g. headers or format information
- H04N13/183—On-screen display [OSD] information, e.g. subtitles or menus
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/161—Encoding, multiplexing or demultiplexing different image signal components
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/172—Processing image signals image signals comprising non-image signal components, e.g. headers or format information
- H04N13/178—Metadata, e.g. disparity information
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/24—Systems for the transmission of television signals using pulse code modulation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N2213/00—Details of stereoscopic systems
- H04N2213/003—Aspects relating to the "2D+depth" image format
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N2213/00—Details of stereoscopic systems
- H04N2213/005—Aspects relating to the "3D+depth" image format
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Library & Information Science (AREA)
- Human Computer Interaction (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Television Systems (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
发送设备、发送方法、接收设备、接收方法以及发送/接收系统。该发送设备包括第一数据流产生单元、第二数据流产生单元以及数据发送单元。该第一数据流产生单元产生图像压缩数据流。该第二数据流产生单元产生不直接涉及音频数据的特定信息被添加到的音频压缩数据流。该数据发送单元多路复用由第一数据流产生单元产生的图像压缩数据流和由第二数据流产生单元产生的音频压缩数据流,并发送产生的数据流。
Description
本分案申请是申请日为2011年5月19日、申请号为201110130756.4发明名称为“发送设备及方法、接收设备及方法以及发送/接收系统”的分案申请。
技术领域
本公开涉及发送设备、发送方法、接收设备、接收方法以及发送/接收系统,更具体地说,涉及简单地连同图像数据和音频数据一起发送和获得特定信息的发送设备等。
背景技术
在现有技术中,熟知了可以从广播站发送3维(3D)图像数据以便显示该3D图像数据,由机顶盒(STB)接收该3D图像数据,并使用诸如高清多媒体接口(HDMI)标准之类的数字接口,将该3D图像数据从机顶盒发送到电视(TV)接收器。例如,高清多媒体接口规范版本1.4(2009年6月5日)公开了HDMI标准的规范。
例如,日本未审查专利申请公开No.2005-6114提出了使用电视广播波发送3D图像数据的方法。在这种情况下,发送包括用于左眼的图像数据和用于右眼的图像数据的3D图像数据,并且在电视接收器上使用双目视差(binocular parallax)进行3D图像显示。
图21图解了当使用双目视差进行3D图像显示时在屏幕上对象的左和右图像的显示位置与其3D图像的再现位置之间的关系。例如,关于以如图所示左图像La不对准右侧并且右图像Ra不对准左侧的方式在屏幕上显示的对象A,由于左右视线在屏幕表面之前相交,因此其3D图像的再现位置处于屏幕表面之前。
此外,例如,关于以如图所示左图像Lb和右图像Rb以同样的位置被显示在屏幕上的方式显示的对象B,由于左右视线在屏幕表面上相交,因此其3D图像的再现位置位于屏幕表面上。此外,例如,关于以如图所示左图像Lc不在左侧对准并且右图像Rc不在右侧对准的方式显示在屏幕上的对象C,由于左右视线在屏幕表面之后相交,因此其3D图像的再现位置处于屏幕表面之后。
发明内容
关于上述3D图像显示,观看者通常使用双目视差感觉到3D图像的透视。关于被重叠在图像上的、诸如在屏显示(OSD)显示之类的重叠信息,期望与作为景深的3D感以及2维空间感的3D图像显示相关联地进行渲染(render)。例如,当OSD显示作为重叠显示被重叠在3D图像上(叠加显示)时,如果在图像内在景深方向上的最近的对象之前不进行显示,则观看者可能感觉到透视的差异。
这里,可以以这样的方式分配视差:将与包括在3D图像数据中的左眼图像数据和右眼图像数据对应的视差信息与3D图像数据一起发送到电视接收器,并且移位重叠在左眼图像和右眼图像上的重叠信息。因此,可以在最靠近的图像内的对象之前显示重叠在3D图像上的、诸如OSD显示之类的重叠信息。
例如,期望从广播站等简单地发送诸如视差信息之类的信息,以便可以在电视接收器等中使用该信息。
本发明的目的是在重叠信息(如,闭路字幕信息、字幕信息、图形信息或文本信息)的显示中,在重叠信息与图像中的每一个对象之间保持透视的一致性。
根据本公开的实施例的发送设备包括:第一数据流产生单元,其产生图像压缩数据流;第二数据流产生单元,其产生不直接涉及音频数据的特定信息被添加到的音频压缩数据流;以及数据发送单元,其多路复用由第一数据流产生单元产生的图像压缩数据流和由第二数据流产生单元产生的音频压缩数据流,并发送产生的数据流。
在本公开中,由第一数据流产生单元产生图像压缩数据流。此外,由第二数据流产生单元产生音频压缩数据流。压缩格式例如是AC3、AAC等。不直接涉及音频数据的特定信息被添加到音频压缩数据流。该特定信息作为用户数据被插入例如音频压缩数据流。例如,当压缩格式是AC3时,将特定信息插入添加的数据区域(辅助区域)。此外,例如,当压缩格式是AAC时,将特定信息作为数据流元(DSE,用户数据)插入。
在本公开中,例如,图像压缩数据流包括在其中压缩并编码了用于显示3D图像的、具有左眼图像数据和右眼图像数据的3维(3D)图像数据的图像压缩数据,而被添加到音频压缩数据流的特定信息是用于通过移位重叠在基于左眼图像数据和右眼图像数据的图像上的重叠信息来分配视差的视差信息。此外,在本公开中,例如,被添加到音频压缩数据流的特定信息是重叠在基于图像压缩数据的图像上的重叠信息数据。此外,在本公开中,例如,被添加到音频压缩数据流的特定信息是用于获得涉及图像压缩数据的信息的网络接入信息。
如上所述,在本公开中,不直接涉及音频数据的特定信息被添加到压缩音频数据流并进行发送。因此,可以通过使用压缩音频数据流作为容器,从例如广播站、传递服务器等简单地发送诸如视差信息、重叠信息数据、网络接入信息之类的信息,并且可以在电视接收器等中使用该信息。
此外,根据本公开的另一实施例的发送设备包括:数据获得单元,其获得特定信息被添加到的音频压缩数据流;以及数据发送单元,其当由数据获得单元获得的音频压缩数据流的压缩格式是可以在外部设备中管理的压缩格式时,通过发送路径将由数据获得单元获得的音频压缩数据流发送到该外部设备。
在本公开中,由数据获得单元获得音频压缩数据流。压缩格式例如是AC3、AAC等。特定信息(例如,不直接涉及音频数据的信息)被添加到音频压缩数据流。数据获得单元从广播信号或者通过网络从流服务器获得音频压缩数据流。此外,例如,数据获得单元通过从诸如盘之类的记录介质中再现音频压缩数据流来获得它。
在数据发送单元中,确定由数据获得单元获得的音频压缩数据流的压缩格式是否是可以在外部设备中管理的压缩格式。此后,当由数据获得单元获得的音频压缩数据流的压缩格式是可以在外部设备中管理的压缩格式时,通过发送路径将音频压缩数据流发送到该外部设备。
在本公开中,例如,当由数据获得单元获得的音频压缩数据流的压缩格式是可以在外部设备中管理的压缩格式并且外部设备请求了音频压缩数据流的发送时,数据发送单元将由数据获得单元获得的音频压缩数据流发送到该外部设备。
此外,本公开还包括例如解码处理单元,其通过对由数据获得单元获得的音频压缩数据流进行解码处理来获得非压缩音频数据和特定信息,并且至少当由数据获得单元获得的音频压缩数据流的压缩格式不是能够在外部设备中管理的压缩格式,或者外部设备未请求音频压缩数据流的发送时,数据发送单元可以通过发送路径将由解码处理单元获得的非压缩音频数据和特定信息发送到外部设备。
此外,在本公开中,例如,数据发送单元可以通过发送路径从包括在外部设备中的存储单元中读取并获得关于可以在外部设备中管理的音频压缩数据流的压缩格式的信息以及指示外部设备是否请求了音频压缩数据流的发送的信息。
此外,在本公开中,例如,数据发送单元还可以通过发送路径向外部设备发送用于显示3D图像的、包括左眼图像数据和右眼图像数据的3D图像数据,并且被添加到音频压缩数据流的特定信息可以是用于通过移位重叠在用于显示3D图像数据的、基于左眼图像数据和右眼图像数据的图像上的重叠信息来分配视差的视差信息。
此外,在本公开中,数据发送单元还可以通过发送路径将图像数据发送到外部设备,并且被添加到音频压缩数据流的特定信息可以是重叠在基于图像数据的图像上的重叠信息。
此外,在本公开中,数据发送单元还可以通过发送路径将图像数据发送到外部设备,并且被添加到音频压缩数据流的特定信息可以是用于获得涉及图像数据的信息的网络接入信息。
如上所述,在本公开中,当满足特定条件时,不改变地将特定信息被添加到的音频压缩数据流发送到外部设备。因此,不需要对音频压缩数据流进行解码处理,并且可以使用音频压缩数据流作为容器简单地发送诸如视差信息、重叠信息数据、网络接入信息之类的信息,并在电视接收器等中使用该信息。
根据本公开的实施例的接收设备包括:数据接收单元,其通过发送路径从外部设备接收特定信息被添加到的音频压缩数据流;以及解码处理单元,其通过对由数据接收单元接收到的音频压缩数据流进行解码处理来获得非压缩音频数据和特定信息。
在本公开中,由数据接收单元通过发送路径从外部设备接收音频压缩数据流。其压缩格式例如是AC3、AAC等。特定信息被添加到音频压缩数据流。此后,通过解码处理单元对音频压缩数据流进行解码处理,以便获得非压缩音频数据和特定信息。
在本公开中,例如,数据接收单元还可以接收用于显示3D图像的、具有左眼图像数据和右眼图像数据的3D图像数据,由解码处理单元获得的特定信息可以是用于通过移位重叠在用于显示3D图像数据的、包括左眼图像数据和右眼图像数据的图像上的重叠信息来分配视差的视差信息,并且该接收设备还可以包括图像数据处理单元,其使用包括在由数据接收单元接收到的3D图像数据中的左眼图像数据和右眼图像数据并且使用由解码处理单元获得的视差信息将视差分配给重叠在左眼图像和右眼图像上的同一重叠信息,并且获得重叠信息被重叠在的左眼图像的数据以及重叠信息被重叠在的右眼图像的数据。
此外,在本公开中,例如,数据接收单元还可以接收图像数据,并且由解码处理单元获得的特定信息可以是重叠在包括由接收单元接收到的图像数据的图像上的重叠信息数据,并且数据接收单元还可以包括图像数据处理单元,其使用由数据接收单元接收到的图像数据和由解码处理单元获得的重叠信息数据获得重叠信息重叠到的图像的数据。
此外,在本公开中,例如,数据接收单元还可以接收图像数据,并且由解码处理单元获得的特定信息可以是用于获得涉及由数据接收单元接收到的图像数据的信息的网络接入信息,并且该接收设备还可以包括网络通信单元,其使用由解码处理单元获得的网络接入信息,从网络获得涉及图像数据的信息。
如上所述,在本公开中,可以从外部设备中接收特定信息被添加到的音频压缩数据流,并且可以使用诸如添加的视差信息、重叠信息数据、网络接入信息之类的信息。
根据本公开实施例,可以使用音频压缩数据流作为容器从广播站、传递服务器等简单地发送诸如视差信息、重叠信息数据、网络接入信息之类的信息,并在电视接收器等中使用该信息。
附图说明
图1是图解根据本公开的实施例的3D图像显示系统的配置示例的块图;
图2是图解广播站中的发送数据产生单元的配置示例的块图;
图3是图解具有1920×1080p的像素格式的图像数据的视图;
图4A至图4C是分别图解包括在3D图像数据发送方法的上下(top and bottom)方法、并排(side by side)方法和帧顺序(frame sequential)方法的视图;
图5是图解检测右眼图像相对于左眼图像的视差矢量的示例的视图;
图6是图解使用块匹配方法获得视差矢量的视图;
图7A至图7D是图解由发送数据产生单元的视差信息集创建单元执行的小型化处理的视图;
图8是图解包括在3D图像显示系统中的机顶盒的配置示例的块图;
图9是图解机顶盒中的中央处理单元(CPU)的控制处理过程的示例的流程图;
图10是图解包括在3D图像显示系统中的电视接收机的配置示例的块图;
图11是图解包括在3D图像显示系统中的、机顶盒的HDMI发送单元(HDMI信源)和电视接收机的HDMI接收单元(HDMI信宿)的配置示例的视图;
图12是图解包括在电视接收机中的E-EDID(自块1起,用于HDMI的扩展部分)的结构的视图;
图13A和图13B是图解“音频数据块”的每一“CEA短音频描述符”的说明的视图;
图14是图解“音频码”与“音频格式”(提取了某些部分)之间的关系的视图;
图15是图解E-EDID的结构中的厂商专用数据块(VSDB)的结构的视图;
图16是图解广播站中的发送数据产生单元的另一配置示例的块图;
图17是图解包括在3D图像显示系统中的电视接收机的另一配置示例的块图;
图18是图解广播站中的发送数据产生单元的另一配置示例的块图;
图19是图解包括在3D图像显示系统中的电视接收机的另一配置示例的块图;
图20是图解3D图像显示系统的另一配置示例的块图;以及
图21是图解在使用双目视差显示3D图像时在屏幕上对象的左右图像的显示位置与其3D图像的再现位置之间的关系的视图。
具体实施方式
以下将描述实现本公开的说明性实施例(以下称为“实施例”)。同时,该描述将按以下顺序进行。
1、实施例
2、改进实施例
1、实施例
3D图像显示系统的配置示例
图1图解了作为实施例的3D图像显示系统10的配置示例。3D图像显示系统10包括广播站100、机顶盒(STB)200和电视接收器(TV)300。
机顶盒200和电视接收器300通过高清多媒体接口(High Definition MultimediaInterface,HDMI)线缆400连接。在机顶盒200中提供有HDMI端子202。在电视接收器300中提供有HDMI端子302。HDMI线缆400的一端连接到机顶盒200的HDMI端子202,而HDMI线缆400的另一端连接到电视接收器300的HDMI端子302。
广播站的描述
广播站100将位流数据BSD插入广播波并发送它。广播站100包括产生位流数据BSD的发送数据产生单元110。位流数据BSD包括具有左眼图像数据和右眼图像数据的3D图像数据、音频数据,并且还包括视差信息(视差矢量)。
发送数据产生单元的配置示例
图2图解在广播站100中产生上述位流数据BSD的发送数据产生单元110的配置示例。发送数据产生单元110包括数据提取单元(存档单元)111、视频编码器112、音频编码单元113、视差信息创建单元114和多路复用单元115。
数据记录介质111a例如可拆卸地安装在数据提取单元111上。在数据记录介质111a中,将音频数据和视差信息与具有左眼图像数据和右眼图像数据的3D图像数据记录在一起,同时该音频数据和视差信息对应于该3D图像数据。数据提取单元111从数据记录介质111a中提取3D图像数据、音频数据、视差信息等,并将其输出。数据记录介质111a是盘型记录介质、半导体存储器等。
记录在数据记录介质111a中的3D图像数据是关于特定发送方法的3D图像数据。将描述3D图像数据的发送方法的示例。虽然这里列举了第一至第三发送方法,但也可以使用除此而外的发送方法。此外,这里将描述这样的情况:在其中左眼L图像数据和右眼R图像数据分别具有确定的分辨率(例如,如图3中所示的1920×1080p的像素格式)。
第一发送方法是上下方法,如图4A所示,其在垂直方向上的前一半中发送左眼图像数据的每一行的数据,而在垂直方向上的后一半中发送右眼图像数据的每一行的数据。在这种情况下,由于左眼图像数据和右眼图像数据具有被减少了一半的行,所以垂直分辨率关于原始信号减半。
第二发送方法是并排方法,如图4B所示,其在水平方向上的前一半中发送左眼图像数据的像素数据,而在水平方向上的后一半中发送右眼图像数据的像素数据。在这种情况下,左眼图像数据和右眼图像数据分别具有减少了一半的水平像素数据。水平分辨率相对于原始信号减半。
第三发送方法是帧顺序方法,如图4C所示,其对各个场顺序切换左眼图像数据和右眼图像数据,并发送所得到的数据。
此外,记录在数据记录介质111a中的视差信息例如是对于包括在图像中的每一像素的视差矢量。将描述视差矢量检测的示例。这里,将描述右眼图像相对于左眼图像的视差矢量的示例。如图5所示,左眼图像用作检测图像,而右眼图像用作参考图像。在这个示例中,检测位置(xi,yi)和(xj,yj)处的视差矢量。
将描述检测位置(xi,yi)处的视差矢量的情况的示例。在这种情况下,例如,在左眼图像中设置在其左上部分中具有处于位置(xi,yi)的像素的8×8或16×16像素块(视差检测块)Bi。此后,在右眼图像中检测与像素块Bi匹配的像素块。
在这种情况下,在右眼图像中设置以位置(xi,yi)作为中心的检测范围,并且将检测范围中的每个像素作为顺序焦点像素,以便例如顺序设置与上述像素块Bi相同的8×8或16×16对照块。
在像素块Bi与顺序设置的对照块之间,获得对于各个对应像素的差值绝对值之和。这里,如图6所示,当像素块Bi的像素值被设置为L(x,y),而对照块的像素值被设置为R(x,y)时,像素块Bi与特定对照块之间的差值绝对值之和被表示为∑|L(x,y)-R(x,y)|。
当在右眼图像中设置的检测范围中包括n个像素时,最终获得n个和S1至Sn,并且在它们之中选择最小和Smin。此后,从在其中获得了和Smin的对照块中获得左上像素的位置(xi',yi')。因此,检测到诸如(xi'-xi,yi'-yi)之类的位置(xi,yi)处的视差矢量。虽然省略了详细描述,但关于(xj,yj)处的视差矢量,例如,在左眼图像中设置具有左上像素处于位置(xj,yj)的8×8或16×16像素块Bj,并且使用同样的过程进行检测。
返回图2,视差信息创建单元114对从数据提取单元130输出的视差信息(即,对于每一像素的视差矢量)进行小型化处理。此后,视差信息创建单元114创建并输出通过以特定尺寸划分画面区域而获得的每一区域的视差矢量集(即,视差信息集)。图7图解由视差信息创建单元114进行的小型化处理的示例。
首先,如在图7A中所示,视差信息创建单元114使用对于每一像素的视差矢量来获得对于每一块的视差矢量。如上所述,按照如下方式构成所述块:对于位于最下层的像素的每一上层,在水平方向和垂直方向上以特定尺寸划分画面区域。此后,按照如下方式获得每一块的视差矢量:从对应块中的所有像素的视差矢量中选择具有最大值的视差矢量。
接着,如图7B所示,视差信息创建单元114使用对于每一块的视差矢量来获得对于每一组(块组)的视差矢量。通过对于所述块的上层来集中并分组多个相邻块以获得所述组。在图7B的示例中,每一组包括以虚线框界定的四个块。此后,按照这样的方式获得每一组的视差矢量:例如,从对应组中的所有块的视差矢量中选择具有最大值的视差矢量。
接着,如图7C所示,视差信息创建单元114使用对于每一组的视差矢量来确定对于每一分区(partition)的视差矢量。通过对于组的上层来集中并分组多个相邻组以获得分区。在图7C的示例中,每一分区包括以虚线框界定的两个组。此后,按照这样的方式获得分区的视差矢量:例如,从包括在对应分区中的所有组的视差矢量中选择具有最大值的视差矢量。
接着,如图7D中所示,视差信息创建单元114使用对于分区的视差矢量来确定位于最上层的整个画面的视差矢量。在图7D的示例中,整个画面包括以虚线框界定的四个分区。此后,按照这样的方式获得整个画面的视差矢量:例如,从包括在整个画面中的所有分区的视差矢量中选择具有最大值的视差矢量。
如上所述,视差信息创建单元114通过在对于位于最下层的每一像素的视差矢量进行小型化处理,可以获得块、组、分区和整个画面的每一层的每一区域的视差矢量。同时,在图7A至图7D所示的小型化处理的示例中,除了像素层之外,最终还获得了四个层(即,块、组、分区和整个画面)的视差矢量。然而,层数、分拆每一层的区域的方法和区域数不限于以上那些。
视差信息创建单元114使用上述小型化处理创建特定层的每一区域的视差矢量集,并将该视差矢量集作为视差信息集输出。同时,基于接收侧所请求的视差矢量的空间密度、发送频带(band)等,进行获得视差矢量的每一区域的尺寸的选择(即,例如层的选择)。
返回图2,视频编码器112对从数据提取单元111供应的3D图像数据进行诸如运动图像专家组(MPEG)4-高级视频编码(AVC)、MPEG2、视频编码解码(VC)-1之类的编码,并创建图像压缩数据流(视频基本流)。音频编码器113对从数据提取单元111供应的音频数据进行诸如AC3或AAC之类的编码,并且创建音频压缩数据流(音频基本流)。
音频编码器113将上述视差信息创建单元114创建的视差信息集添加到音频压缩数据流。这里,视差信息集作为用户数据被插入音频压缩数据流。例如,当压缩格式为ACC时,将视差信息集作为数据流元(DSE,用户数据)插入。因此,使用音频压缩数据流作为容器(container)发送视差信息集。在电视接收器300(如后所述)中,通过移位被重叠在包括左眼图像数据和右眼图像数据的图像上的重叠信息(OSD显示等),将视差信息集用于指定视差。
多路复用器115多路复用从视频编码器112输出的图像压缩数据流和从音频编码器113输出的音频压缩数据流。此后,多路复用器115创建并输出用作多路复用数据流的位流数据(传输流)BSD。
将简要描述在图2中所示的发送数据产生单元110的操作。将数据提取单元111输出的3D图像数据供应到视频编码器112。在视频编码器112中,对3D图像数据进行诸如MPEG4-AVC、MPEG2、VC-1之类的编码处理,并创建包括编码视频数据的图像压缩数据流(视频基本流)。将该图像压缩数据流供应到多路复用器115。
此外,将从数据提取单元111输出的、对于每个像素的视差矢量供应到视差信息创建单元114,并在那上面进行小型化处理。在视差信息创建单元114中,创建按照这样的方式获得的每一区域的视差矢量集(即,视差信息集):以特定尺寸划分画面区域。将该视差信息集供应到音频编码器113。
此外,将数据提取单元111输出的音频数据供应到音频编码器113。在音频编码器113中,相对于从数据提取单元供应的音频数据进行诸如AC3、AAC之类的编码处理,并且产生音频压缩数据流(音频基本流)。
此外,在音频编码器113中,将在上述视差信息创建单元114中创建的视差信息集添加到音频压缩数据流。在这种情况下,将视差信息集如上所述那样添加到的音频压缩数据流供应到多路复用器115。
对多路复用器115,从视频编码器112供应图像压缩数据流,并且从音频编码器113供应视差信息集如上所述那样被添加到的音频压缩数据流。此外,在多路复用器115中,打包并多路复用从各个编码器供应的压缩数据流(基本流),以便获得作为发送数据的位流数据(传输流)BSD。
机顶盒的描述
返回图1,机顶盒200接收被插入广播波,然后从广播站100发送的位流数据(传输流)BSD。该位流数据BSD包括3D图像数据(包括左眼图像数据和右眼图像数据)、音频数据、视差信息集等。机顶盒200包括位流处理单元201。
位流处理单元201从该位流数据BSD获得非压缩3D图像数据。此外,位流处理单元201从该位流数据BSD获得音频压缩数据流,或者非压缩音频数据和视差信息集。
图8图解了机顶盒200的配置示例。机顶盒200包括位流处理单元201、HDMI端子202、天线端子203、数字调谐器204、音频成帧单元208和HDMI发送单元209。位流处理单元201包括多路分用器205、视频解码器206和音频解码器207。此外,机顶盒200包括中央处理单元(CPU)211、闪速只读存储器(ROM)212、动态随机存取存储器(DRAM)213、内部总线214、遥控接收单元215和遥控发送器216。
CPU 211控制机顶盒200的每一单元的操作。闪速ROM 212存储控制软件和数据。DRAM 213构成CPU 211的工作区域。CPU 211通过在DRAM 213上展开从闪速ROM 212读取的软件或数据来运行软件,从而控制机顶盒200的每一单元。
遥控接收单元215接收从遥控发送器216发送的遥控信号(遥控代码),并将接收到的遥控信号供应到CPU 211。CPU 211基于该遥控代码控制机顶盒200的每一单元。CPU 211、闪速ROM 212和DRAM 213连接到内部总线214。
天线端子203是用于输入接收天线(未示出)接收到的电视广播信号的端子。数字调谐器204处理输入到天线端子203的电视广播信号,并输出与用户选择的频道对应的特定位流数据(传输流)。
位流处理单元201如上所述那样从位流数据BSD中获得3D图像数据,并且还获得音频压缩数据流,或者非压缩音频数据和视差信息集。多路分用器205从位流数据BSD提取视频和音频基本流分组,并将所述分组发送到各个解码器。
视频解码器206进行与上述发送数据产生单元110的视频解码器112相反的处理。即,视频解码器206根据多路分用器205所提取的视频分组重构视频基本流(图像压缩数据流),并进行解码处理,从而获得包括左眼图像数据和右眼图像数据的非压缩3D图像数据。3D图像数据的发送方法例如包括上述第一发送方法(上下方法)、第二发送方法(并排方法)、第三发送方法(帧顺序方法)等(参看图4A至图4C)。
音频解码器207进行与发送数据产生单元110的上述音频解码器113相反的处理。音频解码器207根据多路分用器205所提取的音频分组重构音频基本流(音频压缩数据流),并进行解码处理,从而获得非压缩音频数据(处理控制监视(PCM)数据)和视差信息集。然而,音频解码器207不对压缩音频数据流进行解码处理,并且在以下情形下不用改变直接输出该压缩音频数据流:即,可以在电视接收器300中管理压缩音频数据流的压缩格式并且电视接收器300请求了压缩音频数据流的发送的情形。
在CPU 211的控制下进行上述音频解码器207的处理。CPU 211如下所述那样从电视接收器300获得增强型扩展显示标识数据(E-EDID)。CPU 211基于一种信息(压缩强制标志信息)进行控制,该信息指示是否请求了关于可以在电视接收器300中管理的音频压缩数据流和包括在E-EDID中的音频压缩数据流的压缩格式的信息的发送。
图9的流程图图解了CPU 211的控制处理的过程。CPU 211在步骤ST1中开始处理,此后前进到步骤ST2的处理。在步骤ST2中,CPU 211基于压缩强制标志信息确定电视接收器300是否请求了音频压缩数据流的发送。当请求了发送时,CPU 211前进到步骤ST3的处理。
在步骤ST3中,CPU 211确定是否可以在电视接收器300中管理该压缩格式。当可以在电视接收器300中管理该压缩格式时,CPU 211在步骤ST4中控制音频解码器207,以便不解码音频压缩数据流并不用改变就输出。CPU 211在进行了步骤ST4的处理之后在步骤ST5中终止该控制处理。
当在步骤ST2中电视接收器300未请求音频压缩数据流的发送时,CPU 211前进到步骤ST6的处理。此外,当在步骤ST3中所接收到的音频压缩数据流的压缩格式不是可以在电视接收器300中管理的压缩格式时,CPU 211前进到步骤ST6的处理。在步骤ST6中,CPU211控制音频解码器207,以便解码音频压缩数据流并输出非压缩音频数据和视差信息集。CPU 211在进行了步骤ST6的处理之后在步骤ST5中终止该控制处理。
音频成帧单元208对遵循国际电气技术委员会(IEC)60958的音频解码器207的输出进行成帧。当从音频解码器207输出音频压缩数据流时,音频成帧单元208对遵循IEC60958的音频压缩数据流进行成帧。而且,当从音频解码器207输出非压缩音频数据和视差信息集时,音频成帧单元208将视差信息集插入添加的数据区域(辅助区域),同时对遵循IEC 60958的非压缩音频数据进行成帧。
HDMI发送单元209使得使用遵循HDMI的通信,从HDMI端子202发送3D图像数据和音频数据。HDMI发送单元209处于HDMI发送单元209能够管理3D图像数据的状态。HDMI发送单元209封装并输出图像和音频数据到HDMI端子202,以便通过HDMI的TMDS信道发送该数据。下面将详细描述该HDMI发送单元209。
将简要描述机顶盒200的操作。将输入到天线端子203的电视广播信号供应到数字调谐器204。在数字调谐器204中,处理电视广播信号,并且输出与用户选择频道对应的特定位流数据(传输流)BSD。
将从数字调谐器204输出的位流数据BSD供应到构成位流处理单元201的多路分用器205。在该多路分用器205中,从位流数据BSD提取视频和音频基本流分组并发送到各个解码器。
在视频解码器206中,基于由多路分用器205提取的视频分组重构视频基本流(图像压缩数据流)。此后,在视频解码器206中,对图像压缩数据流进行解码处理,以便获得包括左眼图像数据和右眼图像数据的3D图像数据。将3D图像数据供应到该HDMI发送单元209。
此外,在音频解码器207中,基于由多路分用器205提取的音频分组重构音频基本流(音频压缩数据流)。此后,当可以在电视接收器300中管理压缩格式并且电视接收器300请求压缩音频数据流的发送时,从音频解码器207不改变地输出音频压缩数据流。
此外,至少当不在电视接收器300中管理压缩格式并且电视接收器300不请求压缩音频数据流的发送时,在音频解码器207中进行解码处理。在这种情况下,在音频解码器207中,对重构的压缩音频数据流进行解码处理,以便获得非压缩音频数据(PCM数据)和视差信息集。
将频解码器207的输出供应到音频成帧单元208。在音频成帧单元208中,对遵循IEC 60958的音频解码器207的输出进行成帧。当从音频解码器207输出音频压缩数据流时,在音频成帧单元208中对遵循IEC 60958的音频压缩数据流进行成帧。此外,当从音频解码器207输出非压缩音频数据和视差信息集时,在音频成帧单元208中对遵循IEC 60958的非压缩音频数据进行成帧并将视差信息集插入添加的数据区域(辅助区域)。
将音频成帧单元208的输出供应到HDMI发送单元209。在HDMI发送单元209中,打包3D图像数据和音频数据,并将其从HDMI端子202发送到HDMI线缆400。
电视接收机的描述
返回图1,电视接收器300接收从机顶盒200通过HDMI线缆400发送的3D图像数据、音频数据等。电视接收器300包括3D信号处理单元301。3D信号处理单元301对3D图像数据进行与发送方法对应的处理(解码处理),从而获得左眼图像数据和右眼图像数据。
图10图解了电视接收器300的配置示例。电视接收器300包括3D信号处理单元301、HDMI端子302、HDMI接收单元303和音频解码器304。此外,电视接收器300还包括天线端子305、数字调谐器306、位流处理单元307、视频/图形处理电路308、OSD显示数据产生单元309、面板驱动电路310、显示面板311。
此外,电视接收器300还包括音频信号处理电路312、音频放大电路313和扬声器314。此外,电视接收器300包括CPU 321、闪速ROM 322、DRAM323、内部总线324、遥控接收单元325、遥控发送器326、网络端子327和以太网接口328。除此而外,以太网是注册商标。
CPU 321控制电视接收器300的每一单元的操作。闪速ROM 322存储控制软件和数据。DRAM 323构成CPU 321的工作区域。CPU 321通过在DRAM323上展开从闪速ROM 322读取的软件或数据来运行软件,从而控制机顶盒200的每一单元。
遥控接收单元325接收从遥控发送器326发送的遥控信号(遥控代码),并将接收到的遥控信号供应到CPU 321。CPU 321基于该遥控代码控制机顶盒300的每一单元。CPU 321、闪速ROM 322和DRAM 323连接到内部总线324。
以太网接口328通过网络端子327连接到诸如因特网之类的网络(未示出)。以太网接口328可以根据用户的操控,通过网络获得使用例如窗口小部件(widget)图形地显示的、关于天气预报、股票价格等的各种信息。以太网接口328连接到内部总线324。以太网接口328构建网络通信单元。
天线端子305是用于输入由接收天线(未示出)接收到的电视广播信号的端子。数字调谐器306处理输入到天线端子305的电视广播信号,并输出与用户选择频道对应的特定位流数据(传输流)BSD。
位流处理单元307被构造成与图8中所示的机顶盒200的位流处理单元201相同。位流处理单元307从位流数据BSD中获得非压缩3D图像数据,并且还获得非压缩音频数据和视差信息集。
HDMI接收单元303经由遵循HDMI的通信,通过HDMI线缆400接收供应到HDMI端子302的非压缩图像数据和音频数据。HDMI接收单元303处于HDMI接收单元303可以管理3D图像数据的状态。稍后将详细描述该HDMI接收单元303。
这里,音频数据是上述机顶盒200部分中以下描述的任何之一。也就是说,音频数据是将视差信息集作为用户数据被添加到的音频压缩数据流,或者在其中将视差信息集插入添加的数据区域(辅助区域)的非压缩音频数据(PCM数据)。
当接收到在HDMI接收单元303中将视差信息集作为用户数据添加到的音频压缩数据流时,音频解码器304进行解码处理并输出非压缩音频数据(PCM数据)和视差信息集。此外,当接收到在HDMI接收单元303中在其中将视差信息集插入添加的数据区域(辅助区域)的非压缩音频数据(PCM数据)时,音频解码器304不用改变地输出非压缩音频数据(PCM数据)和视差信息集。
3D信号处理单元301对由HDMI接收单元303接收到的、或者由位流处理单元307获得的3D图像数据进行解码处理,从而产生左眼图像数据和右眼图像数据。在这种情况下,3D信号处理单元301对由位流处理单元307获得的3D图像数据进行与其发送方法(参考图4A至图4C)对应的解码处理。此外,3D信号处理单元301对由HDMI接收单元303接收到的3D图像数据进行与发送最小化差分信号(Transmission Minimized Differential Signal,
TMDS)发送数据结构对应的解码处理。
视频/图形处理电路308基于由3D信号处理单元301产生的左眼图像数据和右眼图像数据产生图像数据以便显示3D图像。此外,视频/图形处理电路308根据需要对图像数据进行图像质量调整处理。此外,视频/图形处理电路308根据需要组合重叠信息数据与图像数据。
重叠信息数据例如是由OSD显示数据产生单元309产生的、诸如菜单或节目表之类的OSD显示数据。此外,重叠信息数据例如是窗口小部件(widget)的图形显示数据。视频/图形处理电路308根据针对要重叠在左眼图像数据和右眼图像数据的同一重叠信息的重叠位置分配视差。视频/图形处理电路308基于从音频解码器304输出的视差信息集或从位流处理单元307输出视差信息集,进行视差分配处理。此后,视频/图形处理电路308获得在其上重叠重叠信息的左眼图像数据以及在其上重叠重叠信息的右眼图像数据。
面板驱动电路310基于从视频/图形处理电路308输出的图像数据来驱动显示面板311。显示面板311例如由液晶显示器(LCD)、等离子显示面板(PDP)等构成。在显示面板311上进行显示,以便显示3D图像。例如,显示面板311以时分方式交替地显示基于左眼图像数据的左眼图像和基于右眼图像数据的右眼图像。
音频信号处理电路312对从音频解码器304输出的、或者由位流处理单元307获得的音频数据进行必要的处理(如,数模(D/A)转换等)。音频放大器电路313放大从音频信号处理电路312输出的音频信号,并将放大后的音频信号供应到扬声器314。
将简要描述图10中所示的电视接收器300的操作。在HDMI接收单元303中,接收从连接到HDMI端子302的机顶盒200发送的3D图像数据和音频数据。将由HDMI接收单元303接收到的3D图像数据供应到3D信号处理单元301。
此外,将由HDMI接收单元303接收到的音频数据供应到音频解码器304。音频数据是视差信息集作为用户数据被添加到的音频压缩数据流,或者在其中将视差信息集插入添加的数据区域(辅助区域)的非压缩音频数据(PCM数据)。
在音频解码器304中,当HDMI接收单元303接收到的音频数据是音频压缩数据流时,对音频压缩数据流进行解码处理,以便获得非压缩音频数据(PCM数据)和视差信息集。此外,在音频解码器304中,当HDMI接收单元303接收到的音频数据是非压缩音频数据(PCM数据)时,不进行解码处理并且不用改变地输出非压缩音频数据和视差信息集。
将音频解码器304所获得的非压缩音频数据供应到音频信号处理电路312。而且,将音频解码器304所获得的视差信息供应到视频/图形处理电路308。
将输入到天线端子305的电视广播信号供应到数字调谐器306。在数字调谐器306中,处理该电视广播信号,并输出与用户选择频道对应的特定位流数据(传输流)BSD。
将从数字调谐器306输出的位流数据BSD供应到位流处理单元307。在位流处理单元307中,从该位流数据BSD中获得非压缩3D图像数据,并且进一步获得非压缩音频数据和视差信息集。
将由位流处理单元307获得的3D图像数据供应到3D信号处理单元301。此外,将由位流处理单元307获得的非压缩音频数据供应到音频信号处理电路312。此外,将由位流处理单元307获得的视差信息集供应到视频/图形处理电路308。
在3D信号处理单元301中,对由HDMI接收单元303接收到的或者由位流处理单元307获得的3D图像数据进行解码处理,以便产生左眼图像数据和右眼图像数据。此外,在视频/图形处理电路308中,根据需要对由3D信号处理单元301产生的图像数据进行图像质量调整处理。此外,在视频/图形处理电路308中,根据需要将重叠信息数据与图像数据组合起来。
在这种情况下,基于视差信息集将视差分配给重叠在左眼图像和右眼图像上的同一重叠信息(窗口小部件等的OSD显示和图形显示)。在这种情况下,重叠信息集中仅仅重叠在左眼图像上的重叠信息、仅仅重叠在右眼图像上的重叠信息或者两者根据视差矢量的值移位。从视频/图形处理电路308获得重叠信息重叠在其上左眼图像数据和重叠信息重叠在其上的右眼图像数据。
将由视频/图形处理电路308获得的左眼图像数据和右眼图像数据供应到面板驱动电路310。因此,通过显示面板311显示3D图像。例如,根据左眼图像数据的左眼图像和根据右眼图像数据的右眼图像以时分方式交替地显示在显示面板311上。观看者佩戴其中左眼快门和右眼快门与显示面板311上的显示同步地交替开启的快门眼镜,以便观看者可以使用左眼仅仅观看到左眼图像并且使用右眼仅仅观看到右眼图像,从而感觉到3D图像。
此外,在音频信号处理电路312中,对由音频解码器304或位流处理单元307获得的音频数据进行必要的处理,如D/A转换等。由音频放大电路313放大音频数据,然后将其供应到扬声器314。因此,从扬声器314输出与显示面板311上的显示图像对应的音频。
[HDMI发送单元和HDMI接收单元的配置示例]
图11图解了图1中的3D图像显示系统10中的机顶盒200的HDMI发送单元(HDMI信源)209和电视接收器300的HDMI接收单元(HDMI信宿)303的配置示例。
在有效图像间隔(在下文中,适当地也称为“活动视频间隔”)中,HDMI发送单元209使用多个通道单向地将对应于与单一非压缩帧对应的图像的像素数据的差分信号发送到HDMI接收单元303。这里,有效图像间隔是其中从特定垂直同步信号与后续垂直同步信号之间的间隔中去除水平消隐间隔和垂直消隐间隔的间隔。此外,在水平消隐间隔或垂直消隐间隔上,HDMI发送单元209使用多个通道单向地向HDMI接收单元303发送至少与附属于图像的音频数据或控制数据、除音频数据和控制数据之外的其他辅助数据等对应的差分信号。
具有HDMI发送单元209和HDMI接收单元303的HDMI系统的发送通道包括下列发送通道。即,存在作为用于与像素时钟同步地从HDMI发送单元209向HDMI接收单元303单向串行地发送像素数据和音频数据的发送通道的三个TMDS通道#0至#2。此外,存在作为用于发送像素时钟的发送通道的TMDS时钟通道。
HDMI发送单元209包括HDMI发送器81。发送器81例如将非压缩图像的像素数据转换为对应的差分信号,并使用作为多通道的三个TMDS通道#0、#1和#2将产生的信号单向串行地发送到经由HDMI线缆400连接到其中的HDMI接收单元303。
此外,发送器81将伴随非压缩图像的音频数据以及除必要的控制数据之外的其他辅助数据等转换为对应的差分信号,并使用三个TMDS通道#0、#1和#2将产生的信号单向串行地发送到HDMI接收单元303。
此外,发送器81使用TMDS时钟通道,将与使用三个TMDS通道#0、#1和#2发送的像素数据同步的像素时钟发送到通过HDMI线缆400连接的HDMI接收单元303。这里,在单一TMDS通道#i(i=0,1,2)中,在像素时钟的单一时钟间隔上发送10位像素数据。
HDMI接收单元303接收与在活动视频间隔上通过使用多个通道从HDMI发送单元209单向地发送的像素数据对应的差分信号。此外,HDMI接收单元303接收与在水平消隐间隔或垂直消隐间隔使用多通道从HDMI发送单元209单向地发送的音频数据或控制数据对应的差分信号。
即,HDMI接收单元303包括HDMI接收器82。HDMI接收器82接收使用TMDS通道#0、#1和#2从HDMI发送单元209单向地发送的、与像素数据对应的差分信号以及与音频数据或控制数据对应的差分信号。在这种情况下,与通过TMDS时钟通道从HDMI发送单元209发送的像素时钟同步地接收差分信号。
除了上述TMDS通道#0至#2以及TMDS时钟通道之外,HDMI系统的发送通道还包括被称为显示数据通道(DDC)83和消费者电子控制(CEC)线84的发送通道。DDC 83包括包含在HDMI线缆400中的两条信号线(未示出)。使用DDC 83以便HDMI发送单元209从HDMI接收单元303读取增强扩展显示标识数据(E-EDID)。
除了HDMI接收器81之外,HDMI接收单元303还包括存储作为关于自身性能(配置/容量)的性能的信息的E-EDID的EDID只读存储器(ROM)85。HDMI发送单元209响应来自例如CPU 211(参考图8)的请求,通过DDC 83从通过HDMI线缆400连接的HDMI接收单元303中读取E-EDID。
HDMI发送单元209将所读取的E-EDID发送到CPU 211。CPU 211在闪速ROM 212或DRAM 213中存储该E-EDID。该E-EDID包括关于可以在电视接收器300中管理的音频压缩数据流的压缩格式的信息以及指示电视接收器300是否上述那样请求了音频压缩数据流的发送的信息(压缩强制标志信息)。
CEC线84构成为包括在HDMI线缆400中的单一信号线(未示出),并且用于进行控制数据在HDMI发送单元209与HDMI接收单元303之间的双向通信。该CEC线84构造控制数据线。
此外,HDMI线缆400包含连接到被称为HPD(Hot Plug Detect,热插拔检测)的引脚的线86。信源装置可以使用对应的线86检测信宿装置的连接。同时,该HPD线86用作构造双向通信路径的HEAC-线。此外,HDMI线缆400包括用于从信源装置向信宿装置供应电源的电源线87。此外,HDMI线缆400包含应用线88。该应用线88用作构造双向通信路径的HEAC+线。
E-EDID的结构
如上所述,HDMI发送单元209响应来自例如CPU 211(参考图8)的请求,通过DDC 83从通过HDMI线缆400连接的HDMI接收单元303中读取E-EDID。此后,CPU 211从E-EDID中获得关于可以在电视接收器300中管理的音频压缩数据流的压缩格式的信息以及指示是否请求了音频压缩数据流的发送的信息(压缩强制标志信息)。
图12图解了E-EDID结构(从块1起,对于HDMI的扩展部分)。虽然省略了详细描述,但规定了遵循电子工业联盟/消费者电子协会(EIA/CEA)-861B标准的E-EDID结构。
在“音频数据块”的各个“CEA简短音频描述”中,定义了可以由电视接收器(信宿装置)300再现的音频格式、最大通道数、采样频率和量化位数。CPU 211基于各个“CEA简短音频描述”获得关于可以在电视接收器300中管理的音频压缩数据流的压缩格式的信息。
基于音频格式上的差异将“CEA简短音频描述”划分成三种。图13A图解了与“音频代码=1:线性-PCM”对应的“CEA简短音频描述”的规范。图13B图解了与“音频代码=2至8”对应的“CEA简短音频描述”的规范。同时,省略了与“音频代码=9至15”对应的“CEA简短音频描述”的规范的图解。
图14图解了“音频代码”与“音频格式”之间的关系(选择某些部分)。例如,“音频代码=2”指示“音频格式”是AC-3。由于存在“音频代码=2”的“CEA简短音频描述”,所以CPU211识别为可以在电视接收器300中管理与AC-3对应的音频压缩数据流。此外,例如,“音频代码=3”指示“音频格式”是AAC。由于存在“音频代码=6”的“CEA简短音频描述”,所以CPU211识别为可以在电视接收器300中管理AAC的音频压缩数据流。
此外,图15图解了HDMI厂商专用数据块(VSDB)的结构的示例。在第0块中,安排表示为“厂商专用标签代码(=3)”的、指示数据“厂商专用”的数据区域的头部。此外,在第0块中,还安排表示为“长度(=N)”的、指示数据“厂商专用”的长度的信息。此外,在第一块至第三块中,安排表示为“24位IEEE注册标识符(0x000C03)LSB在前”的、指示对于HDMI(R)注册的号码“0x000C03”的信息。
重新定义HDMI厂商专用数据块(VSDB)的特定保留位(即,在本示例中表示为“FC_flg”的一位压缩强制标志)并安排在例如第六块的第一位中。压缩强制标志是用于从机顶盒200请求音频压缩数据流的发送的信息(压缩强制标志信息)。当不请求音频压缩数据流的发送时,“FC_flg”变成0。另一方面,当请求音频压缩数据流的发送时,定义“FC_flg”变成1。
同时,在图15的HDMI厂商专用数据块(VSDB)的结构的示例中,在第六块的第一位中安排一位标志“FC_flg”。然而,不是必须要将一位标志安排在相应位置中。标志“FC_flg”可以被安排在处于保留状态的其他位(例如,第六块的第二位、第八块的第四位或第十三块的第二位)的位置上。
如上所述,在图1所示的3D图像显示系统10中,从广播站100发送图像压缩数据流和音频压缩数据流的多路复用数据流。此后,将视差信息集添加到音频原始数据并进行发送。因此,可以以将音频压缩数据流用作容器这样的方式简单地发送视差信息集,并且可以在电视接收器300中使用该视差信息集。
此外,在图1所示的3D图像显示系统10的机顶盒200中,如果特定条件满足,则将音频压缩数据流不用改变地从广播站100发送到电视接收器300。这里,作为特定条件,音频压缩数据流的压缩格式是可以在电视接收器300中管理的压缩格式,并且电视接收器300请求了音频压缩数据流的发送。
因此,在机顶盒200中,不需要对音频压缩数据流进行解码处理,并且在将音频压缩数据流作为容器的同时将视差信息集简单地发送到电视接收器300,从而在电视接收器300中进行使用。在这种情况下,在音频成帧单元208中对遵循IEC 60958的非压缩音频数据进行成帧处理,以便不需要在其中将视差信息集插入添加的数据区域(辅助区域)等的处理。也就是说,在音频成帧单元208中对遵循IEC 60958的非压缩音频数据流仅仅进行成帧处理。因此,可以降低机顶盒200的处理负担。
此外,在图1所示的3D图像显示系统10的机顶盒200中,通过从包括在电视接收器300中的EDID ROM 85中读取信息来获得指示特定条件是否满足的信息。该信息是关于可以在电视接收器300中管理的音频压缩数据流的压缩格式的信息以及指示是否请求了音频压缩数据流的发送的信息(压缩强制标志信息)。因此,可以省略用户为了输入信息的时间和努力,并且可以改善用户的方便性。
此外,在图1所示的3D图像显示系统10的机顶盒200中,当上述特定条件不满足时,对音频压缩数据流进行解码处理,以便获得非压缩音频数据(PCM数据)和视差信息集。此后,对遵循IEC 60958的非压缩音频数据进行成帧处理,然后将产生的数据从机顶盒200发送到电视接收器300。此时,将视差信息集插入添加的数据区域(辅助区域),然后发送。因此,可以将视差信息集从机顶盒200发送到电视接收器300,并且视差信息集可以用在电视接收器300中。
此外,在图1所示的3D图像显示系统10的电视接收器300中,接收视差信息集被添加到的音频压缩数据流,然后在其上进行解码处理,以便可以获得非压缩音频数据和视差信息集。因此,可以使用视差信息集、根据重叠位置将视差分配给重叠在左眼图像和右眼图像上的重叠信息(窗口小部件等的OSD显示或图形显示)。因此,关于重叠信息的显示,可以将图像内的各个对象之间的透视的一致性保持在最优状态。
2、改进实施例
同时,根据上述实施例,广播站100具有这样的配置,在该配置中将与包括在3D图像数据中的左眼图像数据和右眼图像数据对应的视差信息集添加到音频压缩数据流,然后进行发送。然而,被添加到音频压缩数据流然后进行发送的特定信息不限于视差信息集。
例如,可以将诸如图形信息、文本信息、字幕信息之类的重叠信息数据考虑为被添加到音频压缩数据流然后进行发送的特定信息。图16图解了在那种情况下的广播站100的发送数据产生单元110A的配置示例。该示例是在其中将字幕数据添加到音频压缩数据流然后进行发送的示例。将同样的附图标记用于与图2的那些部分对应的部分,并在图16中适当地省略其描述。
发送数据产生单元110A包括数据提取单元(存档单元)111、视频编码器112、音频编码单元113、多路复用器115和字幕产生单元116。即,在发送数据产生单元110A中,图2中所示的发送数据产生单元110的视差信息创建单元114被替代为字幕产生单元116。
在字幕产生单元116中,产生字幕数据(闭路字幕数据、字幕数据、根据ARIB方法的字幕文本数据等)。音频解码器113将在上述字幕产生单元116中产生的字幕数据添加到音频压缩数据流。这里,将字幕数据作为用户数据添加到音频压缩数据流。因此,使用音频压缩数据流作为容器来发送字幕数据。像在图2的发送数据产生单元110中那样构成并操作图16中所示的发送数据产生单元110A的其他组成部分。
图17图解了当如上所述将字幕数据添加到音频压缩数据流然后进行发送时电视接收器300A的配置示例。将同样的附图标记用于与图10的那些部分对应的部分,并在图17中适当地省略其描述。在电视接收器300A中提供基于字幕数据产生字幕显示数据的字幕显示数据产生单元315。
在音频解码器304中,当HDMI接收单元303的接收音频数据是音频压缩数据流时,对音频压缩数据流进行解码处理,以便获得非压缩音频数据(PCM数据)和字幕数据。此外,在音频解码器304中,当HDMI接收单元303的接收音频数据是非压缩音频数据时,不进行解码处理,并且不用改变地输出非压缩音频数据和字幕数据。
在字幕显示数据产生单元315中,基于在音频解码器304中获得的字幕数据产生字幕显示数据(位图数据)。在这种情况下,例如,基于在电视接收器300A中事先设置的固定视差信息产生视差被分配到的左眼字幕数据和右眼字幕数据。在视频/图形处理电路308中,分别将在字幕显示数据产生单元315中产生的左眼字幕数据和右眼字幕数据与左眼图像数据和右眼图像数据组合在一起。
因此,基于使用音频数据作为容器发送的字幕数据的字幕显示数据被重叠在3D图像上,然后被显示在电视接收器300A中。像在图10的电视接收器300中那样构成并操作图17中所示的电视接收器300A的其他组成部分。
此外,例如,可以将诸如统一资源定位符(URL)之类的网络接入信息考虑成被添加到音频压缩数据流然后进行发送的特定信息。图18图解了在那种情况下广播站100的发送数据产生单元110B的配置示例。将同样的附图标记用于与图2的那些部分对应的部分,并在图18中适当地省略其描述。
在发送数据产生单元110B中,将诸如URL之类的网络接入信息(NW存取信息)供应到音频解码器113。在音频解码器113中,将网络接入信息添加到音频压缩数据流。这里,该网络接入信息例如是诸如与来自因特网的发送3D图像数据对应的视差信息、与发送图像数据对应的字幕信息、与发送图像数据等对应的亚音频(subaudio)数据或用于获得其他信息的存取信息之类的信息。
由于网络接入信息像上述那样被添加到了音频压缩数据流,所以使用音频压缩数据流作为容器发送该网络接入信息。这里,将网络接入信息作为用户数据插入音频压缩数据流。像在图2的发送数据产生单元110中那样构成并操作图18中所示的发送数据产生单元110B的其他组成部分。
图19图解了当如上所述将网络接入信息(NW接入信息)添加到音频压缩数据流然后进行发送时电视接收器300A的配置示例。将同样的附图标记用于与图10的那些部分对应的部分,并在图19中适当地省略其描述。
当HDMI接收单元303的接收音频数据是音频压缩数据流时,对音频压缩数据流进行解码处理,以便在音频解码器304中获得非压缩音频数据(PCM数据)和网络接入信息。此外,在音频解码器304中,当HDMI接收单元303的接收音频数据是非压缩音频数据时,不进行解码处理,并且不用改变地输出非压缩音频数据和网络接入信息。
在音频解码器304中获得的网络接入信息被供应到CPU 321。CPU 321基于网络接入信息控制以太网接口328,并且从因特网获得诸如视差信息、字幕信息或亚音频数据(subaudio data)之类的信息。例如,在以太网接口328中获得的视差信息被供应到视频/图形处理电路308,并被用于将视差分配给重叠在左眼图像和右眼图像上的重叠信息(诸如OSD)。
此外,例如,在以太网接口328中获得的字幕信息被供应到视频/图形处理电路308,并被重叠在左眼图像和右眼图像上。此外,例如,在以太网接口328中获得的亚音频数据被供应到音频处理电路312,并从扬声器314中选择性地输出亚音频。像在图10的电视接收器300中那样构成并操作图19中所示的电视接收器300B的其他组成部分。
同时,在上述实施例中,机顶盒200在下列条件下将音频压缩数据流不用改变地从广播站100发送到电视接收器300。所述条件是:音频压缩数据流的压缩格式是可以在电视接收器300中被管理的压缩格式,并且电视接收器300请求音频压缩数据流的发送。
然而,当音频压缩数据流的压缩格式是可以在电视接收器300中被管理的压缩格式时,可以考虑一种配置:在其中,不对接收音频压缩数据流进行解码处理并且不用改变地将接收音频压缩数据流发送到电视接收器300。在这种情况下,关于电视接收器300,不需要在HDMI VSDB上安排指示是否请求音频压缩数据流的发送的信息。
此外,在该实施例中,配置成机顶盒200从广播站100接收基于广播信息的3D图像数据。然而,可以考虑一种配置:在其中,机顶盒200经由网络从流服务器接收3D图像数据和音频数据。
此外,在该实施例中,配置成机顶盒200将在数字调谐器204中接收到的3D图像数据和音频数据直接发送到电视接收器300。然而,可以考虑将在数字调谐器204中接收到的3D图像数据和音频数据临时存储在存储器(未示出)中。在这种情况下,配置成以特定定时从存储器中读取3D图像数据和音频数据,然后将其发送到电视接收器300。所述特定定时例如是用户操作再现的定时等。
此外,在上述实施例中,配置成机顶盒200将发送3D图像数据和音频数据到电视接收器300。然而,可以考虑一种配置:在其中,将接收3D图像数据和接收音频数据发送到监视设备、投影仪等,而不是电视接收器300。此外,可以考虑一种配置:在其中,代替机顶盒200而使用具有接收功能的记录器、个人计算机等。
此外,在上述实施例中,机顶盒200通过HDMI线缆400与电视接收器300相连。然而,本公开可以以同样的方式应用到机顶盒200使用与HDMI相同的数字接口以有线方式与电视接收器300相连的情况,还可以以同样的方式应用到机顶盒200无线地与电视接收器300相连的情况。
此外,在上述实施例中,图解了3D图像显示系统10包括广播站100、机顶盒200和电视接收器300。然而,电视接收器300包括作用为如图10中的机顶盒200中的位流处理单元201的位流处理单元307。因此,可以考虑如图20中所示的、包括广播站100和电视接收器300的3D图像显示系统10A。
此外,在上述实施例中,已经描述了在其中从广播站100广播包括3D图像数据的数据流(位流数据)的示例。然而,本公开可以以同样的方式应用到具有如下配置的系统:在其中,使用诸如因特网之类的网络将数据流传递到接收终端。
本公开包含涉及公开在2010年5月26日在日本专利局提交的日本优先权专利申请No.2010-121044的主题,其整个内容通过引用合并在此。
本领域技术人员应该理解,依赖于设计要求和其他因素,可以出现各种变型、组合、部分组合和变更,只要它们在所附的权利要求或其等效物的范围内。
Claims (8)
1.一种接收装置,包括:
处理设备,配置为:
从外部设备接收具有音频分组的音频压缩数据流,所述音频分组插入了作为用户数据的特定信息,
通过对接收的音频压缩数据流进行解码处理,获得非压缩音频数据和所述特定信息,以及
向所述外部设备发送指示是否请求在没有改变的情况下所述音频压缩数据流的发送的第一信息以及指示能够由所述接收装置管理的压缩格式的第二信息;以及
存储设备,配置为存储所述第一信息和所述第二信息,
其中所述处理设备配置为从所述存储设备获取所述第一信息和所述第二信息。
2.根据权利要求1所述的接收装置,其中所述处理设备配置为:
接收用于显示3D图像的、包含左眼图像数据和右眼图像数据的3D图像数据,其中所述特定信息包含用于通过移位重叠在所述3D图像上的重叠信息来分配视差的视差信息,以及
将所述视差分配到所述重叠信息,所述重叠信息使用所述左眼图像数据、所述右眼图像数据和所述视差信息重叠在左眼图像和右眼图像上。
3.根据权利要求1所述的接收装置,其中所述处理设备配置为:
接收图像的图像数据,以及
获得要重叠在所述图像上的重叠信息,
其中所述特定信息包含所述重叠信息。
4.根据权利要求1所述的接收装置,其中所述处理设备配置为:
接收图像数据,
获得网络接入信息,以及
使用所述网络接入信息获得与所述图像数据相关的信息,
其中所述特定信息包含所述网络接入信息。
5.一种用于接收装置的接收方法,所述方法包括:
从外部设备接收具有音频分组的音频压缩数据流,所述音频分组插入了作为用户数据的特定信息,
通过对接收的音频压缩数据流进行解码处理来获得非压缩音频数据和所述特定信息,以及
向所述外部设备发送指示是否请求在没有改变的情况下所述音频压缩数据流的发送的第一信息以及指示能够由所述接收装置管理的压缩格式的第二信息。
6.根据权利要求5所述的接收方法,包括:
接收用于显示3D图像的、包含左眼图像数据和右眼图像数据的3D图像数据,其中所述特定信息包含用于通过移位重叠在所述3D图像上的重叠信息来分配视差的视差信息,以及
将所述视差分配到所述重叠信息,所述重叠信息使用所述左眼图像数据、所述右眼图像数据和所述视差信息重叠在左眼图像和右眼图像上。
7.根据权利要求5所述的接收方法,包括:
接收图像的图像数据,以及
获得要重叠在所述图像上的重叠信息,
其中所述特定信息包含所述重叠信息。
8.根据权利要求5所述的接收方法,包括:
接收图像数据,
获得网络接入信息,以及
使用所述网络接入信息获得与所述图像数据相关的信息,
其中所述特定信息包含所述网络接入信息。
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2010121044 | 2010-05-26 | ||
| JPJP2010-121044 | 2010-05-26 | ||
| CN2011101307564A CN102263989A (zh) | 2010-05-26 | 2011-05-19 | 发送设备及方法、接收设备及方法以及发送/接收系统 |
Related Parent Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN2011101307564A Division CN102263989A (zh) | 2010-05-26 | 2011-05-19 | 发送设备及方法、接收设备及方法以及发送/接收系统 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN107566823A true CN107566823A (zh) | 2018-01-09 |
Family
ID=44117808
Family Applications (2)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201711033069.4A Pending CN107566823A (zh) | 2010-05-26 | 2011-05-19 | 发送设备及方法、接收设备及方法以及发送/接收系统 |
| CN2011101307564A Pending CN102263989A (zh) | 2010-05-26 | 2011-05-19 | 发送设备及方法、接收设备及方法以及发送/接收系统 |
Family Applications After (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN2011101307564A Pending CN102263989A (zh) | 2010-05-26 | 2011-05-19 | 发送设备及方法、接收设备及方法以及发送/接收系统 |
Country Status (5)
| Country | Link |
|---|---|
| US (1) | US9787968B2 (zh) |
| EP (1) | EP2391139B1 (zh) |
| JP (2) | JP2012010311A (zh) |
| CN (2) | CN107566823A (zh) |
| TW (1) | TWI504231B (zh) |
Families Citing this family (20)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP6090168B2 (ja) * | 2012-02-16 | 2017-03-08 | ソニー株式会社 | 送信装置および送信方法 |
| CN103322908A (zh) * | 2012-03-23 | 2013-09-25 | 鸿富锦精密工业(深圳)有限公司 | 影像测量程序生成系统及方法 |
| TWI505699B (zh) * | 2012-11-23 | 2015-10-21 | Inst Information Industry | 資料串流傳輸方法 |
| EP2901449B1 (en) * | 2013-01-21 | 2018-01-03 | Dolby Laboratories Licensing Corporation | Audio encoder and decoder with program loudness and boundary metadata |
| US10356484B2 (en) | 2013-03-15 | 2019-07-16 | Samsung Electronics Co., Ltd. | Data transmitting apparatus, data receiving apparatus, data transceiving system, method for transmitting data, and method for receiving data |
| KR102201826B1 (ko) * | 2013-03-15 | 2021-01-12 | 삼성전자주식회사 | 데이터 전송 장치, 데이터 수신 장치, 데이터 송수신 시스템, 데이터 전송 방법 및 데이터 수신 방법 |
| WO2015190864A1 (ko) * | 2014-06-12 | 2015-12-17 | 엘지전자(주) | 고속 인터페이스를 이용하여 객체 기반 오디오 데이터를 처리하는 방법 및 장치 |
| WO2016009944A1 (ja) | 2014-07-18 | 2016-01-21 | ソニー株式会社 | 送信装置、送信方法、受信装置および受信方法 |
| US10109285B2 (en) * | 2014-09-08 | 2018-10-23 | Sony Corporation | Coding device and method, decoding device and method, and program |
| US10547701B2 (en) | 2014-09-12 | 2020-01-28 | Sony Corporation | Transmission device, transmission method, reception device, and a reception method |
| US10271094B2 (en) | 2015-02-13 | 2019-04-23 | Samsung Electronics Co., Ltd. | Method and device for transmitting/receiving media data |
| EP3282709A4 (en) * | 2015-04-07 | 2018-11-21 | Sony Corporation | Transmitting device, transmitting method, receiving device and receiving method |
| CN107615768A (zh) * | 2015-05-28 | 2018-01-19 | 索尼公司 | 发送装置、发送方法、接收装置和接收方法 |
| CN113242448B (zh) | 2015-06-02 | 2023-07-14 | 索尼公司 | 发送装置和方法、媒体处理装置和方法以及接收装置 |
| TWI578126B (zh) * | 2015-10-13 | 2017-04-11 | 大量科技股份有限公司 | 訊號傳輸裝置 |
| KR102393158B1 (ko) * | 2015-10-13 | 2022-05-02 | 삼성전자주식회사 | 메타데이터를 포함하는 비트 스트림을 이용한 서비스 제공 방법 및 장치 |
| EP3913625B1 (en) | 2015-12-08 | 2024-04-10 | Sony Group Corporation | Transmitting apparatus, transmitting method, receiving apparatus, and receiving method |
| CN105632542B (zh) * | 2015-12-23 | 2019-05-28 | 小米科技有限责任公司 | 音频播放方法及装置 |
| KR20180120169A (ko) | 2016-03-09 | 2018-11-05 | 소니 주식회사 | 송신 장치, 송신 방법, 수신 장치 및 수신 방법 |
| JP7003079B2 (ja) * | 2019-03-14 | 2022-01-20 | 株式会社東芝 | 電子機器 |
Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1684523A (zh) * | 2003-11-26 | 2005-10-19 | 三星电子株式会社 | 用于编码/解码具有辅助信息的音频比特流的方法和设备 |
| CN1976478A (zh) * | 2005-12-02 | 2007-06-06 | 三星电子株式会社 | 数字信号接收装置和数字信号发送装置及其方法 |
| US20070234397A1 (en) * | 2006-03-29 | 2007-10-04 | Sbc Knowledge Ventures, Lp | Close-captioning universal resource locator (URL) capture system and method |
| CN101399947A (zh) * | 2007-09-28 | 2009-04-01 | 索尼株式会社 | 电子设备及其控制方法 |
| US20090131105A1 (en) * | 1999-12-06 | 2009-05-21 | Shanahan Michael E | Methods and Apparatuses for Programming User-Defined Information into Electronic Devices |
| US20090142041A1 (en) * | 2007-11-29 | 2009-06-04 | Mitsubishi Electric Corporation | Stereoscopic video recording method, stereoscopic video recording medium, stereoscopic video reproducing method, stereoscopic video recording apparatus, and stereoscopic video reproducing apparatus |
| CN101606388A (zh) * | 2006-12-06 | 2009-12-16 | 联合视频制品公司 | 媒体源选择和转换的系统及方法 |
Family Cites Families (29)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1013999B (zh) | 1989-10-19 | 1991-09-18 | 东南大学 | 光纤多端耦合器及其制造方法 |
| US5396497A (en) * | 1993-02-26 | 1995-03-07 | Sony Corporation | Synchronization of audio/video information |
| JP2000173174A (ja) * | 1998-09-29 | 2000-06-23 | Nippon Columbia Co Ltd | オ―ディオシステム、再生装置及び記憶装置 |
| JP3250532B2 (ja) | 1998-11-24 | 2002-01-28 | 日本電気株式会社 | データ送受信システム、データ受信装置、及びデータ受信方法 |
| GB9902235D0 (en) | 1999-02-01 | 1999-03-24 | Emuse Corp | Interactive system |
| KR100396547B1 (ko) * | 2000-12-27 | 2003-09-02 | 삼성전자주식회사 | 통합 입력기의 입력 코드 생성과 그 송수신 방법 및 장치 |
| US20030131350A1 (en) * | 2002-01-08 | 2003-07-10 | Peiffer John C. | Method and apparatus for identifying a digital audio signal |
| JP2004274125A (ja) * | 2003-03-05 | 2004-09-30 | Sony Corp | 画像処理装置および方法 |
| JP2004297628A (ja) * | 2003-03-27 | 2004-10-21 | Sanyo Electric Co Ltd | ストリーム切替装置およびその装置にコンテンツを提供する装置 |
| JP4190357B2 (ja) * | 2003-06-12 | 2008-12-03 | シャープ株式会社 | 放送データ送信装置、放送データ送信方法および放送データ受信装置 |
| US20130097302A9 (en) * | 2003-10-01 | 2013-04-18 | Robert Khedouri | Audio visual player apparatus and system and method of content distribution using the same |
| JP2005136675A (ja) * | 2003-10-30 | 2005-05-26 | Mitsubishi Electric Corp | 映像音声送信装置及び映像音声受信装置 |
| JP2005176107A (ja) | 2003-12-12 | 2005-06-30 | Canon Inc | デジタル放送受信装置およびその制御方法、デジタル放送送信装置、ならびにデジタル放送受信システム |
| JP2006128818A (ja) | 2004-10-26 | 2006-05-18 | Victor Co Of Japan Ltd | 立体映像・立体音響対応記録プログラム、再生プログラム、記録装置、再生装置及び記録メディア |
| JP2006254022A (ja) * | 2005-03-10 | 2006-09-21 | Matsushita Electric Ind Co Ltd | デジタル放送受信装置 |
| JP2006287812A (ja) * | 2005-04-04 | 2006-10-19 | Daisuke Omori | 立体映像撮影装置、立体映像表示装置 |
| JP4613674B2 (ja) | 2005-04-11 | 2011-01-19 | パナソニック株式会社 | 音声再生装置 |
| US20090123066A1 (en) * | 2005-07-22 | 2009-05-14 | Mitsubishi Electric Corporation | Image encoding device, image decoding device, image encoding method, image decoding method, image encoding program, image decoding program, computer readable recording medium having image encoding program recorded therein, |
| US20070028278A1 (en) * | 2005-07-27 | 2007-02-01 | Sigmon Robert B Jr | System and method for providing pre-encoded audio content to a television in a communications network |
| US20070089158A1 (en) * | 2005-10-18 | 2007-04-19 | Clark Christopher M | Apparatus and method for providing access to associated data related to primary media data |
| US8214516B2 (en) * | 2006-01-06 | 2012-07-03 | Google Inc. | Dynamic media serving infrastructure |
| JP4693900B2 (ja) * | 2006-04-07 | 2011-06-01 | シャープ株式会社 | 画像処理装置 |
| JP5023662B2 (ja) | 2006-11-06 | 2012-09-12 | ソニー株式会社 | 信号処理システム、信号送信装置、信号受信装置およびプログラム |
| JP5337370B2 (ja) * | 2007-11-13 | 2013-11-06 | ソニー エスパナ,エス.エー. | 表示装置、表示装置における映像信号送信方法、送信装置および映像信号の送信方法 |
| US8103908B2 (en) * | 2007-12-28 | 2012-01-24 | Intel Corporation | Method and system for recovery of a computing environment during pre-boot and runtime phases |
| JP2010014979A (ja) * | 2008-07-03 | 2010-01-21 | Sharp Corp | 表示装置、映像出力装置及び映像表示システム |
| RU2519433C2 (ru) | 2008-10-21 | 2014-06-10 | Конинклейке Филипс Электроникс Н.В. | Способ и система для обработки входного трехмерного видеосигнала |
| JP5274212B2 (ja) * | 2008-11-13 | 2013-08-28 | 日本テレビ放送網株式会社 | デジタル放送方法及びシステムと、放送局及び受信機 |
| JP5362332B2 (ja) | 2008-11-19 | 2013-12-11 | 日東電工株式会社 | 表面保護シートおよびその利用 |
-
2011
- 2011-03-18 JP JP2011061549A patent/JP2012010311A/ja active Pending
- 2011-05-16 TW TW100117047A patent/TWI504231B/zh not_active IP Right Cessation
- 2011-05-18 EP EP11166504.8A patent/EP2391139B1/en active Active
- 2011-05-19 US US13/111,701 patent/US9787968B2/en active Active
- 2011-05-19 CN CN201711033069.4A patent/CN107566823A/zh active Pending
- 2011-05-19 CN CN2011101307564A patent/CN102263989A/zh active Pending
-
2015
- 2015-10-06 JP JP2015198688A patent/JP6333226B2/ja not_active Expired - Fee Related
Patent Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20090131105A1 (en) * | 1999-12-06 | 2009-05-21 | Shanahan Michael E | Methods and Apparatuses for Programming User-Defined Information into Electronic Devices |
| CN1684523A (zh) * | 2003-11-26 | 2005-10-19 | 三星电子株式会社 | 用于编码/解码具有辅助信息的音频比特流的方法和设备 |
| CN1976478A (zh) * | 2005-12-02 | 2007-06-06 | 三星电子株式会社 | 数字信号接收装置和数字信号发送装置及其方法 |
| US20070234397A1 (en) * | 2006-03-29 | 2007-10-04 | Sbc Knowledge Ventures, Lp | Close-captioning universal resource locator (URL) capture system and method |
| CN101606388A (zh) * | 2006-12-06 | 2009-12-16 | 联合视频制品公司 | 媒体源选择和转换的系统及方法 |
| CN101399947A (zh) * | 2007-09-28 | 2009-04-01 | 索尼株式会社 | 电子设备及其控制方法 |
| US20090142041A1 (en) * | 2007-11-29 | 2009-06-04 | Mitsubishi Electric Corporation | Stereoscopic video recording method, stereoscopic video recording medium, stereoscopic video reproducing method, stereoscopic video recording apparatus, and stereoscopic video reproducing apparatus |
Also Published As
| Publication number | Publication date |
|---|---|
| EP2391139B1 (en) | 2019-10-09 |
| TW201215097A (en) | 2012-04-01 |
| TWI504231B (zh) | 2015-10-11 |
| EP2391139A3 (en) | 2014-05-21 |
| CN102263989A (zh) | 2011-11-30 |
| JP6333226B2 (ja) | 2018-05-30 |
| US20110292173A1 (en) | 2011-12-01 |
| US9787968B2 (en) | 2017-10-10 |
| JP2012010311A (ja) | 2012-01-12 |
| JP2016029816A (ja) | 2016-03-03 |
| EP2391139A2 (en) | 2011-11-30 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US9787968B2 (en) | Transmission apparatus, transmission method, reception apparatus, reception method, and transmission/reception system using audio compression data stream as a container of other information | |
| JP5531972B2 (ja) | 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法 | |
| JP5446913B2 (ja) | 立体画像データ送信装置および立体画像データ送信方法 | |
| CN102369735B (zh) | 立体图像数据发送装置、立体图像数据发送方法、立体图像数据接收装置和立体图像数据接收方法 | |
| CN102177724B (zh) | 立体图像数据传输装置、立体图像数据发送方法、立体图像数据接收装置和立体图像数据接收方法 | |
| US20110141232A1 (en) | Image data transmitting apparatus, control method, and program | |
| JP5633259B2 (ja) | 立体画像データ送信装置、立体画像データ送信方法および立体画像データ受信装置 | |
| WO2011001854A1 (ja) | 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法 | |
| US20130141534A1 (en) | Image processing device and method | |
| US20140063187A1 (en) | Reception device, reception method, and electronic device | |
| JP2011166757A (ja) | 送信装置、送信方法および受信装置 | |
| CN103053166A (zh) | 立体图像数据发送设备、立体图像数据发送方法和立体图像数据接收设备 | |
| JP2011010255A (ja) | 立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法 | |
| JP2013176141A (ja) | 立体画像データ受信装置および立体画像データ受信方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20180109 |
|
| RJ01 | Rejection of invention patent application after publication |