[go: up one dir, main page]

CN102376326A - 记录装置和方法、再现装置和方法以及记录/再现装置 - Google Patents

记录装置和方法、再现装置和方法以及记录/再现装置 Download PDF

Info

Publication number
CN102376326A
CN102376326A CN2011101893039A CN201110189303A CN102376326A CN 102376326 A CN102376326 A CN 102376326A CN 2011101893039 A CN2011101893039 A CN 2011101893039A CN 201110189303 A CN201110189303 A CN 201110189303A CN 102376326 A CN102376326 A CN 102376326A
Authority
CN
China
Prior art keywords
image
content
parallax
images
recording
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2011101893039A
Other languages
English (en)
Inventor
宫田胜成
村林升
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN102376326A publication Critical patent/CN102376326A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/87Regeneration of colour television signals
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10Digital recording or reproducing
    • G11B20/12Formatting, e.g. arrangement of data block or words on the record carriers
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G11B27/034Electronic editing of digitised analogue information signals, e.g. audio or video signals on discs
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/128Adjusting depth or disparity
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/161Encoding, multiplexing or demultiplexing different image signal components
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/172Processing image signals image signals comprising non-image signal components, e.g. headers or format information
    • H04N13/178Metadata, e.g. disparity information
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/189Recording image signals; Reproducing recorded image signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/00007Time or data compression or expansion
    • G11B2020/00079Time or data compression or expansion the compression ratio or quality level being adapted to circumstances, e.g. to the available recording space
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10Digital recording or reproducing
    • G11B20/10527Audio or video recording; Data buffering arrangements
    • G11B2020/10537Audio or video recording
    • G11B2020/10592Audio or video recording specifically adapted for recording or reproducing multichannel signals
    • G11B2020/106113D video data
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10Digital recording or reproducing
    • G11B20/12Formatting, e.g. arrangement of data block or words on the record carriers
    • G11B2020/1291Formatting, e.g. arrangement of data block or words on the record carriers wherein the formatting serves a specific purpose
    • G11B2020/1292Enhancement of the total storage capacity
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B2220/00Record carriers by type
    • G11B2220/20Disc-shaped record carriers
    • G11B2220/25Disc-shaped record carriers characterised in that the disc is based on a specific recording technology
    • G11B2220/2537Optical discs
    • G11B2220/2541Blu-ray discs; Blue laser DVR discs

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Library & Information Science (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

本发明涉及记录装置、记录方法、再现装置、再现方法、程序以及记录/再现装置。该记录装置包括:视差检测单元,检测要记录的3D内容中包括的L和R图像之间的视差;以及记录控制单元,将L和R图像两者记录在其中L和R图像之间的视差大于阈值的第一部分处,并且将L和R图像中的一个记录在其中L和R图像之间的视差小于阈值的第二部分处。

Description

记录装置和方法、再现装置和方法以及记录/再现装置
技术领域
本发明涉及记录装置、记录方法、再现装置、再现方法、程序以及记录/再现装置,更具体地,涉及能够高效地记录三维(3D)内容的记录装置、记录方法、再现装置、再现方法、程序以及记录/再现装置。
背景技术
近年来,包含用户能够立体地观看的图像的3D内容已变得普遍。3D内容的图像数据包括左眼图像(L图像)和右眼图像(R图像)。存在对应于L图像中描绘的物体和R图像中描绘的物体之间的视差的偏差。
通过交替地显示其中设定视差的L和R图像并且通过将L和R图像分别传送到佩戴有源快门眼镜的用户的左眼和右眼,可以由用户立体地识别物体。
相关技术的示例是日本未审专利申请公布第2006-60630号。
相关技术的另一示例是日本未审专利申请公布第2005-108282号。
相关技术的又一示例是日本未审专利申请公布第2007-280493号。
发明内容
能够记录3D内容的诸如BD(Blu-ray(商标)Disk)记录器的装置已被广泛使用。可以考虑通过播放波传送3D内容。此外,通常使用3D内容的记录装置来执行3D内容的编程记录。
安装在诸如BD、HDD(硬盘驱动器)和SSD(固态驱动器)的记录装置中的记录介质的容量已增加。此外,3D内容的数据量通常大于2D内容的数据量。因此,较之记录2D内容的情况,在许多情况中记录容量变得不足。出于该原因,当设定3D内容的编程记录时,在许多情况中编程记录因缺乏记录介质的容量而不能正常结束。
可以考虑当要记录的3D内容量大于记录介质的空容量时警告用户的方法。然而,在相关技术中,仍未提出适当的警告方法。只要3D内容能够被记录而不会用尽容量,则该警告就不是必需的,并且作为替代,使用警告缺乏记录介质的容量的方法。此外,该方法的优选之处在于,编程记录可以正常结束。
期望提供能够高效地记录3D内容的记录装置、记录方法、再现装置、再现方法、程序以及记录/再现装置。
根据本发明的第一实施例,提供了一种记录装置,包括:视差检测单元,检测要记录的3D内容中包括的L和R图像之间的视差;以及记录控制单元,将L和R图像两者记录在其中L和R图像之间的视差大于阈值的第一部分处,并且将L和R图像中的一个记录在其中L和R图像之间的视差小于阈值的第二部分处。
该记录装置可以进一步包括图像质量检测单元,其检测L和R图像的图像质量。在该情况中,记录控制单元可以记录其中视差小于阈值的L和R图像之中的具有较高图像质量的图像。
该记录装置可以进一步包括生成单元,其生成指示记录了L和R图像中的哪一个图像的识别信息。记录控制单元可以与3D内容的第二部分的图像数据对应地记录该识别信息。
生成单元可以生成包括指示L和R图像之间的视差的信息的识别信息。
该记录装置可以进一步包括控制单元,其将全体3D内容中的未被记录的部分的数据量与其中记录3D内容的记录介质的剩余容量比较,并且当未被记录的部分的数据量大于记录介质的剩余容量时,将阈值更新为更高。
根据本发明的第一实施例,提供了一种记录方法,包括:检测要记录的3D内容中包括的L和R图像之间的视差;以及将L和R图像两者记录在其中L和R图像之间的视差大于阈值的部分处,并且将L和R图像中的一个记录在其中L和R图像之间的视差小于阈值的部分处。
根据本发明的第一实施例,提供了一种使计算机执行如下处理的程序,该处理包括:检测要记录的3D内容中包括的L和R图像之间的视差;以及将L和R图像两者记录在其中L和R图像之间的视差大于阈值的部分处,并且将L和R图像中的一个记录在其中L和R图像之间的视差小于阈值的部分处。
根据本发明的第二实施例,提供了一种再现装置,包括:再现单元,再现包括第一部分和第二部分的3D内容,根据视差是否大于阈值,在第一部分处记录L和R图像两者,并且在第二部分处记录L和R图像中的一个;生成单元,基于通过再现3D内容获得的第二部分的L和R图像中的一个,生成作为3D内容的图像而未被记录的另一个图像;以及显示控制单元,当显示第一部分的图像时,显示通过再现3D内容获得的L和R图像,并且当显示第二部分的图像时,显示通过再现3D内容获得的一个图像以及由生成单元生成的另一个图像。
该再现装置可以进一步包括分析单元,其分析识别信息,该识别信息是与3D内容的第二部分的图像数据对应地记录的,并且该识别信息指示L和R图像中的哪一个图像被记录。在该情况中,生成单元基于识别信息指定作为3D内容的图像而未被记录的另一个图像以生成另一个图像。
该分析单元可以通过分析识别信息指定L和R图像之间的视差。生成单元可以生成另一个图像,该另一个图像相对于一个图像具有由分析单元指定的视差。
根据本发明的第二实施例,提供了一种再现方法,包括:再现包括第一部分和第二部分的3D内容,根据视差是否大于阈值,在第一部分处记录L和R图像两者,并且在第二部分处记录L和R图像中的一个;基于通过再现3D内容获得的第二部分的L和R图像中的一个,生成作为3D内容的图像而未被记录的另一个图像;以及当显示第一部分的图像时,显示通过再现3D内容获得的L和R图像,并且当显示第二部分的图像时,显示通过再现3D内容获得的一个图像以及所生成的另一个图像。
根据本发明的第二实施例,提供了一种使计算机执行如下处理的程序,包括:再现包括第一部分和第二部分的3D内容,根据视差是否大于阈值,在第一部分处记录L和R图像两者,并且在第二部分处记录L和R图像中的一个;基于通过再现3D内容获得的第二部分的L和R图像中的一个,生成作为3D内容的图像而未被记录的另一个图像;以及当显示第一部分的图像时,显示通过再现3D内容获得的L和R图像,并且当显示第二部分的图像时,显示通过再现3D内容获得的一个图像以及所生成的另一个图像。
根据本发明的第三实施例,提供了一种记录/再现装置,包括:视差检测单元,检测要记录的3D内容中包括的L和R图像之间的视差;记录控制单元,将L和R图像两者记录在其中L和R图像之间的视差大于阈值的第一部分处,并且将L和R图像中的一个记录在其中L和R图像之间的视差小于阈值的第二部分处;再现单元,再现包括第一部分和第二部分的3D内容,根据视差是否大于阈值,在第一部分处记录L和R图像两者,并且在第二部分处记录L和R图像中的一个;生成单元,基于通过再现3D内容获得的第二部分的L和R图像中的一个,生成作为3D内容的图像而未被记录的另一个图像;以及显示控制单元,当显示第一部分的图像时,显示通过再现3D内容获得的L和R图像,并且当显示第二部分的图像时,显示通过再现3D内容获得的一个图像以及由生成单元生成的另一个图像。
根据本发明的第一实施例,检测要记录的3D内容中包括的L和R图像之间的视差;将L和R图像两者记录在其中L和R图像之间的视差大于阈值的部分处;以及将L和R图像中的一个记录在其中L和R图像之间的视差小于阈值的部分处。
根据本发明的第二实施例,再现包括第一部分和第二部分的3D内容,根据视差是否大于阈值,在第一部分处记录L和R图像两者,并且在第二部分处记录L和R图像中的一个。基于通过再现3D内容获得的第二部分的L和R图像中的一个,生成作为3D内容的图像而未被记录的另一个图像。当显示第一部分的图像时,显示通过再现3D内容获得的L和R图像。当显示第二部分的图像时,显示通过再现3D内容获得的一个图像以及所生成的另一个图像。
根据本发明的第三实施例,检测要记录的3D内容中包括的L和R图像之间的视差。将L和R图像两者记录在其中L和R图像之间的视差大于阈值的第一部分处,并且将L和R图像中的一个记录在其中L和R图像之间的视差小于阈值的第二部分处。再现包括第一部分和第二部分的3D内容,根据视差是否大于阈值,在第一部分处记录L和R图像两者,并且在第二部分处记录L和R图像中的一个。基于通过再现3D内容获得的第二部分的L和R图像中的一个,生成作为3D内容的图像而未被记录的另一个图像。当显示第一部分的图像时,显示通过再现3D内容获得的L和R图像。当显示第二部分的图像时,显示通过再现3D内容获得的一个图像以及所生成的另一个图像。
根据本发明的实施例,可以高效地记录3D内容。
附图说明
图1是图示根据本发明的实施例的记录/再现装置的框图;
图2是图示3D内容的图像数据的示例的示图;
图3是图示记录/再现装置的记录处理的示例的示图;
图4是图示记录/再现装置的再现处理的示例的示图;
图5是图示记录/再现装置的配置的示例的框图;
图6是图示记录介质中记录的信息的数据结构的示图;
图7是图示记录处理单元的配置的示例的框图;
图8A至8C是图示L和R图像的复用的示例的示图;
图9A和9B是图示图像的省略的示例的示图;
图10是图示再现处理单元的配置的示例的框图;
图11是图示其中分离L和R图像的示例的示图;
图12是图示图像数据处理单元的配置的示例的框图;
图13是图示图像数据处理单元的配置的示例的框图;
图14是图示图像数据处理单元的配置的示例的框图;
图15是图示记录/再现装置的记录处理的流程图;
图16是图15的步骤S14中执行的阈值调整处理的流程图;
图17是图示3D内容的数据量预测的示例的示图;
图18是图示记录/再现装置的再现处理的流程图;
图19是图示3D图像的观看的示例的示图;以及
图20是图示计算机的配置的示例的框图。
具体实施方式
记录/再现的原理
根据本发明的实施例提供了一种记录装置,包括:视差检测单元,检测要记录的3D内容中包括的L和R图像之间的视差;以及记录控制单元,将L和R图像两者记录在其中L和R图像之间的视差大于阈值的第一部分处,并且将L和R图像中的一个记录在其中L和R图像之间的视差小于阈值的第二部分处。
根据本发明的实施例提供了一种再现装置,包括:再现单元,再现包括第一部分和第二部分的3D内容,根据视差是否大于阈值,在第一部分处记录L和R图像两者,并且在第二部分处记录L和R图像中的一个;生成单元,基于通过再现3D内容获得的第二部分的L和R图像中的一个,生成作为3D内容的图像而未被记录的另一个图像;以及显示控制单元,当显示第一部分的图像时,显示通过再现3D内容获得的L和R图像,并且当显示第二部分的图像时,显示通过再现3D内容获得的一个图像以及由生成单元生成的另一个图像。
根据本发明的实施例提供了一种记录/再现装置,包括:视差检测单元,检测要记录的3D内容中包括的L和R图像之间的视差;记录控制单元,将L和R图像两者记录在其中L和R图像之间的视差大于阈值的第一部分处,并且将L和R图像中的一个记录在其中L和R图像之间的视差小于阈值的第二部分处;再现单元,再现包括第一部分和第二部分的3D内容,根据视差是否大于阈值,在第一部分处记录L和R图像两者,并且在第二部分处记录L和R图像中的一个;生成单元,基于通过再现3D内容获得的第二部分的L和R图像中的一个,生成作为3D内容的图像而未被记录的另一个图像;以及显示控制单元,当显示第一部分的图像时,显示通过再现3D内容获得的L和R图像,并且当显示第二部分的图像时,显示通过再现3D内容获得的一个图像以及由生成单元生成的另一个图像。
图1是图示根据本发明的实施例的记录/再现装置1的示图。
记录/再现装置1通过诸如HDMI(高清晰度多媒体接口)线缆的线缆3连接到电视机2。向记录/再现装置1提供经由诸如互联网的网络或者播放波传送的3D内容。
记录/再现装置1包括诸如BD、HDD或SSD的记录介质,并且具有将3D内容记录(录像)在记录介质中的再现功能。
在传送侧确定诸如电视节目的3D内容的传送的定时。记录/再现装置1的用户可以通过操作遥控器等设定编程记录以执行在给定定时开始传送的3D内容的编程记录。此外,用户可以在电视机2上再现所记录的3D内容以观看这些3D内容。
图2是图示要记录的3D内容的图像数据的示例的示图。
如图2的下部分中所示,3D内容的图像数据包括关于L图像的数据和关于R图像的数据。在图2中,图像L1至L8和图像R1至R8被分别示为L和R图像。例如,通过以图像L1、R1、L2、R2、L3、R3、…、L8和R8的顺序交替地显示L和R图像,实现3D图像的显示。各个R图像可以在被分配与R图像相同的编号的相应的L图像之后被显示。
L图像中描绘的物体图像的位置和对应于该L图像的R图像中描绘的物体图像的位置之间的偏差对应于L和R图像之间的视差(L图像和R图像与其对应)。
记录/再现装置1在记录3D内容时检测L和R图像之间的视差。在图2的上部分中,按时间顺序示出了通过检测图2的下部分中示出的L和R图像之间的视差而获得的检测结果。
在图2的示例中,从显示图像L1和R1的时间t1到显示图像L4和R4的时间t4的部分处的视差作为视差P1是几乎恒定的。这里,假设L图像和与其对应的R图像是同时显示的。
在图2的示例中,从时间t4到显示图像L7和R7的时间t7的部分处的视差作为小于视差P1的视差P2是几乎恒定的。时间t7之后的部分处的视差作为视差P1是几乎恒定的。
当记录3D内容时,基于视差的检测结果,记录/再现装置1在其中L和R图像之间的视差大于阈值的部分(其中视差大的部分)处记录L和R图像两者。此外,记录/再现装置1在其中L和R图像之间的视差小于该阈值的部分(其中视差小的部分)处记录L和R图像中的一个。
图3是图示记录/再现装置1的记录处理的示例的示图。
图3的上部分中示出的按时间顺序的视差检测结果和图3的中间部分中示出的图像与图2中示出的相同。
如图3的下部分中所示,L和R图像两者被记录在其中视差大的从时间t1到时间t4的部分f1和时间t7之后的部分f3处。
另一方面,L和R图像中的一个被记录在其中视差小的从时间t4到时间t7的部分f2处。在图3的下部分中,由实线指示的图像指的是记录在记录介质中的图像,而由虚线指示的图像指的是未记录在记录介质中的图像。
在图3的示例中,在部分f2处仅记录了图像L4和R4以及图像L5和R5中的L图像,以及图像L6和R6中的R图像。记录L和R图像中的具有较高图像质量的图像。就是说,记录/再现装置1检测其中视差小的部分处的L和R图像的图像质量。
在图3的示例中,假设图像L4和R4中的图像L4具有较高的图像质量并且图像L5和R5中的图像L5具有较高的图像质量。此外,假设图像L6和R6中的图像R6具有较高的图像质量。在L和R图像之间存在诸如块噪声量的图像质量的差异。
因此,通过将L和R图像中的一个记录在其中视差小的部分处,可以节约其中记录3D内容的记录介质的容量。
如下文所述,当再现其中视差小的部分时,记录/再现装置1基于L和R图像中的被记录的一个图像执行2D-3D转换以生成它们之中的未被记录的另一个图像。通过记录具有较高图像质量的图像,当再现图像时,可以基于具有较高图像质量的一个图像生成未被记录的另一个图像。
例如通过设定所记录的L或R图像中的视差(使物体的位置移位)来执行2D-3D转换。由于可以通过设定具有较高图像质量的图像中的而非具有较低图像质量的图像中的视差来获得较高图像质量,因此可以提高3D图像的图像质量。
通过省略其中视差小的部分的图像而非其中视差较大的部分的图像,可以抑制再现时显示的3D图像的不适感。
使用通过2D-3D转换生成的图像而执行的3D显示处理是所谓的伪显示处理,并且认为,较之基于预先准备的L和R图像执行的3D显示处理,存在立体效果的差异。通过将其中视差小的部分设定为伪3D显示部分,较之其中视差大的部分被设定为伪3D显示部分的情况,原始图像和在伪3D显示部分处显示的图像之间的差异可以总体上减小。因此,可以减少不适感。
在下文中,L和R图像中的由于低图像质量而未被记录的图像被称为省略图像。与省略图像配对的并且作为3D内容的图像而被记录的图像被称为记录图像。
当记录3D内容时,记录/再现装置1生成识别信息,其指示L和R图像中的哪一个图像被记录在其中视差小的部分处。该识别信息包括指示L和R图像中的哪一个图像被记录的信息以及指示L和R图像之间的视差的信息。该识别信息与3D内容的图像数据对应地记录。
通过与3D内容的图像数据对应地记录识别信息,当记录3D内容时,记录/再现装置1可以指定其中视差小的部分。
此外,当再现特定部分时,记录/再现装置1基于任一个图像确定是否生成未被记录的省略图像并且可以指定在生成省略图像时设定的视差。
图4是图示记录/再现装置1的再现处理的示例的示图。
完整地记录在图4的上部分中的3D内容的图像与图3的下部分中示出的相同。
当再现3D内容时,记录/再现装置1针对每个部分的每个图像数据确定是否与图像数据对应地记录了识别信息。
当再现其中与图像数据对应地记录了识别信息的部分,即其中视差小的部分时,分析识别信息并且指定L和R图像中的哪一个图像被记录。通过指定用于生成省略图像的视差并且将该视差设定在记录图像中来生成省略图像。
在图4的下部分中示出的示例中,当再现部分f1时,没有与部分f1的图像数据对应地记录识别信息。因此,通过以图像L1、R1、L2、R2、L3和R3的顺序显示记录图像来实现部分f1的3D显示。
当再现部分f2时,分析与部分f2的图像数据对应地记录的识别信息并且指定视差以及L和R图像中的哪一个图像被记录。基于图像L4生成图像R4并且基于图像L5生成图像R5。此外,基于图像R6生成图像L6。
通过以记录图像L4、基于图像L4生成的图像R4、记录图像L5、基于图像L5生成的图像R5、基于图像R6生成的图像L6以及记录图像R6的顺序显示图像来实现部分f2的3D显示。
当再现部分f3时,没有与部分f3的图像数据对应地记录识别信息。因此,通过以记录图像L7、R7、L8和R8的顺序显示图像来实现部分f3的3D显示。
记录/再现装置的配置
图5是图示记录/再现装置1的配置的示例的框图。
记录/再现装置1包括系统控制器21、操作接口(I/F)单元22、记录单元23、记录介质24和再现单元25。来自遥控器31的信号被提供给操作接口单元22,并且在天线32接收到无线电波时获得的接收信号被提供给记录单元23的调谐器41。
系统控制器21执行预定程序并且控制记录/再现装置1的整体操作。例如,系统控制器21基于从操作接口单元22提供的信号设定编程记录并且当播放开始时控制记录单元23开始记录3D内容。此外,系统控制器21在接收到再现所记录的3D内容的指令时控制再现单元25并且再现记录介质24中记录的3D内容。
将描述记录/再现装置1的记录侧的配置。
记录单元23包括调谐器41、记录处理单元42、图像特征检测单元43、识别信息生成单元44和记录容量检测单元45。
调谐器41对从天线32提供的接收信号解调并且将通过A/D(数字/模拟)转换等获得的3D内容的数据输出到记录处理单元42。这里,将主要描述针对视频数据的处理。然而,音频数据也由电路(未示出)处理,并且随后与视频数据一起记录在记录介质24中。
记录处理单元42基于从调谐器41提供的数据生成3D内容的图像数据并且将所生成的图像数据输出到图像特征检测单元43。此外,记录处理单元42基于由识别信息生成单元44生成的识别信息省略作为3D内容的图像的L和R图像中的一个图像。记录处理单元42将剩余的一个图像与识别信息或者音频数据一起记录在记录介质24中。
图像特征检测单元43包括视差检测单元43A和图像质量检测单元43B。
视差检测单元43A检测从记录处理单元42提供的L和R图像之间的视差。例如,视差检测单元43A以如下方式检测视差,使得视差检测单元43A在每个预定区域中划分L和R图像,通过块匹配检测L和R图像中的物体的相同位置,并且计算位置之间的偏差量。例如,日本未审专利申请公布第7-282259号、日本未审专利申请公布第4-360395号和日本未审专利申请公布第6-215111号公开了用于检测视差的方法。
视差检测单元43A将指示检测到的视差的信息输出到识别信息生成单元44。
图像质量检测单元43B检测从记录处理单元42提供的L和R图像的图像质量。例如,当L和R图像根据诸如MPEG的块编码方法编码时,通过检测块噪声量来检测图像质量。例如,日本未审专利申请公布第2007-266684号公开了检测块噪声的方法。
在日本未审专利申请公布第2007-266684号中公开的技术中,基于像素边界中的相邻像素的像素值之间的差值以及根据像素边界的至少一侧的像素边界中的多个像素估计的估计像素值,检测输入图像帧的图像平面上的像素边界中的像素边界落差,积累像素边界中的对应于一个帧的像素边界落差,并且基于积累结果检测块噪声。
图像质量检测单元43B将指示检测到的L和R图像的图像质量的信息输出到识别信息生成单元44。图像特征检测单元43执行的处理可以仅在记录介质24的空白量小于要记录的3D内容的数据量时执行。
识别信息生成单元44基于从视差检测单元43A提供的信息计算关于每个部分的L和R图像之间的视差的平均值并且将计算的视差平均值与系统控制器21设定的阈值比较。识别信息生成单元44将其中视差平均值大于阈值的部分确定为其中记录L和R图像两者的部分。此外,识别信息生成单元44将其中视差平均值小于阈值的部分确定为其中记录L和R图像中的一个的部分。
基于从图像质量检测单元43B提供的信息,识别信息生成单元44将具有较高图像质量的图像确定为其中视差小的部分处的L和R图像中的记录图像并且将具有较低图像质量的图像确定为L和R图像中的省略图像。识别信息生成单元44生成识别信息并且将该识别信息输出到记录处理单元42。
记录容量检测单元45检测记录介质24的空白容量并且将关于空白容量的信息输出到系统控制器21。
图6是图示记录介质24中记录的信息的数据结构的示图。
关于记录介质24中记录的3D内容的信息包括报头信息、识别信息、图像数据和音频数据。例如,关于具有图6中示出的结构的3D内容的信息被记录在其中全体3D内容按预定数目划分的每个部分处。
如图6中所示,包括识别信息的信息是关于其中视差小并且L和R图像中的一个被记录的部分的信息。其中视差大并且L和R图像两者均被记录的部分的信息不包括识别信息。
图7是图示记录处理单元42的配置的示例的框图。
记录处理单元42包括L/R复用器71、MPEG2编码器72和记录器73。L和R图像的帧的数据被输入到L/R复用器71。这里MPEG2编码器72可以由不对应于MVC(多视点视频编码)的H.264/AVC编码器替换(这同样适用于下面的描述)。
L/R复用器71通过使L和R图像附着到同一帧来复用L和R图像。
图8A至8C是图示L和R图像的复用的示例的示图。
当L/R复用器71根据并置方法复用L和R图像时,如图8B中所示,图8A中示出的L和R图像可以附着到左帧和右帧。在图8A和8B的示例中,一个帧的尺寸是1280×720个像素。具有1280×720个像素的L和R图像在水平方向上均通过像素数目的一半被稀疏,并且随后可以附着到一个帧的左侧和右侧。
当L/R复用器71根据叠置方法复用L和R图像时,如图8C中所示,图8A中示出的L和R图像可以附着到一个帧的顶部和底部。具有1280×720个像素的L和R图像在竖直方向上均通过像素数目的一半被稀疏,并且随后可以附着到一个帧的顶部和底部。
L/R复用器71将通过以该方式复用L和R图像而获得的每个帧输出到MPEG2编码器72。
MPEG2编码器72根据例如MPEG2方法压缩通过L/R复用器71复用L和R图像而获得的每个帧的数据。
此时,当附着到要被压缩的帧的L和R图像是其中视差大的部分处的图像时,MPEG2编码器72压缩附着有L和R图像两者的帧。
此外,当附着到要被压缩的帧的L和R图像是其中视差小的部分处的图像时,MPEG2编码器72基于由识别信息生成单元44生成的识别信息指定附着到帧的L和R图像中的要被省略的图像。MPEG2编码器72省略指定的图像并且压缩仅附着有记录图像的帧。
图9A和9B是图示图像的省略的示例的示图。
图9A示出了其中根据并置方法执行L和R图像的复用的示例。当被复用到要被压缩的帧的L和R图像是其中视差小的部分处的图像并且例如R图像被省略时,如白色箭头所指示的,MPEG2编码器72省略附着到帧的右半部的R图像。
在图9A和9B中,附着到同一帧的L和R图像中的由虚线指示的R图像是所省略的R图像。例如通过将要被压缩的整个帧中的附着有R图像的右半部设定为黑色数据(Y=d′16,Cb=d′128,且Cr=d′128)区域或者通过将右半部设定为0数据区域,执行R图像的省略。
图9B示出了其中根据叠置方法执行L和R图像的复用的省略示例。当被复用到要被压缩的帧的L和R图像是其中视差小的部分处的图像并且例如R图像被省略时,如白色箭头所指示的,MPEG2编码器72省略附着到帧的底半部的R图像。
MPEG2编码器72根据MPEG2等压缩其中以上述方式省略一个图像的帧。当附着有省略图像的区域被设定为黑色数据区域或0数据区域时,该区域的数据实质上不存在。因此,一个帧的整体数据量小于附着有L和R图像两者的一个帧的整体数据量。
MPEG2编码器72向记录单元73输出通过压缩附着有L和R图像两者的帧而获得的数据或者通过压缩附着有L和R图像中的一个的帧而获得的数据。
每个帧的数据可以不根据MPEG2等进行压缩,而是可以以未压缩状态记录。
记录单元73将报头信息添加到从识别信息生成单元44提供的识别信息,根据从MPEG2编码器72提供的每个帧形成的3D内容的图像数据以及音频数据。随后,记录单元73将具有图6中示出的结构的信息记录在记录介质24中。
接下来,将描述记录/再现装置1中的再现侧的配置。
再现单元25包括再现处理单元51、识别信息分析单元52、图像数据处理单元53和显示处理单元54。
再现处理单元51从记录介质24读取关于要再现的3D内容的信息。当读取信息是包括其中视差小的部分处的图像数据的信息并且包括识别信息时,再现处理单元51将识别信息输出到识别信息分析单元52。
再现处理单元51对压缩的各个帧解压缩并且将从解压缩的帧中提取的L和R图像输出到图像数据处理单元53和显示处理单元54。当L和R图像中的一个被省略时,从再现处理单元51输出作为记录图像的数据和省略图像的数据的黑色数据或0数据。
识别信息分析单元52分析从再现处理单元51提供的识别信息并且指定L和R图像中的被记录的图像以及视差。识别信息分析单元52将分析结果输出到图像数据处理单元53。
当从再现处理单元51提供其中视差小的部分处的图像时,图像数据处理单元53执行2D-3D转换以基于作为记录图像的L或R图像生成省略图像。
例如,当从再现处理单元51提供的记录图像是L图像时,图像数据处理单元53通过在L图像中设定视差来生成R图像。此外,当从再现处理单元51提供的记录图像是R图像时,图像数据处理单元53通过在R图像中设定视差来生成L图像。基于识别信息分析单元52的分析结果来指定L和R图像中的被记录为记录图像的图像和生成图像时使用的视差。
图像数据处理单元53将基于图像生成的记录图像以及基于用作图像生成的基础的记录图像生成的图像输出到显示处理单元54。
显示处理单元54基于从再现处理单元51和图像数据处理单元53提供的数据将L和R图像交替地显示在电视机2上。例如,当要再现的部分是其中视差大的部分时,显示处理单元54显示从再现处理单元51提供的L和R图像。此外,当要再现的部分是其中视差小的部分时,显示处理单元54显示从图像数据处理单元53提供的L和R图像。
图10是图示再现处理单元51的配置的示例的框图。
再现处理单元51包括再现器81和L/R分离器82。
当从记录介质24读取的信息包括识别信息时,再现器81将识别信息输出到识别信息分析单元52。此外,再现器81对压缩的各个帧解压缩并且将解压缩的帧输出到L/R分离器82。
L/R分离器82分离来自从再现器81提供的帧的L和R图像并且将L和R图像输出到图像数据处理单元53和显示处理单元54。
图11是图示其中分离L和R图像的示例的示图。
当L和R图像根据并置方法复用时,如图11的左上部中所示,L和R图像被分离并且从其中复用L和R图像的帧中提取L和R图像。此外,通过对所提取的L和R图像进行缩放,生成图的右部中示出的像素数目与一个帧的像素数目相同的L和R图像。
当L和R图像根据叠置方法复用时,如图11的左下部中所示,L和R图像被分离并且从其中复用L和R图像的帧中提取L和R图像。此外,通过对所提取的L和R图像进行缩放,生成图的右部中示出的像素数目与一个帧的像素数目相同的L和R图像。
当附着到帧的L或R图像被省略时,生成具有与一个帧的像素数目相同的像素数目并且其中所有像素数据是黑色数据或0数据的图像,作为省略图像的数据。
再现器81将以该方式生成的L和R图像输出到图像数据处理单元53和显示处理单元54。
图12是图示图像数据处理单元53的配置的示例的框图。
在图12的示例中,图像数据处理单元53包括图像处理器101。从再现处理单元51输出的作为记录图像的L或R图像的数据被输入到图像处理器101并且无改变地输出到显示处理单元54。
图像处理器101基于识别信息分析单元52的分析结果指定用于图像生成的视差并且通过使物体的位置按指定视差移位来生成图像。图像处理器101将生成的图像输出到显示处理单元54。
当输入到图12中所示的图像数据处理单元53并且无改变地输出到显示处理单元54的图像数据是L图像的数据时,从图像处理器101输出的图像数据被用作R图像的数据。此外,当输入到图像数据处理单元53并且无改变地输出到显示处理单元54的图像数据是R图像的数据时,从图像处理器101输出的图像数据被用作L图像的数据。
图13是图示图像数据处理单元53的配置的另一示例的框图。
图13中示出的图像数据处理单元53包括存储器控制器111和存储器112。从再现处理单元51输出的作为记录图像的L或R图像的数据被输入到存储器112并且无改变地输出到显示处理单元54。
存储器控制器111基于识别信息分析单元52的分析结果指定用于图像生成的视差并且基于指定的视差控制存储器112的延迟量。在存储器控制器111中预先设定指示视差和延迟量之间的关系的信息。
存储器112临时存储输入图像数据,在存储器控制器111的控制下使图像数据延迟对应于视差的延迟量,并且输出图像数据。
当输入到图13中所示的图像数据处理单元53并且无改变地输出到显示处理单元54的图像数据是L图像的数据时,从存储器112输出的图像数据被用作R图像的数据。此外,当输入到图像数据处理单元53并且无改变地输出到显示处理单元54的图像数据是R图像的数据时,从存储器112输出的图像数据被用作L图像的数据。
图14是图示图像数据处理单元53的配置的又一示例的框图。
图14中示出的图像数据处理单元53包括运动向量检测器121、存储器控制器122和存储器123。从再现处理单元51输出的作为记录图像的L或R图像的数据被输入到运动向量检测器121和存储器123并且无改变地输出到显示处理单元54。
当基于识别信息分析单元52的分析结果将要再现的部分指定为其中视差小的部分时,运动向量检测器121基于输入图像数据检测指示帧之间的运动的运动向量。例如,运动向量检测器121检测通过按预定数目分离一个帧而形成的每个区域中的运动向量并且将检测结果提供给存储器控制器122。
存储器控制器122基于由运动向量检测器121检测到的运动向量来控制存储器123的延迟量。在存储器控制器122中预先设定指示运动向量和延迟量之间的关系的信息。
存储器123临时存储输入图像数据,在存储器控制器122的控制下使图像数据延迟对应于视差的延迟量,并且输出图像数据。
当输入到图14中所示的图像数据处理单元53并且无改变地输出到显示处理单元54的图像数据是L图像的数据时,从存储器123输出的图像数据被用作R图像的数据。此外,当输入到图像数据处理单元53并且无改变地输出到显示处理单元54的图像数据是R图像的数据时,从存储器123输出的图像数据被用作L图像的数据。
当观看通过图13或14中所示的配置中的2D-3D转换获得的L和R图像时,由于左图像和右图像之间的时间差,用户能够立体地感受物体。已知Mach-Dvorak现象,该现象是与其中用户因左图像和右图像之间的时间差而立体地感受物体的现象相似的现象。L和R图像的显示之间的时间差变为视差。
即使当识别信息不包括关于视差的信息时,仍可以使用图14中所示的配置。在例如日本未审专利申请公布第8-149512号中公开了图14中所示的配置。
记录/再现装置的处理
根据本发明的实施例提供了一种记录方法,包括:检测要记录的3D内容中包括的L和R图像之间的视差;以及将L和R图像两者记录在其中L和R图像之间的视差大于阈值的部分处,并且将L和R图像中的一个记录在其中L和R图像之间的视差小于阈值的部分处。
接下来,将参照图15的流程图描述记录/再现装置1的处理,作为上述根据本发明的实施例的记录方法的具体示例。通过从3D内容的开头部分切换要处理的部分,顺序执行参照图15描述的处理中的针对图像数据的处理。
在步骤S1中,系统控制器21确定是否设定了编程记录。当系统控制器21确定未设定编程记录时,执行另一处理。这里,上述的3D内容的记录被配置为在根据用户设定的或者记录/再现装置1自动设定的编程记录来记录3D内容时执行。
另一方面,当在步骤S1中系统控制器21确定设定了编程记录时,在步骤S2中,系统控制器21确定是否到达其中设定编程记录的3D内容的记录开始时间。系统控制器21等待直至系统控制器21确定到达记录开始时间。
当在步骤S2中系统控制器21确定到达3D内容的播放开始时间并且到达记录开始时间时,在步骤S3中,系统控制器21将要记录的3D内容的数据量hr与记录介质24的剩余量(空白容量)hs比较。系统控制器21基于由例如EPG(电子节目指南)数据指定的3D内容的播放时间和记录速率来计算3D内容的数据量hr。由记录容量检测单元45检测记录介质24的剩余量hs。
在步骤S4中,系统控制器21在最初时设定用于与L和R图像之间的视差比较的阈值th。
在步骤S5中,系统控制器21基于步骤S3的比较结果确定记录介质的24的剩余量hs是否小于3D内容的数据量hr。
当在步骤S5中系统控制器21确定记录介质的24的剩余量hs大于3D内容的数据量hr时,在步骤S6中,系统控制器21执行正常记录。在正常记录期间,L和R图像被复用到一个帧中而不省略图像,并且被压缩,并且随后被记录在记录介质24中。
另一方面,当在步骤S5中系统控制器21确定记录介质的24的剩余量hs小于3D内容的数据量hr时,在步骤S7中,图像特征检测单元43的视差检测单元43A检测L和R图像之间的视差p。
在步骤S8中,识别信息生成单元44确定L和R图像之间的视差p是否小于阈值th。当识别信息生成单元44确定L和R图像之间的视差p大于阈值th时,该处理前往步骤S6。随后,执行正常记录,即记录L和R图像两者。
另一方面,当在步骤S8识别信息生成单元44确定L和R图像之间的视差p小于阈值th时,在步骤S9中,图像质量检测单元43B检测要记录的部分处的L和R图像的图像质量。
在步骤S10中,识别信息生成单元44确定L图像的图像质量是否低于R图像的图像质量。
当在步骤S10中识别信息生成单元44确定L图像的图像质量低于R图像的图像质量时,在步骤S11中记录R图像和识别信息。即,识别信息生成单元44省略L图像并且将R图像确定为记录图像。随后,识别信息生成单元44生成识别信息,其包括指示R图像被记录的信息以及指示视差的信息。记录处理单元42基于由识别信息生成单元44生成的识别信息省略L图像,压缩仅附着有R图像的帧的数据,并且随后将帧的数据与识别信息等一起记录在记录介质24中。
当在步骤S10中识别信息生成单元44确定L图像的图像质量好于R图像的图像质量时,在步骤S12中记录L图像和识别信息。即,识别信息生成单元44省略R图像并且将L图像确定为记录图像。随后,识别信息生成单元44生成识别信息,其包括指示L图像被记录的信息以及指示视差的信息。记录处理单元42基于由识别信息生成单元44生成的识别信息省略R图像,压缩仅附着有L图像的帧的数据,并且随后将帧的数据与识别信息等一起记录在记录介质24中。
在步骤S11或S12中记录L和R图像中的一个之后或者在步骤S6中记录L和R图像两者之后,在步骤S13中,系统控制器21确定编程记录是否结束。
当在步骤S13中系统控制器21确定例如由于播放仍继续因而编程记录未结束时,在步骤S14中,系统控制器21执行阈值调整处理。在阈值调整处理中,适当地更新用于与视差比较的阈值th。随后,该处理返回步骤S5以针对后继部分重复相同的处理。
另一方面,当在步骤S13中系统控制器21确定编程记录结束时,系统控制器21控制记录处理单元42以停止编程记录并且终止记录。
将参照图16的流程图描述图15的步骤S14中执行的阈值调整处理。
在步骤S31中,系统控制器21检测要记录的3D内容的播放的剩余时间并且基于从记录容量检测单元45提供的信息检测记录介质24的剩余量hsa。
在步骤S32中,系统控制器21预测仍未被记录在3D内容中的部分的数据量hra。系统控制器21基于例如步骤S31中检测到的剩余时间和记录速率来计算仍未被记录在3D内容中的部分的数据量hra。系统控制器21将3D内容的预测数据量hra与记录介质24的剩余量hsa进行比较。
在步骤S33中,系统控制器21确定记录介质24的剩余量hsa是否足够。
当在步骤S33中系统控制器21确定3D内容的数据量hra大于记录介质24的剩余量hsa并且因此记录介质24的剩余量hsa不足时,在步骤S34中,系统控制器21使阈值th增加单位量并且设定阈值th。因此,省略图像的数目大于改变阈值th的设定之前省略的图像的数目。因此,可以减少记录全体3D内容所需的数据量。
另一方面,当在步骤S33中系统控制器21确定3D内容的数据量hra小于记录介质24的剩余量hsa并且因此记录介质24的剩余量hsa足够时,在步骤S35中,系统控制器21使阈值th减少单位量并且设定阈值th。因此,省略图像的数目较改变阈值th的设定之前减少。因此,可以使要再现的3D内容的图像质量接近完整地记录3D内容时的所记录的3D内容的图像质量。
在步骤S34或S35中更新阈值th之后,该处理返回图15的步骤S14以执行后继处理。
阈值可以根据另一方法更新。
图17是图示3D内容的数据量预测的示例的示图。
在图17中,水平轴表示时间并且竖直轴表示记录介质24的容量。记录开始时间是0并且当前时间是时间ta。从时间ta到记录结束时间的时间是记录剩余时间tr。在时间ta处记录的记录介质24的数据量是记录量sa。通过从虚线指示的记录量的上限减去剩余量sa而获得的记录介质的量是记录介质24的剩余量hsa。
例如,当通过将每个单位时间的记录量设定为与从时间0到时间ta的每个单位时间的记录量相同,3D内容的记录在记录剩余时间tr期间继续时,系统控制器21预测在记录结束时间需要多少3D内容的数据量。就是说,当根据当前记录量sa计算记录量的增加比sa/ta并且假设计算的增加比sa/ta在记录剩余时间tr期间继续时,可以预测在记录结束时间的3D内容的数据量。
当预测数据量超过记录介质24的记录量时,确定记录介质24的容量不足,并且因此更新阈值th从而使其减少。另一方面,当预测数据量未超过记录介质24的记录量时,确定记录介质24的容量足够,并且因此更新阈值th从而使其增加。
根据本发明实施例提供了一种再现方法,包括:再现包括第一部分和第二部分的3D内容,根据视差是否大于阈值,在第一部分处记录L和R图像两者,并且在第二部分处记录L和R图像中的一个;基于通过再现3D内容获得的第二部分的L和R图像中的一个,生成作为3D内容的图像而未被记录的另一个图像;以及当显示第一部分的图像时,显示通过再现3D内容获得的L和R图像,并且当显示第二部分的图像时,显示通过再现3D内容获得的一个图像以及所生成的另一个图像。
接下来,将参照图18的流程图描述记录/再现装置1的再现处理,作为上述根据本发明的实施例的再现方法的具体示例。
当通过操作遥控器31从所记录的3D内容项中选择预定的3D内容项时,图18的处理开始。例如,通过从3D内容的开头部分顺序切换要再现的部分,执行图18的处理。
在步骤S51中,再现处理单元51从记录介质24读取要再现的部分的信息。
在步骤S52中,再现处理单元51确定是否与要再现的部分的图像数据对应地记录了识别信息。
当在步骤S52中再现处理单元51确定未记录识别信息时,在步骤S53中显示3D图像。当没有识别信息存在时,当前要再现的部分是其中视差大的部分并且L和R图像两者记录在该部分中。通过再现处理单元51中的再现处理获得的L和R图像被提供给显示处理单元54并且被交替地显示在电视机2上。
当在步骤S52中再现处理单元51确定记录了识别信息时,在步骤S54中,识别信息分析单元52分析识别信息。当与要再现的部分的图像数据对应地记录了识别信息时,当前要再现的部分是其中视差小的部分并且L和R图像中的一个记录在该部分中。
在步骤S55中,图像数据处理单元53基于识别信息分析单元52的分析结果确定R图像的数据是否作为要再现的部分的图像数据而被记录。
当在步骤S55中图像数据处理单元53确定R图像的数据被记录时,在步骤S56中,图像数据处理单元53执行2D-3D转换以基于R图像生成L图像。图像数据处理单元53生成的L图像与作为记录图像的R图像一起提供给显示处理单元54。
另一方面,当在步骤S55中图像数据处理单元53确定L图像的数据被记录时,在步骤S57中,图像数据处理单元53执行2D-3D转换以基于L图像生成R图像。图像数据处理单元53生成的R图像与作为记录图像的L图像一起提供给显示处理单元54。
在步骤S58中,显示处理单元54基于从图像数据处理单元53提供的L和R图像在电视机2上显示3D图像。
在步骤S53或S58中显示3D图像之后,在步骤S59中,系统控制器21确定再现处理是否结束。当在步骤S59中系统控制器21确定再现处理未结束时,该处理返回步骤S51以针对后继部分重复相同的处理。当在步骤S59中系统控制器21确定再现处理结束时,再现处理结束。
图19是图示3D图像的观看的示例的示图。
电视机2上显示的L和R图像被引导到佩戴快门眼镜131的用户的左眼和右眼。根据使用红外光从安装在电视机2中的控制单元2A输出的控制信号控制快门眼镜131的同步。
记录/再现装置1可以根据上述处理高效地记录3D内容。例如,即使当通过编程记录来执行记录时,记录/再现装置1仍可以可靠地记录全体3D内容。
因此,记录/再现装置1可以在适当地生成省略图像的同时高效地再现所记录的3D内容。
修改示例
如上文所述,在每个部分处将L和R图像之间的视差与阈值比较。然而,该部分可以是其中存在多对L和R图像的部分或者可以是其中存在一对L和R图像的部分。
将视差与阈值比较,适当地省略图像并且记录图像的处理可以在除了根据编程记录来记录3D内容的时间以外的记录的时间执行。同样地,以上处理可以不在记录时执行,而是在传送3D内容时执行,在将视差与阈值比较时,适当地省略图像,并且传送图像。
当视差小于阈值时,如上文所述,检测L和R图像的图像质量并且省略具有较低图像质量的图像。然而,可以省略L和R图像中的系统控制器21中预先设定的图像。因此,可以不检测图像质量。此外,不同于在记录时省略图像,可以在编码处理中执行增加数据压缩比的处理。例如,当图像的尺寸因编码处理而减半时,在再现时图像的尺寸可以返回原始尺寸。可替选地,不同于省略图像,作为另一种方法,可以降低记录位率。
不同的装置可以分别执行记录/再现装置1的记录功能和再现功能。具有记录功能的记录装置包括图5中所示的系统控制器21、记录单元23和记录介质24。此外,具有再现功能的再现装置包括图5中所示的系统控制器21和再现单元25。由记录装置记录的3D内容经由记录介质或网络提供给再现装置的再现单元25。
计算机的配置的示例
上文描述的系列处理可以由硬件或软件执行。当该系列处理由软件执行时,将构成软件的程序从程序记录介质安装到由专用硬件装置、通用计算机等配置的计算机。
图20是图示执行用于执行上述系列处理的程序的计算机的硬件配置的示例的框图。
CPU(中央处理单元)151、ROM(只读存储器)152和RAM(随机存取存储器)153经由总线154彼此连接。
此外,I/O(输入/输出)接口155连接到总线154。包括键盘和鼠标的输入单元156以及包括显示器和扬声器的输出单元157连接到I/O接口155。此外,包括硬盘或非易失性存储器的存储单元158、包括网络接口的通信单元159以及驱动可拆卸介质161的驱动器160连接到I/O接口155。
在具有该配置的计算机中,例如,CPU 151通过经由I/O接口155和总线154将存储单元158中存储的程序加载在RAM 153上并且执行该程序来执行上述系列处理。
CPU 151执行的程序被记录在例如可拆卸介质161中,或者经由诸如局域网、互联网或数字播放的有线或无线传送介质来提供,以安装在存储单元158中。
计算机执行的程序可以是说明书中描述按时间顺序处理的程序,或者是并行处理的或在调用程序时在需要的定时处理的程序。
本发明包含与在2010年7月7日提交日本专利局的日本在先专利申请JP 2010-154791中公开的主题相关的主题,其整体内容通过引用合并于此。
本领域的技术人员应当理解,在所附权利要求及其等同物的范围内,根据设计需要和其他因素,可以想到各种修改、组合、子组合和变更。

Claims (13)

1.一种记录装置,包括:
视差检测单元,检测要记录的三维3D内容中包括的左眼L图像和右眼R图像之间的视差;以及
记录控制单元,将所述L图像和R图像两者记录在其中所述L图像和R图像之间的视差大于阈值的第一部分处,并且将所述L图像和R图像中的一个记录在其中所述L图像和R图像之间的视差小于所述阈值的第二部分处。
2.根据权利要求1所述的记录装置,进一步包括:
图像质量检测单元,检测所述L图像和R图像的图像质量,
其中所述记录控制单元记录其中视差小于所述阈值的所述L图像和R图像之中的具有较高图像质量的图像。
3.根据权利要求1所述的记录装置,进一步包括:
生成单元,生成指示记录了所述L图像和R图像中的哪一个图像的识别信息,
其中所述记录控制单元与所述3D内容的所述第二部分的图像数据对应地记录所述识别信息。
4.根据权利要求3所述的记录装置,其中所述生成单元生成包括指示所述L图像和R图像之间的视差的信息的所述识别信息。
5.根据权利要求1所述的记录装置,进一步包括:
控制单元,将全体所述3D内容中的未被记录的部分的数据量与其中记录所述3D内容的记录介质的剩余容量比较,并且当未被记录的部分的数据量大于所述记录介质的剩余容量时,将所述阈值更新为更高。
6.一种记录方法,包括:
检测要记录的三维3D内容中包括的左眼L图像和右眼R图像之间的视差;以及
将所述L图像和R图像两者记录在其中所述L图像和R图像之间的视差大于阈值的部分处,并且将所述L图像和R图像中的一个记录在其中所述L图像和R图像之间的视差小于所述阈值的部分处。
7.一种使计算机执行如下处理的程序,包括:
检测要记录的三维3D内容中包括的左眼L图像和右眼R图像之间的视差;以及
将所述L图像和R图像两者记录在其中所述L图像和R图像之间的视差大于阈值的部分处,并且将所述L图像和R图像中的一个记录在其中所述L图像和R图像之间的视差小于所述阈值的部分处。
8.一种再现装置,包括:
再现单元,再现包括第一部分和第二部分的三维3D内容,根据视差是否大于阈值,在所述第一部分处记录左眼L图像和右眼R图像两者,并且在所述第二部分处记录所述L图像和R图像中的一个;
生成单元,基于通过再现所述3D内容获得的所述第二部分的所述L图像和R图像中的一个,生成作为所述3D内容的图像而未被记录的另一个图像;以及
显示控制单元,当显示所述第一部分的图像时,显示通过再现所述3D内容获得的所述L图像和R图像,并且当显示所述第二部分的图像时,显示通过再现所述3D内容获得的一个图像以及由所述生成单元生成的另一个图像。
9.根据权利要求8所述的再现装置,进一步包括:
分析单元,分析识别信息,所述识别信息是与所述3D内容的所述第二部分的图像数据对应地记录的,并且所述识别信息指示所述L图像和R图像中的哪一个图像被记录,
其中所述生成单元基于所述识别信息指定作为所述3D内容的图像而未被记录的所述另一个图像以生成所述另一个图像。
10.根据权利要求9所述的再现装置,
其中所述分析单元通过分析所述识别信息指定所述L图像和R图像之间的视差,以及
其中所述生成单元生成所述另一个图像,所述另一个图像相对于所述一个图像具有由所述分析单元指定的视差。
11.一种再现方法,包括:
再现包括第一部分和第二部分的三维3D内容,根据视差是否大于阈值,在所述第一部分处记录左眼L图像和右眼R图像两者,并且在所述第二部分处记录所述L图像和R图像中的一个;
基于通过再现所述3D内容获得的所述第二部分的所述L图像和R图像中的一个,生成作为所述3D内容的图像而未被记录的另一个图像;以及
当显示所述第一部分的图像时,显示通过再现所述3D内容获得的所述L图像和R图像,并且当显示所述第二部分的图像时,显示通过再现所述3D内容获得的一个图像以及所生成的另一个图像。
12.一种使计算机执行如下处理的程序,包括:
再现包括第一部分和第二部分的三维3D内容,根据视差是否大于阈值,在所述第一部分处记录左眼L图像和右眼R图像两者,并且在所述第二部分处记录所述L图像和R图像中的一个;
基于通过再现所述3D内容获得的所述第二部分的所述L图像和R图像中的一个,生成作为所述3D内容的图像而未被记录的另一个图像;以及
当显示所述第一部分的图像时,显示通过再现所述3D内容获得的所述L图像和R图像,并且当显示所述第二部分的图像时,显示通过再现所述3D内容获得的一个图像以及所生成的另一个图像。
13.一种记录/再现装置,包括:
视差检测单元,检测要记录的三维3D内容中包括的左眼L图像和右眼R图像之间的视差;
记录控制单元,将所述L图像和R图像两者记录在其中所述L图像和R图像之间的视差大于阈值的第一部分处,并且将所述L图像和R图像中的一个记录在其中所述L图像和R图像之间的视差小于所述阈值的第二部分处;
再现单元,再现包括所述第一部分和所述第二部分的3D内容,根据视差是否大于所述阈值,在所述第一部分处记录L图像和R图像两者,并且在所述第二部分处记录所述L图像和R图像中的一个;
生成单元,基于通过再现所述3D内容获得的所述第二部分的所述L图像和R图像中的一个,生成作为所述3D内容的图像而未被记录的另一个图像;以及
显示控制单元,当显示所述第一部分的图像时,显示通过再现所述3D内容获得的所述L图像和R图像,并且当显示所述第二部分的图像时,显示通过再现所述3D内容获得的一个图像以及由所述生成单元生成的另一个图像。
CN2011101893039A 2010-07-07 2011-06-30 记录装置和方法、再现装置和方法以及记录/再现装置 Pending CN102376326A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2010-154791 2010-07-07
JP2010154791A JP2012019329A (ja) 2010-07-07 2010-07-07 記録装置、記録方法、再生装置、再生方法、プログラム、および記録再生装置

Publications (1)

Publication Number Publication Date
CN102376326A true CN102376326A (zh) 2012-03-14

Family

ID=44477972

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2011101893039A Pending CN102376326A (zh) 2010-07-07 2011-06-30 记录装置和方法、再现装置和方法以及记录/再现装置

Country Status (4)

Country Link
US (2) US8712212B2 (zh)
EP (1) EP2405433A1 (zh)
JP (1) JP2012019329A (zh)
CN (1) CN102376326A (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5420074B2 (ja) * 2010-07-02 2014-02-19 パナソニック株式会社 映像信号変換装置、映像信号変換方法
US9002180B2 (en) * 2012-06-01 2015-04-07 At&T Intellectual Property I, L.P. Media recorder

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0787598B2 (ja) 1991-06-06 1995-09-20 株式会社エイ・ティ・アール視聴覚機構研究所 視差補正装置
JPH06215111A (ja) 1993-01-21 1994-08-05 Nippon Telegr & Teleph Corp <Ntt> 視差検出処理方法
JP3551467B2 (ja) 1994-04-13 2004-08-04 松下電器産業株式会社 視差演算装置、視差演算方法及び画像合成装置
JP2846834B2 (ja) 1994-09-22 1999-01-13 三洋電機株式会社 2次元映像を3次元映像に変換する方法
JP2002152647A (ja) 2000-11-08 2002-05-24 Toshiba Corp 録画予約対応の録画装置及び録画予約対応の録画方法
CN100480977C (zh) 2001-11-29 2009-04-22 松下电器产业株式会社 记录装置、记录程序和记录方法
JP3643557B2 (ja) 2001-12-28 2005-04-27 株式会社東芝 記録再生装置
AU2003268676A1 (en) * 2002-09-27 2004-04-19 Sharp Kabushiki Kaisha 3-d image display unit, 3-d image recording device and 3-d image recording method
JP2005108282A (ja) 2003-09-29 2005-04-21 Funai Electric Co Ltd 情報記録装置
JP2006060630A (ja) 2004-08-23 2006-03-02 Hitachi Ltd 記録装置
JP3933167B2 (ja) * 2004-12-27 2007-06-20 ソニー株式会社 データ記録方法、データ記録装置及び撮像装置
US20070074251A1 (en) 2005-09-27 2007-03-29 Oguz Seyfullah H Method and apparatus for using random field models to improve picture and video compression and frame rate up conversion
JP5587552B2 (ja) 2005-10-19 2014-09-10 トムソン ライセンシング スケーラブル映像符号化を用いた多視点映像符号化
US8433181B2 (en) 2005-11-09 2013-04-30 Lg Electronics Inc. Apparatus and method for recording digital multimedia broadcasting
JP4649355B2 (ja) 2006-03-27 2011-03-09 富士通株式会社 ブロックノイズ検出方法及び装置並びにブロックノイズ低減方法及び装置
JP4467012B2 (ja) 2006-04-05 2010-05-26 シャープ株式会社 コンテンツ記録再生装置及び同装置を利用したコンテンツ記録再生方法
JP4777274B2 (ja) 2007-02-19 2011-09-21 キヤノン株式会社 映像再生装置及びその制御方法
US20080250164A1 (en) 2007-04-04 2008-10-09 Jaan-Huei Chen Recording multimedia data on removable storage device
CN101415114B (zh) 2007-10-17 2010-08-25 华为终端有限公司 视频编解码方法和装置以及视频编解码器
US9426414B2 (en) 2007-12-10 2016-08-23 Qualcomm Incorporated Reference selection for video interpolation or extrapolation
KR101385884B1 (ko) 2008-01-30 2014-04-16 고려대학교 산학협력단 다시점 동영상의 부호화 및 복호화 방법 및 장치
JP4314316B1 (ja) 2008-12-26 2009-08-12 日本グリーンファーム株式会社 家庭用の植物栽培装置
JP2011015191A (ja) * 2009-07-02 2011-01-20 Panasonic Corp 映像表示装置、映像視聴用眼鏡、及び映像システム

Also Published As

Publication number Publication date
JP2012019329A (ja) 2012-01-26
EP2405433A1 (en) 2012-01-11
US20120008920A1 (en) 2012-01-12
US8712212B2 (en) 2014-04-29
US20130148941A1 (en) 2013-06-13

Similar Documents

Publication Publication Date Title
US8780173B2 (en) Method and apparatus for reducing fatigue resulting from viewing three-dimensional image display, and method and apparatus for generating data stream of low visual fatigue three-dimensional image
US9055281B2 (en) Source device and sink device and method of transmitting and receiving multimedia service and related data
US9094657B2 (en) Electronic apparatus and method
US8515264B2 (en) Information processing apparatus, information processing method, display control apparatus, display control method, and program
CN101938663B (zh) 记录再现装置和变换装置
US9118895B2 (en) Data structure, image processing apparatus, image processing method, and program
CN102223550A (zh) 图像处理设备、图像处理方法和程序
US8610763B2 (en) Display controller, display control method, program, output device, and transmitter
JP5387399B2 (ja) 情報処理装置および情報処理方法
JP5415217B2 (ja) 三次元映像処理装置
US20110157164A1 (en) Image processing apparatus and image processing method
US20130010064A1 (en) Video processing device
US20110018979A1 (en) Display controller, display control method, program, output device, and transmitter
JP2012182785A (ja) 映像再生装置および映像再生方法
US20130002821A1 (en) Video processing device
KR20130057974A (ko) 데이터 구조, 화상 처리 장치, 화상 처리 방법 및 프로그램
US8712212B2 (en) Recording apparatus, recording method, reproducing apparatus, reproducing method, program, and recording/producing apparatus
US8818180B2 (en) Video reproducing apparatus, video reproducing method, and program
US20110205336A1 (en) Three-dimensional image reproducing apparatus
CN103548345A (zh) 记录设备和方法、再现设备和方法、程序和记录再现设备
US20120027376A1 (en) Reproducing apparatus, reproducing method, and program therefor
US20140049608A1 (en) Video processing device and video processing method
WO2012165160A1 (ja) 再生装置、再生方法、およびプログラム

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20120314