[go: up one dir, main page]

CN1682539A - 用于适配2d和3d立体视频信号的装置和方法 - Google Patents

用于适配2d和3d立体视频信号的装置和方法 Download PDF

Info

Publication number
CN1682539A
CN1682539A CNA038212226A CN03821222A CN1682539A CN 1682539 A CN1682539 A CN 1682539A CN A038212226 A CNA038212226 A CN A038212226A CN 03821222 A CN03821222 A CN 03821222A CN 1682539 A CN1682539 A CN 1682539A
Authority
CN
China
Prior art keywords
video signal
user
video
characteristic information
enumeration value
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CNA038212226A
Other languages
English (en)
Inventor
南济镐
金万培
洪镇佑
金镇雄
金在俊
金炯中
赵南翊
金鳞澈
金海光
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Electronics and Telecommunications Research Institute ETRI
Original Assignee
Electronics and Telecommunications Research Institute ETRI
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Electronics and Telecommunications Research Institute ETRI filed Critical Electronics and Telecommunications Research Institute ETRI
Publication of CN1682539A publication Critical patent/CN1682539A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/258—Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
    • H04N21/25808—Management of client data
    • H04N21/25825—Management of client data involving client display capabilities, e.g. screen resolution of a mobile phone
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/139—Format conversion, e.g. of frame-rate or size
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/261—Image signal generators with monoscopic-to-stereoscopic image conversion
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/258—Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
    • H04N21/25808—Management of client data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/258—Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
    • H04N21/25866—Management of end-user data
    • H04N21/25891—Management of end-user data being end-user preferences
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/266—Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
    • H04N21/2662—Controlling the complexity of the video stream, e.g. by scaling the resolution or bitrate of the video stream based on the client capabilities

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Graphics (AREA)
  • Computer Security & Cryptography (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

一种用于适配2D和3D立体视频信号的装置和方法。用于适配2D和3D立体视频信号的装置通过将数字内容适配到包括用户特征和终端特征的特定使用环境上，来向用户提供数字内容的最好经验。该装置允许与用户的适配请求相关联的视频内容的有效传送。

Description

用于适配2D和3D立体视频信号的装置和方法
技术领域
本发明涉及一种用于适配2D或3D立体视频信号的装置和方法；更特别地，本发明涉及一种用于根据用户特征和用户终端特征来适配2D或3D立体视频信号的装置和方法以及一种其上记录了用于执行所述方法的程序的计算机可读记录介质。
背景技术
运动图像专家组(MPEG)建议了一种新的标准工作项、一种数字项适配(DIA)。数字项(DI)是一种具有标准表示、标识和元数据的结构化数字对象，而DIA是指通过修改资源适配引擎和/或描述符适配引擎中的DI来产生适配的DI的处理过程。
这里，资源是指能单独标识的资产，诸如音频或视频剪辑、以及图像或文本资产。资源也可以代表一个物理对象。描述符是指与DI的部件或项目相关的信息，诸如元数据。同样，用户是指包括DI的所有生产者、合法人(rightfulperson)、分销商和消费者。媒体资源是指能直接数字化表述的内容。在本说明书中，以与DI、媒体资源和资源相同的意思来使用术语‘内容’。
虽然目前为止二维(2D)视频已经为通用媒体，但是三维(3D)视频也已经被引入到信息和电讯的领域中。在很多的英特网站点、DVD标题等处容易找到立体图像和视频。随着这种情况的发展，在立体视频处理中已经对MPEG产生了兴趣。在MPEG-2中已经标准化了立体视频的压缩方案，即，国际标准组织/国际电技术委员会(ISO/IEC)JTC1/SC29/WG11的“Final Text of12818-2/AMD3(MPEG-2 multiview profile)”。1996中定义了MPEG-2多视角配置(MVP)，来作为利用为立体声TV的主应用域的MPEG-2标准的修正版。MVP通过隐含地定义不均等性补偿预测(disparity-compensated prediction)，来向着内视角通道冗余(inter-viewchannel redundancy)进行开拓来扩展众所周知的混合编码(hybrid coding)。主要的新元件是用于多摄像机序列(multi-camerasequence)的临时可扩展性(TS，temporal scalability)模式的用途的定义，以及在MPEG-2语法中的获取参数的定义。起初开发了TS模式来允许具有低帧速率的基层流和具有附加视频帧的增强层流的联合编码。如果两种流都可用，则能利用全帧速率来再现已解码的视频。在TS模式中，能从基层帧或从最近重新构造的增强层帧中执行增强层宏块的临时预测(temporal prediction)。
通常，使用具有一对左和右摄像机的立体摄像机来产生立体视频。该立体视频被存储或发送到用户。不像立体视频，2D视频的3D立体转换(2D/3D立体视频转换)使得用户观看来自普通2D视频数据的3D立体视频成为可能。例如，用户能欣赏来自TV、VCD、DVD等的3D立体电影。不像从立体摄像机获得的一般立体图像，本质差别是立体转换要产生来自单一2D图像的立体图像。同样，能从从立体摄像机获得的3D立体视频中提取2D视频(3D立体/2D视频转换)。
传统技术具有一个问题，即它们不能提供单源多用途环境，在该单源多用途环境中通过使用视频内容使用信息，即，用户特征、用户的自然环境、以及用户终端的能力，来将一个视频内容适配到不同的使用环境上并在该不同的使用环境中使用。
这里，‘单一源’表示在多媒体源中产生的内容，以及‘多用途’是指具有各种使用环境的各种用户终端，该各种用户终端消费适应到它们的使用环境的‘单一源’。
单源多用途是有利的，这是因为它通过将内容适配到不同的使用环境来利用仅仅一种内容就能提供各种内容，另外，当它提供适配到各种使用环境的单一源时，它能有效地减少网络带宽。
因此，内容提供者能节约用于产生和发送多个内容以匹配各种使用环境的不必要成本。另一方面，能把为了它们的各种使用环境而优化的视频内容提供给内容消费者。
但是，传统技术没有利用单源多用户。也就是说，传统技术不加选择地发送视频内容，而没有考虑使用环境，诸如用户特征和用户终端特征。具有视频播放机应用程序的用户终端利用从多媒体源接收的未经变化的格式来消费视频内容。因此，传统技术不能支持单源多用途环境。
如果多媒体源提供一种考虑了各种使用环境的多媒体内容以克服传统技术的问题并且支持单源多用途环境，则较多的负担被施加到内容的产生和传输上。
发明内容
因此，本发明的一个目标是提供一种用于通过使用预先规定消费视频内容的用户终端的使用环境的信息来将视频内容适配到使用环境的装置和方法。
根据本发明的一个方面，提供了一种用于为了单源多用途而适配二维(2D)或三维(3D)立体视频信号的装置，该装置包括：视频使用环境信息管理装置，用于获取、描述和管理来自用户终端的用户特征信息；以及视频适配单元，用于将视频信号适配到视频使用环境信息上以产生适配的2D视频信号或3D立体视频信号，并且将所适配的视频信号输出到用户终端。
根据本发明的另一个方面，提供了一种用于为了单源多用途而适配2D视频信号或3D立体视频信号的装置，该装置包括：视频使用环境信息管理单元，用于获取、描述和管理来自用户终端的用户终端特征信息；以及视频适配单元，用于将视频信号适配到视频使用环境信息上以产生适配的2D视频信号或3D立体视频信号，并且将所适配的视频信号输出到用户终端。
根据本发明的一个方面，提供了一种用于为了单源多用途而适配2D视频信号或3D立体视频信号的方法，该方法包括如下步骤：a)获取、描述和管理来自用户终端的用户特征信息；以及b)将视频信号适配到视频使用环境信息上以产生适配的2D视频信号或3D立体视频信号，并且将所适配的视频信号输出到用户终端。
根据本发明的另一个方面，提供了一种用于为了单源多用途而适配2D视频信号或3D立体视频信号的方法，该方法包括如下步骤：a)获取、描述和管理来自用户终端的用户终端特征信息；以及b)将视频信号适配到视频使用环境信息上以产生适配的2D视频信号或3D立体视频信号，并且将所适配的视频信号输出到用户终端。
根据本发明的一个方面，提供了一种用于记录程序的计算机可读记录介质，该程序用于实现为了单源多用途而适配2D视频信号或3D立体视频信号的方法，该方法包括如下步骤：a)获取、描述和管理来自用户终端的用户特征信息；以及b)将视频信号适配到视频使用环境信息上以产生适配的2D视频信号或3D立体视频信号，并且将所适配的视频信号输出到用户终端。
根据本发明的另一方面，提供了一种用于记录程序的计算机可读记录介质，该程序用于实现为了单源多用途而适配2D视频信号或3D立体视频信号的方法，该方法包括如下步骤：a)获取、描述和管理来自用户终端的用户终端特征信息；以及b)将视频信号适配到视频使用环境信息上以产生适配的2D视频信号或3D立体视频信号，并且将所适配的视频信号输出到用户终端。
附图说明
从下面结合附图给出的优选实施例的描述中，本发明的上述和其它目标和特征将变得明显，其中：
图1是说明配有根据本发明的一个实施例的视频适配装置的用户终端的方框图；
图2是描述一个用户终端的方框图，该用户终端能通过使用本发明的一个实施例的图1的视频适配装置来使其具体化；
图3是说明图1的视频适配装置中执行的视频适配处理的流程图；
图4是描述图3的适配处理的流程图；
图5是显示根据本发明的一个优选实施例对2D视频信号和3D立体视频信号进行适配处理的流程图；
图6是描述根据本发明的视差的示范性图；
图7是描述根据本发明的深度范围的示范性图；以及
图8A至8C是说明根据本发明的3D立体视频信号的着色方法的示范性图。
具体实施方式
从下面参考附图给出的实施例的描述中，本发明的其它目标和方面将变得明显，这在下文中阐述。
下面的描述仅仅例示本发明的原理。即使在本说明书中没有清楚地描述或说明它们，本领域技术人员也能实现(embody)本发明的原理并且在本发明的思想和范围内发明各种装置。
本说明书中陈述的条件术语和实施例仅用来理解本发明的概念，并且它们没有被限制到说明书中提出的实施例和条件上。
此外，所有对本发明的原理、观点和实施例和特定实施例的详细描述应该被理解为它们的结构性和功能性等效物。该等效物不仅包括当前已知的等效物而且也包括未来将要开发的那些等效物，即，所有发明来执行同样功能的设备，而不管它们的结构。
例如，本发明的方框图应该被理解为显示用来体现本发明的原理的示范性电路的概念性观点。相似地，所有的流程图、状态转换图、伪代码等能基本上被表示在计算机可读记录介质中，并且无论在说明书中是否有区别地描述了计算机或处理器，它们都应该被理解为表示由计算机或处理器运行的处理。
不仅通过使用专用的硬件，而且也通过使用能够运行适当软件的硬件，就能提供在包括表示为处理器或相似概念的功能块的图中说明的各种设备的功能。当由处理器来提供所述功能时，提供者可以是单一专用处理器、单一共享处理器、或多个单独处理器，该多个单独处理器的部分能被共享。
术语‘处理器’、‘控制’或相似概念的明显使用不应该被理解为专门是指能够运行软件的一片硬件，而应该被理解为隐含包括数字信号处理器(DSP)、硬件以及用于存储软件的ROM、RAM和非易失性存储器。其中也包括其它已知和公共使用的硬件。
在本说明书的权利要求中，表示为用于执行在详细描述中所描述的功能的“装置”的元件是指包括用于执行包括所有软件格式的功能的所有方法，诸如用于执行功能的电路组合、固件/微码等。为了执行所打算的功能，所述元件和用于执行软件的合适电路一起运行。本发明包括用于执行特定功能的各种装置，并且该装置以权利要求中所请求的方法彼此连接。因此，任何能提供该功能的装置应该被理解为从当前说明书中得出的等效物。
参照附图，从下面实施例的描述中，本发明的其它目标和方面将变得明显，这在下文中阐述。相同的附图标记被给定到相同的元件上，虽然该元件出现在不同的附图中。此外，如果对相关现有技术的进一步的详细描述被认为使本发明的观点变得模糊，则省略其描述。下文中，将详细地描述本发明的优选实施例。
图1是说明配有根据本发明的实施例的视频适配装置的用户终端的方框图。参照图1，本发明的实施例的视频适配装置100包括视频适配部分103和视频使用环境信息管理部分107。视频适配部分103和视频使用环境信息管理部分107中的每一个都能彼此相互独立地被提供到视频处理系统中。
视频处理系统包括膝上型电脑、笔记本电脑、台式电脑、工作站、大型计算机和其它类型的计算机。在视频处理系统中包括了数据处理或信号处理系统，诸如个人数字助理(PDA)和无线通信移动台。
视频系统可以是从形成网络路径的节点中任意选择的任何一个，例如，多媒体源节点系统、多媒体中继节点系统、以及最终用户终端。
该最终用户终端包括视频播放机，诸如Windows媒体播放机和实时播放机。
例如，如果视频适配装置100被绑定在多媒体源节点系统上并被运行，则它接收关于其中消费视频内容的使用环境的预先规定的信息，将该视频内容适配到使用环境上，并且将所适配的内容发送到最终用户终端上。
关于视频编码处理，视频适配装置100处理视频数据的处理，用于ISO/IEC的技术委员会的标准/国际电子技术委员会(ISO/IEC)标准文档资料的国际组织可以被包括为本说明书的一部分，只要其有助于描述本发明的实施例中的元件的功能和操作。
视频数据源部分101接收在多媒体源中产生的视频数据。视频数据源部分101可以被包括在多媒体源节点系统中、或在通过有线/无线网络接收从多媒体源节点系统发送的视频数据的多媒体中继节点系统中、或在最终用户终端中。
视频适配部分103接收来自视频数据源部分101的视频数据，并且通过使用由视频使用环境信息管理部分107预先规定的使用环境信息，来将视频数据适配到使用环境上，例如，用户特征和用户终端特征。
视频使用环境信息管理部分107收集来自用户和用户终端的信息，并然后预先描述和管理使用环境信息。
视频内容/元数据输出部分105输出由视频适配部分103所适配的视频数据。可以通过有线/无线网络将输出的视频数据发送到最终用户终端的视频播放机上，或发送到多媒体中继节点系统或最终用户终端上。
图2是描述能通过使用根据本发明的实施例的图1的视频适配装置来实现的用户终端的方框图。正如在附图中所描述的，视频数据源部分101包括视频元数据201和视频内容203。
视频数据源部分101从多媒体源收集视频内容和元数据并存储它们。这里，从地面、卫星或有线TV信号、诸如英特网的网络、或诸如VCR、CD或DVD的记录介质中获得视频内容和元数据。视频内容也包括以流(streaming)或广播的形式发送的2维(2D)视频或3维(3D)立体视频。
视频元数据201是与视频媒体信息和相应的内容信息相关的描述数据，其中视频媒体信息为诸如视频内容的编码方法、文件大小、比特率、帧/第二和分辨率，相应的内容信息为诸如视频内容的题目、作者、生产时间和地点、类别和速率。基于可扩展标记语言(XML)方案能定义和描述视频元数据。
视频使用环境信息管理部分107包括用户特征信息管理单元207、用户特征信息输入单元217、视频终端特征信息管理单元209和视频终端特征信息输入单元219。
用户特征信息管理单元207通过用户特征信息输入单元217，根据来自用户终端的用户偏好或喜爱，在2D/3D视频转换的情况下，接收用户特征的信息，诸如3D立体视频内容的深度和视差，或在3D/2D视频转换的情况下，接收左和右内部视频，并且管理用户特征的信息。以机械可读的语言，例如XML格式，来管理输入的用户特征信息。
视频终端特征信息管理单元209接收来自视频终端特征信息输入单元219的终端特征信息和管理该终端特征信息。以机械可读的语言，例如XML格式，来管理终端特征信息。
视频终端特征信息输入单元219将预先设置或由用户输入的终端特征信息发送到视频终端特征信息管理单元209。视频使用环境信息管理部分107接收所收集的用户终端特征信息，以播放3D立体视频信号，诸如用户终端的显示硬件是单视的还是立体的，或视频解码器是立体MPEG-2、立体MPEG-4或立体音频视频交织(AVI)视频解码器，或着色方法是交叠的、同双的、页面翻转的、红蓝彩色立体图、红青彩色立体图、或红黄彩色立体图。
视频适配部分103包括视频元数据适配单元213和视频内容适配单元215。
视频内容适配单元215分析分别在用户特征信息输入单元217和视频终端特征信息管理单元209中管理的用户特征信息和视频终端特征信息，然后将视频内容适当地适配到用户特征和终端特征上。
也就是说，视频内容适配单元215接收和分析用户特征信息。然后，诸如深度、视差的用户偏好和最大延迟帧的数目被反映在适配信号处理过程中，以及2D视频内容被转换到3D立体视频内容上。
当输入的3D立体视频信号被转换到2D视频信号时，根据用户的偏好信息来发射输入的3D立体视频信号的左图像、右图像或同步图像并且将3D立体视频信号适配到2D视频信号上。
同样，视频内容适配单元215以XML格式从视频终端特征信息管理单元209接收用户特征信息，并分析该用户特征信息。然后，视频内容适配单元215根据诸如显示设备、3D立体视频解码器和着色方法的种类的用户终端特征信息，来执行3D立体视频信号的适配。
视频元数据适配处理单元213将在视频内容适配处理过程中需要的元数据提供到视频内容适配单元215，并且基于视频内容适配的结果来适配相应的视频元数据信息的内容。
也就是说，视频元数据适配处理单元213将在2D视频内容或3D立体视频适配处理过程中所需要的元数据提供到视频内容适配单元215。然后，视频元数据适配处理单元213基于视频内容适配的结果来更新、写入或存储2D视频元数据或3D立体视频元数据。
视频内容/元数据输出单元105输出根据用户特征和终端特征适配的2D视频或3D立体视频的内容和元数据。
图3是说明在图1的视频适配装置中执行的视频适配处理过程的流程图。参照图3，在步骤S301处，视频使用环境信息管理部分107获取来自用户和用户终端的视频使用环境信息，并且规定关于用户特征、用户终端特征的信息。
随后，在步骤S303处，视频数据源部分101接收视频内容/元数据。在步骤S305处，视频适配部分103通过使用在步骤S301处描述的使用环境信息，来将在步骤S303处接收的视频内容/元数据适当地适配到使用环境，即，用户特征、用户终端特征上。
在步骤S307处，视频内容/元数据输出部分105输出在步骤S305处适配的2D视频数据或3D立体视频。
图4是描述图3的适配处理(S305)的流程图。
参照图4，在步骤S401处，视频适配部分103识别视频数据源部分101已经接收的2D视频内容或3D立体视频内容和视频元数据。在步骤S403处，视频适配部分103将需要适配的2D视频内容或3D立体视频内容适当地适配到用户特征、用户的自然环境和用户终端能力上。在步骤S405处，视频适配部分103基于视频内容适配的结果来适配与2D视频内容或3D立体视频内容相对应的视频元数据，这在步骤S403处被执行。
图5是显示根据本发明的一个优选实施例对2D视频信号和3D立体视频信号进行适配处理的流程图。
参照图5，解码器502接收编码的MPEG视频信号501、从每一16×16宏块中提取运动矢量并且执行图像类型分析503和运动类型分析504。
在图像类型分析期间，确定图像是否是静止图像、水平运动图像、非水平运动图像或快速运动图像。
在运动类型分析期间，确定摄像机的运动和运动图像的目标。
通过图像类型分析503和运动类型分析504来从2D视频中产生3D立体视频505。
从基于强度、纹理和其它特征的静止图像中获得块的图像像素或3D深度信息。所获得的深度信息被用来构造右图像或左图像。
从水平运动图像中选择当前图像或延迟的图像。根据由运动类型分析504所确定的水平运动图像的运动类型，适当地将所选的图像显示到用户的右或左眼上。
根据运动和深度信息，从非水平运动图像中产生立体图像。
这里，描述在视频使用环境信息管理部分107中管理的描述信息的结构。
根据本发明，为了通过使用消耗2D视频内容或3D立体视频内容的使用环境的预先规定的信息来将2D视频内容或3D立体视频内容适配到使用环境上，应该管理使用环境信息，例如，关于用户特征的信息StereoscopicVideoConversionType，关于终端特征的信息StereoscopicVideoDisplayType。
关于用户特征的信息描述关于2D视频或3D立体视频转换的用户偏好。下面所示是语法的例子，该语法基于XML模式(schema)的定义，图1中所示，来描述由视频使用环境信息管理部分107所管理的用户特征的描述信息结构。
<complexType name＝ “StereoscopicVideoConversionType”>
<sequence>
<element
      name＝ “Frorm2DTo3DStereoscopic” minOccurs＝ “0”>
<complexType>
<sequence>
<element name＝ “ParallaxType”>
<simpleType>
<restriction base ＝ “string”>
<enumeration value ＝ “Positive”/>
<enumeration value ＝ “Negative”/>
</restriction>
</simpleType>
</element>
<element
     name＝ “DepthRange”type＝“mpeg7:zeroToOneType”/>
<element
     name＝“MaxDelayedFrame”
type＝“nonNegativeInteger”/>
</sequence>
</complexType>
</element>
<element
   name＝“From3DStereoscopicTo2D”MinOccurs＝“0”/>
<complexType>
<sequence>
<element name ＝“LeftRightInterVideo”>
<simpleType>
<restriction base ＝“string”>
<enumeration value ＝ “Left”/>
<enumeration value ＝ “Right”/>
<enumeration value ＝ “Intermediate”/>
</restriction>
</simpleType>
</element>
</sequence>
</complexType>
</element>
</sequence>
</complexType>
图1显示用户特征的元件。
[表1]
立体视频转换类型     元件   数据类型
    视差类型   串；正或负
    深度范围   Mpeg7：zeroToOneType
    最大延迟帧   非负整数
    左右内视频   串；左，右，中间
参照由XML模式的定义描述的示范性语法，本发明的用户特征被划分成两种类别，诸如从2D视频到3D立体视频的转换情况From2DTo3Dstereoscopic和从3D立体视频到2D视频From3DStereoscopicTo2D的转换情况。
在从2D视频到3D立体视频的转换的情况中，ParallaxType表示为用户对视差类型的偏好的负视差或正视差。
图6是根据本发明描述视差的示范性图。
参照图6，A表示负视差以及B表示正视差。也就是说，在负视差的情况下，在监视器屏幕和人眼之间觉察到目标的3D深度，而在正视差的情况下在屏幕后面觉察到目标。
同样，在从2D视频信号到3D立体视频信号的转换的情况下，DepthRange表示用户对3D立体视频信号的视差深度的偏好。能根据3D深度的范围的确定来增加或减少视差。
图7是根据本发明描述深度范围的示范性图。
参照图7，在汇聚点A处，与B相比较觉察到较宽的深度。
同样，在从2D视频信号到3D立体视频信号的转换的情况下，MaxDelayedFrame表示延迟帧的最大数目。
立体转换方案之一是利用延迟的图像。也就是说，图像顺序是{...，Ik-3，Ik-2，Ik-1，Ik，...}和Ik是当前的帧。先前帧之一，Ik-n(n＞1)被选择。然后，立体图像由Ik和Ik-n组成。由MaxDelayedFrame来确定延迟帧的最大数目n。
在从3D立体视频信号到2D视频信号的转换的情况下，LeftRightInterVideo表示在左图像、右图像或合成图像之中的用户偏好，以便获得具有较好质量的图像。
关于用户终端特征的信息表示特征信息，诸如用户终端的显示硬件是单声的或立体的，或视频解码器是立体的MPEG-2、立体的MPEG-4或立体的AVI视频解码器，或着色方法是交叠的、同双的、页面翻转的、红蓝彩色立体图、红青彩色立体图、或红黄彩色立体图。
如下所示是一种语法的例子，该语法基于XML方案的定义，如图1中所示，表示由视频使用环境信息管理部分107管理的用户终端特征的描述信息结构。
<complexType name＝“StereoscopicVideoDisplayType”>
<sequence>
<element name＝“DisplayDevice”>
<simpleType>
<restriction base ＝“string”>
<enumeration value ＝“Monoscopic”/>
<enumeration value ＝ “Stereoscopic”/>
</restriction>
</simpleType>
</element>
<element name ＝“StereoscopicDecoderType”
            type＝“mpeg7: ControlledTermUseType”/>
<element name ＝“RenderingFormat”/>
<simpleType>
<restriction base ＝“string”>
<enumeration value ＝“Interlaced”/>
<enumeration value ＝“Sync-Double”/>
<enumeration value ＝“Page-Flipping”/>
<enumeration value ＝“Anaglyph-Red-Blue”/>
<enumeration value ＝“Anaglyph-Red-Cyan”/>
<enumeration value ＝“Anaglyph-Red-Yellow”/>
</restriction>
</simpleType>
</element>
</sequence>
</complexType>
表2显示用户特征的元件。
[表2]
StereoscopicVideoDisplayType  元件  数据类型
 显示类型  String
 StereoscopicDecoderType  Mpeg7：ControlledTermUseType
 着色格式  String
DisplayType表示用户终端的显示硬件是单像的或立体的。
StereoscopicDecoderType表示视频解码器是立体MPEG-2、立体MPEG-4或立体AVI视频解码器。
RenderingFormat表示视频解码器是立体的MPEG-2、立体的MPEG-4或立体的AVI视频解码器，或着色方法是交叠的、同双的、页面翻转的、红蓝彩色立体图、红青彩色立体图、或红黄彩色立体图。
图8A到8C是说明根据本发明的3D立体视频信号的着色方法的示范性图。参照图8A到8C，着色方法包括交叠的、同双的和页面翻转的。
下面所示为一种语法的例子，该语法当将2D视频信号适配为3D立体视频信号时表示诸如用户的偏爱和爱好的用户特征的描述信息结构。
该语法表示ParallaxType表示负视差，DepthRange被设置为0.7并且延迟帧的最大数目是15。
同样，该语法表示在3D立体视频信号之中选择合成图像。
<StereoscopicVideoConversion>
<From2DTo3DStereoscopic>
     <ParallaxType>Negative</ParallaxType>
     <DepthRange>0.7</DepthRange>
     <MaxDelayedFrame>15</MaxDelayedFrame>
</From2DTo3DStereoscopic>
<From3DStereoscopicTo2D>
<LeftRightInterVideo>Intermediate</LeftRightInterVideo>
</From3DStereoscopicTo2D>
</StereoscopicVideoConversion>
下面所示为一种语法的例子，该语法在3D立体视频信号用户终端的情况下表示用户终端特征的描述信息结构。
用户终端支持单像显示器、MPEG-1视频解码器和彩色立体图。这些用户终端特征被用于3D立体视频信号用户。
<StereoscopicVideoDisplay>
<DisplayDevice>Monoscopic</DisplayDevice>
<StereoscopicDecoderType
href＝“urn:mpeg:mpeg7:cs:VisualCodingFormatCS:2001:1”>
         <mpeg7:Name xml:lang＝“en”>MPEG-1 Video
         </mpeg7:Name>
</StereoscopicDecoderType>
<RenderingFormat>Anaglyph</RenderingFormat>
<StereoscopicVideoDisplay>
本发明的方法能被存储在计算机可读的记录介质中，例如，CD-ROM、RAM、ROM、软盘、硬盘和光/磁盘中。
如上所述，通过使用关于用户的偏好和爱好的信息和用户终端特征，本发明能提供能将2D视频内容适配3D立体视频内容的和将3D立体视频内容适配2D视频内容的服务环境上，以便符合不同的使用环境和特征和用户的偏好。
同样，本发明的技术通过将2D视频信号或3D立体视频内容适配到不同的使用环境和具有各种特征和趣味的用户上，能将一个单一源提供到多个使用环境上。因此，能够节约用于生产和发送多个视频内容的成本，并通过满足用户的偏好和克服用户终端能力的限制，能提供最佳视频内容服务。虽然已经参照特定实施例显示和描述了本发明，但是对于本领域技术人员将显然的是，在没有脱离所附权利要求定义的本发明的精神和范围的情况下，可以做出很多的变化和更改。

Claims (34)

1.一种用于为了单源多用途而适配二维(2D)或三维(3D)立体视频信号的装置，包括：
视频使用环境信息管理装置，用于获取、描述和管理来自用户终端的用户特征信息；以及
视频适配装置，用于将视频信号适配到视频使用环境信息上以产生适配的2D视频信号或3D立体视频信号，并且将所适配的视频信号输出到用户终端。
2.根据权利要求1所述的装置，其中，所述用户特征信息包括在将2D视频信号适配到3D立体视频信号的情况下诸如正视差或负视差的用户偏好。
3.根据权利要求2所述的装置，其中，所述用户特征信息被表示在如下的信息结构中：
<element name＝“ParallaxType”>
  <simpleType>
  <restriction base＝“string”>
  <enumeration value＝“Positive”/>
  <enumeration value＝“Negative”/>
  </restriction>
  </simpleType>
  </element>。
4.根据权利要求1所述的装置，其中，所述用户特征信息包括在将2D视频信号适配到3D立体视频信号的情况下诸如3D立体视频信号的视差深度的用户偏好。
5.根据权利要求4所述的装置，其中，所述用户特征信息被表示在如下的信息结构中：
<element
     name＝“DepthRange”
type＝“mpeg7：zeroToOneType”/>。
6.根据权利要求1所述的装置，其中，所述用户特征信息包括在将2D视频信号适配到3D立体视频信号的情况下诸如延迟帧Ik-n的最大数目n的用户偏好。
7.根据权利要求6所述的装置，其中，所述用户特征信息被表示在如下的信息结构中：
<element
    name＝“MaxDelayedFrame”type＝“nonNegativeInteger”/>。
8.根据权利要求1所述的装置，其中，所述用户特征信息包括在将3D立体视频信号适配到2D视频信号的情况下诸如其图像信号选择为2D视频信号的用户偏好。
9.根据权利要求8所述的装置，其中，所述用户特征信息被表示在如下的信息结构中：
<element name＝“LeftRightInterVideo”>
  <simpleType>
  <restriction base＝“string”>
  <enumeration value＝“Left”/>
  <enumeration value＝“Right”/>
  <enumeration value＝“Intermediate”/>
  </restriction>
  </simpleType>
  </element>。
10.一种用于为了单源多用途而适配2D视频信号或3D立体视频信号的装置，包括：
视频使用环境信息管理装置，用于获取、描述和管理来自用户终端的用户终端特征信息；以及
视频适配装置，用于将视频信号适配到视频使用环境信息上以产生适配的2D视频信号或3D立体视频信号，并且将所适配的视频信号输出到用户终端。
11.根据权利要求10所述的装置，其中，所述用户特征信息包括关于由用户终端支持的显示设备的信息。
12.根据权利要求11所述的装置，其中，所述用户特征信息被表示在如下的信息结构中：
<element name＝“DisplayDevice”>
  <simpleType>
  <restriction base＝“string”>
  <enumeration value＝“Monoscopic”/>
  <enumeration value＝“Stereoscopic”/>
  </restriction>
  </simpleType>
  </element>。
13.根据权利要求10所述的装置，其中，所述用户特征信息包括关于3D视频解码器的信息。
14.根据权利要求13所述的装置，其中，所述用户特征信息被表示在如下的信息结构中：
<element name＝“StereoscopicDecoderType”
         type＝“mpeg7：ControlledTermUseType”/>。
15.根据权利要求10所述的装置，其中，所述用户特征信息包括关于3D视频的着色方法的信息。
16.根据权利要求15所述的装置，其中，所述用户特征信息被表示在如下的信息结构中：
＜element name＝“RenderingFormat”＞

  ＜simpleType＞

  ＜restriction base＝“string”＞

  ＜enumeration value＝“Interlaced”/＞

  ＜enumeration value＝“Sync-Double”/＞
  ＜enumeration value＝“Page-Flipping”/＞

  ＜enumeration value＝“Anaglyph-Red-Blue”/＞

  ＜enumeration value＝“Anaglyph-Red-Cyan”/＞

  ＜enumeration value＝“Anaglyph-Red-Yellow”/＞

  ＜/restriction＞

 ＜/simpleType＞

＜/element＞。
17.一种用于为了单源多用途而适配2D视频信号或3D立体视频信号的方法，包括如下步骤：
a)获取、描述和管理来自用户终端的用户特征信息；以及
b)将视频信号适配到视频使用环境信息上以产生适配的2D视频信号或3D立体视频信号，并且将所适配的视频信号输出到用户终端。
18.根据权利要求17所述的方法，其中，所述用户特征信息包括在将2D视频信号适配到3D立体视频信号的情况下诸如正视差或负视差的用户偏好。
19.根据权利要求18所述的方法，其中，所述用户特征信息被表示在如下的信息结构中：
<element name＝“ParallaxType”>
  <simpleType>
  <restriction base＝“string”>
  <enumeration value＝“Positive”/>
  <enumeration value＝“Negative”/>
  </restriction>
  </simpleType>
  </element>。
20.根据权利要求17所述的方法，其中，所述用户特征信息包括在将2D视频信号适配到3D立体视频信号的情况下诸如3D立体视频信号的视差深度的用户偏好。
21.根据权利要求20所述的装置，其中，所述用户特征信息被表示在如下的信息结构中：
<element
     name＝“DepthRange”
type＝“mpeg7：zeroToOneType”/>。
22.根据权利要求17所述的装置，其中，所述用户特征信息包括在将2D视频信号适配到3D立体视频信号的情况下诸如延迟帧Ik-n的最大数目n的用户偏好。
23.根据权利要求22所述的方法，其中，所述用户特征信息被表示在如下的信息结构中：
<element
        name＝“MaxDelayedFrame”
type＝“nonNegativeInteger”/>。
24.根据权利要求17所述的装置，其中，所述用户特征信息包括在将3D立体视频信号适配到2D视频信号的情况下诸如其图像信号选择为2D视频信号的用户偏好。
25.根据权利要求24所述的方法，其中，所述用户特征信息被表示在如下的信息结构中：
<element name＝“LeftRightInterVideo”>
  <simpleType>
  <restriction base＝“string”>
  <enumeration value＝“Left”/>
  <enumeration value＝“Right”/>
  <enumeration value＝“Intermediate”/>
  </restriction>
  </simpleType>
</element>。
26.一种用于为了单源多用途而适配2D视频信号或3D立体视频信号的方法，包括如下步骤：
a)获取、描述和管理来自用户终端的用户终端特征信息；以及
b)将视频信号适配到视频使用环境信息上以产生适配的2D视频信号或3D立体视频信号，并且将所适配的视频信号输出到用户终端。
27.根据权利要求26所述的方法，其中，所述用户特征信息包括关于用户终端所支持的显示设备的信息。
28.根据权利要求27所述的方法，其中，所述用户特征信息被表示在如下的信息结构中：
<element name＝“DisplayDevice”>
  <simpleType>
  <restriction base＝“string”>
  <enumeration value＝“Monoscopic”/>
  <enumeration value＝“Stereoscopic”/>
  </restriction>
  </simpleType>
  </element>。
29.根据权利要求26所述的方法，其中，所述用户特征信息包括关于3D视频解码器的信息。
30.根据权利要求29所述的方法，其中，所述用户特征信息被表示在如下的信息结构中：
<element name＝“StereoscopicDecoderType”
         type＝“mpeg7：ControlledTermUseType”/>。
31.根据权利要求26所述的方法，其中，所述用户特征信息包括关于3D视频的着色方法的信息。
32.根据权利要求31所述的方法，其中，所述用户特征信息被表示在如下的信息结构中：
＜element name＝“RenderingFormat”＞

  ＜simpleType＞

  ＜restriction base＝“string”＞

  ＜enumeration value＝“Interlaced”/＞

  ＜enumeration value＝“Sync-Double”/＞

  ＜enumeration value＝“Page-Flipping”/＞

  ＜enumeration value＝“Anaglyph-Red-Blue”/＞

  ＜enumeration value＝“Anaglyph-Red-Cyan”/＞

  ＜enumeration value＝“Anaglyph-Red-Yellow”/＞

  ＜/restriction＞

 ＜/simpleType＞

＜/element＞。
33.一种用于记录程序的计算机可读记录介质，该程序用于实现为了单源多用途而适配2D视频信号或3D立体视频信号的方法，该方法包括如下步骤：
a)获取、描述和管理来自用户终端的用户特征信息；以及
b)将视频信号适配到视频使用环境信息上以产生适配的2D视频信号或3D立体视频信号，并且将所适配的视频信号输出到用户终端。
34.一种用于记录程序的计算机可读记录介质，该程序用于实现为了单源多用途而适配2D视频信号或3D立体视频信号的方法，该方法包括如下步骤：
a)获取、描述和管理来自用户终端的用户终端特征信息；以及
b)将视频信号适配到视频使用环境信息上以产生适配的2D视频信号或3D立体视频信号，并且将所适配的视频信号输出到用户终端。
CNA038212226A 2002-07-16 2003-07-16 用于适配2d和3d立体视频信号的装置和方法 Pending CN1682539A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR20020041731 2002-07-16
KR1020020041731 2002-07-16
PCT/KR2003/001411 WO2004008768A1 (en) 2002-07-16 2003-07-16 Apparatus and method for adapting 2d and 3d stereoscopic video signal

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN201010572098XA Division CN101982979B (zh) 2002-07-16 2003-07-16 立体适配方法和立体适配装置

Publications (1)

Publication Number Publication Date
CN1682539A true CN1682539A (zh) 2005-10-12

Family

ID=30113190

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201010572098XA Expired - Fee Related CN101982979B (zh) 2002-07-16 2003-07-16 立体适配方法和立体适配装置
CNA038212226A Pending CN1682539A (zh) 2002-07-16 2003-07-16 用于适配2d和3d立体视频信号的装置和方法

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN201010572098XA Expired - Fee Related CN101982979B (zh) 2002-07-16 2003-07-16 立体适配方法和立体适配装置

Country Status (7)

Country Link
US (1) US20050259147A1 (zh)
EP (1) EP1529400A4 (zh)
JP (1) JP4362105B2 (zh)
KR (1) KR100934006B1 (zh)
CN (2) CN101982979B (zh)
AU (1) AU2003281138A1 (zh)
WO (1) WO2004008768A1 (zh)

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102045580A (zh) * 2009-10-13 2011-05-04 美国博通公司 用于处理视频的方法和系统
CN102077600A (zh) * 2008-06-24 2011-05-25 三星电子株式会社 输出和显示图像数据的方法和设备
CN101662677B (zh) * 2008-08-29 2011-08-10 华为终端有限公司 码流转换系统及方法、码流识别单元和方案确定单元
CN102474662A (zh) * 2009-08-06 2012-05-23 高通股份有限公司 根据无线显示协议制备视频数据
CN102484734A (zh) * 2009-08-06 2012-05-30 高通股份有限公司 根据三维输入格式转换视频数据
CN102572472A (zh) * 2010-12-24 2012-07-11 日立民用电子株式会社 接收装置
CN102801989A (zh) * 2011-05-24 2012-11-28 未序网络科技（上海）有限公司 基于互联网客户端立体视频实时转码方法及系统
CN102801990A (zh) * 2011-05-24 2012-11-28 未序网络科技（上海）有限公司 基于互联网服务端立体视频实时转码方法及系统
CN102812713A (zh) * 2010-11-22 2012-12-05 索尼公司 图像数据发送设备、图像数据发送方法、图像数据接收设备和图像数据接收方法
CN102845068A (zh) * 2010-04-16 2012-12-26 通用仪表公司 用于3d电视节目素材的分配的方法和装备
CN103069815A (zh) * 2010-08-17 2013-04-24 Lg电子株式会社 用于接收数字广播信号的设备和方法
CN104717521B (zh) * 2009-01-26 2018-06-01 汤姆森特许公司 用于视频解码的方法

Families Citing this family (91)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11388451B2 (en) 2001-11-27 2022-07-12 Comcast Cable Communications Management, Llc Method and system for enabling data-rich interactive television using broadcast database
AU2002327677A1 (en) 2001-09-19 2003-04-01 Meta Tv, Inc. Interactive user interface for television applications
US8413205B2 (en) 2001-09-19 2013-04-02 Tvworks, Llc System and method for construction, delivery and display of iTV content
US8042132B2 (en) 2002-03-15 2011-10-18 Tvworks, Llc System and method for construction, delivery and display of iTV content
US7703116B1 (en) 2003-07-11 2010-04-20 Tvworks, Llc System and method for construction, delivery and display of iTV applications that blend programming information of on-demand and broadcast service offerings
US10664138B2 (en) 2003-03-14 2020-05-26 Comcast Cable Communications, Llc Providing supplemental content for a second screen experience
US8578411B1 (en) 2003-03-14 2013-11-05 Tvworks, Llc System and method for controlling iTV application behaviors through the use of application profile filters
US11381875B2 (en) 2003-03-14 2022-07-05 Comcast Cable Communications Management, Llc Causing display of user-selectable content types
US8819734B2 (en) 2003-09-16 2014-08-26 Tvworks, Llc Contextual navigational control for digital television
US7660472B2 (en) * 2004-02-10 2010-02-09 Headplay (Barbados) Inc. System and method for managing stereoscopic viewing
WO2005115016A1 (ja) 2004-04-26 2005-12-01 Olympus Corporation 画像処理装置、画像加工・編集装置、画像ファイル再生装置、画像処理方法、画像加工・編集方法及び画像ファイル再生方法
CN101867773A (zh) 2004-06-24 2010-10-20 韩国电子通信研究院 支持定位方案的扩展描述、以及使用它的即时电视服务与系统
US8243123B1 (en) * 2005-02-02 2012-08-14 Geshwind David M Three-dimensional camera adjunct
US7818667B2 (en) 2005-05-03 2010-10-19 Tv Works Llc Verification of semantic constraints in multimedia data and in its announcement, signaling and interchange
EP1883241B1 (en) * 2005-05-18 2016-01-13 NEC Corporation Content display system and content display method
JP4638783B2 (ja) * 2005-07-19 2011-02-23 オリンパスイメージング株式会社 ３ｄ画像ファイルの生成装置、撮像装置、画像再生装置、画像加工装置、及び３ｄ画像ファイルの生成方法
KR100740922B1 (ko) * 2005-10-04 2007-07-19 광주과학기술원 Ｍｐｅｇ-21 기반의 다시점 3차원 영상을 위한 비디오 적응변환 시스템
US9137497B2 (en) 2007-04-11 2015-09-15 At&T Intellectual Property I, Lp Method and system for video stream personalization
US8237776B2 (en) * 2007-10-19 2012-08-07 Warner Bros. Entertainment Inc. Method and apparatus for generating stereoscopic images from a DVD disc
WO2008144306A2 (en) * 2007-05-15 2008-11-27 Warner Bros. Entertainment Inc. Method and apparatus for providing additional functionality to a dvd player
US8594484B2 (en) * 2007-05-15 2013-11-26 Warner Bros. Entertainment Inc. DVD player with external connection for increased functionality
US8487982B2 (en) * 2007-06-07 2013-07-16 Reald Inc. Stereoplexing for film and video applications
WO2009002115A2 (en) * 2007-06-26 2008-12-31 Lg Electronics Inc. Media file format based on, method and apparatus for reproducing the same, and apparatus for generating the same
KR101362647B1 (ko) * 2007-09-07 2014-02-12 삼성전자주식회사 2ｄ 영상을 포함하는 3ｄ 입체영상 파일을 생성 및재생하기 위한 시스템 및 방법
JP5121935B2 (ja) * 2007-10-13 2013-01-16 三星電子株式会社 ＬＡＳｅＲベースの端末のためのステレオスコピック３Ｄ映像コンテンツの提供装置及び方法
US8660402B2 (en) 2007-12-14 2014-02-25 Koninklijke Philips N.V. 3D mode selection mechanism for video playback
GB0806183D0 (en) * 2008-04-04 2008-05-14 Picsel Res Ltd Presentation of objects in 3D displays
KR101591085B1 (ko) * 2008-05-19 2016-02-02 삼성전자주식회사 영상 파일 생성 및 재생 장치 및 방법
US20090315980A1 (en) * 2008-06-24 2009-12-24 Samsung Electronics Co., Image processing method and apparatus
US20090315981A1 (en) * 2008-06-24 2009-12-24 Samsung Electronics Co., Ltd. Image processing method and apparatus
WO2009157713A2 (en) * 2008-06-24 2009-12-30 Samsung Electronics Co., Ltd. Image processing method and apparatus
KR101520620B1 (ko) * 2008-08-18 2015-05-18 삼성전자주식회사 2차원/3차원 재생 모드 결정 방법 및 장치
WO2010050691A2 (en) * 2008-10-27 2010-05-06 Samsung Electronics Co,. Ltd. Methods and apparatuses for processing and displaying image
US11832024B2 (en) 2008-11-20 2023-11-28 Comcast Cable Communications, Llc Method and apparatus for delivering video and video-related content at sub-asset level
KR101574068B1 (ko) * 2008-12-26 2015-12-03 삼성전자주식회사 영상 처리 방법 및 장치
EP2434763A4 (en) * 2009-05-18 2014-02-26 Lg Electronics Inc 3D IMAGE RECORDING DEVICE AND METHOD FOR SELECTING 3D MODE FOR 3D PICTURES
JP5463747B2 (ja) * 2009-06-15 2014-04-09 ソニー株式会社 受信装置、送信装置、通信システム、表示制御方法、プログラム、及びデータ構造
WO2010146847A1 (ja) * 2009-06-17 2010-12-23 パナソニック株式会社 ３ｄ映像を再生するための情報記録媒体、及び再生装置
JP5250491B2 (ja) * 2009-06-30 2013-07-31 株式会社日立製作所 記録再生装置
US10021377B2 (en) * 2009-07-27 2018-07-10 Koninklijke Philips N.V. Combining 3D video and auxiliary data that is provided when not reveived
US8629899B2 (en) 2009-08-06 2014-01-14 Qualcomm Incorporated Transforming video data in accordance with human visual system feedback metrics
JP5604827B2 (ja) * 2009-08-21 2014-10-15 ソニー株式会社 送信装置、受信装置、プログラム、及び通信システム
JP5428697B2 (ja) * 2009-09-16 2014-02-26 ソニー株式会社 受信装置、受信方法、送信装置およびコンピュータプログラム
JP5909448B2 (ja) * 2009-10-30 2016-04-26 サムスン エレクトロニクス カンパニー リミテッド 二次元兼用三次元映像ディスプレイ装置及びその駆動方法
US8687046B2 (en) * 2009-11-06 2014-04-01 Sony Corporation Three-dimensional (3D) video for two-dimensional (2D) video messenger applications
US20110138018A1 (en) * 2009-12-04 2011-06-09 Qualcomm Incorporated Mobile media server
JP5387399B2 (ja) * 2009-12-28 2014-01-15 ソニー株式会社 情報処理装置および情報処理方法
WO2011081623A1 (en) * 2009-12-29 2011-07-07 Shenzhen Tcl New Technology Ltd. Personalizing 3dtv viewing experience
US8823782B2 (en) 2009-12-31 2014-09-02 Broadcom Corporation Remote control with integrated position, viewer identification and optical and audio test
US8964013B2 (en) * 2009-12-31 2015-02-24 Broadcom Corporation Display with elastic light manipulator
US8854531B2 (en) * 2009-12-31 2014-10-07 Broadcom Corporation Multiple remote controllers that each simultaneously controls a different visual presentation of a 2D/3D display
US9247286B2 (en) * 2009-12-31 2016-01-26 Broadcom Corporation Frame formatting supporting mixed two and three dimensional video data communication
US8743178B2 (en) * 2010-01-05 2014-06-03 Dolby Laboratories Licensing Corporation Multi-view video format control
WO2011087303A2 (ko) * 2010-01-18 2011-07-21 엘지전자 주식회사 방송 신호 수신기 및 비디오 데이터 처리 방법
US9491432B2 (en) * 2010-01-27 2016-11-08 Mediatek Inc. Video processing apparatus for generating video output satisfying display capability of display device according to video input and related method thereof
MX2012010268A (es) 2010-03-05 2012-10-05 Gen Instrument Corp Metodo y aparato para convertir contenido de video bidimensional para insercion en contenido de video tridimensional.
US8878913B2 (en) * 2010-03-12 2014-11-04 Sony Corporation Extended command stream for closed caption disparity
US9414042B2 (en) * 2010-05-05 2016-08-09 Google Technology Holdings LLC Program guide graphics and video in window for 3DTV
US20110304693A1 (en) * 2010-06-09 2011-12-15 Border John N Forming video with perceived depth
US8631047B2 (en) * 2010-06-15 2014-01-14 Apple Inc. Editing 3D video
JP5483357B2 (ja) * 2010-08-27 2014-05-07 アルパイン株式会社 デジタルテレビ受信装置及びデジタルテレビ受信装置を設けた車載装置
US20120062712A1 (en) * 2010-09-11 2012-03-15 Spatial View Inc. Delivery of device-specific stereo 3d content
US8537201B2 (en) * 2010-10-18 2013-09-17 Silicon Image, Inc. Combining video data streams of differing dimensionality for concurrent display
JP5302285B2 (ja) * 2010-10-28 2013-10-02 シャープ株式会社 立体映像出力装置、立体映像出力方法、立体映像出力プログラムおよびコンピュータ読み取り可能な記録媒体、ならびに、立体映像表示装置
US8860785B2 (en) 2010-12-17 2014-10-14 Microsoft Corporation Stereo 3D video support in computing devices
US20120154559A1 (en) * 2010-12-21 2012-06-21 Voss Shane D Generate Media
US9386294B2 (en) * 2011-01-05 2016-07-05 Google Technology Holdings LLC Method and apparatus for 3DTV image adjustment
US9117385B2 (en) * 2011-02-09 2015-08-25 Dolby Laboratories Licensing Corporation Resolution management for multi-view display technologies
US8963998B2 (en) * 2011-04-15 2015-02-24 Tektronix, Inc. Full reference system for predicting subjective quality of three-dimensional video
US9420259B2 (en) * 2011-05-24 2016-08-16 Comcast Cable Communications, Llc Dynamic distribution of three-dimensional content
US20140192150A1 (en) * 2011-06-02 2014-07-10 Sharp Kabushiki Kaisha Image processing device, method for controlling image processing device, control program, and computer-readable recording medium which records the control program
WO2013023345A1 (en) * 2011-08-12 2013-02-21 Motorola Mobility, Inc. Method and apparatus for coding and transmitting 3d video sequences in a wireless communication system
CN102984529A (zh) * 2011-09-05 2013-03-20 宏碁股份有限公司 眼镜式立体显示器及其显示方法
JP2013090016A (ja) * 2011-10-13 2013-05-13 Sony Corp 送信装置、送信方法、受信装置および受信方法
KR101396473B1 (ko) * 2011-10-17 2014-05-21 에이스텔 주식회사 셋톱박스에서 서브 단말기로 초고화질 영상을 제공하는 시스템 및 그 방법
US8687470B2 (en) 2011-10-24 2014-04-01 Lsi Corporation Optical disk playback device with three-dimensional playback functionality
KR101348867B1 (ko) * 2011-12-14 2014-01-07 두산동아 주식회사 콘텐츠 재생 환경에 맞게 자동 변환하는 레이어 기반 디지털 교과서 표시 장치 및 방법
CN104429063B (zh) * 2012-07-09 2017-08-25 Lg电子株式会社 增强3d音频/视频处理装置和方法
US10764649B2 (en) 2012-08-17 2020-09-01 Google Technology Holdings LLC Falling back from three-dimensional video
US9554146B2 (en) 2012-09-21 2017-01-24 Qualcomm Incorporated Indication and activation of parameter sets for video coding
US11115722B2 (en) 2012-11-08 2021-09-07 Comcast Cable Communications, Llc Crowdsourcing supplemental content
US10880609B2 (en) 2013-03-14 2020-12-29 Comcast Cable Communications, Llc Content event messaging
US11783382B2 (en) 2014-10-22 2023-10-10 Comcast Cable Communications, Llc Systems and methods for curating content metadata
EP3038358A1 (en) 2014-12-22 2016-06-29 Thomson Licensing A method for adapting a number of views delivered by an auto-stereoscopic display device, and corresponding computer program product and electronic device
KR101634967B1 (ko) * 2016-04-05 2016-06-30 삼성지투비 주식회사 3차원 영상 변환 기반의 앱 호환형 악천후 지역의 모니터링 시스템 및 그 방법
CN107465939B (zh) * 2016-06-03 2019-12-06 杭州海康机器人技术有限公司 视频图像数据流的处理方法及装置
US10616566B2 (en) * 2016-07-22 2020-04-07 Korea Institute Of Science And Technology 3D image display system and method
US10735707B2 (en) 2017-08-15 2020-08-04 International Business Machines Corporation Generating three-dimensional imagery
US11570227B2 (en) * 2020-12-04 2023-01-31 Tencent America LLC Set up and distribution of immersive media to heterogenous client end-points
US12058193B2 (en) * 2021-06-30 2024-08-06 Tencent America LLC Bidirectional presentation datastream
US12513370B1 (en) * 2022-08-24 2025-12-30 Apple Inc. Systems and methods for blending media

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0851691B1 (en) * 1993-11-09 2002-02-20 Canon Kabushiki Kaisha Signal processing apparatus for a stereoscopic display
US5510832A (en) * 1993-12-01 1996-04-23 Medi-Vision Technologies, Inc. Synthesized stereoscopic imaging system and method
US5739844A (en) * 1994-02-04 1998-04-14 Sanyo Electric Co. Ltd. Method of converting two-dimensional image into three-dimensional image
US5661518A (en) * 1994-11-03 1997-08-26 Synthonics Incorporated Methods and apparatus for the creation and transmission of 3-dimensional images
US6384859B1 (en) * 1995-03-29 2002-05-07 Sanyo Electric Co., Ltd. Methods for creating an image for a three-dimensional display, for calculating depth information and for image processing using the depth information
JPH0937301A (ja) * 1995-07-17 1997-02-07 Sanyo Electric Co Ltd 立体映像変換回路
US6249285B1 (en) * 1998-04-06 2001-06-19 Synapix, Inc. Computer assisted mark-up and parameterization for scene analysis
US6157396A (en) * 1999-02-16 2000-12-05 Pixonics Llc System and method for using bitstream information to process images for use in digital display systems
KR100334722B1 (ko) * 1999-06-05 2002-05-04 강호석 Ｍｐｅｇ 데이터를 이용한 입체영상생성방법 및 그 장치
JP2001016609A (ja) * 1999-06-05 2001-01-19 Soft Foo Deii:Kk Ｍｐｅｇデータを用いた立体映像生成装置及び方法
CN1236628C (zh) * 2000-03-14 2006-01-11 株式会社索夫特4D 产生立体图像的方法和装置
WO2001097531A2 (en) * 2000-06-12 2001-12-20 Vrex, Inc. Electronic stereoscopic media delivery system
JP2002095018A (ja) * 2000-09-12 2002-03-29 Canon Inc 画像表示制御装置及び画像表示システム、並びに画像データの表示方法

Cited By (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102077600A (zh) * 2008-06-24 2011-05-25 三星电子株式会社 输出和显示图像数据的方法和设备
CN101662677B (zh) * 2008-08-29 2011-08-10 华为终端有限公司 码流转换系统及方法、码流识别单元和方案确定单元
CN104717521B (zh) * 2009-01-26 2018-06-01 汤姆森特许公司 用于视频解码的方法
CN102474662A (zh) * 2009-08-06 2012-05-23 高通股份有限公司 根据无线显示协议制备视频数据
CN102484734A (zh) * 2009-08-06 2012-05-30 高通股份有限公司 根据三维输入格式转换视频数据
CN102484734B (zh) * 2009-08-06 2015-10-21 高通股份有限公司 根据三维输入格式转换视频数据
US9083958B2 (en) 2009-08-06 2015-07-14 Qualcomm Incorporated Transforming video data in accordance with three dimensional input formats
CN102474662B (zh) * 2009-08-06 2015-07-08 高通股份有限公司 根据无线显示协议制备视频数据
CN102045580B (zh) * 2009-10-13 2014-06-11 美国博通公司 用于处理视频的方法和系统
CN102045580A (zh) * 2009-10-13 2011-05-04 美国博通公司 用于处理视频的方法和系统
CN102845068B (zh) * 2010-04-16 2016-09-14 摩托罗拉移动有限责任公司 用于3d电视节目素材的分配的方法和装备
US10368050B2 (en) 2010-04-16 2019-07-30 Google Technology Holdings LLC Method and apparatus for distribution of 3D television program materials
CN102845068A (zh) * 2010-04-16 2012-12-26 通用仪表公司 用于3d电视节目素材的分配的方法和装备
US12137202B2 (en) 2010-04-16 2024-11-05 Google Llc Method and apparatus for distribution of 3D television program materials
US11558596B2 (en) 2010-04-16 2023-01-17 Google Technology Holdings LLC Method and apparatus for distribution of 3D television program materials
US9237366B2 (en) 2010-04-16 2016-01-12 Google Technology Holdings LLC Method and apparatus for distribution of 3D television program materials
US10893253B2 (en) 2010-04-16 2021-01-12 Google Technology Holdings LLC Method and apparatus for distribution of 3D television program materials
US10091486B2 (en) 2010-08-17 2018-10-02 Lg Electronics Inc. Apparatus and method for transmitting and receiving digital broadcasting signal
CN103069815A (zh) * 2010-08-17 2013-04-24 Lg电子株式会社 用于接收数字广播信号的设备和方法
CN103069815B (zh) * 2010-08-17 2016-04-13 Lg电子株式会社 用于接收数字广播信号的设备和方法
US9258541B2 (en) 2010-08-17 2016-02-09 Lg Electronics Inc. Apparatus and method for receiving digital broadcasting signal
CN102812713A (zh) * 2010-11-22 2012-12-05 索尼公司 图像数据发送设备、图像数据发送方法、图像数据接收设备和图像数据接收方法
CN102572472A (zh) * 2010-12-24 2012-07-11 日立民用电子株式会社 接收装置
CN102801989A (zh) * 2011-05-24 2012-11-28 未序网络科技（上海）有限公司 基于互联网客户端立体视频实时转码方法及系统
CN102801990A (zh) * 2011-05-24 2012-11-28 未序网络科技（上海）有限公司 基于互联网服务端立体视频实时转码方法及系统

Also Published As

Publication number Publication date
AU2003281138A1 (en) 2004-02-02
CN101982979B (zh) 2013-01-02
KR100934006B1 (ko) 2009-12-28
JP4362105B2 (ja) 2009-11-11
US20050259147A1 (en) 2005-11-24
EP1529400A1 (en) 2005-05-11
KR20050026959A (ko) 2005-03-16
JP2005533433A (ja) 2005-11-04
EP1529400A4 (en) 2009-09-23
CN101982979A (zh) 2011-03-02
WO2004008768A1 (en) 2004-01-22

Similar Documents

Publication Publication Date Title
CN1682539A (zh) 用于适配2d和3d立体视频信号的装置和方法
CN1198454C (zh) 信息处理方法及设备、内容分配服务器及其方法
CN1178509C (zh) 图像编码器、图像解码器、和图像处理器及其方法
CN1295934C (zh) 移动向量编码方法和移动向量解码方法
CN1210961C (zh) 视频尺度转换及从mpeg－2到mpeg－4的编码转换
CN1285059C (zh) 活动图像转换方法和设备、活动图像传输方法和设备、程序
CN1321945A (zh) 内容提供装置和方法以及记录介质
CN1742488A (zh) 用于编码和解码立体视频的方法和装置
CN1516974A (zh) 图像编码方法和图像解码方法
CN1684518A (zh) 高保真代码转换
CN1767601A (zh) 一种支持多源流媒体的同步播放控制方法
CN1311958A (zh) 数字视频记录器用的特技播放信号的产生
CN1476248A (zh) 压缩图像数据从发送端传输到接收端的视频数据收发系统
CN1875636A (zh) 视频发送装置以及视频接收装置
CN101035279A (zh) 一种在视频资源中使用信息集的方法
CN1187734A (zh) 立体视频序列的同步
CN1697526A (zh) 运动图像编码装置及方法以及运动图像译码装置及方法
CN1714554A (zh) 视听媒体编码系统
CN1685733A (zh) 动态画像的编码方法及解码方法
CN1212016C (zh) 调整图形场景的方法和设备
CN1236628C (zh) 产生立体图像的方法和装置
CN1703083A (zh) 移动图像处理装置和方法
CN101080010A (zh) 编码处理装置和编码处理方法
CN1263290C (zh) 图像处理装置和方法
CN1882936A (zh) 封包元数据和使用其的目标/同步服务提供系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C12 Rejection of a patent application after its publication
RJ01 Rejection of invention patent application after publication

Open date: 20051012