[go: up one dir, main page]

CN1336764A - 图像编码装置和方法、图像解码装置和方法、记录载体 - Google Patents

图像编码装置和方法、图像解码装置和方法、记录载体 Download PDF

Info

Publication number
CN1336764A
CN1336764A CN01121804A CN01121804A CN1336764A CN 1336764 A CN1336764 A CN 1336764A CN 01121804 A CN01121804 A CN 01121804A CN 01121804 A CN01121804 A CN 01121804A CN 1336764 A CN1336764 A CN 1336764A
Authority
CN
China
Prior art keywords
stream
video stream
video
additional information
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN01121804A
Other languages
English (en)
Other versions
CN1174607C (zh
Inventor
加藤元树
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN1336764A publication Critical patent/CN1336764A/zh
Application granted granted Critical
Publication of CN1174607C publication Critical patent/CN1174607C/zh
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H04N7/0117—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving conversion of the spatial resolution of the incoming video signal
    • H04N7/0122—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving conversion of the spatial resolution of the incoming video signal the input and the output signals having different aspect ratios
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/115—Selection of the code volume for a coding unit prior to coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146—Data rate or code amount at the encoder output
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146—Data rate or code amount at the encoder output
    • H04N19/149—Data rate or code amount at the encoder output by estimating the code amount by means of a model, e.g. mathematical model or statistical model
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/162—User input
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/177—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a group of pictures [GOP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/188—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a video data packet, e.g. a network abstraction layer [NAL] unit
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/40—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video transcoding, i.e. partial or full decoding of a coded input stream followed by re-encoding of the decoded output stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/59—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/23614—Multiplexing of additional data and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433—Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H04N21/4334—Recording operations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4341—Demultiplexing of audio and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4348—Demultiplexing of additional data and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440263—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the spatial resolution, e.g. for displaying on a connected PDA
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/633—Control signals issued by server directed to the network components or client
    • H04N21/6332—Control signals issued by server directed to the network components or client directed to client
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/637—Control signals issued by the client directed to the server or network components
    • H04N21/6373—Control signals issued by the client directed to the server or network components for rate control, e.g. request to the server to modify its transmission rate
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/637—Control signals issued by the client directed to the server or network components
    • H04N21/6377—Control signals issued by the client directed to the server or network components directed to server
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65—Transmission of management data between client and server
    • H04N21/654—Transmission by server directed to the client
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65—Transmission of management data between client and server
    • H04N21/658—Transmission by the client directed to the server
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/91—Television signal processing therefor
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/78—Television signal recording using magnetic recording
    • H04N5/781—Television signal recording using magnetic recording on disks or drums
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
    • H04N9/8042—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • H04N9/8227—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal the additional signal being at least another television signal
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • H04N9/8233—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal the additional signal being a character code signal

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Mathematical Analysis (AREA)
  • Algebra (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Mathematical Optimization (AREA)
  • Pure & Applied Mathematics (AREA)
  • Computer Graphics (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Television Signal Processing For Recording (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Editing Of Facsimile Originals (AREA)

Abstract

本发明目的在于避免发生在一再编码和记录后的数据与其他数据之间匹配错误。输入到记录装置中的传输流被提供给去复用器和分析块。分析块向一编码控制器输出非视频流信息。编码控制器在输入信息的基础上控制一编码器的编码操作,并向一编码块输出视频编码控制信息。在视频编码控制信息的基础上,编码块产生多媒体显示子信息(例如包括图像帧信息)以防止在重现端发生视频信息和其他信息的匹配错误现象,然后将该信息输入到写入块。写入块将视频流和其他数据与编码块输出的多媒体显示子信息一起记录到一记录载体中。

Description

图像编码装置和方法、图像 解码装置和方法、记录载体
本发明涉及一种图像编码装置和方法，一种图像解码装置和方法，以及一种记录载体。具体来讲，本发明涉及一种适用于对视频数据流进行再编码、并记录和重现该再编码视频数据流的装置中的图像编码装置和方法、图像解码装置和方法、记录载体。
数字电视广播，如欧洲DVB(数字视频广播)、美国DTV(数字电视)广播和日本BS(广播卫星)数字广播，使用的是MPEG-2(运动图像专家组)传输流。传输流中包括连续的传输分组，每一分组中携带视频数据或音频数据。一个传输分组的数据长度为118比特。
与模拟电视广播不同，数字电视广播可以提供添加多媒体编码数据的业务。在这些业务中，视频、音频、字符图形数据和静止图像数据等在传送时都通过该多媒体编码数据彼此联系在一起。举例来说，日本BS数字广播使用基于XML(扩展置标语言)的编码方法得到多媒体编码数据。该方法的细节内容在ARIB用于数字广播的数据编码和传输标准STD-B24中已经被公开了。
诸如视频、音频、字符图形数据和静止图像数据等一类的数据，被分别打包成一种用于传输的分组。
下文将参考图1A和图1B介绍一个多媒体屏幕以及在发送端、接收端间传送的合成数据的例子。如图1A所示，发送端向接收端发送视频数据、用于显示按钮A-C的字符图形数据、用于显示“XYZABC…”的文本数据以及将这些数据彼此联系的多媒体编码数据。发送端通常为一电视台。但这里提到的电视台包括一记录装置(记录端)，这一记录装置接收并记录从电视台发送来的数据。图1A中示出的例子中包括从该记录装置输出的数据。
该多媒体编码数据包括用于在接收端合成视频数据、字符图像数据和文本数据的数据，并显示合成后的数据。具体来讲，多媒体编码数据中包括与视频、字符图形和文本显示位置有关的数据，然后视频、字符图形和文本可以通过根据与尺寸(例如，多媒体平面(例如电视机上的图像显示区域)的尺寸(平面长度和平面宽度)，视频显示尺寸(视频长度和视频宽度))相关的数据显示，如图1B中所示。
在多媒体编码数据的基础上，接收端对视频、字符图形和文本数据进行处理，以显示图1B中所示的结果图像。
通过显示有上述图像的屏幕，用户可以接收一些业务，例如通过点击与所需信息相关的按钮A来显示所需信息，然后通过在屏幕底部显示的文本数据，获得与视频部分显示事物相关的信息。
如果数字电视广播传输来的传输流中携带的电视节目，不经变化就记录在接收端的记录载体中，该节目可以被记录而根本不会发生任何图像或声音质量的恶化。但为了将一个尽可能长的节目在一预定的图像质量恶化程度的条件下，记录到一个只有有限存储容量的记录载体中，接收到的视频流必须被解码然后被编码成具有较低传输速率的传输流。
例如，将一个附加有多媒体编码数据的电视节目视频流重新编码为记录所需的较低比特率的数据流，这种重新编码可以通过对该图像进行亚采样来改变记录块。但这种方法会产生一个问题：在再编码后的视频流和多媒体编码之间联系会发生匹配错误。下面将参照图2A和图2B来描述匹配错误的例子。
在图2A中的例子中，发送端(记录端)在再编码时将原始视频写入块转换到一个更小的图像帧。因此，如图2B中所示，在接收端(重现端)视频显示尺寸和位置发生了变化，结果显示了一个与发送端所要显示的显示屏幕(基于再编码之前的数据显示的显示屏幕)不同的显示屏幕。
本发明的目的之一是提供一种图像编码装置和方法，一种图像解码装置和方法，以及一种记录载体。发明中产生再编码后的视频数据流和其他数据之间联系发生匹配错误的信息，并将该信息记录在记录端；根据记录端产生的信息避免在重现端产生缩小的图像帧。
本发明第一方面提供了一种第一图像编码装置，该装置包括：输入装置，用于输入一包含多媒体编码数据的复用流；分离装置，用于从输入装置输入的复用流中分离出视频流；转换装置，用于对分离装置分离出的视频流执行预定的转换处理；产生装置，用于产生附加信息来指出当该转换后的视频流基于多媒体编码数据显示时，匹配错误将会发生；以及输出装置，用于输出该转换后的视频流，多媒体编码数据和附加信息。
第一图像编码装置可进一步包括：编码装置，用于对产生装置产生的附加信息进行编码，作为同包含转换后的视频流的复用流分开的数据。
第一图像编码装置可进一步包括：编码装置，用于对产生装置产生的附加信息和包含转换后的视频流的复用流进行复用，然后对复用结果进行编码。
转换装置可转换视频数据流图像帧参数。
转换装置执行的转换处理可至少包括一个对分离装置分离出的视频流的解码处理，和一个对解码后的视频流的编码处理。
产生装置产生的附加信息可以至少包括与原始图像帧有关信息和原始屏幕纵横比中的一个信息。
产生装置产生的附加信息可以包括一个原始视频格式和一个转换后的视频格式。
产生装置产生的附加信息可以包括一个原始屏幕纵横比和一个转换后的屏幕的纵横比。
产生装置产生的附加信息可以至少包括指出该视频流的一个图像帧是否已被转换装置转换的信息、关于分离装置分离出的视频流的原始图像帧的信息、和原始屏幕纵横比中的一个信息。
本发明的第二方面提供了一种第一图像编码方法，该方法包括以下步骤：输入一包含多媒体编码数据的复用流；从输入步骤中输入的复用流中分出视频流；对分离步骤中分离出的视频流执行预定的转换处理；产生附加信息来指出当该转换后的视频流基于多媒体编码数据显示时，匹配错误将会发生；以及输出该转换后的视频流，多媒体编码数据和附加信息。
第一图像编码方法可进一步包括：对产生步骤产生的附加信息进行编码，作为同包含转换后的视频流的复用流分开的数据。
第一图像编码方法可进一步包括：对产生步骤产生的附加信息和包含转换后的视频流的复用流进行复用，然后对复用结果进行编码。
可在转换步骤转换视频数据流图像帧参数。
转换步骤中执行的转换处理可至少包括一个对分离步骤分离出的视频流的解码处理，和一个对解码后的视频流的编码处理。
产生步骤中产生的附加信息可以至少包括与原始图像帧有关信息和原始屏幕纵横比中的一个信息。
产生步骤中产生的附加信息可以包括一个原始视频格式和一个转换后的视频格式。
产生步骤中产生的附加信息可以包括一个原始屏幕纵横比和一个转换后的屏幕的纵横比。
产生步骤中产生的附加信息可以至少包括指出该视频流的一个图像帧是否已被转换步骤转换的信息、关于分离步骤分离出的视频流的原始图像帧的信息和原始屏幕纵横比中的一个信息。
本发明的第三方面提供了一种记录计算机可读程序的第一记录载体，该程序包括以下步骤：输入一包含多媒体编码数据的复用流；从输入步骤中输入的复用流中分出视频流；对分离步骤中分离出的视频流执行预定的转换处理；产生附加信息来指出当该转换后的视频流基于多媒体编码数据显示时，匹配错误将会发生；以及输出该转换后的视频流，多媒体编码数据和附加信息。
本发明的第四方面提供了一种第二记录载体，该载体上记录有由预定转换处理转换过的数据、多媒体编码数据，以及指出在基于该多媒体编码数据显示转换后的视频流时匹配错误发生情况的附加信息。
该附加信息可以被编码和记录成与包含转换后视频流的复用流不同的数据。
该附加信息可以被编码和记录成复用在包含转换后视频流的复用流中的数据。
视频流可以根据其图像帧参数被转换。
视频流可以解码后再被编码。
附加信息可以至少包含与原始图像帧相关信息和一个原始屏幕纵横比中的一个信息。
附加信息可以包含一个原始视频格式和一个转换后的视频格式。
附加信息可以包括一个原始屏幕纵横比和一个转换后的屏幕的纵横比。
附加信息可以至少包括指出该视频流的一个图像帧是否已被转换的信息、关于视频流的原始图像帧的信息和原始屏幕纵横比中的一个信息。
本发明的第五方面提供了一种第一图像解码装置，该装置包括：输入装置，用于输入包含多媒体编码数据的复用流；分离装置，用于从输入装置输入的复用流中分离出视频流；解码装置，用于对分离装置分离出的视频流进行解码；以及处理装置，用于根据指出显示基于多媒体解码数据与解码后的视频流时匹配错误出现情况的附加信息，对解码后的视频流执行预定转换处理。
第一图像解码装置可进一步包括：获取装置，用于从与复用流不同的数据中获取附加信息。
第一图像解码装置可进一步包括：获取装置，用于从复用有附加信息的复用流中获取附加信息。
处理装置可以转换视频流的图像帧参数。
处理装置执行的转换处理可以至少包括一个对分离装置分离出的视频流的解码处理和对该解码后视频流的编码处理。
附加信息可以至少包含与原始图像帧相关信息和原始屏幕纵横比中的一个信息。
附加信息可以包含一个原始视频格式和一个转换后的视频格式。
附加信息可以包括一个原始屏幕纵横比和一个转换后的屏幕的纵横比。
附加信息可以至少包括指出该视频流的一个图像帧是否被转换装置转换的信息、关于分离装置分离出的视频流的原始图像帧的信息和原始屏幕纵横比中的一个信息。
本发明的第六方面提供了一种第一解码方法，该方法包括以下步骤：输入包含多媒体编码数据的复用流；从输入步骤中输入的复用流中分离出视频流；对分离步骤中分离出的视频流进行解码；根据指出显示基于多媒体解码数据解码后的视频流时匹配错误出现情况的附加信息，对解码后的视频流执行预定转换处理。
第一图像解码方法可进一步包括以下步骤：从与复用流不同的数据中获取附加信息。
第一图像解码方法可进一步包括以下步骤：从复用有附加信息的复用流中获取附加信息。
处理步骤中可以转换视频流的图像帧参数。
处理步骤中执行的转换处理可以至少包括一个对分离步骤中分离出的视频流的解码处理和对该解码后视频流的编码处理。
附加信息可以至少包含与原始图像帧相关信息和原始屏幕纵横比中的一个信息。
附加信息可以包含一个原始视频格式和一个转换后的视频格式。
附加信息可以包括一个原始屏幕纵横比和一个转换后的屏幕的纵横比。
附加信息可以至少包括指出该视频流的一个图像帧是否已被转换的信息、关于视频流的原始图像帧的信息和原始屏幕纵横比中的一个信息。
本发明的第七方面提供了一种第三记录载体，该载体上记录有一计算机可读程序，该程序包括以下步骤：输入包含多媒体编码数据的复用流；从输入步骤中输入的复用流中分离出视频流；对分离步骤中分离出的视频流进行解码；根据指出显示基于多媒体解码数据解码后的视频流时匹配错误出现情况的附加信息，对解码后的视频流执行预定转换处理。
在本发明的第八方面提供了一种第二图像编码装置，该装置包括：输入装置，用于输入复用流；分离装置，用于从输入装置输入的复用流中分离出一视频流；确定装置，用于确定输入装置输入的复用流中是否包含多媒体编码数据；产生装置，用于在确定装置确定复用流中包含多媒体编码数据的情况下产生编码控制信息，该信息用于指出不改变分离装置分离出的视频流的显示格式；转换装置，用于在产生装置产生的编码控制信息的基础上，对分离装置分离出的视频流执行预定转换处理；以及复用装置，用于产生包含转换装置转换后得到的视频流的复用流。
产生装置可以指出不改变图像帧、视频格式和纵横比中的任何一个。
在本发明的第九方面提供了一种第二图像编码方法，该方法包括以下步骤：输入一复用流；从输入步骤输入的复用流中分离出一视频流；确定输入步骤中输入的复用流中是否包含多媒体编码数据；如果确定步骤中确定复用流中包含多媒体编码数据，产生编码控制信息，该信息用于指出不改变分离装置分离出的视频流的显示格式；在产生步骤产生的编码控制信息的基础上，对分离步骤分离出的视频流执行预定转换处理；以及产生一个包含转换步骤转换后得到的视频流的复用流。
编码控制信息可以指出不改变图像帧、视频格式和纵横比中的任何一个。
在本发明的第十方面提供了一种记录有计算机可读程序的第四记录载体，该程序包括以下步骤：输入一复用流；从输入步骤输入的复用流中分离出一视频流；确定输入步骤中输入的复用流中是否包含多媒体编码数据；如果确定步骤中确定复用流中包含多媒体编码数据，产生编码控制信息，该信息用于指出不改变分离装置分离出的视频流的显示格式；在产生步骤产生的编码控制信息的基础上，对分离步骤分离出的视频流执行预定转换处理；以及产生一个包含转换步骤转换后得到的视频流的复用流。
本发明的第十一方面提供一种第五记录载体，记录有指出不改变视频流显示格式的编码控制信息；该载体还记录了包含有进行了基于该编码控制信息的预定转换处理后得到的视频流的复用流。
如上所述，根据第一图像编码装置、方法和存储在第一记录载体上的程序，视频流被从包含多媒体编码数据的复用流中分离出来，然后对分离出来的视频流执行了一种预定的转换处理，并获得了指出在基于多媒体编码数据显示转换后的视频流时匹配错误将发生的附加信息。
第二记录载体存储了经预定转换处理转换后的视频流、多媒体编码数据和指出在基于上述多媒体编码数据显示转换后的视频流时匹配错误将发生的附加信息。
如上所述，根据图像解码装置、方法和存储在第三记录载体上的程序，当一视频流被从输入的复用流中分离出来后再进行解码，然后基于多媒体编码数据显示该解码后的视频流，这时匹配错误将发生。基于与匹配错误发生情况相关的附加信息，对解码后的视频流执行预定转换处理。这种新颖的规定防止了在多媒体编码数据和视频流之间发生匹配错误。
如上所述，根据第二图像编码装置、方法和记录在第四记录载体上的程序，视频流被从输入的复用流中分离出来，输入的复用流被检测是否包含多媒体编码数据，如果包含多媒体编码数据，将产生编码值信息以指出不改变分离出来的数据流的显示格式，然后基于产生的编码控制信息对分离出来的视频流执行预定转换处理。
第五记录载体中存储了上述指出不改变分离出来的数据流的显示格式的编码控制信息、包含基于该编码控制信息执行了预定转换处理的视频流的复用流。
本发明的这些和其他目的将在下文中参考附图进行说明。其中：
图1A和1B示出基于多媒体编码信息显示一个显示屏幕的示意性框图；
图2A和2B示出当视频流被再编码后发生的匹配错误的示意图；
图3示出作为本发明中一个实施例的记录装置的框图；
图4A和图4B示出土3中复用器的操作；
图5A、5B和5C示出到达时间戳添加模块的处理；
图6示出多媒体显示子信息；
图7示出ProgramInfo( )语法的例子；
图8示出StreamCodingInfo( )语法的例子；
图9示出stream_coding类型的含义；
图10示出video_format的含义；
图11示出frame_rate的含义；
图12示出display_aspect_ratio的含义；
图13示出描述对AV流和媒体显示子信息编码处理的流程图；
图14示出描述为限制对包括多媒体编码信息的复用流视频再编码而执行的编码处理；
图15示出输入传输流的例子；
图16示出对图1 5中视频流再编码后得到的传输流的例子；
图17示出由图3中记录装置执行的记录速率控制处理的流程图；
图18示出由图3中记录装置执行的另一种记录速率控制处理的流程图；
图19示出视频流再编码后获得的传输流的另一个例子；
图20示出输入数据流的另一个例子；
图21示出本发明中一个实施例中重现装置的配置的方框图；
图22A和22B示出当添加了多媒体显示子信息后的显示屏幕；
图23示出本发明实施例中重现装置的另一配置的方框图；
图24示出描述使用多媒体显示子信息重现AV流的处理的流程图；
图25示出本发明实施例中重现装置的另一配置的方框图；
图26示出记录载体；
下文将参照附图通过例子进一步纤细说明本发明。现在参照图3，图中示出作为本发明实施例的记录装置1的示例性配置的方框图。通过天线(没有时处)接收到的传输流被输入到一个选择器10。由用户指定的节目编号(频道编号)也同时有终端11输出到选择器10。参照该节目编号，选择器从接收到的传输流中抽取出指定的节目，并输出部分传输流。该部分传输流被输入到一个去复用器12和一个分析块13。
输入到去复用器12的部分传输信号被分离成视频流和其他流(例如音频，静止图像，字符图形，和多媒体编码数据))获得的视频流被输出到解码器14。其他流被输出到复用器16。除了非视频的传输分组之外，去复用器12还输出同步信息加到输入到复用器16的传输分组中。
解码器14对输入的视频流使用一种预定解码结构，例如MPEG-2。然后将解码后的视频数据输出到编码器15。解码器14还将解码时获得与视频流有关的流信息输出到编码控制器18中。
另一方面，分析块13分析输入的传输流，以获得非视频流的流信息(例如比特率)，并输出到编码控制器18中。分析块13输出的有关非视频流的流信息、解码器14输出的视频流信息和终端19输出的流记录比特率都输入到编码控制器18。编码控制器18根据这些数据设置将由编码器15执行的视频编码的条件(编码控制信息)，并将这些编码条件输出到编码器15和编码块20。
编码控制器使用一个值作为指定的视频数据编码的比特率，该值是通过从终端19(出自一个没有示出的控制器，该控制器用于控制该记录装置1的操作)输入的流记录比特率中减去非视频流比特率的总值(分析块13输出的数据)获得的。编码控制器18设置如比特率和根据该比特率可获得的最佳图像的图像帧这样的编码控制信息，并将该编码控制信息输出到编码器15和编码块20。该编码控制信息将在后面参照图15-20详细说明。
当数据流以一固定速率记录到一记录载体上时，该数据流的记录比特率就是该固定的速率；当一数据流以可变的速率记录时，该数据流的记录比特率是该速率在一预定时间内的平均值。然而，这种情况中的可变速率的最大值应当低于记录载体所允许的最大记录速率。
编码器15根据编码控制器18输出的编码控制信息，对从解码器14输出的视频数据进行编码(例如基于MPEG-2)，然后将编码视频信息输出到复用器16。将编码器15输出的视频流、去复用器12输出的非视频的传输流分组和非视频传输流分组的同步信息都输入到复用器16中。在输入的同步信息基础上，复用器16将视频流和非视频传输流分组复用，并将结果作为传输流输出到到达时间戳添加块17。
图4A和43示意性的示出复用器16执行的上述处理。图4A示出输入的传输流分组的同步。图中斜十字阴影部分表示视频分组，而白色部分表示非视频流分组。如图4A所示，输入的传输流分组是连续的；但视频流的数据量经编码器15的再编码处理后减少了，结果视频分组的个数减少了。
如图4B所示，复用器16并没有改变非视频流分组的同步，当使得视频流的同步与原始状态不同(见图4A)。
如图5A、5B和5C所示，到达时间戳添加块17给每一个输入传输流的分组(图5A中所时)添加了一个包括到达时间戳的首部(TP_exba_header)，从而产生一个源分组(图5B中所示)，连续的排列产生的源分组(图5C)并输出到写入块21。到达时间戳是传输流中传输流分组同步的信息。写入块21存放输入的由连续源分组组成的源分组流，并将该文件记录到记录载体22中。需注意的是记录载体22可以为任意一种类型的记录载体。
编码块20输出的信息同时也输入到写入块21。在编码控制器18输出的视频编码信息的基础上，编码块20产生多媒体显示子信息，并将该信息输入到写入块21。输入到写入块21的多媒体显示子信息是用于这样一种目的的信息：在多媒体平面上保持视频位置和显示尺寸与发送端预定的图像(不经再编码显示的图像)相比不发生变化，即使该图像帧尺寸已经对视频流进行代码转换(由解码器14解码，再由编码器15编码)时被改变。该信息也与多媒体编码数据一起用于图像重现。
下面将更具体的描述多媒体显示子信息。如图6所示，该多媒体显示子信息由下列部分组成：三种标志，匹配错误标志(mismatch_Mminfo_flag)、再编码标志(Re_encoded_flag)和帧尺寸变化标志(changed_frame_size_flag)；与两个尺寸相关的数据：指出原始水平尺寸的数据(original_horizontal_size)、指出原始垂直尺寸的数据(original_vertical_size)；和原始屏幕纵横比(original_display_aspect_ratio)。
匹配错误标志指出在视频和多媒体编码数据之间的关系是否存在匹配错误。再编码标志指出记录使该视频是否已被再编码。帧尺寸变化标志指出再编码后视频的图像帧是否发生变化。原始水平尺寸指出再编码之前图像帧的水平尺寸。原始垂直尺寸指出再编码之前图像帧的垂直尺寸。原始屏幕纵横比指出编码前屏幕纵横比。
应注意的是，上述多媒体显示子信息只是示例。因此图6中没有示出的其他信息也可以包括进去，而图6中示出的部分信息也可以从该多媒体显示子信息中去除。
下面将描述多媒体显示子信息的另一个例子。在下面的例子中，多媒体显示子信息被存储在图7中所示ProgramInfo()的语法中。下面将描述ProgramInfo()语法中与本发明相关的字段。
“length”指出该length字段后面的那一比特与ProgmInfo()所包括的最后一位比特之间的比特个数；
“num_of_program_sequences”指出在一AV流文件中节目序列的个数。一个源分组序列被参考为节目序列，该源分组序列中携带的、根据AV流文件中格式指定的节目内容是连续的。
“SPM_program_sequence_start”指出AV流文件中该节目序列开始的地址。“SPM_program_sequence_start”以源分组数量为单位，以0为初始值，从AV流文件的第一个分组开始计数。
“program_map_PID”是在节目序列中使用了PMT(节目映射表)的传输分组的PID值。
“num_of_streams_in_ps”使节目序列中定义的基本流的数量。
“stream_PID”是参考节目序列的节目映射PID得到的、PMT中的基本流的PID值。
“StreamCodingINfo()”是有关上述流PID指出的基本流的信息
图8示出StreamCodingInfo()的语法。“length”是指该length字段后面的那一比特与SteamCodingInfo()所包括的最后一位比特之间的比特个数；
“stream_coding_type”是指StreamCodingInfo()中流PID指出的基本流的编码类型。图9中示出每一类型的含义。
如果该流编码类型值为0x02，表示由流PID指出的基本流为视频流。
如果该流编码类型值为0x0A、0x0B或0x0D，表示由流PID指出的基本流为多媒体编码数据。
如果该流编码类型值为0x06，表示由流PID指出的基本流为副标题或图文电视。
“video_format”表示StreamCodingInfo()中流PID指出的视频流的视频格式。图10示出每一视频格式的含义。
图10中，480i表示NTSC标准电视(隔行扫描，720像素×480线)。480i表示PAL标准电视(隔行扫描，720像素×576线)。480p表示逐行扫描、720像素×480线的视频显示。1080i表示隔行扫描、1920像素×1080线的视频显示。720p表示逐行扫描、1230像素×720线的视频显示。
“frame_rate”是指StreamCodingInfo()中流PID指出的视频流的帧率。图11示出每一帧率的含义。
“display_aspct_ratio”是指StreamCodingInfo()中流PID指出的视频流的显示纵横比。图12示出每一纵横比的含义。
“orginal_video_format_flag”是指StreamCodingInfo()中是否存在原始视频格式和原始显示纵横比。
“orginal_video_format”是指StrearnCodingInfo()中流PID指出的视频流编码前的视频格式。每一原始视频格式的含义与图10中所示一样。
“orginal_display_aspect_ratio”是指StreamCodingInfo()中流PID指出的视频流编码前的纵横比。每一原始纵横比的含义与图10中所示一样。
假设在传输一传输流(其中视频流和多媒体数据流复用在一起)时，对视频流再编码改变其视频格式，而多媒体数据流保留其原始数据流内容。这时，新的视频流与该多媒体数据流之间发生信息匹配错误。例如，尽管与该多媒体数据流显示相关的参数是由假定的原始视频流的视频格式所确定的，视频格式在对视频流再编码后改变了。
原始视频流的视频格式是由视频格式和显示纵横比指出的。再编码后的视频流的视频格式是由原始视频格式和原始视频纵横比指出的。
如果在原始视频格式和视频格式之间存在匹配错误，和/或在显示纵横比和原始显示纵横比之间存在匹配错误，就表示记录时发生了由视频再编码引起的视频格式变化。
如果ProgramInfo()中包括流PID(其中的流编码类型表示多媒体编码数据)和副标题，则表示AV流文件(传输流)中复用了多媒体数据。
如果ProgramImfo()指出在记录时发生了由视频再编码引起的视频格式改变以及AV流文件中复用了多媒体数据，就可以确定在AV流文件中的视频流(已被再编码)和多媒体数据(原始多媒体数据)之间发生的匹配错误。
在这种情况中，与原始视频流有关的信息，也就是原始视频格式和原始显示纵横比，变为有效。如下面所述，重现装置基于上述新的视频流和多媒体数据产生显示屏幕。-视频流被上行采样成一种由原始视频格式和原始显示纵横比指出视频格式；-上行采样后的图像和多媒体数据流被合成，以产生一正确的显示屏幕。
编码块20产生的多媒体显示子信息由写入块21记录到记录载体22中，但被存为一个与到达时间戳添加块17输出的源分组流文件不同的文件。如果多媒体显示子信息由写入块21记录到记录载体22时被存为一个与源分组流文件不同的文件，文件形式的多媒体显示子信息就被从编码块20输出。
图13描述的是对AV流和多媒体显示子信息编码处理的流程图。
步骤50中，将包括多媒体编码数据的复用流输入到记录装置1。
步骤51中，去复用器12从复用流中分离出视频流。
步骤52中，编码器15对解码器14解码后的视频流再编码。
步骤53中，复用器16对上述视频流和多媒体编码数据进行复用，以产生一复用流。
步骤54中，编码块20产生多媒体显示子信息。
上述描述中，编码控制器18在输入数据的基础上，产生包括比特率和图像帧的编码控制信号。编码控制器18还可以产生下列信息作为另一种编码控制信息。也就是说，如果发现输入的传输流包括分析块13输出的多媒体编码数据，编码控制器18可以产生编码控制信息，该信息用于在编码器15执行编码时指示编码器15对与原始图像帧尺寸相同的图像帧(再编码之前的图像帧)进行再编码。然后编码控制器18将产生的编码控制信息输出给编码器15。
当使用上述方法时，编码器15在输入的编码控制信息的基础上对解码器14提供的视频数据进行再编码，再编码后的图像帧的值与原始视频流的图像帧相同。如果产生了这一编码控制信息并在该信息的基础上执行再编码处理，再编码时不会导致任何一个图像帧发生变化，从而避免在多媒体编码数据和再编码后的视频流之间发生关系匹配错误问题。
此外，编码控制器18还可以产生下列信息作为产生的编码控制信息。也就是说，如果发现输入的传输流包括分析块13输出的多媒体编码数据，编码控制器18可以产生编码控制信息，该信息用于在编码器15执行编码时指示编码器15在与原始视频的图像格式(图10中所示)和屏幕纵横比(图12中所示)相同的条件下进行再编码。然后编码控制器18将产生的编码控制信息输出给编码器15。
当使用上述方法时，编码器15在输入的编码控制信息的基础上对解码器14提供的视频数据进行再编码，其条件与原始视频的图像格式(图10中所示)和屏幕纵横比(图12中所示)条件相同。如果产生了这一编码控制信息并在该信息的基础上执行再编码处理，再编码时不会导致任何视频格式和屏幕纵横比的变化，从而避免在多媒体编码数据和再编码后的视频流之间发生关系匹配错误问题。
图14示出描述为限制对包括多媒体编码信息的复用流视频再编码而执行的编码处理；
步骤70中，将复用流输入到记录装置1中。
步骤71中，去复用器12从复用流中分离出视频流。
步骤72中，分析块13检测视频流中是否包括多媒体编码数据。如果包括多媒体编码数据，分析块13性编码器15输出编码控制信息，在不改变显示格式的前提下对视频再编码。基于提供的控制信息，编码器15对视频流再编码。
步骤73中，复用器16产生一包括上述视频流的复用流。
下面将参照图15-20描述一个在该编码控制信息的基础上执行控制的例子。
假定输入到选择器10中的传输流具有一个恒定的比特率RI，如图15所示。视频流和非视频流是以可变比特率编码的。如图15所示，在单位时间(例如，GOP)A内，视频流的比特率为RVA，而非视频流的比特率为ROA。在单位时间B内，视频流的比特率为RVB，而非视频流的比特率为ROB。在单位时间C，视频流的比特率为RVC，而非视频流的比特率为ROC。
如果对图15中所示的传输流进行再编码，从复用器16中输出一具有固定的比特率S(S＜RI)的传输流(见图16)，编码控制器18执行图17中流程图描述的处理。
首先，步骤S1中，编码控制器18在控制器(没有示出)通过终端19输入的控制信号的基础上，把将从复用器16输出的传输流的比特率(记录速率)设为S。然后在步骤S2中，编码控制器18确定将记录的非视频流，并计算所确定的视频流的比特率的最大总值D。
最大值D示由输入的传输流的数据流规定所确定的。例如，如果除了视频流还要记录两个音频流，因为根据日本数字BS广播的数据数据流规定，一个音频流的比特率的最大值为384kbps，则最大值D为384×2kbps。
在步骤S3中，编码控制器18使用从步骤S1中设定的记录比特率中减去步骤S2中计算得到最大值后获得的差值(＝S-D)，作为对视频数据再编码的比特率。在步骤S4中，编码控制器18分析解码器14输出的视频流信息的诸如视频流比特率和图像帧等编码信息。
在步骤S5中，编码控制器18在步骤S3中计算得到的值C和步骤S4中分析得出的视频流编码信息的基础上，确定视频编码参数(视频编码控制信息)，如获得的最佳帧质量。
例如，如图16所示，S值是RI值的1/2。在本例中，非视频流的比特率为最大值D，对于再编码后的复用流中非视频流的比特率该值仍不变化。
然后所确定的视频编码参数(如最佳帧质量)可以在(S-D)的范围内获得。如果对图像帧进行控制，例如将一720×480的图像帧进行水平方向的1/2采样，变为360×480。所确定的编码参数(比特率和图像角度)提供给编码器15作为编码控制信息。
在步骤S6中，在编码控制器18提供的视频编码控制信息的基础上，编码器15对需编码的单位时间(例如，单位时间A)内的视频数据进行再编码。如图16所示，单位时间A内的实际比特率比最大值D略小；但由于最大值D是固定的，视频指定的比特率为(S-D)。由于最大值D是固定的，就存在一个浪费的部分RSA不能用于视频编码，该浪费部分由一些填充的比特组成。
在步骤S7中，编码控制器18确定是否还存在需再编码的数据流。如果存在，该过程回到步骤S4重复上述处理。
如果在步骤S7中，不再有需再编码的数据流，该处理将结束。
于是，在图16中所示的例子中，非视频流在单位时间B内的比特率也为D，视频流指定的比特率为(S-D)，是固定的。在值Rsb中插入填充比特(＝S-(S-D)-ROB＝D-ROB)。
在在单位时间C内，非视频流的比特率也为D，而视频流指定的比特率为(S-D)。需指出的是，单位时间C内D＝ROC，因此不存在填充比特。
因此，在图16中所示例子中，视频流以固定的比特率被编码。
图18示出描述视频再编码指定比特率可变的一个处理示例的流程图。首先，在步骤S21中，编码控制器18在终端19提供信息基础上设置记录速率为S。然后在步骤S22中，编码控制器在解码器14提供的视频流信息的基础上分析视频流的编码信息。处理的S21和S22与图17中的步骤S1和S4相同。
在步骤S23中，编码控制器18根据分析块13的输出计算非视频流单位时间内的总的比特率B。
在步骤S24中，编码控制器18使用步骤S1中获得的值S减去步骤S23中获得值B得到值C(＝S-B)，作为视频再编码指定比特率。
在步骤S25中，编码控制器18在步骤S24中获得的值C以及对步骤S22中获得的视频流编码信息分析的结果的基础上，确定诸如最佳图像帧的视频编码参数。确定后的编码参数输出到编码器15。
在步骤S26中，编码器15在步骤S25中获得的编码参数的基础上对当前单位时间内的视频数据进行再编码。结果如图19所示，将Roa(＝ROA)指定为单位时间内非视频流的比特率后，视频流的比特率设定为由(S-Roa)规定的Rva。
在步骤S27中，编码控制器18确定是否还存在需再编码的数据流。如果存在，该过程回到步骤S22重复上述处理。如果不再有需再编码的数据流，该处理将结束。
因此，在单位时间B内，将Rob(＝S-ROB)指定为单位时间内非视频流的比特率后，视频流的比特率为余值Rvb(＝S-Rob)。在单位时间C内，视频流的比特率为余值Rvc(＝S-Roe)，而非视频流的比特率为Roe。
于是在当前处理的举例中，视频流的比特率是变化的从而不需要填充比特，或是可以减少填充比特，这样视频流的编码更加有效率。
上文中，输入传输流有固定的比特率。本发明也可应用到图20中所使得输入传输例的比特率变化的情况。
这样更长内容的传输流可以以所需的低速率记录到记录载体22中。
此外，上述新颖的构造防止音频数据、静止图像、字符图形、多媒体编码数据和其他非视频流数据质量显著恶化。非视频流基本上数据量小于视频数据，因此如果将它们的比特率相对于视频数据也以相应的比例减少，对非视频流的影响将大于对视频数据的影响。这一新颖构造可以防止上述影响的发生。
下面描述对记录在记录载体22上的源分组流文件的重现。参见图21，图中示出了描述本发明中一个重现装置实施例构造的方框图。记录在记录载体22上的源分组流文件被一读取块31读出。该读取块31还从记录载体22中与源分组流文件不同的文件中读出了多媒体显示子信息。
将由读取块31读出的源分组流输出到一个到达时间戳分离块32，而将多媒体显示子信息输出到合成块36。到达时间戳分离块32中包括一参考块。该到达时间戳分离块将添加到输入的源分组流中的源分组中的到达时间戳与参考块相比较，当相匹配时，将该到达时间戳从具有匹配到达时间戳的源分组中取出，并将获得的分组作为传输流分组输出到去复用器33。
去复用器33将输入的传输流分离成为视频音频流和数据流(如多媒体编码数据、字符图形、文本和静止图像)。在被分离的数据中，视频/音频流被输出到AV解码器34，多媒体编码数据被输出到合成块36，而字符图形、文本和静止图像数据被输出到字符图形/经值图像解码器35。
AV解码器34将输入的音频/视频流分离成音频流和视频流，将每一种数据解码，并将解码后的音频数据输出到一音频重现设备(没有示初)，而将解码后的视频数据输出到合成块36。字符图形/经值图像解码器35对输入的数据流(字符图形，文本，和静止图像)进行解码，并将解码后的字符图形数据、文本数据和静止图像数据输出到合成块。
AV解码器34输出的视频数据、去复用器33输出的多媒体编码数据、字符图形/静止图像解码器35输出的数据和读取块3 1输出的多媒体显示子信息都输入到合成块36中。通过检测输入的多媒体显示子信息中的匹配错误标志(图6)，合成块36确定是否在输入的视频数据和多媒体编码数据之间存在着关系匹配错误。
如果图8中所示的视频格式值和原始视频格式值之间存在着匹配错误，和/或在显示纵横比和原始显示纵横比的值之间存在着匹配错误，该合成块36确定记录时由视频再编码引起的视频格式变化，检测出输入视频信号和多媒体编码数据之间发生的匹配错误。如果在视频格式值和原始视频格式值之间不存在匹配错误，和/或在显示纵横比和原始显示纵横比的值之间不存在匹配错误，该合成块36确定输入视频信号和多媒体编码数据之间没有发生匹配错误。
如果发现输入的视频数据和多媒体编码数据之间存在着关系匹配错误。合成块36将进一步参考多媒体显示子信息中的原始水平尺寸和垂直尺寸，或参考原始视频格式和原始显示纵横比。然后，合成块36按比例转换输入视频信号，示之可以在参考尺寸的帧内显示。在多媒体编码数据的基础上，合成块36输出合成在电视机(没有示出，作为显示装置)上多媒体平面上的包括按比例转换后的视频信号的视频信号以及字符图形一类的数据。
另一方面，如果没有发现输入视频信号和多媒体编码数据之间的关系匹配错误，合成块36将输入的视频信号和其他数据合成到多媒体平面上而不许经过比例转换处理。然后输出合成后的信号。
于是，记录多媒体显示子信息、并在重现时使用该信息使得接收端可以显示发送端预定的屏幕。参见图22，如果发送端(接收端)的再编码导致视频图像帧率小于原始帧，这种尺寸上的减少被记录为多媒体显示子信息，并在重现是作为参考。结果，由于视频数据和其他数据之间不存在匹配错误，接收端(重现段)可以显示与原始屏幕相同的屏幕。
图24示出一个使用多媒体显示子信息的AV流重现处理的流程图。
在步骤60中，从一记录载体中读取包括多媒体编码数据的复用流，并将其输出到重现设备。
在步骤61中，输入多媒体显示子信息。在图21中所示的重现装置的情况下，该信息是从一记录载体中的读出；在图25中所示重现装置的情况下，该信息是从复用流中分离出来。
在步骤62中，从复用流中分离出视频流。
在步骤63中，对视频流解码。
在步骤64中，如果在视频数据和多媒体编码数据之间存在匹配错误，合成块36在多媒体显示子信息的基础上按比例转换视频数据。
在步骤65中，合成块合成处理后的图像和多媒体数据，以产生一显示图像。
如上所述，多媒体显示子信息可以作为一文件记录在记录载体2上，该文件与包含字符图形数据和视频信号的源分组流文件不同。此外，该多媒体显示子信息还可以包含到源分组流文件中，然后再记录到记录载体22中。图23示出多媒体显示子信息被包含到源分组流文件中的记录装置1的构造。
比较图23中和图3中的记录装置的构造，前者将编码块20输出的多媒体显示子信息提供给复用器16。然后该复用器16产生一个将输入的多媒体显示子信息包含到源分组流文件中去的传输流分组，并将其输出到到达时间戳添加块17。在MPEG视频流中，没有将该多媒体显示子信息作为一传输分组包含到源分组流文件中，而是将其记录到一用产数据区域。
在本发明的实施例中，视频数据也可以是以上述方法之外的方法进行再编码，例如输入的视频数据流可以被转换到DCT域来改变图像帧之类的编码参数。
图25示出重现装置30的构造，其中多媒体显示子信息被包含在一个源分组流文件中后记录在记录载体22中。比较图25和图1中的重现装置构造，前者通过读取块31制读取源分组流。由读取块31读出的源分组流经到达时间戳分离块32被输出到去复用器33。
去复用器33从输入的源分组流文件中抽取出多媒体显示子信息，并将其输出到合成块36。进一步的处理与图5中的构造的处理相同。
于是，如果多媒体显示子信息以包含到源分组流文件中的方式被记录下来，接收端还可以同时获得发送端预定的视频图像尺寸和显示位置。
在本发明的实施例中，使用的传输流只是一个例子。本发明也可以应用到程序流这样的复用流。
上述处理操作序列可以由硬件执行也可以由软件执行。软件方式时，记录装置1(和重现装置30)由图26中所示个人计算机构成。
参见图26，CPU(中央处理单元)101执行存储在ROM(只读存储器)102中或通过一存储块108载入到RAM(随即存储器)103中的程序所指示的处理操作。如果需要，RAM103还存储CPU101执行各种处理操作所需的数据。
CPU101、ROM102和RAM103通过总线104相互连接。总线104还连接到一输入/输出接口105。
输入输出接口105连接到一输入块106(如键盘和鼠标)，一显示装置(如CRT或LCD)，一输出块107(如扬声器)，一存储块108(如硬盘)和一通信讯块109(如调制解调器或终端适配器)。通信块109通过网络执行通信处理。
如果需要，输入/输出接口105还可连接到一驱动110，该驱动中可载入磁盘121，光盘122，磁光盘，或半导体存储器124。如果需要，可以安装从这些存储载体中读出的计算机程序。
由软件执行处理操作序列需要使用具有专门硬件设备的计算机，所述硬件设备中事先存储有构成该软件的程序；也可以使用通用目的计算机，而在需要是将这些程序通过一记录载体安装到计算机中。
存储计算机可读和可执行程序的程序记录载体可以是一分组载体，将该载体分配给用户来提供程序；也可以如图26所示，由预先安装在个人计算机上的磁盘121(包括软盘)、光盘122(包括CD-ROM(只读光盘存储器)和DVD(数字通用盘))、磁光盘123(包括MD(MINI盘))、半导体124、ROM102或硬盘构成，以向用户提供上面暂时或永久存储的程序。
需注意的是，描述存储在程序存储载体中的程序的步骤不一定按上述顺序以基于时间的方式执行，也可以并行或分别执行。
如上所述的第一图像编码装置、方法和存储在第一记录载体中的程序，将视频流从包含多媒体编码数据的复用流中分离出来，对分离出的视频流执行预定转换处理，然后得到附加信息，以指出在基于多媒体编码数据显示转换后的视频流匹配错误将发生。
第一记录载体存储了转换后的视频流、多媒体编码数据和指出在基于多媒体编码数据显示转换后的视频流的匹配错误将发生的附加信息。
于是这种情况下，恢复端可以避免发生多媒体编码数据和视频流之间的匹配错误。
如上所述的图像解码装置、方法和存储在第二记录载体中的程序，当从输入的复用流中分离出视频流后，对分离出的视频流进行解码，在多媒体编码数据基础上显示解码后的数据时，将发生匹配错误。在指出匹配错误发生情况的附加信息的基础上，对该解码后视频流执行预定转换处理。这一新颖的装置可以避免发生多媒体编码数据和视频流之间的匹配错误。
如上所述的第二图像编码装置、方法和存储在第记录载体中的程序，从一输入的复用流中分离出视频流，检测输入的复用流中的多媒体编码数据，如果发现了多媒体编码数据，将产生编码控制信息以指出不改变分离出的视频数据的显示格式，然后基于产生的编码控制信息对分离出的视频数据执行预定的转换处理。
第二存储载体还存储了上述指出不改变视频流显示格式的编码控制信息，以及一个包含基于该编码控制信息进行了预定转换处理后的视频流的复用流。
于是在这种情况下恢复端可以避免发生多媒体编码数据和视频流之间的匹配错误。
尽管本发明的最佳实施例使用了专门的技术术语，这只是为了示例性说明而已。应当可以认为，在不脱离权利要求的精神或范围的改变和变化都是可以的。

Claims (53)

1.一种图像编码装置，该装置包括：
输入装置，用于输入一包含多媒体编码数据的复用流；
分离装置，用于从所述输入装置输入的所述复用流中分出视频流；
转换装置，用于对所述分离装置分离出的所述视频流执行预定的转换处理；
产生装置，用于产生附加信息，来指出当基于所述多媒体编码数据显示该转换后的视频流时，匹配错误将会发生；
以及输出装置，用于输出所述转换后的视频流，所述多媒体编码数据和所述附加信息。
2.如权利要求1所述的图像编码装置，其特征在于该装置进一步包括：编码装置，用于当从包含所述转换后的视频流的所述复用流中分离数据时对所述产生装置产生的所述附加信息进行编码。
3.如权利要求1所述的图像编码装置，其特征在于该装置进一步包括：编码装置，用于在将所述产生装置产生的所述附加信息与包含所述转换后的视频流的所述复用流进行复用，然后对复用结果进行编码。
4.如权利要求1所述的图像编码装置，其特征在于所述转换装置转换视频数据流图像帧参数。
5.如权利要求1所述的图像编码装置，其特征在于所述转换装置执行的转换处理至少包括一个对所述分离装置分离出的视频流的解码处理，和一个对解码后的视频流的编码处理。
6.如权利要求1所述的图像编码装置，其特征在于所述产生装置产生的所述附加信息至少包括与原始图像帧相关信息和原始屏幕纵横比中的一个信息。
7.如权利要求1所述的图像编码装置，其特征在于所述产生装置产生的所述附加信息包括一个原始视频格式和一个转换后的视频格式。
8.如权利要求1所述的图像编码装置，其特征在于所述产生装置产生的所述附加信息包括一个原始屏幕纵横比和一个转换后的屏幕的纵横比。
9.如权利要求1所述的图像编码装置，其特征在于所述产生装置产生的所述附加信息至少包括指出该视频流的一个图像帧是否已被所述转换装置转换的信息、一个关于所述分离装置分离出的视频流中原始图像帧的信息、和一个原始屏幕纵横比中的一个信息。
10.一种图像编码方法，该方法包括以下步骤：
输入一包含多媒体编码数据的复用流；
从所述输入步骤中输入的所述复用流中分出视频流；
对所述分离步骤中分离出的所述视频流执行预定的转换处理；
产生附加信息来指出当该转换后的视频流基于所述多媒体编码数据显示时匹配错误将会发生；
输出所述转换后的视频流，所述多媒体编码数据和所述附加信息。
11.如权利要求10所述的图像编码方法，其特征在于该方法进一步包括一个编码步骤，该编码步骤在从包含所述转换后的视频流的所述复用流中分离数据时，对所述产生步骤产生的所述附加附加信息进行编码。
12.如权利要求10所述的图像编码方法，其特征在于该方法进一步包括一个编码步骤，该编码步骤在将所述产生步骤产生的所述附加信息与包含所述转换后的视频流的所述复用流进行复用后，对复用结果进行编码。
13.如权利要求10所述的图像编码方法，其特征在于在所述转换步骤转换视频数据流图像帧参数。
14.如权利要求10所述的图像编码方法，其特征在于所述转换步骤中执行的转换处理至少包括一个对所述分离步骤分离出的视频流的解码处理，和一个对解码后的视频流的编码处理。
15.如权利要求10所述的图像编码方法，其特征在于所述产生步骤中产生的所述附加信息至少包括与原始图像帧相关信息和原始屏幕纵横比中的一个信息。
16.如权利要求10所述的图像编码方法，其特征在于所述产生步骤中产生的所述附加信息包括一个原始视频格式和一个转换后的视频格式。
17.如权利要求10所述的图像编码方法，其特征在于所述产生步骤中产生的所述附加信息包括一个原始屏幕纵横比和一个转换后的屏幕的纵横比。
18.如权利要求10所述的图像编码方法，其特征在于所述产生步骤中产生的所述附加信息至少包括指出该视频流的一个图像帧是否已被转换装置转换的信息、关于分离装置分离出的视频流中原始图像帧的信息和一个原始屏幕纵横比中的一个信息。
19.一种记录计算机可读程序的记录载体，所述程序包括以下步骤：
输入一包含多媒体编码数据的复用流；
从所述输入步骤中输入的所述复散流中分出视频流；
对所述分离步骤中分离出的所述视频流执行预定的转换处理；
产生附加信息，来指出当该转换后的视频流基于所述多媒体编码数据显示时，匹配错误将会发生；
以及输出所述转换后的视频流，所述多媒体编码数据和所述附加信息。
20.一种记录载体，该载体上记录有由预定转换处理转换过的数据，多媒体编码数据，以及指出在基于所述多媒体编码数据显示所述转换后的视频流时匹配错误发生情况的附加信息。
21.如权利要求20所述的记录载体，其中所述附加信息被编码和记录成与包含所述转换后视频流的所述复用流不同的数据。
22.如权利要求20所述的记录载体，其中所述附加信息被编码和记录成复用在包含所述转换后视频流的所述复用流中的数据。
23.如权利要求20所述的记录载体，其中所述视频流根据其图像帧参数被转换。
24.如权利要求20所述的记录载体，其中所述视频流解码后再被编码。
25.如权利要求20所述的记录载体，其中所述附加信息至少包含与原始图像帧相关信息和原始屏幕纵横比中的一个信息。
26.如权利要求20所述的记录载体，其中所述附加信息包含一个原始视频格式和一个转换后的视频格式。
27.如权利要求20所述的记录载体，其中所述附加信息包括一个原始屏幕纵横比和一个转换后的屏幕的纵横比。
28.如权利要求20所述的记录载体，其中所述附加信息至少包括指出所述视频流的一个图像帧是否已被转换的信息、关于所述视频流中原始图像帧的信息和一个原始屏幕纵横比中的一个信息。
29.一种图像解码装置，该装置包括：
输入装置，用于输入包含多媒体编码数据的复用流；
分离装置，用于从所述输入装置输入的所述复用流中分离出视频流；
解码装置，用于对所述分离装置分离出的所述视频流进行解码；
以及处理装置，用于根据所述指出显示基于所述多媒体解码数据与解码后的视频流时匹配错误出现情况的附加信息，对所述解码后的视频流执行预定转换处理。
30.如权利要求29所述的图像解码装置，其特征在于该装置进一步包括：获取装置，用于从与所述复用流不同的数据中获取所述附加信息。
31.如权利要求29所述的图像解码装置，其特征在于该装置进一步包括：获取装置，用于从复用有所述附加信息的所述复用流中获取所述附加信息。
32.如权利要求29所述的图像解码装置，其特征在于所述处理装置转换所述视频流的图像帧参数。
33.如权利要求29所述的图像解码装置，其特征在于所述处理装置执行的所述转换处理至少包括一个对所述分离装置分离出的所述视频流的解码处理和对该解码后视频流的编码处理。
34.如权利要求29所述的图像解码装置，其特征在于所述附加信息至少包含与原始图像帧相关信息和原始屏幕纵横比中的一个信息。
35.如权利要求29所述的图像解码装置，其特征在于所述附加信息包含一个原始视频格式和一个转换后的视频格式。
36.如权利要求29所述的图像解码装置，其特征在于所述附加信息包括一个原始屏幕纵横比和一个转换后的屏幕的纵横比。
37.如权利要求29所述的图像解码装置，其特征在于所述附加信息至少包括指出所述视频流的一个图像帧是否已被所述转换装置转换的信息、关于所述分离装置分离出的所述视频流中原始图像帧的信息和一个原始屏幕纵横比中的一个信息。
38.一种图像解码方法，该方法包括以下步骤：
输入包含多媒体编码数据的复用流；
从所述输入步骤中输入的所述复用流中分离出视频流；
对所述分离步骤中分离出的所述视频流进行解码；
根据指出显示基于所述多媒体解码数据解码后的所述视频流时匹配错误出现情况的所述附加信息，对解码后的视频流执行预定转换处理。
39.如权利要求38所述的图像解码方法，其特征在于该方法进一步包括以下步骤：从与所述复用流不同的数据中获取所述附加信息。
40.如权利要求38所述的图像解码方法，其特征在于该方法进一步包括以下步骤：从复用有所述附加信息的所述复用流中获取所述附加信息。
41.如权利要求38所述的图像解码方法，其特征在于所述处理步骤中转换所述视频流的图像帧参数。
42.如权利要求38所述的图像解码方法，其特征在于所述处理步骤中执行的转换处理至少包括一个对所述分离步骤中分离出的所述视频流的解码处理和对该解码后视频流的编码处理。
43.如权利要求38所述的图像解码方法，其特征在于所述附加信息至少包含与原始图像帧相关信息和原始屏幕纵横比中的一个信息。
44.如权利要求38所述的图像解码方法，其特征在于所述附加信息包含一个原始视频格式和一个转换后的视频格式。
45.如权利要求38所述的图像解码方法，其特征在于所述附加信息包括一个原始屏幕纵横比和一个转换后的屏幕的纵横比。
46.如权利要求38所述的图像解码方法，其特征在于所述附加信息至少包括指出该视频流的一个图像帧是否已被转换的信息、关于视频流中原始图像帧的信息和原始屏幕纵横比中的一个信息。
47.一种记录载体，该载体上记录有一计算机可读程序，该程序包括以下步骤：输入包含多媒体编码数据的复用流；
从所述输入步骤中输入的所述复用流中分离出视频流；
对所述分离步骤中分离出的所述视频流进行解码；
根据指出显示基于所述多媒体解码数据解码后的所述视频流时匹配错误出现情况的附加信息，对解码后的视频流执行预定转换处理。
48.一种图像编码装置，该装置包括：
输入装置，用于输入复用流；
分离装置，用于从所述输入装置输入的所述复用流中分离出一视频流；
确定装置，用于确定所述输入装置输入的所述复用流中是否包含多媒体编码数据；
产生装置，用于在所述确定装置确定复用流中包含所述多媒体编码数据的情况下产生编码控制信息，该信息用于指出不改变所述分离装置分离出的所述视频流的显示格式；
转换装置，用于在所述产生装置产生的所述编码控制信息的基础上，对所述分离装置分离出的所述视频流执行预定转换处理；
以及复用装置，用于产生包含所述转换装置转换后得到的所述视频流的复用流。
49.如权利要求48所述的图像编码装置，其中所述产生装置指出不改变图像帧、视频格式和纵横比中的任何一个。
50.一种图像编码方法，该方法包括以下步骤：
输入一复用流；
从所述输入步骤输入的所述复用流中分离出一视频流；
确定所述输入步骤中输入的所述复用流中是否包含多媒体编码数据；
如果所述确定步骤确定所述复用流中包含所述多媒体编码数据，产生编码控制信息，该信息用于指出不改变所述分离装置分离出的所述视频流的显示格式；
在所述产生步骤产生的所述编码控制信息的基础上，对所述分离步骤分离出的所述视频流执行预定转换处理；
以及产生一个包含所述转换步骤转换后得到的所述视频流的复用流。
51.如权利要求50所述的图像编码方法，其中所述编码控制信息指出不改变图像帧、视频格式和纵横比中的任何一个。
52.一种记录有计算机可读程序的记录载体，所述程序包括以下步骤：
输入一复用流；
从所述输入步骤输入的所述复用流中分离出一视频流；
确定所述输入步骤中输入的所述复用流中是否包含多媒体编码数据；
如果所述确定步骤中确定所述复用流中包含所述多媒体编码数据，产生编码控制信息，该信息用于指出不改变所述分离装置分离出的所述视频流的显示格式；
在所述产生步骤产生的所述编码控制信息的基础上，对所述分离步骤分离出的所述视频流执行预定转换处理；
以及产生一个包含所述转换步骤转换后得到的所述视频流的复用流。
53.一种记录载体，记录有指出不改变视频流显示格式的编码控制信息，以及包含有进行了基于所述编码控制信息的预定转换处理后得到的视频流的复用流。
CNB011218045A 2000-06-02 2001-06-02 图像编码装置和方法、图像解码装置和方法、记录载体 Expired - Lifetime CN1174607C (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP165298/2000 2000-06-02
JP2000165298 2000-06-02
JP1031/2001 2001-01-09
JP2001001031 2001-01-09

Publications (2)

Publication Number Publication Date
CN1336764A true CN1336764A (zh) 2002-02-20
CN1174607C CN1174607C (zh) 2004-11-03

Family

ID=26593196

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB011218045A Expired - Lifetime CN1174607C (zh) 2000-06-02 2001-06-02 图像编码装置和方法、图像解码装置和方法、记录载体

Country Status (6)

Country Link
US (5) US7224890B2 (zh)
EP (2) EP2262265B1 (zh)
JP (1) JP5516488B2 (zh)
KR (1) KR100827887B1 (zh)
CN (1) CN1174607C (zh)
TW (1) TW519840B (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101087384B (zh) * 2002-12-27 2010-07-28 索尼株式会社 记录方法和装置、再现方法和装置及成像装置
CN102420981A (zh) * 2010-09-27 2012-04-18 瑞萨电子株式会社 转码装置和转码方法
CN103370929A (zh) * 2011-02-15 2013-10-23 索尼公司 显示控制方法、记录介质、和显示控制装置
CN101803387B (zh) * 2007-09-10 2014-03-19 思科技术公司 利用灵活宏块排序对任意数目的源流进行视频合成
CN103765906A (zh) * 2012-06-21 2014-04-30 索尼公司 电子设备、电子设备的流发送和接收方法、程序、主机装置及主机装置的流发送和接收方法
CN101868977B (zh) * 2007-11-15 2014-07-30 汤姆森特许公司 用于对视频进行编码的系统和方法
CN107242882A (zh) * 2017-06-05 2017-10-13 上海瓴舸网络科技有限公司 一种b超显示辅助设备及其控制方法

Families Citing this family (78)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6808709B1 (en) * 1994-12-30 2004-10-26 The Regents Of The University Of California Immunoglobulins containing protection proteins and their use
KR100448452B1 (ko) 2000-06-09 2004-09-13 엘지전자 주식회사 고밀도 광 기록매체의 메뉴 지원방법
DE10055937A1 (de) * 2000-11-10 2002-05-23 Grundig Ag Verfahren und Vorrichtung zur Aufzeichnung
US7577333B2 (en) 2001-08-04 2009-08-18 Samsung Electronics Co., Ltd. Method and apparatus for recording and reproducing video data, and information storage medium in which video data is recorded by the same
KR100888587B1 (ko) * 2001-09-27 2009-03-16 삼성전자주식회사 영상 데이터가 기록된 정보저장매체, 그 기록방법,기록장치, 재생방법 및 재생장치
TW578083B (en) * 2001-10-25 2004-03-01 Samsung Electronics Co Ltd Storage medium adaptable to changes in screen aspect ratio and reproducing method thereof
FR2840424B1 (fr) * 2002-05-30 2004-09-03 Thomson Licensing Sa Procede et dispositif de fragmentation de donnees multimedia
KR20040000290A (ko) 2002-06-24 2004-01-03 엘지전자 주식회사 고밀도 광디스크의 멀티 경로 데이터 스트림 관리방법
CN101350214B (zh) 2002-06-24 2015-07-01 Lg电子株式会社 记录和再现用于视频数据的再现的数据结构的方法及装置
US20040033821A1 (en) * 2002-08-16 2004-02-19 Visteon Global Technologies, Inc. In-vehicle entertainment system
JP4602083B2 (ja) * 2002-09-05 2010-12-22 エルジー エレクトロニクス インコーポレイティド 静止画像の再生を管理するための再生リストマークのデータ構造を有する記録媒体、記録及び再生方法又は装置
EP1535281A4 (en) * 2002-09-06 2009-08-12 Lg Electronics Inc RECORDING MEDIUM HAVING A DATA STRUCTURE FOR MANAGING THE READING OF STILL IMAGES RECORDED ON THE RECORDING MEDIUM, AND METHODS AND DEVICES FOR RECORDING AND READING THEM
CN1578983B (zh) * 2002-09-07 2010-07-21 Lg电子株式会社 具有用于管理从记录在其上面的片段文件的静止图像的再现的数据结构的记录介质以及记录和再现方法及装置
CA2468867C (en) * 2002-10-02 2011-05-03 Lg Electronics Inc. Recording medium having a data structure for managing reproduction of graphic data and recording and reproducing methods and apparatuses
CA2469173C (en) * 2002-10-04 2009-02-03 Lg Electronics Inc. Recording medium having a data structure for managing reproduction of graphic data and recording and reproducing methods and apparatuses
WO2004036578A1 (en) * 2002-10-15 2004-04-29 Lg Electronics Inc. Recording medium having data structure for managing reproduction of multiple graphics streams recorded thereon and recording and reproducing methods and apparatuses
KR100583572B1 (ko) * 2002-11-20 2006-05-26 엘지전자 주식회사 기록된 스틸 이미지의 재생을 관리하기 위한 데이터구조를 갖는 기록 매체, 그에 따른 기록 및 재생 방법 및장치
KR20050089831A (ko) * 2002-12-20 2005-09-08 코닌클리즈케 필립스 일렉트로닉스 엔.브이. 비디오 데이터 재 정렬 장치와, 집적 회로 및 비디오데이터 포맷 변환 방법
JP4275629B2 (ja) * 2003-01-14 2009-06-10 パナソニック株式会社 データ送受信装置、画像処理装置、及び、画像処理方法
WO2004066282A1 (en) * 2003-01-20 2004-08-05 Lg Electronics Inc. Recording medium having data structure for managing reproduction of still pictures recorded thereon and recording and reproducing methods and apparatuses
US8050538B2 (en) * 2003-01-20 2011-11-01 Lg Electronics Inc. Recording medium having data structure for managing reproduction of still pictures recorded thereon and recording and reproducing methods and apparatuses
US8145033B2 (en) * 2003-02-05 2012-03-27 Lg Electronics Inc. Recording medium having data structure for managing reproducton duration of still pictures recorded thereon and recording and reproducing methods and apparatuses
US7734154B2 (en) * 2003-02-14 2010-06-08 Lg Electronics Inc. Recording medium having data structure for managing reproduction duration of still pictures recorded thereon and recording and reproducing methods and apparatuses
US8055117B2 (en) * 2003-02-15 2011-11-08 Lg Electronics Inc. Recording medium having data structure for managing reproduction duration of still pictures recorded thereon and recording and reproducing methods and apparatuses
US8041179B2 (en) * 2003-02-24 2011-10-18 Lg Electronics Inc. Methods and apparatuses for reproducing and recording still picture and audio data and recording medium having data structure for managing reproduction of still picture and audio data
WO2004084535A2 (en) * 2003-03-14 2004-09-30 Starz Encore Group Llc Video aspect ratio manipulation
RU2388073C2 (ru) * 2003-04-29 2010-04-27 Эл Джи Электроникс Инк. Носитель записи со структурой данных для управления воспроизведением графических данных и способы и устройства записи и воспроизведения
US7616865B2 (en) * 2003-04-30 2009-11-10 Lg Electronics Inc. Recording medium having a data structure for managing reproduction of subtitle data and methods and apparatuses of recording and reproducing
JP4068509B2 (ja) * 2003-06-05 2008-03-26 アルパイン株式会社 映像再生装置および方法
KR100617178B1 (ko) * 2003-06-13 2006-08-30 엘지전자 주식회사 텔레비전 시스템의 화면 크기 변환 장치 및 방법
KR20050005074A (ko) * 2003-07-01 2005-01-13 엘지전자 주식회사 고밀도 광디스크의 그래픽 데이터 관리방법 및 그에 따른고밀도 광디스크
KR20050004339A (ko) * 2003-07-02 2005-01-12 엘지전자 주식회사 고밀도 광디스크의 그래픽 데이터 관리방법 및 그에 따른고밀도 광디스크
KR20050064150A (ko) * 2003-12-23 2005-06-29 엘지전자 주식회사 고밀도 광디스크의 메뉴 구성방법 및 실행방법과기록재생장치
US20060075449A1 (en) * 2004-09-24 2006-04-06 Cisco Technology, Inc. Distributed architecture for digital program insertion in video streams delivered over packet networks
WO2006080943A1 (en) * 2005-01-24 2006-08-03 Thomson Licensing Method, apparatus and system for visual inspection of transcoded video
US8677504B2 (en) 2005-07-14 2014-03-18 Qualcomm Incorporated Method and apparatus for encrypting/decrypting multimedia content to allow random access
KR100743247B1 (ko) * 2005-09-23 2007-07-27 엠텍비젼 주식회사 더미 데이터 블록을 이용한 이미지 부가 정보 제공 방법,장치 및 이를 구현하기 위한 프로그램이 기록된 기록매체
US7680047B2 (en) * 2005-11-22 2010-03-16 Cisco Technology, Inc. Maximum transmission unit tuning mechanism for a real-time transport protocol stream
US20070212578A1 (en) * 2006-03-13 2007-09-13 More Energy Ltd. Direct liquid fuel cell comprising a hydride fuel and a gel electrolyte
US8326927B2 (en) * 2006-05-23 2012-12-04 Cisco Technology, Inc. Method and apparatus for inviting non-rich media endpoints to join a conference sidebar session
DE102006027441A1 (de) * 2006-06-12 2007-12-13 Attag Gmbh Verfahren und Vorrichtung zum Erzeugen eines digitalen Transportstroms für ein Video-Programm
KR100754225B1 (ko) * 2006-08-07 2007-09-03 삼성전자주식회사 디지털 방송의 인터랙티브 서비스 저장 및 재생 방법과, 그장치
US8358763B2 (en) * 2006-08-21 2013-01-22 Cisco Technology, Inc. Camping on a conference or telephony port
US8155207B2 (en) 2008-01-09 2012-04-10 Cisco Technology, Inc. Processing and managing pictures at the concatenation of two video streams
US20080115175A1 (en) * 2006-11-13 2008-05-15 Rodriguez Arturo A System and method for signaling characteristics of pictures' interdependencies
US8875199B2 (en) * 2006-11-13 2014-10-28 Cisco Technology, Inc. Indicating picture usefulness for playback optimization
US8873932B2 (en) 2007-12-11 2014-10-28 Cisco Technology, Inc. Inferential processing to ascertain plural levels of picture interdependencies
US8416859B2 (en) * 2006-11-13 2013-04-09 Cisco Technology, Inc. Signalling and extraction in compressed video of pictures belonging to interdependency tiers
US8121277B2 (en) * 2006-12-12 2012-02-21 Cisco Technology, Inc. Catch-up playback in a conferencing system
US8958486B2 (en) * 2007-07-31 2015-02-17 Cisco Technology, Inc. Simultaneous processing of media and redundancy streams for mitigating impairments
US8804845B2 (en) * 2007-07-31 2014-08-12 Cisco Technology, Inc. Non-enhancing media redundancy coding for mitigating transmission impairments
WO2009023120A2 (en) * 2007-08-09 2009-02-19 Inlet Technologies Preserving captioning through video transcoding
US8422411B2 (en) * 2007-10-07 2013-04-16 Motorola Mobility Llc Flexible frame structure in wireless communication system
WO2009052262A2 (en) * 2007-10-16 2009-04-23 Cisco Technology, Inc. Conveyance of concatenation properties and picture orderness in a video stream
US8000562B2 (en) * 2007-12-14 2011-08-16 Xerox Corporation Image downsampling for print job processing
US8045827B2 (en) * 2007-12-14 2011-10-25 Xerox Corporation Image downsampling during processing
US9118465B2 (en) * 2008-02-21 2015-08-25 Google Technology Holdings LLC Method for supporting flexible frame structures in wireless communication systems
US8311101B2 (en) * 2008-02-28 2012-11-13 Lsi Corporation Rate control for real time transcoding of subtitles for application with limited memory
US8416858B2 (en) * 2008-02-29 2013-04-09 Cisco Technology, Inc. Signalling picture encoding schemes and associated picture properties
US8886022B2 (en) 2008-06-12 2014-11-11 Cisco Technology, Inc. Picture interdependencies signals in context of MMCO to assist stream manipulation
US8971402B2 (en) * 2008-06-17 2015-03-03 Cisco Technology, Inc. Processing of impaired and incomplete multi-latticed video streams
US8699578B2 (en) 2008-06-17 2014-04-15 Cisco Technology, Inc. Methods and systems for processing multi-latticed video streams
US8705631B2 (en) * 2008-06-17 2014-04-22 Cisco Technology, Inc. Time-shifted transport of multi-latticed video for resiliency from burst-error effects
EP2297964A4 (en) * 2008-06-25 2017-01-18 Cisco Technology, Inc. Support for blocking trick mode operations
CN101355706B (zh) * 2008-08-15 2010-06-16 中兴通讯股份有限公司 一种适用于复用器的复用码流分析方法及装置
US8320465B2 (en) * 2008-11-12 2012-11-27 Cisco Technology, Inc. Error concealment of plural processed representations of a single video signal received in a video program
GB2469528B (en) * 2009-04-18 2011-10-05 Saffron Digital Ltd Transcoding video data
US8949883B2 (en) 2009-05-12 2015-02-03 Cisco Technology, Inc. Signalling buffer characteristics for splicing operations of video streams
US8279926B2 (en) 2009-06-18 2012-10-02 Cisco Technology, Inc. Dynamic streaming with latticed representations of video
US20110222837A1 (en) * 2010-03-11 2011-09-15 Cisco Technology, Inc. Management of picture referencing in video streams for plural playback modes
US9001886B2 (en) 2010-11-22 2015-04-07 Cisco Technology, Inc. Dynamic time synchronization
US20120176540A1 (en) * 2011-01-10 2012-07-12 Cisco Technology, Inc. System and method for transcoding live closed captions and subtitles
JP2013055587A (ja) * 2011-09-06 2013-03-21 Sony Corp 画像処理装置、画像処理方法、および画像処理システム
US9532080B2 (en) 2012-05-31 2016-12-27 Sonic Ip, Inc. Systems and methods for the reuse of encoding information in encoding alternative streams of video data
CN103873888A (zh) * 2012-12-12 2014-06-18 深圳市快播科技有限公司 一种媒体文件直播方法及直播源服务器
US9357210B2 (en) 2013-02-28 2016-05-31 Sonic Ip, Inc. Systems and methods of encoding multiple video streams for adaptive bitrate streaming
US9253490B2 (en) 2013-05-31 2016-02-02 Qualcomm Technologies International, Ltd. Optimizing video transfer
CN111814000A (zh) * 2020-07-10 2020-10-23 东软集团（上海）有限公司 一种基于模板过滤的异构数据分析方法及系统

Family Cites Families (41)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO1990010993A1 (fr) * 1989-03-16 1990-09-20 Fujitsu Limited Systeme de transmission multiplex video/audio
GB2264417B (en) * 1992-02-17 1995-12-06 Sony Broadcast & Communication Video standards conversion
JP2591437B2 (ja) * 1993-09-13 1997-03-19 日本電気株式会社 高精細動画像信号符号化復号化装置
US5519446A (en) * 1993-11-13 1996-05-21 Goldstar Co., Ltd. Apparatus and method for converting an HDTV signal to a non-HDTV signal
JPH07202820A (ja) 1993-12-28 1995-08-04 Matsushita Electric Ind Co Ltd ビットレート制御システム
US5754235A (en) * 1994-03-25 1998-05-19 Sanyo Electric Co., Ltd. Bit-rate conversion circuit for a compressed motion video bitstream
US6055270A (en) 1994-04-20 2000-04-25 Thomson Cosumer Electronics, Inc. Multiplexer system using constant bit rate encoders
JPH08322046A (ja) * 1995-03-20 1996-12-03 Sony Corp データ符号化／復号化方法および装置、および符号化データ記録媒体
JPH08321828A (ja) * 1995-05-25 1996-12-03 Matsushita Electric Ind Co Ltd 符号化信号伝送装置
JP3608582B2 (ja) * 1995-07-07 2005-01-12 ソニー株式会社 画像符号化装置および方法、画像復号装置および方法
JP3326670B2 (ja) * 1995-08-02 2002-09-24 ソニー株式会社 データ符号化／復号化方法および装置、および符号化データ記録媒体
EP0765082A3 (en) * 1995-09-25 1999-04-07 Sony Corporation Subtitle signal encoding/decoding
US6011598A (en) * 1996-03-28 2000-01-04 Sanyo Electric Co., Ltd. Decoding start controller, decoder, and decoding system
BE1010193A3 (nl) * 1996-04-17 1998-02-03 Philips Electronics Nv Encodeer-inrichting voor het encoderen van een programma en opteken-inrichting.
KR100365554B1 (ko) * 1996-05-09 2003-04-10 마츠시타 덴끼 산교 가부시키가이샤 주영상이화면상에어떻게배치되어도부영상을균형있게주영상상에중합시킬수있는멀티미디어광디스크,재생장치및재생방법
JPH10134548A (ja) * 1996-10-31 1998-05-22 Sony Corp 記録媒体再生装置および方法
JP3742167B2 (ja) * 1996-12-18 2006-02-01 株式会社東芝 画像表示制御装置
US6900845B1 (en) * 1996-12-18 2005-05-31 Thomson Licensing S.A. Memory architecture for a multiple format video signal processor
US6473903B2 (en) * 1996-12-30 2002-10-29 Koninklijke Philips Electronics N.V. Method and system for implementing interactive broadcast programs and commercials
US6788347B1 (en) * 1997-03-12 2004-09-07 Matsushita Electric Industrial Co., Ltd. HDTV downconversion system
US6115420A (en) * 1997-03-14 2000-09-05 Microsoft Corporation Digital video signal encoder and encoding method
KR100246762B1 (ko) * 1997-07-19 2000-03-15 윤종용 비디오데이터 디코딩방법
US6549577B2 (en) * 1997-09-26 2003-04-15 Sarnoff Corporation Computational resource allocation in an information stream decoder
JP3544105B2 (ja) 1997-09-26 2004-07-21 富士ゼロックス株式会社 受信情報記録装置および受信情報記録方法
US5970072A (en) * 1997-10-02 1999-10-19 Alcatel Usa Sourcing, L.P. System and apparatus for telecommunications bus control
CA2308147C (en) * 1997-11-04 2009-04-14 Collaboration Properties, Inc. Scalable networked multimedia system and applications
JPH11196414A (ja) 1997-11-06 1999-07-21 Thomson Broadcast Syst コード化されたビデオデータを処理する装置及びその装置を使用したプログラムを配布するシステム
JPH11285002A (ja) 1998-02-02 1999-10-15 Sony Corp 動画像符号化装置及び動画像符号化方法
JP3724205B2 (ja) 1998-03-10 2005-12-07 ソニー株式会社 復号装置および方法、並びに記録媒体
JP2000102007A (ja) * 1998-09-28 2000-04-07 Matsushita Electric Ind Co Ltd マルチメディア情報合成装置、及び圧縮映像信号生成装置
US6483851B1 (en) * 1998-11-13 2002-11-19 Tektronix, Inc. System for network transcoding of multimedia data flow
US6310915B1 (en) * 1998-11-20 2001-10-30 Harmonic Inc. Video transcoder with bitstream look ahead for rate control and statistical multiplexing
US7010032B1 (en) * 1999-03-12 2006-03-07 Kabushiki Kaisha Toshiba Moving image coding apparatus and decoding apparatus
JP4723145B2 (ja) * 1999-11-04 2011-07-13 トムソン ライセンシング テレビ番組配信システムにおけるテレビジョン受信器のためのシステムおよびユーザ・インターフェース
US7020195B1 (en) * 1999-12-10 2006-03-28 Microsoft Corporation Layered coding and decoding of image data
KR100351817B1 (ko) * 2000-01-13 2002-09-11 엘지전자 주식회사 오픈케이블 수신 시스템 및 시스템 진단 방법
US6490320B1 (en) * 2000-02-02 2002-12-03 Mitsubishi Electric Research Laboratories Inc. Adaptable bitstream video delivery system
JP4240785B2 (ja) * 2000-08-31 2009-03-18 キヤノン株式会社 受信装置、及び受信装置の制御方法
US20030001981A1 (en) * 2001-05-21 2003-01-02 Sony Corporation Modular digital television architecture
EP1655966A3 (en) * 2004-10-26 2011-04-27 Samsung Electronics Co., Ltd. Apparatus and method for processing an image signal in a digital broadcast receiver
US7872668B2 (en) * 2005-08-26 2011-01-18 Nvidia Corporation Video image processing with programmable scripting and remote diagnosis

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101087384B (zh) * 2002-12-27 2010-07-28 索尼株式会社 记录方法和装置、再现方法和装置及成像装置
CN101803387B (zh) * 2007-09-10 2014-03-19 思科技术公司 利用灵活宏块排序对任意数目的源流进行视频合成
CN101868977B (zh) * 2007-11-15 2014-07-30 汤姆森特许公司 用于对视频进行编码的系统和方法
CN102420981A (zh) * 2010-09-27 2012-04-18 瑞萨电子株式会社 转码装置和转码方法
CN102420981B (zh) * 2010-09-27 2014-07-23 瑞萨电子株式会社 转码装置和转码方法
CN103370929A (zh) * 2011-02-15 2013-10-23 索尼公司 显示控制方法、记录介质、和显示控制装置
CN103370929B (zh) * 2011-02-15 2017-03-22 索尼公司 显示控制方法和显示控制装置
CN103765906A (zh) * 2012-06-21 2014-04-30 索尼公司 电子设备、电子设备的流发送和接收方法、程序、主机装置及主机装置的流发送和接收方法
CN103765906B (zh) * 2012-06-21 2018-07-06 索尼公司 电子设备、电子设备的流发送和接收方法、主机装置及主机装置的流发送和接收方法
CN107242882A (zh) * 2017-06-05 2017-10-13 上海瓴舸网络科技有限公司 一种b超显示辅助设备及其控制方法

Also Published As

Publication number Publication date
US8625958B2 (en) 2014-01-07
KR20010110147A (ko) 2001-12-12
US20020006165A1 (en) 2002-01-17
EP1182880A3 (en) 2004-06-23
KR100827887B1 (ko) 2008-05-07
CN1174607C (zh) 2004-11-03
EP2262265A3 (en) 2012-05-02
US20070147789A1 (en) 2007-06-28
US20070206932A1 (en) 2007-09-06
EP1182880B1 (en) 2014-01-29
EP2262265B1 (en) 2014-02-12
US8625959B2 (en) 2014-01-07
TW519840B (en) 2003-02-01
US20070206930A1 (en) 2007-09-06
US7224890B2 (en) 2007-05-29
US20070053665A1 (en) 2007-03-08
EP2262265A2 (en) 2010-12-15
JP5516488B2 (ja) 2014-06-11
US8644672B2 (en) 2014-02-04
JP2011166813A (ja) 2011-08-25
EP1182880A2 (en) 2002-02-27

Similar Documents

Publication Publication Date Title
CN1336764A (zh) 图像编码装置和方法、图像解码装置和方法、记录载体
CN1178509C (zh) 图像编码器、图像解码器、和图像处理器及其方法
CN1145952C (zh) 用于解码具有标头信息和页数据的信息页的装置和方法
CN1294751C (zh) 传输流记录和再现装置和方法
CN1182715C (zh) 信号传输系统、信号发送装置和信号接收装置
CN1299502C (zh) 解码设备和解码方法
CN1152569C (zh) 产生多路数据、再生编码数据及时钟转换的装置和方法
CN1778111A (zh) 再现装置和程序
CN1206533A (zh) 能有选择地使用复接在传输流中的浏览信息的电视接收装置和记录该电视接收装置的方法的记录媒体
CN1315322C (zh) 记录再生系统
CN1299504C (zh) 数据流发送装置及其方法以及分发系统
CN1225545A (zh) 移动图像合成系统
CN1211140A (zh) 智能数字电视接收机
CN1701601A (zh) Osd合成图像译码装置和译码方法以及程序和记录媒体
CN1311958A (zh) 数字视频记录器用的特技播放信号的产生
CN1879157A (zh) 包含字幕的信息存储介质及其处理设备
CN1210650A (zh) 图像信号传送、编码和解码方法和装置以及光盘记录和再现方法
CN100348044C (zh) 不同帧速率多流混合视频流的无缝译码装置
CN1393104A (zh) 信号发送装置和信号接收装置
CN1127856C (zh) 活动图像合成装置
CN1151559A (zh) 信息提供装置
CN1295411A (zh) 活动图象解码方法、活动图象解码装置及程序记录媒体
CN1255988C (zh) 多通道图象处理装置及其方法
CN1269363C (zh) 数字广播系统、同步信息替换装置和方法
CN1269352C (zh) 解码装置和解码方法

Legal Events

Date Code Title Description
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C06 Publication
PB01 Publication
C14 Grant of patent or utility model
GR01 Patent grant
EE01 Entry into force of recordation of patent licensing contract

Application publication date: 20020220

Assignee: China Hualu Group Ltd.

Assignor: Blue light United Co., Ltd.

Contract record no.: 2014990000238

Denomination of invention: Device and method for image coding, device for decoding image

Granted publication date: 20041103

License type: Common License

Record date: 20140423

Application publication date: 20020220

Assignee: Guangdong OPPO Mobile Communications Co., Ltd.

Assignor: Blue light United Co., Ltd.

Contract record no.: 2014990000237

Denomination of invention: Device and method for image coding, device for decoding image

Granted publication date: 20041103

License type: Common License

Record date: 20140423

Application publication date: 20020220

Assignee: TCL Kone Electronics (Huizhou) Ltd.

Assignor: Blue light United Co., Ltd.

Contract record no.: 2014990000240

Denomination of invention: Device and method for image coding, device for decoding image

Granted publication date: 20041103

License type: Common License

Record date: 20140423

Application publication date: 20020220

Assignee: Shenzhen Maxmade Technology Co.,Ltd.

Assignor: Blue light United Co., Ltd.

Contract record no.: 2014990000239

Denomination of invention: Device and method for image coding, device for decoding image

Granted publication date: 20041103

License type: Common License

Record date: 20140423

Application publication date: 20020220

Assignee: Guangzhou Panyu Juda Car Audio Equipment Co., Ltd.

Assignor: Blue light United Co., Ltd.

Contract record no.: 2014990000233

Denomination of invention: Device and method for image coding, device for decoding image

Granted publication date: 20041103

License type: Common License

Record date: 20140422

LICC Enforcement, change and cancellation of record of contracts on the licence for exploitation of a patent or utility model
EE01 Entry into force of recordation of patent licensing contract

Application publication date: 20020220

Assignee: Dongguan de video technology Co. Ltd. Kit

Assignor: Blue light United Co., Ltd.

Contract record no.: 2016990000233

Denomination of invention: Device and method for image coding, device for decoding image

Granted publication date: 20041103

License type: Common License

Record date: 20160614

LICC Enforcement, change and cancellation of record of contracts on the licence for exploitation of a patent or utility model
CX01 Expiry of patent term

Granted publication date: 20041103

CX01 Expiry of patent term