[go: up one dir, main page]

KR101692651B1 - 미디어 전송 및 저장을 위해 무작위 접속 정보의 캡슐화를 위한 방법 및 장치 - Google Patents

미디어 전송 및 저장을 위해 무작위 접속 정보의 캡슐화를 위한 방법 및 장치 Download PDF

Info

Publication number
KR101692651B1
KR101692651B1 KR1020157009391A KR20157009391A KR101692651B1 KR 101692651 B1 KR101692651 B1 KR 101692651B1 KR 1020157009391 A KR1020157009391 A KR 1020157009391A KR 20157009391 A KR20157009391 A KR 20157009391A KR 101692651 B1 KR101692651 B1 KR 101692651B1
Authority
KR
South Korea
Prior art keywords
random access
video data
access information
rap
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
KR1020157009391A
Other languages
English (en)
Other versions
KR20150077408A (ko
Inventor
밍 리
제럴드 페르난도
핑 우
Original Assignee
지티이 코포레이션
제트티이 (유에스에이) 잉크.
지티이 (유케이) 리미티드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 지티이 코포레이션, 제트티이 (유에스에이) 잉크., 지티이 (유케이) 리미티드 filed Critical 지티이 코포레이션
Publication of KR20150077408A publication Critical patent/KR20150077408A/ko
Application granted granted Critical
Publication of KR101692651B1 publication Critical patent/KR101692651B1/ko
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H04N19/463—Embedding additional information in the video signal during the compression process by compressing encoding parameters before transmission
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/46—Interconnection of networks
    • H04L12/4633—Interconnection of networks using encapsulation techniques, e.g. tunneling
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/174—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/188—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a video data packet, e.g. a network abstraction layer [NAL] unit
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235—Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845—Structuring of content, e.g. decomposing content into time segments
    • H04N21/8451—Structuring of content, e.g. decomposing content into time segments using Advanced Video Coding [AVC]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845—Structuring of content, e.g. decomposing content into time segments
    • H04N21/8455—Structuring of content, e.g. decomposing content into time segments involving pointers to the content, e.g. pointers to the I-frames of the video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
    • H04N9/8042—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

미디어 전송 및 저장을 위해 비디오 데이터에 무작위 접속 정보를 첨부하는 방법과 장치를 제공하며, 이에 따라, 비디오 스트림 상에서 효과적인 스트림 조작을 진행할 수 있다. 해당 정보는 디스크립터의 형식 또는 데이터 구조의 형식으로 미디어 전송 또는 저장 포맷 헤더에 첨부된다.

Description

미디어 전송 및 저장을 위해 무작위 접속 정보의 캡슐화를 위한 방법 및 장치{METHOD AND APPARATUS FOR ENCAPSULATION OF RANDOM ACCESS INFORMATION FOR MEDIA TRANSPORT AND STORAGE}
본 발명은 비디오 코딩에 관한 것으로서, 특히 미디어 전송 및 저장을 위해 비디오 데이터의 무작위 접속 정보의 캡슐화에 관한 것이다.
현재 비디오 응용은 빠른 발전을 하고 있고, 또한 더욱 높은 해상도, 더욱 높은 비트율 및 더욱 높은 압축율의 발전 경향으로 인하여, 현재 주류의 비디오 압축 표준인 H.264/MPEG-4 향상된 비디오 코딩의 제한성이 날로 두드러지고 있다.
이러한 상황으로 인하여, ITU-T 비디오 코딩 전문가 그룹(VCEG)과 ISO/IEC 동화상 전문가 그룹(MPEG)은 비디오 코딩 연합 그룹(JCT-VC)이라 불리는 팀에서 작업하면서 공동으로 차세대 비디오 압축 표준, 즉 고효율 비디오 코딩(HEVC) 표준을 개발하였다.
HEVC의 설계는 최신의 종래 기술 및 알고리즘을 이용하여 비디오 컨텐츠, 비디오가 광대역 네트워크로 진입하는 더욱 넓은 응용, 이동 설비의 다양화, 카메라와 디스플레이의 날로 높아지는 해상도 및 날로 증가하는 높은 비디오 품질에 대한 지속적인 요구를 만족시킨다. JCT-VC 프로젝트의 주요한 목표는 AVC가 요구하는 비트율에 비하여 실제상에서 절약되는(예를 들면, 절반 감소) 비트율을 이용하여 동일한 수준의 비디오 품질을 달성하는 것이다. 이 단계에서, HEVC의 능력의 초기 측정에 의하면 이의 성능은 이미 해당 임무가 설정한 목표에 이미 도달하거나 이를 초과하였다.
현재까지, HEVC 텍스트 표준 초안 7이 발표되었다. 하지만 HEVC 표준은 여전히 수정 및 보완되고 있다. HEVE 표준의 첫 번째 버전은 2013년 1월에 완성될 것으로 예상되며, 그 때가 되면 조절 텍스트는 ITU-T와 ISO/IEC에서 공포하게 된다.
현재, 비디오 스트림 상에서 더욱 효과적인 조작을 허용할 수 있는 기술이 필요하다.
본 발명의 목적은 비디오 스트림 상에서 더욱 효과적인 조작을 할 수 있는 비디오 데이터를 처리하는 방법, 장치, 및 시스템을 제공하기 위한 것이다.
상기 목적을 이루기 위하여, 본 발명은 비디오 데이터를 처리하는 방법하며, 상기 방법은,
비디오 데이터에 대하여 무작위 접속 정보를 첨부하는 단계를 포함하고,
상기 무작위 접속 정보는 무작위 접속 포인트(RAP) 정보 및 스트림 접속 포인트(SAP) 정보를 포함한다.
바람직하게는, 상기 방법은 첨부 이후에, 비디오 데이터를 저장하거나 또는 네트워크를 통해 비디오 데이터를 전송하는 단계를 더 포함한다.
바람직하게는, RAP 정보는 하나 이상의 RAP 유형을 포함하되, 상기 하나 이상의 RAP 유형은,
RAP 유형1: 클린 무작위 접속(clean random access)(CRA) 화상;
RAP 유형2: 브로큰 링크 접속(broken link access)(BLA) 화상;
RAP 유형3: 관련된 폐기 표기(TFD) 화상이 없는 BLA 화상;
RAP 유형4: 리딩 화상이 없는 BLA 화상;
RAP 유형5: 리딩 화상이 없는 즉시 디코딩 리프레시(IDR) 화상;
RAP 유형6: 리딩 화상을 가질 수 있는 IDR 화상이 될 수 있다.
바람직하게는, SAP 정보는 하나 이상의 SAP 유형을 포함하되, 상기 하나 이상의 SAP 유형은,
SAP 유형1: 해당 포인트로부터 모든 화상을 디코딩할 수 있고, 또한 첫 번째 디코딩된 화상은 비교적 늦게 디코딩된 화상보다 더욱 낮은 프레젠테이션 타임 스탬프(PTS)를 가지며;
SAP 유형2: 해당 포인트로부터 모든 화상을 디코딩할 수 있고, 또한 비교적 늦게 디코딩된 화상이 첫 번째 디코딩된 화상보다 더욱 낮은 PTS를 가지며;
SAP 유형3: 해당 포인트로부터 모든 화상을 디코딩할 수 없으나, 첫 번째 화상은 디코딩될 수 있고, 또한 디코딩될 수 없는 화상이 첫 번째 디코딩된 화상보다 더욱 낮은 PTS를 가진다.
바람직하게는, 무작위 접속 정보는 하나 이상의 플래그로 지시된다.
바람직하게는, 무작위 접속 정보는 물리적으로 비디오 데이터에 첨부된다.
바람직하게는, 무작위 접속 정보는 가상으로 비디오 데이터에 첨부된다.
바람직하게는, 비디오 데이터에 대하여 무작위 접속 정보를 첨부하는 단계는,
무작위 접속 정보를 분리 파일 또는 데이터 구조에 포함시키는 단계,
무작위 접속 정보를 비디오 데이터로 관련시키는 단계를 포함한다.
바람직하게는, 무작위 접속 정보는 하나 이상의 포인터에 의해 비디오 데이터에 관련된다.
바람직하게는, 비디오 데이터에 대하여 무작위 접속 정보를 첨부하는 단계는,
비디오 데이터가 저장되어야 하는 경우, 무작위 접속 정보를 데이터 구조에 포함시키는 단계, 또는
비디오 데이터가 네트워크를 통해 전송되어야 하는 경우, 무작위 접속 정보를 데이터 헤더 또는 디스크립터에 포함시키는 단계를 포함한다.
바람직하게는, 비디오 데이터는 압축된 비디오 스트림이다.
상기 목적을 이루기 위하여, 본 발명은 비디오 데이터를 처리하는 장치를 제공하며, 상기 장치는,
비디오 데이터에 대하여 무작위 접속 정보를 첨부되도록 구성된 첨부 모듈을 포함하고,
무작위 접속 정보는 무작위 접속 포인트(RAP) 정보 및 스트림 접속 포인트(SAP) 정보를 포함한다.
바람직하게는, 장치는 첨부 이후에 비디오 데이터를 저장하거나 또는 네트워크를 통해 비디오 데이터를 전송하도록 구성된 저장 모듈을 포함한다.
바람직하게는, 첨부 모듈은 무작위 접속 정보를 표시하기 위해 하나 이상의 플래그를 사용하도록 더 구성된다.
바람직하게는, 첨부 모듈은 무작위 접속 정보를 물리적으로 비디오 데이터에 첨부시키도록 구성된다.
바람직하게는, 첨부 모듈은 비디오 데이터에 대하여 가상으로 무작위 접속 정보를 첨부시키도록 구성된다.
바람직하게는, 첨부 모듈은 무작위 접속 정보무작위 접속 정보를 분리 파일 또는 데이터 구조에 포함시키고,
무작위 접속 정보를 비디오 데이터로 관련시킴으로써,
무작위 접속 정보를 첨부하도록 구성된다.
바람직하게는, 첨부 모듈은 무작위 접속 정보를 비디오 데이터에 관련시키기 위하여 하나 이상의 포인터를 사용하도록 구성된다.
바람직하게는, 첨부 모듈은, 무작위 접속 정보비디오 데이터가 저장되어야 하는 경우, 무작위 접속 정보를 데이터 구조에 포함시키거나, 비디오 데이터가 네트워크를 통해 전송되어야 하는 경우, 무작위 접속 정보를 데이터 헤더 또는 디스크립터에 포함시킴으로써,
무작위 접속 정보를 첨부하도록 구성된다.
상기 목적을 이루기 위하여, 본 발명은 또한 비디오 데이터를 처리하는 시스템을 제공하며, 상기 시스템은,
비디오 데이터를 생성하는 장치; 및
상기 정의된 장치를 포함한다.
본 발명에서 제공하는 미디어 전송 및 저장을 위해 비디오 데이터를 처리하는 방법, 장치, 및 시스템은 비디오 스트림 상에서 효과적인 스트림 조작을 할 수 있는 바, 예를 들면 특히 디스플레이 기능을 실행하는 등이다.
도1은 본 발명의 실시예에 의한 방법의 흐름도.
도2는 본 발명의 다른 실시예에 의한 비디오 데이터를 처리하는 장치의 구조를 도시한 도면.
도3은 본 발명의 또 다른 실시예에 의한 시스템을 도시한 도면.
비디오 스트림의 무작위 접속은 스트림이 시작된 점과 다른 지점에서부터 비디오 스트림의 디코딩 과정을 시작하는 행위를 말한다. 비디오 스트림의 무작위 접속 속성 정보는 비디오 스트림 상에서 조작을 진행하는 것이 가능하도록 한다. 이러한 조작은 트릭플레이 기능을 포함한다.
도1은 본 발명의 실시예에 의한 비디오 데이터의 무작위 접속 정보를 첨부하는 방법의 흐름도이다. 해당 방법은 하기 단계를 포함한다.
10 단계: 비디오 데이터, 예를 들면 비디오 스트림을 생성한다. 해당 비디오 스트림은 바람직하게는 압축된 것이다.
20 단계: 생성된 비디오 데이터에 대하여 무작위 접속 정보를 첨부한다.
30 단계: 해당 비디오 데이터를 저장하거나 또는 네트워크를 통해 해당 비디오 데이터를 전송한다.
압축된 비디오 스트림의 무작위 접속 정보는 두 가지 유형으로 구분되는 바, 즉 무작위 접속 포인트(RAP) 정보 및 스트림 접속 포인트(SAP) 정보이다. SAP 정보와 RAP 정보를 구분하는 것은 가능하다. ISO/MPEG의 HEVC 비디오 압축 표준 중에는 몇 개의 SAP 유형과 RAP 유형이 존재한다. 본 발명의 실시예에서는 독립적으로 SAP 유형과 RAP 유형을 식별하는 방법을 제공한다. 예시 중에 있어서, SAP 유형과 RAP 유형은 플래그로 지시될 수 있다.
하기에는, HEVC 비디오 압축 데이터 신호를 요구하는 SAP 유형과 RAP 유형의 많은 세부 사항이다.
RAP 유형1: CRA 화상;
RAP 유형2: BLA 화상;
RAP 유형3: TFD 화상이 없는 BLA 화상;
RAP 유형4: 리딩 화상이 없는 BLA 화상;
RAP 유형5: 리딩 화상이 없는 IDR 화상;
RAP 유형6: IDR 화상(리딩 화상을 가질 수 있음).
SAP 유형1:
· 해당 포인트로부터 모든 화상을 디코딩할 수 있음
· 첫 번째로 디코딩된 화상이 그 후에 디코딩된 화상보다 더욱 낮은 PTS를 가짐
SAP 유형2:
· 해당 포인트로부터 모든 화상을 디코딩할 수 있음
· 뒤에 디코딩된 화상이 첫 번째 디코딩된 화상보다 더욱 낮은 PTS를 가짐
SAP 유형3:
· 해당 포인트로부터 모든 화상을 디코딩할 수 없음
· 첫 번째 화상은 디코딩될 수 있음
· 디코딩될 수 없는 화상이 첫 번째 디코딩된 화상보다 더욱 낮은 PTS를 가짐
하기 약어는 상기 리스트에 사용된다.
(1) RAP: 무작위 접속 포인트;
(2) SAP: 스트림 접속 포인트;
(3) CRA: 클린 무작위 접속(clean random access)(CRA) 화상: 일종 RAP 화상으로서, 각 슬라이스(slice)는 CRA_NUT와 같은 네트워크 추상층 유닛 타입(nal_unit_type)을 가지며;
(4) PTS: 프레젠테이션 타임 스탬프:
(5) BLA: 브로큰 링크 접속(BLA) 화상(BLA 접속 유닛: 하나의 접속 유닛, 해당 접속 유닛 중에서 코딩된 화상이 BLA 화상);
(6) IDR: 즉시 디코딩 리프레시(IDR) 화상: 일종 RAP 화상으로서, 해당 RAP 화상에 있어서, 각 슬라이스는 DR_W_LP 또는 IDR_N_LP와 같은 네트워크 추상층 유닛 유형을 가지며;
(7) TFD: 폐기로 표시됨.
압축된 비디오 데이터는 통상적으로 네트워크를 통해 전송되거나 저장된다. 두 가지 상황에 있어서, 관련 비디오의 유효 부하의 무작위 접속 속성 정보는 효과적인 스트림 계층 처리에 도움이 된다. 해당 정보는 물리적으로 압축된 비디오 데이터에 첨부될 수 있다. 대체 가능한 것은, 이러한 정보는 가상적으로 첨부될 수 있다. 미디어 전송 및 저장의 콘텍스트 중에 있어서, 가상 첨부의 한 예시로는, 무작위 접속 정보가 분리 파일 또는 데이터 구조 에서 이용 가능하고, 무작위 접속 정보를 비디오 스트림에 관련시키기 위해 포인터 또는 유사한 매커니즘이 존재한다.
미디어 전송 포맷 또는 미디어 저장 포맷으로 무작위 접속 정보를 압축된 비디오 데이터에 첨부하는 것은 캡슐화라 한다. 본 발명의 실시예에 의하면, 무작위 접속 정보의 첨부는 미디어 전송을 위한 데이터 헤더 또는 디스크립터의 형식일 수 있고, 미디어 저장을 위한 데이터 구조의 형식일 수 있다.
본 발명은 또한 상기 무작위 접속 정보의 첨부 조작을 실행하는 장치를 제공한다. 도2에 도시된 실시예에 의하면, 비디오 데이터의 무작위 접속 정보를 첨부하는 장치는 생성된 비디오 데이터에 무작위 접속 정보를 첨부하도록 구성된 첨부 모듈을 포함한다. 생성된 비디오 데이터는 압축된 비디오 스트림일 수 있다. 상기 장치는 저장 모듈을 더 포함하고, 무작위 접속 정보의 첨부 이후에, 비디오 데이터는 저장 모듈에 의해 저장되거나 또는 네트워크를 통해 전송된다.
또한, 첨부 모듈은 무작위 접속 정보를 나타내도록 하나 이상의 플래그를 사용하도록 더 구성될 수 있다. 첨부 모듈은 무작위 접속 정보를 물리적으로 생성된 비디오 데이터에 첨부하거나, 또는 가상적으로 해당 정보를 첨부하도록 구성될 수 있다. 미디어 전송 및 저장의 콘텍스트 중에 있어서, 하나의 가상 첨부의 한 예시로는, 해당 무작위 접속 정보를 분리 파일 또는 데이터 구조에 포함시키고, 무작위 접속 정보를 비디오 데이터에 관련시키기 위해 포인터 또는 유사한 매커니즘을 이용하는 것이다. 첨부 모듈은 데이터 헤더 또는 디스크립터의 형식으로 미디어 전송 목적의 무작위 접속 정보를 첨부하고, 또한 데이터 구조 형식으로 미디어 저장 목적의 무작위 접속 정보를 첨부하도록 구성될 수 있다.
도3에 도시된 실시예에 의하면, 본 발명은 또한 비디오 데이터를 처리하는 시스템을 제공하며, 해당 시스템은 비디오 데이터를 생성하는 장치, 및 상기 정의된 비디오 데이터를 처리하는 장치를 포함한다.
당업계의 기술자들은 본 발명 중의 방법과 장치가 하드웨어, 소프트웨어 또는 펌웨어에 의하여 구현될 수 있음을 이해할 수 있을 것이다. 예를 들면, 이들은 범용 컴퓨팅 장치 또는 컴퓨팅 장치의 실행 프로그램에 의하여 구현될 수 있기 때문에, 저장 매체 또는 직접 회로 중에 저장될 수 있다.
상기 내용은 단지 본 발명의 바람직한 실시예이고, 또한 본 발명을 제한하는 것이 아니다. 당업계의 기술자는 본 발명을 여러 가지 수정 및 변형할 수 있다. 본 발명의 본질과 원칙에 위배되지 않는 한, 모든 수정, 등가 교체, 개선 등은 모두 본 발명의 보호 범위에 속한다 할 것이다.
본 발명에서 제공하는 미디어 전송 및 저장을 위해 비디오 데이터의 무작위 접속 정보를 첨부하는 방법 및 장치는 비디오 스트림 상에서 효과적인 스트림 조작을 할 수 있는 바, 예를 들면 트릭 플레이 기능을 실행하는 등이다. 본 발명은 비디오 코딩 분야에 이용될 수 있다.

Claims (20)

  1. 비디오 데이터를 처리하는 방법에 있어서,
    비디오 데이터에 대하여 미디어 전송 포맷 또는 미디어 저장 포맷으로 무작위 접속 정보를 첨부하는 단계를 포함하고,
    상기 무작위 접속 정보는 무작위 접속 포인트(RAP) 정보와 스트림 접속 포인트(SAP) 정보를 포함하고,
    상기 무작위 접속 정보는 하나 이상의 플래그로 지시되며,
    상기 비디오 데이터에 대하여 미디어 전송 포맷 또는 미디어 저장 포맷으로 상기 무작위 접속 정보를 첨부하는 단계는,
    상기 비디오 데이터가 저장되어야 하는 경우, 상기 무작위 접속 정보를 미디어 저장 포맷의 데이터 구조에 포함시키는 단계, 또는
    상기 비디오 데이터가 네트워크를 통해 전송되어야 하는 경우, 상기 무작위 접속 정보를 미디어 전송 포맷의 데이터 헤더 또는 디스크립터에 포함시키는 단계를 포함하는 것을 특징으로 하는, 비디오 데이터를 처리하는 방법.
  2. 제1항에 있어서, 상기 첨부 이후에, 상기 비디오 데이터를 저장하거나 또는 네트워크를 통해 상기 비디오 데이터를 전송하는 단계를 더 포함하는 것을 특징으로 하는, 비디오 데이터를 처리하는 방법.
  3. 제1항에 있어서, 상기 RAP 정보는,
    RAP 유형1: 클린 무작위 접속(clean random access)(CRA) 화상;
    RAP 유형2: 브로큰 링크 접속(BLA) 화상;
    RAP 유형3: 관련된 폐기 표기(TFD) 화상이 없는 BLA 화상;
    RAP 유형4: 리딩 화상이 없는 BLA 화상;
    RAP 유형5: 리딩 화상이 없는 즉시 디코딩 리프레시 (IDR) 화상;
    RAP 유형6: 리딩 화상을 가질 수 있는 IDR 화상
    인 RAP 유형 중의 하나 이상을 포함하는 것을 특징으로 하는, 비디오 데이터를 처리하는 방법.
  4. 제1항에 있어서, 상기 SAP 정보는,
    SAP 유형1: 해당 포인트로부터 모든 화상을 디코딩할 수 있고, 또한 첫 번째 디코딩된 화상은 비교적 늦게 디코딩된 화상보다 더욱 낮은 프레젠테이션 타임 스탬프(PTS)를 가지며;
    SAP 유형2: 해당 포인트로부터 모든 화상을 디코딩할 수 있고, 또한 비교적 늦게 디코딩된 화상이 첫 번째 디코딩된 화상보다 더욱 낮은 PTS를 가지며;
    SAP 유형3: 해당 포인트로부터 모든 화상을 디코딩할 수 없으나, 첫 번째 화상은 디코딩될 수 있고, 또한 디코딩될 수 없는 화상이 첫 번째 디코딩된 화상보다 더욱 낮은 PTS를 가지는
    SAP 유형 중의 하나 이상을 포함하는 것을 특징으로 하는, 비디오 데이터를 처리하는 방법.
  5. 제1항에 있어서, 상기 무작위 접속 정보는 미디어 전송 포맷 또는 미디어 저장 포맷으로 상기 비디오 데이터에 첨부되고,
    상기 비디오 데이터에 대하여 상기 무작위 접속 정보를 첨부하는 단계는,
    상기 무작위 접속 정보를 미디어 저장 포맷의 데이터 구조 또는 분리 파일에 포함시키는 단계, 및
    상기 무작위 접속 정보를 상기 비디오 데이터로 관련시키는 단계를 포함하는 것을 특징으로 하는, 비디오 데이터를 처리하는 방법.
  6. 제5항에 있어서, 상기 무작위 접속 정보는 하나 이상의 포인터에 의해 상기 비디오 데이터에 관련되는 것을 특징으로 하는, 비디오 데이터를 처리하는 방법.
  7. 제1항에 있어서, 상기 비디오 데이터는 압축된 비디오 스트림인 것을 특징으로 하는, 비디오 데이터를 처리하는 방법.
  8. 비디오 데이터를 처리하는 장치에 있어서,
    비디오 데이터에 대하여 미디어 전송 포맷 또는 미디어 저장 포맷으로 무작위 접속 정보를 첨부하도록 구성된 첨부 모듈을 포함하고,
    상기 무작위 접속 정보는 무작위 접속 포인트(RAP) 정보 및 스트림 접속 포인트(SAP) 정보를 포함하고,
    상기 첨부 모듈은 상기 무작위 접속 정보를 표시하기 위해 하나 이상의 플래그를 사용하도록 더 구성되며,
    상기 첨부 모듈은, 상기 비디오 데이터가 저장되어야 하는 경우, 상기 무작위 접속 정보를 미디어 저장 포맷의 데이터 구조에 포함시키거나, 상기 비디오 데이터가 네트워크를 통해 전송되어야 하는 경우, 상기 무작위 접속 정보를 미디어 전송 포맷의 데이터 헤더 또는 디스크립터에 포함시킴으로써, 상기 무작위 접속 정보를 첨부하도록 구성되는 것을 특징으로 하는, 비디오 데이터를 처리하는 장치.
  9. 제8항에 있어서, 상기 첨부 이후에, 상기 비디오 데이터를 저장하거나 또는 네트워크를 통해 상기 비디오 데이터를 전송하도록 구성되는 저장 모듈을 더 포함하는 것을 특징으로 하는, 비디오 데이터를 처리하는 장치.
  10. 제8항에 있어서, 상기 첨부 모듈은 상기 비디오 데이터에 대하여 미디어 전송 포맷 또는 미디어 저장 포맷으로 상기 무작위 접속 정보를 첨부시키도록 구성되고,
    상기 첨부 모듈은, 상기 무작위 접속 정보를 미디어 저장 포맷의 데이터 구조 또는 분리 파일에 포함시키고, 및
    상기 무작위 접속 정보를 상기 비디오 데이터로 관련시킴으로써,
    상기 무작위 접속 정보를 첨부하도록 구성되는 것을 특징으로 하는, 비디오 데이터를 처리하는 장치.
  11. 제10항에 있어서, 상기 첨부 모듈은 상기 무작위 접속 정보를 상기 비디오 데이터에 관련시키기 위하여 하나 이상의 포인터를 사용하도록 구성되는 것을 특징으로 하는, 비디오 데이터를 처리하는 장치.
  12. 비디오 데이터를 처리하는 시스템에 있어서,
    비디오 데이터를 생성하는 장치, 및
    제8항 내지 제11항 중 어느 한 항에 정의된 장치를 포함하는 것을 특징으로 하는, 비디오 데이터를 처리하는 시스템.
  13. 삭제
  14. 삭제
  15. 삭제
  16. 삭제
  17. 삭제
  18. 삭제
  19. 삭제
  20. 삭제
KR1020157009391A 2012-10-10 2013-10-09 미디어 전송 및 저장을 위해 무작위 접속 정보의 캡슐화를 위한 방법 및 장치 Active KR101692651B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN2012082722 2012-10-10
CNPCT/CN2012/082722 2012-10-10
PCT/CN2013/084924 WO2014056435A1 (en) 2012-10-10 2013-10-09 Method and apparatus for encapsulation of random access information for media transport and storage

Publications (2)

Publication Number Publication Date
KR20150077408A KR20150077408A (ko) 2015-07-07
KR101692651B1 true KR101692651B1 (ko) 2017-01-03

Family

ID=50476950

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020157009391A Active KR101692651B1 (ko) 2012-10-10 2013-10-09 미디어 전송 및 저장을 위해 무작위 접속 정보의 캡슐화를 위한 방법 및 장치

Country Status (6)

Country Link
US (1) US20150281724A1 (ko)
EP (1) EP2893697A4 (ko)
JP (1) JP2015536589A (ko)
KR (1) KR101692651B1 (ko)
HK (1) HK1210559A1 (ko)
WO (1) WO2014056435A1 (ko)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9826232B2 (en) * 2014-01-08 2017-11-21 Qualcomm Incorporated Support of non-HEVC base layer in HEVC multi-layer extensions
KR102191878B1 (ko) * 2014-07-04 2020-12-16 삼성전자주식회사 멀티미디어 시스템에서 미디어 패킷을 수신하는 방법 및 장치
CN113545099B (zh) * 2019-03-11 2024-07-09 索尼集团公司 信息处理设备、再现处理设备、信息处理方法和再现处理方法
CN114253900B (zh) * 2020-09-21 2025-06-17 深圳市中兴微电子技术有限公司 数据传输及处理方法、分布式单元、射频单元、介质

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2003010970A2 (en) 2001-07-23 2003-02-06 Nds Limited System for random access to content
JP2003319350A (ja) * 2002-04-22 2003-11-07 Nippon Hoso Kyokai <Nhk> デジタル放送における送信方法及び送信機

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4292654B2 (ja) * 1999-03-19 2009-07-08 ソニー株式会社 記録装置および方法、再生装置および方法、並びに記録媒体
JP3852366B2 (ja) * 2002-04-26 2006-11-29 ソニー株式会社 符号化装置および方法、復号装置および方法、並びにプログラム
WO2006083824A2 (en) * 2005-02-01 2006-08-10 Texas Instruments Incorporated Random access in avs-m video bitstreams
US7912219B1 (en) * 2005-08-12 2011-03-22 The Directv Group, Inc. Just in time delivery of entitlement control message (ECMs) and other essential data elements for television programming
EP2014097A4 (en) * 2006-05-03 2010-07-14 Ericsson Telefon Ab L M METHOD AND DEVICE FOR RECOVERING MEDIA FROM A MEDIA PRESENTATION
US9049497B2 (en) * 2010-06-29 2015-06-02 Qualcomm Incorporated Signaling random access points for streaming video data
JP5110135B2 (ja) * 2010-08-30 2012-12-26 ソニー株式会社 記録媒体
US9338474B2 (en) * 2011-09-23 2016-05-10 Qualcomm Incorporated Reference picture list construction for video coding

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2003010970A2 (en) 2001-07-23 2003-02-06 Nds Limited System for random access to content
JP2003319350A (ja) * 2002-04-22 2003-11-07 Nippon Hoso Kyokai <Nhk> デジタル放送における送信方法及び送信機

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
Kanumuri S ET AL: "Refinement of random access point support", 101. MPEG MEETING; 16-7-2012 - 20-7-2012; STOCKHOLM;(MOTION PICTURE EXPERT GROUP OR ISO/IEC JTC1/SC29/WG11), no.m25672, 10 July 2012*

Also Published As

Publication number Publication date
HK1210559A1 (en) 2016-04-22
EP2893697A1 (en) 2015-07-15
EP2893697A4 (en) 2015-08-26
WO2014056435A1 (en) 2014-04-17
JP2015536589A (ja) 2015-12-21
US20150281724A1 (en) 2015-10-01
KR20150077408A (ko) 2015-07-07

Similar Documents

Publication Publication Date Title
US11076160B2 (en) Devices and methods for identifying a leading picture
CN107770551B (zh) 用于发送消息和缓冲比特流的电子设备
KR20160110472A (ko) 상이한 인코딩 파라미터를 이용해 인코딩되는 복수의 인코딩 스트리밍
US10382809B2 (en) Method and decoder for decoding a video bitstream using information in an SEI message
US20130272619A1 (en) Devices for identifying a leading picture
KR101692651B1 (ko) 미디어 전송 및 저장을 위해 무작위 접속 정보의 캡슐화를 위한 방법 및 장치
US20140308017A1 (en) Imaging device, video recording device, video display device, video monitoring device, video monitoring system, and video monitoring method
US12267500B2 (en) Storage of EVC decoder configuration information
CN105379281B (zh) 用于使用图形处理器的视频解码的图片参考控制
KR101683409B1 (ko) 미디어 전송 및 저장을 위한 비디오 주사 포맷의 캡슐화
CN104718746B (zh) 用于媒体传输和存储的随机访问信息封装的方法和仪器
HK1261398B (zh) 用於标识前导画面的设备和方法
HK1261067B (zh) 用於标识前导画面的设备
HK1261398A1 (en) Devices for identifying a leading picture
HK1261067A1 (en) Devices for identifying a leading picture
HK1204739B (en) Electronic devices for sending a message and buffering a bitstream
HK1204186B (zh) 用於标识前导画面的设备

Legal Events

Date Code Title Description
A201 Request for examination
PA0105 International application

St.27 status event code: A-0-1-A10-A15-nap-PA0105

PA0201 Request for examination

St.27 status event code: A-1-2-D10-D11-exm-PA0201

P11-X000 Amendment of application requested

St.27 status event code: A-2-2-P10-P11-nap-X000

P13-X000 Application amended

St.27 status event code: A-2-2-P10-P13-nap-X000

PG1501 Laying open of application

St.27 status event code: A-1-1-Q10-Q12-nap-PG1501

D13-X000 Search requested

St.27 status event code: A-1-2-D10-D13-srh-X000

D14-X000 Search report completed

St.27 status event code: A-1-2-D10-D14-srh-X000

E902 Notification of reason for refusal
PE0902 Notice of grounds for rejection

St.27 status event code: A-1-2-D10-D21-exm-PE0902

AMND Amendment
E13-X000 Pre-grant limitation requested

St.27 status event code: A-2-3-E10-E13-lim-X000

P11-X000 Amendment of application requested

St.27 status event code: A-2-2-P10-P11-nap-X000

P13-X000 Application amended

St.27 status event code: A-2-2-P10-P13-nap-X000

E601 Decision to refuse application
PE0601 Decision on rejection of patent

St.27 status event code: N-2-6-B10-B15-exm-PE0601

X091 Application refused [patent]
AMND Amendment
E13-X000 Pre-grant limitation requested

St.27 status event code: A-2-3-E10-E13-lim-X000

P11-X000 Amendment of application requested

St.27 status event code: A-2-2-P10-P11-nap-X000

P13-X000 Application amended

St.27 status event code: A-2-2-P10-P13-nap-X000

PX0901 Re-examination

St.27 status event code: A-2-3-E10-E12-rex-PX0901

PX0701 Decision of registration after re-examination

St.27 status event code: A-3-4-F10-F13-rex-PX0701

X701 Decision to grant (after re-examination)
GRNT Written decision to grant
PR0701 Registration of establishment

St.27 status event code: A-2-4-F10-F11-exm-PR0701

PR1002 Payment of registration fee

St.27 status event code: A-2-2-U10-U12-oth-PR1002

Fee payment year number: 1

PG1601 Publication of registration

St.27 status event code: A-4-4-Q10-Q13-nap-PG1601

P22-X000 Classification modified

St.27 status event code: A-4-4-P10-P22-nap-X000

FPAY Annual fee payment

Payment date: 20191125

Year of fee payment: 4

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 4

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 5

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 6

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 7

R18-X000 Changes to party contact information recorded

St.27 status event code: A-5-5-R10-R18-oth-X000

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 8

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 9

R18-X000 Changes to party contact information recorded

St.27 status event code: A-5-5-R10-R18-oth-X000

PN2301 Change of applicant

St.27 status event code: A-5-5-R10-R11-asn-PN2301

PN2301 Change of applicant

St.27 status event code: A-5-5-R10-R14-asn-PN2301

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 10