[go: up one dir, main page]

CN104954806A - 帧内视频优化编码方法 - Google Patents

帧内视频优化编码方法 Download PDF

Info

Publication number
CN104954806A
CN104954806A CN201510353778.5A CN201510353778A CN104954806A CN 104954806 A CN104954806 A CN 104954806A CN 201510353778 A CN201510353778 A CN 201510353778A CN 104954806 A CN104954806 A CN 104954806A
Authority
CN
China
Prior art keywords
coding
size
unit
intra
frame
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201510353778.5A
Other languages
English (en)
Inventor
解蓉
魏如君
宋利
张文军
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Jiao Tong University
Original Assignee
Shanghai Jiao Tong University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Jiao Tong University filed Critical Shanghai Jiao Tong University
Priority to CN201510353778.5A priority Critical patent/CN104954806A/zh
Publication of CN104954806A publication Critical patent/CN104954806A/zh
Pending legal-status Critical Current

Links

Landscapes

  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

一种视频编码技术领域的帧内视频优化编码方法,通过将编码单元CU的尺寸扩大两倍、将预测单元PU的尺寸扩大两倍、将变换单元TU的尺寸扩大两倍,并加入64×64整数变换矩阵,64×64蝶形正变换函数和64×64蝶形反变换函数;再进行帧内编码帧(I帧)编码,从而减少视频图像中编码的块单元个数和对应的视频编码时间,提高了编码速度,并且在一定程度上提升视频压缩效率,保证了优异的视频编码性能。

Description

帧内视频优化编码方法
技术领域
本发明涉及的是一种视频编码技术领域的技术,具体是一种HEVC上实现的帧内视频优化编码方法。
背景技术
视频编码技术,是将视频根据一定的视频编码标准压缩成视频码流。目前,针对不同的视频应用场景,存在多种视频编码标准,包括H.261、H.263和H.264等H.26X系列,主要用于电话和电视会议应用,以及MPEG‐1、MPEG‐2和MPEG‐4等MPEG‐X系列,主要针对多媒体广播电视领域。随着多媒体信息和网络技术的快速发展,人们对高清晰度、大容量的视频需求日益增加。为了使高清、超高清视频的编码效率更高,获得更好的视觉体验,新一代视频编码标准HEVC(high efficiency video coding)诞生了。HEVC作为新的视频编码标准,引入了很多新的编码技术,具有更优异的编码性能和更高的视频质量,相比H.264标准提升了大约50%的压缩效率,但编码计算复杂度大大增加。帧内视频编码模块是视频编码过程中的重要部分,对于视频编码性能的提升有着重要的作用,因此,实现帧内视频编码模块的优化,是近年来视频编码研究中的一个热点。
在帧内编码中,平滑区域内容变化缓慢,倾向于使用大尺寸的编码块单元;粗糙区域图像细节较多,会选择小尺寸的编码块单元。对于高清和超高清视频,一帧图像中常常有很多大面积的平滑区域,因此在高分辨率视频的编码中,采用更大尺寸的块单元,能够合理地减少一帧图像中编码的块单元个数,从而有效地减少编码计算复杂度,获得更好的压缩性能。然而,在帧内视频编码中,编码过程的简化不可避免会造成视频质量的下降,在一定程度上影响视觉效果,因此,在实现高效帧内视频编码,降低编码复杂度的同时,如何保证视频质量和编码性能是当前视频编码研究中的一个重要课题。
经过对现有技术的检索发现,中国专利文献号CN103957415A公开(公告)日2014.07.30,公开了一种在高效视频编码(HEVC)中进行编码单元(CU)快速分块的方法,包括:在编码树单元(CTU)中确定所有平滑分块;根据对所有平滑分块的所述确定的结果,跳过对一些CU的检查;以及确定最优CU分块方案;根据所述最优CU分块方案来对所述CTU进行编码。但该技术无法降低编码所用比特数,提高压缩效率。
发明内容
本发明针对现有技术存在的上述不足,提出一种帧内视频优化编码方法,采用更大尺寸的编码结构,能够减少编码过程中使用的比特数,获得更好的编码效率,特别对超高清视频的编码效率提升尤其明显。
本发明是通过以下技术方案实现的:
本发明涉及一种帧内视频优化编码方法,采用扩大后的编码树单元(Coding Tree Units,CTU)对编码过程进行优化,同时对应扩大CTU中的编码单元CU(Coding Unit)、CU中的预测单元PU(Prediction Unit)和CU中的变换单元TU(Transform Unit)的尺寸,再进行帧内编码帧(I帧)编码,从而减少视频图像中编码的块单元个数和对应的视频编码时间,提高了编码速度,并且在一定程度上提升视频压缩效率,保证了优异的视频编码性能。
所述的编码树单元CTU尺寸为128×128像素,对应的编码单元CU为128×128、64×64、32×32和16×16;在高清视频帧内编码中,采用更大的编码单元可以减少所用的比特数,提高编码效率,同时有效减少编码的计算复杂度。
所述的预测单元PU是进行帧内或帧间预测的基本单元,规定了编码单元的所有预测模式,其中包括:帧内预测的方向信息、帧间预测的分割方式信息以及运动矢量预测信息等等。
所述的预测单元PU的尺寸最大为128×128像素,在帧内编码中,预测单元尺寸与编码单元尺寸相同;对于最小尺寸的编码单元CU(16×16),支持进一步划分得到四个8×8块的预测单元PU。
所述的编码单元CU采用四叉树的形式递归划分为变换单元TU,可划分的层级由CU的尺寸与规定的最大和最小TU尺寸决定。
对于帧内视频编码,在一个编码单元CU中,由于相邻预测单元有关联,一个预测单元PU可以包含多个变换单元TU,但一个变换单元TU只能对应一个预测单元PU。
所述的变换单元TU是变换、量化与熵编码的基本单元,其尺寸变为64×64、32×32、16×16和8×8,对于64×64的TU块,根据整数DCT运算公式加入64×64整数DCT变换矩阵,依照整数DCT蝶形算法加入64×64的DCT蝶形正变换和反变换函数。
对于高分辨视频,相同大小的区域包含更多像素,像素间相关性强,因此采用更大尺寸的变换单元能够将信号能量更好地集中,使得变换后的残差信号得到更多的压缩,提高视频压缩性能。
所述的帧内编码帧I帧的编码是指:将视频帧分割成若干个互不重叠的128×128的编码树单元CTU,表示相互独立的区域;然后在一个CTU中,根据四叉树的分割方式,从尺寸128×128到16×16递归遍历所有尺寸大小的编码单元;再对尺寸从128×128到8×8的所有预测单元分别寻找最优帧内预测模式并计算其残差值,并从尺寸64×64到8×8的变换单元,根据其可划分的深度对每个变换单元分别处理,将预测得到的残差数据进行变换编码后能量集中至低频区域,将变换系数进行量化可以减小编码的动态范围;最后可用率失真优化RDO准则确定得到编码结构的最优划分方式。
技术效果
与现有技术相比,本发明通过扩大块单元的尺寸,能够减少编码块的数目,极大地简化帧内编码过程,提升编码效率,实现高效帧内视频编码,特别对超高清视频的编码有更优异的编码性能。本发明进一步的技术效果包括:
1)采用128×128的编码树单元CTU,能够减少一帧图像中编码的块单元个数,大量减少视频编码时间;
2)扩大编码单元CU的尺寸,用更大的编码单元编码可以减少所用的比特数,提高编码效率;
3)扩大预测单元PU的尺寸,采用更大的预测单元能够简化帧内预测编码过程,加快视频编码速度;
4)扩大变换单元TU的尺寸,大块的变换单元能够将信号能量更好地集中,提升视频压缩性能。
附图说明
图1为本发明流程示意图。
具体实施方式
下面对本发明的实施例作详细说明,本实施例在以本发明技术方案为前提下进行实施,给出了详细的实施方式和具体的操作过程,但本发明的保护范围不限于下述的实施例。
实施例1
如图1所示,本实施例包括以下步骤:
步骤一,扩大编码单元的尺寸
高分辨率视频中常常有大面积的平滑区域,采用更大的块进行编码能够极大地提升压缩效率,减少编码计算复杂度。在大尺寸的编码结构中,扩大编码单元的尺寸具体方法如下:
1.1)将基于四叉树分割的编码树单元CTU尺寸扩大至128×128像素。
1.2)将编码单元CU的尺寸扩大两倍,新的编码单元CU尺寸为128×128、64×64、32×32和16×16。
步骤二,扩大预测单元的尺寸
预测单元是进行帧内或帧间预测的基本单元,规定了编码单元的所有预测模式,包括帧内预测的方向信息、帧间预测的分割方式信息以及运动矢量预测信息等等;对于帧内视频编码,预测单元PU的尺寸扩大两倍,最大为128×128像素。新的预测单元PU尺寸与新的编码单元CU尺寸相同,对于最小的编码单元CU(16×16),支持进一步划分得到四个8×8块的预测单元PU。
步骤三,扩大变换单元的尺寸
变换单元是进行变换和量化的基本单元,扩大变换单元的尺寸,具体方法如下:
3.1)变换单元TU的尺寸扩大两倍,新的变换单元TU的尺寸变为64×64、32×32、16×16和8×8。
3.2)对于64×64的TU块,根据整数DCT运算公式加入64×64整数DCT变换矩阵,依照整数DCT蝶形算法加入64×64的DCT蝶形正变换和反变换函数。
步骤四,帧内编码帧(I帧)编码,具体方法如下:
4.1)视频帧首先被分割成若干个互不重叠的128×128的编码树单元CTU,用于表示相互独立的区域;
4.2)在一个CTU中,根据四叉树的分割方式,从尺寸128×128到16×16递归遍历所有尺寸大小的编码单元;
4.3)通过帧内预测编码模块,对尺寸从128×128到8×8的所有预测单元分别寻找最优帧内预测模式并计算其残差值;
4.4)通过变换量化模块,从尺寸64×64到8×8的变换单元,根据其可划分的深度对每个变换单元分别处理,将预测得到的残差数据进行变换编码后能量集中至低频区域,将变换系数进行量化可以减小编码的动态范围;
4.5)用率失真优化RDO准则确定得到编码结构的最优划分方式。

Claims (9)

1.一种帧内视频优化编码方法,其特征在于,采用扩大后的编码树单元结构,对编码过程进行优化,即首先扩大三种块单元的尺寸,然后进行帧内编码帧编码,从而大量减少编码计算复杂度,提升编码效率;
所述的扩大三种块单元的尺寸,具体包括:
1)将编码单元CU的尺寸扩大两倍;
2)将预测单元PU的尺寸扩大两倍;
3)将变换单元的尺寸扩大两倍,并加入64×64整数变换矩阵,64×64蝶形正变换函数和64×64蝶形反变换函数。
2.根据权利要求1所述的帧内视频优化编码方法,其特征是,所述的扩大后的编码树单元的尺寸为128×128像素。
3.根据权利要求1所述的帧内视频优化编码方法,其特征是,所述的扩大三种块单元的尺寸,具体为:对编码单元、预测单元、变换单元的尺寸扩大。
4.根据权利要求3所述的帧内视频优化编码方法,其特征是,所述的编码单元尺寸为128×128、64×64、32×32和16×16。
5.根据权利要求3所述的帧内视频优化编码方法,其特征是,所述的预测单元的尺寸最大为128×128像素,且预测单元尺寸与编码单元尺寸相同。
6.根据权利要求5所述的帧内视频优化编码方法,其特征是,对于尺寸为16×16的编码单元,支持进一步划分得到四个8×8块的预测单元。
7.根据权利要求3所述的帧内视频优化编码方法,其特征是,所述的变换单元的尺寸为64×64、32×32、16×16和8×8。
8.根据权利要求7所述的帧内视频优化编码方法,其特征是,对于尺寸为64×64的变换单元,根据整数DCT运算公式加入64×64整数DCT变换矩阵,依照整数DCT蝶形算法加入64×64的DCT蝶形正变换和反变换函数。
9.根据权利要求1所述的帧内视频优化编码方法,其特征是,所述的帧内编码帧编码是指:将视频帧分割成若干个互不重叠的128×128的编码树单元CTU,表示相互独立的区域;然后在一个CTU中,根据四叉树的分割方式,从尺寸128×128到16×16递归遍历所有尺寸大小的编码单元;再对尺寸从128×128到8×8的所有预测单元分别寻找最优帧内预测模式并计算其残差值,并从尺寸64×64到8×8的变换单元,根据其可划分的深度对每个变换单元分别处理,将预测得到的残差数据进行变换编码后能量集中至低频区域,将变换系数进行量化可以减小编码的动态范围;最后可用率失真优化RDO准则确定得到编码结构的最优划分方式。
CN201510353778.5A 2015-06-24 2015-06-24 帧内视频优化编码方法 Pending CN104954806A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510353778.5A CN104954806A (zh) 2015-06-24 2015-06-24 帧内视频优化编码方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510353778.5A CN104954806A (zh) 2015-06-24 2015-06-24 帧内视频优化编码方法

Publications (1)

Publication Number Publication Date
CN104954806A true CN104954806A (zh) 2015-09-30

Family

ID=54169097

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510353778.5A Pending CN104954806A (zh) 2015-06-24 2015-06-24 帧内视频优化编码方法

Country Status (1)

Country Link
CN (1) CN104954806A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108293112A (zh) * 2015-11-25 2018-07-17 高通股份有限公司 视频译码中的弹性变换树结构
CN116095325A (zh) * 2022-12-17 2023-05-09 华能信息技术有限公司 一种基于av1编码技术的视频编码方法
CN117440157A (zh) * 2023-09-26 2024-01-23 书行科技(北京)有限公司 视频编码方法、装置、设备及存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090129469A1 (en) * 2007-11-20 2009-05-21 Kenji Kimiyama Coding apparatus, coding method, and coding system
CN102598664A (zh) * 2009-10-28 2012-07-18 三星电子株式会社 对残差块编码的方法和设备、对残差块解码的方法和设备
CN102986215A (zh) * 2010-07-09 2013-03-20 高通股份有限公司 使用帧内预测模式的子集及对应定向变换的视频译码
CN103024392A (zh) * 2012-12-26 2013-04-03 清华大学 基于二维哈达玛变换的帧内模式预测方法及装置
CN103220512A (zh) * 2012-01-19 2013-07-24 索尼公司 图像处理器和图像处理方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090129469A1 (en) * 2007-11-20 2009-05-21 Kenji Kimiyama Coding apparatus, coding method, and coding system
CN102598664A (zh) * 2009-10-28 2012-07-18 三星电子株式会社 对残差块编码的方法和设备、对残差块解码的方法和设备
CN102986215A (zh) * 2010-07-09 2013-03-20 高通股份有限公司 使用帧内预测模式的子集及对应定向变换的视频译码
CN103220512A (zh) * 2012-01-19 2013-07-24 索尼公司 图像处理器和图像处理方法
CN103024392A (zh) * 2012-12-26 2013-04-03 清华大学 基于二维哈达玛变换的帧内模式预测方法及装置

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108293112A (zh) * 2015-11-25 2018-07-17 高通股份有限公司 视频译码中的弹性变换树结构
CN108293112B (zh) * 2015-11-25 2022-06-17 高通股份有限公司 视频译码中的弹性变换树结构
CN116095325A (zh) * 2022-12-17 2023-05-09 华能信息技术有限公司 一种基于av1编码技术的视频编码方法
CN117440157A (zh) * 2023-09-26 2024-01-23 书行科技(北京)有限公司 视频编码方法、装置、设备及存储介质
CN117440157B (zh) * 2023-09-26 2024-05-28 书行科技(北京)有限公司 视频编码方法、装置、设备及存储介质

Similar Documents

Publication Publication Date Title
CN103248893B (zh) 从h.264/avc标准到hevc标准的快速帧间转码方法及其转码器
TWI626842B (zh) Motion picture coding device and its operation method
CN101783957B (zh) 一种视频预测编码方法和装置
CN104038764B (zh) 一种h.264到h.265的视频转码方法及转码器
CN101621687B (zh) H.264到avs视频码流转换方法及其装置
CN101938657A (zh) 高效视频编码中编码单元自适应划分方法
CN110087087A (zh) Vvc帧间编码单元预测模式提前决策及块划分提前终止方法
CN110351552B (zh) 视频编码中一种快速编码方法
CN103796023B (zh) 基于h.264/avc宏块结构及纹理的h.265/hevc转码方法及转码器
JP5795525B2 (ja) 画像符号化方法,画像復号方法,画像符号化装置,画像復号装置,画像符号化プログラムおよび画像復号プログラム
CN101150719A (zh) 并行视频编码的方法及装置
KR20050045746A (ko) 계층 구조의 가변 블록 크기를 이용한 움직임 추정 방법및 장치
CN103039073A (zh) 编码/解码高分辨率图像的方法和执行该方法的装置
CN106888379B (zh) 应用于h.264到hevc的帧间快速视频转码方法
CN104079937B (zh) 一种基于运动矢量分析的由h.264到hevc的快速帧间转码方法及转码装置
CN103442228B (zh) 从h.264/avc标准到hevc标准的快速帧内转码方法及其转码器
CN104837019B (zh) 基于支持向量机的avs到hevc优化视频转码方法
CN104702958A (zh) 一种基于空间相关性的hevc帧内编码方法及系统
WO2021239160A1 (zh) 视频解码方法、视频编码方法、电子设备及存储介质
CN106961610A (zh) 结合超分辨率重建的超高清视频新型压缩框架
CN104202605B (zh) 一种通过降低分辨率预测高清图像编码单元cu的划分方式的方法及其实现装置
CN108259896B (zh) 一种利用系数分布特性的哥伦布-莱斯初始参数自适应决策方法
CN104954806A (zh) 帧内视频优化编码方法
CN105791868B (zh) 视频编码的方法和设备
CN110139099B (zh) 基于预编码和编码satd值加权的帧间预测模式选择方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20150930