JP7485761B2 - クロスコンポーネント適応ループフィルタの信号通知 - Google Patents
クロスコンポーネント適応ループフィルタの信号通知 Download PDFInfo
- Publication number
- JP7485761B2 JP7485761B2 JP2022525482A JP2022525482A JP7485761B2 JP 7485761 B2 JP7485761 B2 JP 7485761B2 JP 2022525482 A JP2022525482 A JP 2022525482A JP 2022525482 A JP2022525482 A JP 2022525482A JP 7485761 B2 JP7485761 B2 JP 7485761B2
- Authority
- JP
- Japan
- Prior art keywords
- video
- alf
- component
- cross
- chroma
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/117—Filters, e.g. for pre-processing or post-processing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/136—Incoming video signal characteristics or properties
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
- H04N19/82—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/77—Circuits for processing the brightness signal and the chrominance signal relative to each other, e.g. adjusting the phase of the brightness signal relative to the colour signal, correcting differential gain or differential phase
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Description
本願は、2019年10月29日出願の国際特許出願第PCT/CN2019/113955号の優先権および利益を主張する、2020年10月29日出願の国際特許出願第PCT/CN2020/124705号に基づく。上記出願の開示全体は、本明細書の開示の一部として参照により援用される。
本明細書は、映像符号化技術に関する。具体的には、画像/映像符号化におけるクロスコンポーネント適応ループフィルタに関する。HEVCのような既存の映像符号化規格に適用してもよいし、規格(Versatile Video Coding)を確定させるために適用してもよい。本発明は、将来の映像符号化規格または映像コーデックにも適用可能である。
映像符号化規格は、主に周知のITU-TおよびISO/IEC規格の開発によって発展してきた。ITU-TはH.261とH.263を作り、ISO/IECはMPEG-1とMPEG-4 Visualを作り、両団体はH.262/MPEG-2 VideoとH.264/MPEG-4 AVC(Advanced Video Coding)とH.265/HEVC規格を共同で作った。H.262以来、映像符号化規格は、時間予測と変換符号化が利用されるハイブリッド映像符号化構造に基づく。HEVCを超えた将来の映像符号化技術を探索するため、2015年には、VCEGとMPEGが共同でJVET(Joint Video Exploration Team)を設立した。それ以来、多くの新しい方法がJVETによって採用され、JEM(Joint Exploration Mode)と呼ばれる参照ソフトウェアに組み込まれてきた。2018年4月には、VCEG(Q6/16)とISO/IEC JTC1 SC29/WG11(MPEG)の間にJVET(Joint Video Expert Team)が発足し、HEVCと比較して50%のビットレート削減を目標にVVC規格の策定に取り組んでいる。
色空間は、カラーモデル(又はカラーシステム)としても知られ、色の範囲を数字のタプルとして簡単に記述する抽象的な数学モデルであり、典型的には3又は4つの値又は色成分(例えば、RGB)である。基本的には、色空間は座標系とサブ空間とを合成したものである。
YCbCr、Y’CbCr、またはY Pb/Cb Pr/Crは、YCBCRまたはY’CBCRとも呼ばれ、映像およびデジタル写真システムのカラー画像パイプラインの一部として使用される色空間のファミリーである。Y’は輝度成分であり、CBおよびCRは青色差および赤色差のクロマ成分である。(素数を有する)Y’はYとは区別され、Yは輝度であり、ガンマ補正されたRGB原色に基づいて光強度が非線形に符号化されることを意味する。
3つのY’CbCr成分の各々は、同じサンプルレートを有し、従って、クロマサブサンプリングは存在しない。この方式は、ハイエンドフィルムスキャナおよび映画のポストプロダクションに用いられることがある。
2つのクロマ成分は、輝度のサンプルレートの半分でサンプリングされ、水平クロマ解像度は半分にされる。これにより、視覚的にほとんど又は全く差がなく、非圧縮の映像信号の帯域幅を1/3に縮小する。
4:2:0では、水平サンプリングは4:1:1に比べて2倍になるが、このスキームではCbおよびCrチャネルをそれぞれ1行おきのラインでのみサンプリングするので、垂直解像度は半分になる。従って、データレートは同じである。CbおよびCrはそれぞれ水平および垂直方向の両方に2倍ずつサブサンプリングされる。異なる水平および垂直位置を有する4:2:0スキームの3つの変形がある。
●MPEG-2において、CbおよびCrは水平方向に共座している。Cb、Crは垂直方向の画素間に位置する(格子間に位置する)。
●JPEG/JFIF、H.261、およびMPEG-1において、CbおよびCrは、交互の輝度サンプルの中間の格子間に位置する。
●4:2:0 DVにおいて、CbおよびCrは、水平方向に共座している。垂直方向には、それらは交互に共座している。
separate_colour_plane_flagの値に基づいて、変数ChromaArrayTypeの値は、以下のように割り当てられる。
-separate_colour_plane_flagが0に等しい場合、ChromaArrayTypeはchroma_format_idcに等しく設定される。
-そうでない場合(separate_colour_plane_flagが1に等しい)、ChromaArrayTypeは0に等しく設定される。
図1は、3つのインループフィルタリングブロック、すなわちDF(Deblocking Filter)、SAO(Sample Adaptive Offset)、およびALFを含むVVCのエンコーダブロック図の例を示す。予め定義されたフィルタを用いるDFとは異なり、SAOおよびALFは、現在のピクチャのオリジナルサンプルを利用し、それぞれ、オフセットおよびフィルタ係数を信号通知するコーディングされた側情報を用いて、オフセットを追加することにより、および、FIR(Finite Impulse Response)フィルタを適用することにより、元のサンプルと再構成サンプルとの間の平均二乗誤差を低減する。ALFは、各ピクチャの最後の処理段階に位置し、前の段階で生成されたアーチファクトを捕捉し、修正しようとするツールと見なすことができる。
JEMにおいて、ブロックに基づくフィルタ適応を用いたGALF(Geometry Transformation-based Adaptive Loop Filter)が適用される。輝度成分は、局所勾配の方向およびアクティビティに基づいて、2×2ブロックごとに25個のフィルタのうち1つが選択される。
JEMにおいて、輝度成分に対し、最大3つの菱形フィルタ形状(図2に示す)を選択することができる。輝度成分に使用されるフィルタ形状を示すために、ピクチャレベルでインデックスが信号通知される。
各2×2のブロックを25個のクラスのうちの1つに分類する。分類インデックスCは、その方向性DおよびアクティビティA^の量子化値に基づいて、以下のように導出される。
それぞれの2×2のブロックをフィルタリングする前に、そのブロックに対して計算された勾配値に基づいて、フィルタ係数f(k,l)に対して、ローテーション、又は対角線および垂直方向の反転等の幾何学的変換が適用される。これは、これらの変換をフィルタサポート領域内のサンプルに適用することに等しい。その考えは、ALFが適用される異なるブロックを、それらの方向性を揃えることによって、より類似させることである。
JEMにおいて、GALFフィルタパラメータは、第1のCTUのために、すなわち、スライスヘッダの後且つ第1のCTUのSAOパラメータの前に信号通知される。最大25組の輝度フィルタ係数を信号通知することができる。ビットオーバーヘッドを低減するために、異なる分類のフィルタ係数をマージすることができる。また、参照ピクチャのGALF係数を記憶し、現在のピクチャのGALF係数として再利用することができる。現在のピクチャは、参照ピクチャのために記憶されたGALF係数を使用し、GALF係数の信号通知を回避することを選択してもよい。この場合、1つの参照ピクチャへのインデックスのみが通知され、指定された参照ピクチャの記憶されたGALF係数が現在のピクチャに継承される。
デコーダ側において、ブロックに対してGALFが有効化されると、ブロック内のそれぞれのサンプルR(i,j)がフィルタリングされ、その結果、以下に示すように、サンプル値R’(i,j)が得られる。ここで、Lは、フィルタ長を表し、fm,nは、フィルタ係数を表し、f(k,l)は、復号化されたフィルタ係数を表す。
2.4.1.フィルタリング再形成
式(11)は、コーディング効率に影響を及ぼすことなく、以下の式で再定式化することができる。
上記(13)のフィルタ式を使用することで、近傍のサンプル値が現在のサンプル値のフィルタリングと異なり過ぎている場合に、単純なクリッピング関数を使用して、その影響を低減することで、非線形性を容易に導入し、ALFをより効率的にする。
現在のVVCにおけるGALFの設計は、JEMにおける設計に比べ、以下のような大きな変化を有している。
1)適応フィルタ形状は除去される。輝度成分に対しては7×7のフィルタ形状のみが許容され、クロマ成分に対しては5×5のフィルタ形状のみが許容される。
2)ALFフィルタ係数は、ALF APS(Adaptation Parameter Set)において信号通知される。
3)非線形ALFが適用されてもよい。
4)CTUごとに、ALFが有効化されるか無効化されるかについて、色成分ごとの1つのビットフラグが信号通知される。
5)クラスインデックスの計算は、2×2ではなく、4×4のレベルで行われる。また、JVET-L0147で提案されているように、ALF分類のためのサブサンプリングされたラプラシアン計算方法が利用される。具体的には、1つのブロック内のサンプルごとに水平/垂直/45対角線/135度勾配を計算する必要がない。その代わりに、1:2サブサンプリングが利用される。
VVCドラフトの最新バージョンにおいて、ALFパラメータは、APS(Adaptation Parameter Set)において信号通知されてもよく、各CTUによって適応的に選択されてもよい。1つのAPSにおいて、最大25組の輝度フィルタ係数およびクリッピング値インデックス、並びに最大8組のクロマフィルタ係数およびクリッピング値インデックスを信号通知することができる。ビットオーバーヘッドを低減するために、輝度成分の異なる分類のフィルタ係数をマージすることができる。スライスヘッダにおいて、現在のスライスに使用されるAPSのインデックスが信号通知される。
各APS RBSPは、それが参照される前に、復号処理に使用可能であり、それを参照する、または外部手段によって提供される符号化されたスライスNALユニットのTemporalId以下のTemporalIdを有する少なくとも1つのアクセスユニットに含まれる。
aspLayerIdをAPS NALユニットのnuh_layer_idとする。aspLayerIdに等しいnuh_layer_idを有する層が独立層である(すなわち、vps_independent_layer_flag[GeneralLayerIdx[aspLayerId]]が1に等しい)場合、APS RBSPを含むAPS NALユニットは、それを参照するコーディングされたスライスNALユニットのnuh_layer_idに等しいnuh_layer_idを有するものとする。そうでない場合、APS RBSPを含むAPS NALユニットは、それを参照するコーディングされたスライスNALユニットのnuh_layer_idと等しいか、またはそれを参照するコーディングされたスライスNALユニットを含む層の直接依存層のnuh_layer_idと等しいnuh_layer_idを有するものとする。
アクセスユニット内でadatation_parameter_set_idの特定の値およびaps_params_typeの特定の値を有するすべてのAPS NALユニットは、同じコンテンツを有するものとする。
aps_params_typeがALF_APSまたはSCALING_APSに等しい場合、adaptation_parameter_set_idの値は0~7の範囲にあるものとする。
aps_params_typeがLMCS_APSに等しい場合、adaptation_parameter_set_idの値は0~3の範囲にあるものとする。
aps_params_typeは、表7-2に示されるように、APSにおいて実行されるAPSパラメータのタイプを指定する。aps_params_typeが1(LMCS_APS)に等しい場合、adaptation_parameter_set_idの値は0~3の範囲にあるものとする。
注2-APS NALユニット(adaption_parameter_set_idの特定の値およびaps_params_typeの特定の値を有する)は、ピクチャ間で共有されてもよく、ピクチャ内の異なるスライスは、異なるALF APSを参照することができる。
0に等しいaps_extension_flagは、APS RBSP構文構造にaps_extension_data_flag構文要素が存在しないことを規定する。1に等しいaps_extension_flagは、APS RBSP構文構造にaps_extension_data_flag構文要素が存在することを規定する。
aps_extension_data_flagは任意の値を有してよい。その存在および値は、本仕様のこのバージョンで規定されたプロファイルへのデコーダの適合性に影響を与えない。本仕様のこのバージョンに準拠するデコーダは、すべてのaps_extension_data_flag構文要素を無視するものとする。
1に等しいalf_luma_filter_signal_flagは、輝度フィルタセットが信号通知されることを規定する。0に等しいalf_luma_filter_signal_flagは、輝度フィルタセットが信号通知されないことを規定する。
1に等しいalf_chroma_filter_signal_flagは、クロマフィルタが信号通知されることを規定する。0に等しいalf_chroma_filter_signal_flagは、クロマフィルタが信号通知されないことを規定する。ChromaArrayTypeが0に等しい場合、alf_chroma_filter_signal_flagは0に等しい。
異なる適応ループフィルタの数を指定する変数NumAlfFiltersは、25に等しく設定される。
0に等しいalf_luma_clip_flagは、線形適応ループフィルタリングが輝度成分に適用されることを規定する。1に等しいalf_luma_clip_flagは、非線形適応ループフィルタリングが輝度成分に適用されてよいことを規定する。
alf_luma_num_filters_signalled_minus1+1は、輝度係数を信号通知することができる適応ループフィルタクラスの数を規定する。alf_luma_num_filters_signalled_minus1の値は、0~NumAlfFilters-1の範囲にあるものとする。
alf_luma_coeff_delta_idx[filtIdx]は、0からNumAlfFilters-1までの範囲にあるfiltIdxが示すフィルタクラスのための、信号通知される適応ループフィルタの輝度係数デルタのインデックスを規定する。alf_luma_coeff_delta_idx[filtIdx]が存在しない場合、それは0に等しいと推論される。alf_luma_coeff_delta_idx[filtIdx]の長さは、Ceil(Log2(alf_luma_num_filters_signalled_minus1+1)ビットである。
1に等しいalf_luma_coeff_flag[sfIdx]は、sfIdxで示される輝度フィルタの係数が信号通知されることを規定する。0に等しいalf_luma_coeff_flag[sfIdx]は、sfIdxで示される輝度フィルタのすべてのフィルタ係数が0に設定されることを規定する。存在しない場合、alf_luma_coeff_flag[sfIdx]は1に等しく設定される。
alf_luma_coeff_abs[sfIdx][j]は、sfIdxで示される信号輝度フィルタのj番目の係数の絶対値を規定する。alf_luma_coeff_abs[sfIdx][j]が存在しない場合、それは0に等しいと推論される。
指数ゴロム二値化uek(v)の次数kは3に等しく設定される。
-alf_luma_coeff_sign[sfIdx][j]が0に等しい場合、対応する輝度フィルタ係数は正の値を有する。
-そうでない場合(alf_luma_coeff_sign[sfIdx][j]が1に等しい)、対応する輝度フィルタ係数は負の値を有する。
alf_luma_coeff_sign[sfIdx][j]が存在しない場合、それは0に等しいと推論される。
filtCoeff[sfIdx][j]=alf_luma_coeff_abs[sfIdx][j]*(1-2*alf_luma_coeff_sign[sfIdx][j]) (7-47)
AlfCoeffL[adaptation_parameter_set_id][filtIdx][j]=filtCoeff[alf_luma_coeff_delta_idx[filtIdx]][j] (7-48)
AlfFixFiltCoeff=
{
{0,0,2,-3,1,-4,1,7,-1,1,-1,5}
{0,0,0,0,0,-1,0,1,0,0,-1,2}
{0,0,0,0,0,0,0,1,0,0,0,0}
{0,0,0,0,0,0,0,0,0,0,-1,1}
{2,2,-7,-3,0,-5,13,22,12,-3,-3,17}
{-1,0,6,-8,1,-5,1,23,0,2,-5,10}
{0,0,-1,-1,0,-1,2,1,0,0,-1,4}
{0,0,3,-11,1,0,-1,35,5,2,-9,9}
{0,0,8,-8,-2,-7,4,4,2,1,-1,25}
{0,0,1,-1,0,-3,1,3,-1,1,-1,3}
{0,0,3,-3,0,-6,5,-1,2,1,-4,21}
{-7,1,5,4,-3,5,11,13,12,-8,11,12}
{-5,-3,6,-2,-3,8,14,15,2,-7,11,16}
{2,-1,-6,-5,-2,-2,20,14,-4,0,-3,25}
{3,1,-8,-4,0,-8,22,5,-3,2,-10,29}
{2,1,-7,-1,2,-11,23,-5,0,2,-10,29}
{-6,-3,8,9,-4,8,9,7,14,-2,8,9}
{2,1,-4,-7,0,-8,17,22,1,-1,-4,23}
{3,0,-5,-7,0,-7,15,18,-5,0,-5,27}
{2,0,0,-7,1,-10,13,13,-4,2,-7,24}
{3,3,-13,4,-2,-5,9,21,25,-2,-3,12}
{-5,-2,7,-3,-7,9,8,9,16,-2,15,12}
{0,-1,0,-7,-5,4,11,11,8,-6,12,21}
{3,-2,-3,-8,-4,-1,16,15,-2,-3,3,26}
{2,1,-5,-4,-1,-8,16,4,-2,1,-7,33}
{2,1,-4,-2,1,-10,17,-2,0,2,-11,33}
{1,-2,7,-15,-16,10,8,8,20,11,14,11}
{2,2,3,-13,-13,4,8,12,2,-3,16,24}
{1,4,0,-7,-8,-4,9,9,-2,-2,8,29}
{1,1,2,-4,-1,-6,6,3,-1,-1,-3,30}
{-7,3,2,10,-2,3,7,11,19,-7,8,10}
{0,-2,-5,-3,-2,4,20,15,-1,-3,-1,22}
{3,-1,-8,-4,-1,-4,22,8,-4,2,-8,28}
{0,3,-14,3,0,1,19,17,8,-3,-7,20}
{0,2,-1,-8,3,-6,5,21,1,1,-9,13}
{-4,-2,8,20,-2,2,3,5,21,4,6,1}
{2,-2,-3,-9,-4,2,14,16,3,-6,8,24}
{2,1,5,-16,-7,2,3,11,15,-3,11,22}
{1,2,3,-11,-2,-5,4,8,9,-3,-2,26}
{0,-1,10,-9,-1,-8,2,3,4,0,0,29}
{1,2,0,-5,1,-9,9,3,0,1,-7,20}
{-2,8,-6,-4,3,-9,-8,45,14,2,-13,7}
{1,-1,16,-19,-8,-4,-3,2,19,0,4,30}
{1,1,-3,0,2,-11,15,-5,1,2,-9,24}
{0,1,-2,0,1,-4,4,0,0,1,-4,7}
{0,1,2,-5,1,-6,4,10,-2,1,-4,10}
{3,0,-3,-6,-2,-6,14,8,-1,-1,-3,31}
{0,1,0,-2,1,-6,5,1,0,1,-5,13}
{3,1,9,-19,-21,9,7,6,13,5,15,21}
{2,4,3,-12,-13,1,7,8,3,0,12,26}
{3,1,-8,-2,0,-6,18,2,-2,3,-10,23}
{1,1,-4,-1,1,-5,8,1,-1,2,-5,10}
{0,1,-1,0,0,-2,2,0,0,1,-2,3}
{1,1,-2,-7,1,-7,14,18,0,0,-7,21}
{0,1,0,-2,0,-7,8,1,-2,0,-3,24}
{0,1,1,-2,2,-10,10,0,-2,1,-7,23}
{0,2,2,-11,2,-4,-3,39,7,1,-10,9}
{1,0,13,-16,-5,-6,-1,8,6,0,6,29}
{1,3,1,-6,-4,-7,9,6,-3,-2,3,33}
{4,0,-17,-1,-1,5,26,8,-2,3,-15,30}
{0,1,-2,0,2,-8,12,-6,1,1,-6,16}
{0,0,0,-1,1,-4,4,0,0,0,-3,11}
{0,1,2,-8,2,-6,5,15,0,2,-7,9}
{1,-1,12,-15,-7,-2,3,6,6,-1,7,30}
}, (7-49)
AlfClassToFiltMap=
{
{8,2,2,2,3,4,53,9,9,52,4,4,5,9,2,8,10,9,1,3,39,39,10,9,52}
{11,12,13,14,15,30,11,17,18,19,16,20,20,4,53,21,22,23,14,25,26,26,27,28,10}
{16,12,31,32,14,16,30,33,53,34,35,16,20,4,7,16,21,36,18,19,21,26,37,38,39}
{35,11,13,14,43,35,16,4,34,62,35,35,30,56,7,35,21,38,24,40,16,21,48,57,39}
{11,31,32,43,44,16,4,17,34,45,30,20,20,7,5,21,22,46,40,47,26,48,63,58,10}
{12,13,50,51,52,11,17,53,45,9,30,4,53,19,0,22,23,25,43,44,37,27,28,10,55}
{30,33,62,51,44,20,41,56,34,45,20,41,41,56,5,30,56,38,40,47,11,37,42,57,8}
{35,11,23,32,14,35,20,4,17,18,21,20,20,20,4,16,21,36,46,25,41,26,48,49,58}
{12,31,59,59,3,33,33,59,59,52,4,33,17,59,55,22,36,59,59,60,22,36,59,25,55}
{31,25,15,60,60,22,17,19,55,55,20,20,53,19,55,22,46,25,43,60,37,28,10,55,52}
{12,31,32,50,51,11,33,53,19,45,16,4,4,53,5,22,36,18,25,43,26,27,27,28,10}
{5,2,44,52,3,4,53,45,9,3,4,56,5,0,2,5,10,47,52,3,63,39,10,9,52}
{12,34,44,44,3,56,56,62,45,9,56,56,7,5,0,22,38,40,47,52,48,57,39,10,9}
{35,11,23,14,51,35,20,41,56,62,16,20,41,56,7,16,21,38,24,40,26,26,42,57,39}
{33,34,51,51,52,41,41,34,62,0,41,41,56,7,5,56,38,38,40,44,37,42,57,39,10}
{16,31,32,15,60,30,4,17,19,25,22,20,4,53,19,21,22,46,25,55,26,48,63,58,55}
}, (7-50)
alf_luma_clip_idx[sfIdx][j]は、sfIdxで示される信号通知された輝度フィルタのj番目の係数を乗じる前に使用するクリップ値のクリッピングインデックスを規定する。alf_luma_clip_idx[sfIdx][j](但し、sfIdx=0…alf_luma_num_filters_signalled_minus1,j=0…11)の値は、0~3の範囲にあることがビットストリーム適合性の要件である。
要素AlfClipL[adaptation_parameter_set_id][filtIdx][j]を有する輝度フィルタクリッピング値AlfClipL[adaptation_parameter_set_id](但しfiltIdx=0…NumAlfFilters-1,j=0…11)は、BitDepthYに等しく設定されているbitDepthおよびalf_luma_clip_idx[alf_luma_coeff_delta_idx[filtIdx]][j]に等しく設定されているclipIdxに応じて表7-4で規定されているように導出される。
0に等しいalf_chroma_clip_flag[altIdx]は、インデックスaltIdxを有するクロマフィルタを使用する場合、クロマ成分に対して線形適応ループフィルタリングを適用することを規定し、1に等しいalf_chroma_clip_flag[altIdx]は、インデックスaltIdxを有するクロマフィルタを使用する場合、クロマ成分に対して非線形適応ループフィルタリングを適用することを規定する。存在しない場合、alf_chroma_clip_flag[altIdx]は0に等しいと推論される。
alf_chroma_coeff_abs[altIdx][j]は、インデックスaltIdxを有する代替クロマフィルタに対するj番目のクロマフィルタ係数の絶対値を規定する。alf_chroma_coeff_abs[altIdx][j]が存在しない場合、それは0に等しいと推論される。alf_chroma_coeff_abs[altIdx][j]の値は、0~27-1の範囲にあることがビットストリーム適合性の要件である。
指数ゴロム二値化uek(v)の次数kは3に等しく設定される。
-alf_chroma_coeff_sign[altIdx][j]が0に等しい場合、対応するクロマフィルタ係数は正の値を有する。
-そうでない場合(alf_chroma_coeff_sign[altIdx][j]が1に等しい)、対応するクロマフィルタ係数は負の値を有する。
alf_chroma_coeff_sign[altIdx][j]が存在しない場合、それは0に等しいと推論される。
要素AlfCoeffC[adaptation_parameter_set_id][altIdx][j]を有するクロマフィルタ係数AlfCoeffC[adaptation_parameter_set_id][altIdx](但し、altIdx=0…alf_chroma_num_alt_filters_minus1,j=0…5)は、以下のように導出される。
AlfCoeffC[adaptation_parameter_set_id][altIdx][j]=alf_chroma_coeff_abs[altIdx][j]*(1-2*alf_chroma_coeff_sign[altIdx][j]) (7-51)
alf_chroma_clip_idx[altIdx][j]は、代替クロマフィルタのj番目の係数にインデックスaltIdxを乗じる前に使用するクリップ値のクリッピングインデックスを指定する。alf_chroma_clip_idx[altIdx][j](但し、altIdx=0…alf_chroma_num_alt_filters_minus1,j=0…5である)の値は、0~3の範囲内にあることがビットストリーム適合性の要件である。
VTM6において、ALFフィルタパラメータは、APS(Adaptation Paramter Set)において信号通知される。1つのAPSにおいて、最大25組の輝度フィルタ係数およびクリッピング値インデックス、および最大8組のクロマフィルタ係数およびクリッピング値インデックスを信号通知することができる。ビットオーバーヘッドを低減するために、輝度成分に対する異なる分類のフィルタ係数をマージすることができる。スライスヘッダにおいて、現在のスライスに使用されるAPSのインデックスが信号通知される。
具体的には、以下が適用される。
1.ALFが輝度CTBに適用されるかどうか。適用される場合、ステップ2に進む。適用されない場合、さらなる信号通知は必要とされない。
2.現在のスライスに使用されているALF APSの数をチェックし、それをnumALFAPSで表す。
3.numALFAPSが0に等しい場合、固定フィルタのインデックス(例えば、alf_luma_fixed_filter_idx)が信号通知される。そうでない場合、以下が適用される。
-第1のALF APSから予測されたかどうかを示すフラグを信号通知する。
-予測されていない場合、ステップ4に進む。予測されている場合、輝度CTBのためのALFパラメータの信号通知は停止される。
4.numALFAPSが1よりも大きい場合、それがALF APSから予測されたものであるかどうかを示すためのフラグを信号通知する。
-大きくない場合、固定フィルタのインデックスを信号通知する。
-大きい場合かつnumALFAPSが2よりも大きい場合、ALF APSのインデックスから1を引いたものを、トランケイテッドユーナリー(truncated unary)とともに信号通知する。
1.Cb/Cr CTBにALFを適用するかどうか。適用される場合、ステップ2に進む。適用されない場合、さらなる信号通知は必要とされない。
2.i番目のALF APSに関連付けられたフィルタのインデックスを信号通知する。ここで、APSインデックスは、スライスヘッダにおいて信号通知される。
CC-ALF(Cross-Component Adaptive Loop Filter)は、輝度サンプル値を用いて各クロマ成分を改善する。基本的に、CC-ALFが適用される場合、CC-ALFは、輝度サンプルをフィルタリングすることによりクロマサンプルごとに補正を生成する。それはループフィルタステップとして適用される。ツールは、ビットストリームにおける情報によって制御され、この情報は、(a)クロマ成分ごとのフィルタ係数、および(b)サンプルブロックのためのフィルタの適用を制御するマスクの両方を含む。
(x,y)は、改善されるクロマ成分iの位置
(xC,yC)は、(x,y)に基づく輝度位置
Siは、クロマ成分iのための輝度のフィルタサポート
ci(x0,y0)は、フィルタ係数。
●輝度平面とクロマ平面との間の空間スケーリング要素に基づいて、サポート領域が中心となる輝度位置(xC,yC)を計算する。
●すべてのフィルタ係数はAPSで送信され、8ビットのダイナミックレンジを有する。
●スライスヘッダにおいて、APSが参照されてもよい。
●スライスのクロマ成分ごとに使用されるCC-ALF係数も、時間的サブレイヤに対応するバッファに記憶される。これらの時間的サブレイヤフィルタ係数セットの再利用は、スライスレベルフラグを使用して容易になる。
●CC-ALFフィルタの適用は、可変ブロックサイズで制御され、サンプルのブロックごとに受信されたコンテキストコーディングされたフラグによって信号通知される。ブロックサイズは、CC-ALF有効化フラグと共に、クロマ成分ごとにスライスレベルで受信される。
●横方向の仮想境界のための境界パディングは、繰り返しを利用する。残りの境界については、通常のALFと同じタイプのパディングを使用する。
JVET-P0080に比べ、CC-ALFの設計を簡単にするために、以下のような新しい態様を提案する。
-複雑性低減
○図5に示すように、フィルタの形状を3×4の菱形に変更し、フィルタ演算における乗数を低減する。
○CC-ALF係数の6ビットまでのダイナミックレンジを制限する。
○クロマALFと乗数の共用を許可する。
-ALFとの位置合わせ
○フィルタの選択をCTUレベルの信号通知に制限する。
○時間層係数バッファを除去する。
○ALF仮想境界における対称線選択を使用する。
7.3.6 スライスヘッダ構文
7.3.6.1 一般スライスセグメントヘッダ構文
現在のCC-ALF設計において、以下のような問題がある。
1.輝度情報を利用してクロマサンプルを改善する1つのCC-ALFモードのみが適用され、柔軟性に欠ける。
2.同じSPSフラグが、非線形ALFおよびCC-ALFの使用を制御するために使用される。非線形ALFと分けてCC-ALFをOFFにすることはできない。
3.CC-ALFの信号通知は、妥当でない非線形ALFフラグ(すなわち、slice_alf_enabled_flag)から独立している。
4.各CTBに対し、CC-ALFフィルタ1つのみ(Cbに対するalf_ctb_cross_component_cb_idc、またはCrに対するalf_ctb_cross_component_cr_idcによって示される)が許可され、ローカルな特徴を取得できなかった。
5.SAOなどの他のフィルタが、クロマサンプルを改善できる一方、CC-ALFは、輝度情報を利用してクロマサンプルを改善する。同じクロマサンプルを繰り返し改善すると、大きな歪みが生じる可能性がある。
6.1つのCTBに対して、CC-ALFおよびクロマALFフィルタリング処理の入力は同じであり、即ち、SAO処理の後の再構成サンプルである。CC-ALFとクロマALFフィルタリング処理との間の相互作用は考慮されていない。
以下に列記される実施形態は、一般的な概念を説明するための例であると考えられるべきである。これら項目は狭い意味で解釈されるべきではない。さらに、これらの項目は、任意の方法で組み合わせることができる。
1.CC-ALFは、第1の成分がCb/Crであり、第2の成分がYである場合を除外する第2の成分においてサンプルをフィルタリングすることによって、第1の成分におけるサンプルを補正する場合にまで拡張されてもよい。
a.あるいは、さらに、色成分が適用されたCC-ALFの指示を信号通知してもよい。
b.一例において、第1の色成分は、YCbCRフォーマットのYであってもよいし、RGBフォーマットのGであってもよい。
c.一例において、第1の色成分は、YCbCRフォーマットのCbであってもよいし、RGBフォーマットのBであってもよい。
d.一例において、第1の色成分は、YCbCRフォーマットのCrであってもよいし、RGBフォーマットのRであってもよい。
e.一例において、第2の色成分は、YCbCRフォーマットのYであってもよいし、RGBフォーマットのGであってもよい。
f.一例において、第2の色成分は、YCbCRフォーマットのCbであってもよいし、RGBフォーマットのBであってもよい。
g.一例において、第2の色成分は、YCbCRフォーマットのCrであってもよいし、RGBフォーマットのRであってもよい。
a.一例において、第1の成分からサンプルの補正を計算する場合、第2の成分および第3の成分からのサンプルがフィルタリングされてもよく、第1の成分は第2および第3の成分と異なる。
i.一例において、第1の成分は、YCbCrフォーマットのCbであり、第2の成分および第3の成分はそれぞれ、YおよびCrである。
ii.一例において、第1の成分は、YCbCrフォーマットのCrであり、第2の成分および第3の成分はそれぞれ、YおよびCbである。
iii.一例において、第1の成分は、YCbCrフォーマットのYであり、第2の成分および第3の成分はそれぞれ、CbおよびCrである。
iv.一例において、第1の成分は、RGBフォーマットのGであり、第2の成分および第3の成分はそれぞれ、RおよびBである。
v.一例において、第1の成分は、RGBフォーマットのBであり、第2の成分および第3の成分はそれぞれ、RおよびGである。
vi.一例において、第1の成分は、RGBフォーマットのRであり、第2の成分および第3の成分はそれぞれ、GおよびBである。
b.あるいは、第1の成分からサンプルの補正を計算する場合、第2の成分および第3の成分からのサンプルがフィルタリングされてもよく、第1の成分は第2の成分または第3の成分のどちらかと同じである。
i.一例において、第1の成分は、YCbCrフォーマットのCbであり、第2の成分および第3の成分はそれぞれ、CbおよびYである。
ii.一例において、第1の成分は、YCbCrフォーマットのCbであり、第2の成分および第3の成分はそれぞれ、CbおよびCrである。
iii.一例において、第1の成分は、YCbCrフォーマットのCrであり、第2の成分および第3の成分はそれぞれ、CrおよびYである。
iv.一例において、第1の成分は、YCbCrフォーマットのCrであり、第2の成分および第3の成分はそれぞれ、CrおよびCbである。
v.一例において、第1の成分は、YCbCrフォーマットのYであり、第2の成分および第3の成分はそれぞれ、YおよびCbである。
vi.一例において、第1の成分は、YCbCrフォーマットのYであり、第2の成分および第3の成分はそれぞれ、YおよびCrである。
vii.一例において、第1の成分は、RGBフォーマットのGであり、第2の成分および第3の成分はそれぞれ、GおよびRである。
viii.一例において、第1の成分は、RGBフォーマットのGであり、第2の成分および第3の成分はそれぞれ、GおよびBである。
ix.一例において、第1の成分は、RGBフォーマットのBであり、第2の成分および第3の成分はそれぞれ、BおよびRである。
x.一例において、第1の成分は、RGBフォーマットのBであり、第2の成分および第3の成分はそれぞれ、BおよびGである。
xi.一例において、第1の成分は、RGBフォーマットのRであり、第2の成分および第3の成分はそれぞれ、RおよびGである。
xii.一例において、第1の成分は、RGBフォーマットのRであり、第2の成分および第3の成分はそれぞれ、RおよびBである。
c.一例において、第1の成分からサンプルの補正を計算する場合、3つの成分からのサンプルがフィルタリングされてもよい。
i.一例において、第1の成分は、YCbCrフォーマットのCb、またはCr、またはYである。
ii.一例において、第1の成分は、RGBフォーマットのG、またはR、またはBである。
iii.一例において、3つの成分は、YCbCrフォーマットのY、Cb、およびCrである。
iv.一例において、3つの成分は、RGBフォーマットのR、G、およびBである。
d.一例において、第1/第2/第3の成分の指示、および/または、1つのオフセット導出のためにいくつの成分をフィルタリングする必要があるかは、エンコーダからデコーダに信号通知されてもよいし、予め定義されてもよい。
3.CC-ALF処理のために映像ユニット(例えば、スライス/ピクチャ)が2以上のALF APSを参照してよい。すなわち、映像ユニットにおける少なくとも第1のサンプルに対して、第1のALF APSにおけるCC-ALFフィルタが利用されてもよく、一方、映像ユニットにおける少なくとも第2のサンプルに対して第2のALF APSにおけるCC-ALFフィルタを利用してもよい。
a.一例において、参照されるALF APSの数は、コーディングされてもよい。
b.一例において、ALF APSのインデックスは、コーディングされてもよい。
c.一例において、輝度ALFフィルタが参照するのと同じALF APSのセットが、CC-ALFに対して利用されてもよい。
i.あるいは、さらに、CC-ALFフィルタを導出するために使用されるALF APSを信号通知する必要がない。
d.一例において、輝度ALFが参照するALF APSのサブセットまたはスーパーセットが、CC-ALFに対して利用されてもよい。
i.あるいは、さらに、CC-ALFフィルタと輝度ALFフィルタを導出するために使用されるALF APSの差異が信号通知されてもよい。
a.一例において、複数のCC-ALFフィルタの指示は、映像エリア(例えば、CTB/CU/CB/PU/PB、CTB行)において信号通知されてもよい。
i.一例において、指示は、1つのALF APSにおける選択されたCC-ALFフィルタインデックスを含んでもよい。
ii.あるいは、指示は、選択されたCC-ALFフィルタインデックス、および、CC-ALFフィルタが関連付けられているALF APSのインデックスを含んでもよい。
iii.あるいは、指示は、APSにおいて信号通知されない選択された固定CC-ALFフィルタを含んでもよい。
a)あるいは、固定CC-ALFフィルタを予め定義しておき、選択されたCC-ALFフィルタを予測する/選択されたCC-ALFフィルタとしてブロックに継承させるために利用してもよい。
iv.一例において、映像エリアは映像領域と同じである。
v.あるいは、映像エリアは、映像領域よりも大きくてもよいし(例えば、スライス)、小さくてもよい(例えば、CU)。
b.一例において、クロマサンプルは複数のセットに分類されてもよく、CC-ALFフィルタをどのように選択するかは、分類結果に依存してもよい。
i.一例において、2つのクロマ成分が、独立して分類を導出してもよい。
a)一例において、クロマ成分の分類処理は、クロマ成分のためのクロマサンプル情報に依存してもよい。
ii.一例において、2つのクロマ成分が、連帯して分類を導出してもよい。
a)一例において、2つの対応するクロマブロック(CbおよびCr)の分類処理は、2つのブロック内のクロマサンプルに依存してもよい。
iii.一例において、クロマ成分に対する分類処理は、輝度色成分の情報に依存してもよい。
a)一例において、同じクラスインデックスは、クロマブロックおよびその対応する輝度ブロックに設定されてもよい。
iv.一例において、1または複数のクロマ成分の分類処理は、2つ以上の成分(Y+Cb+Cr、Y+Cb、Y+Crなど)に基づく連帯決定に依存してもよい。
v.一例において、クロマサンプルは、輝度ALFにおける輝度サンプルの対応する分類に続いて、複数のセットに分類されてもよい。
vi.あるいは、さらに、分類インデックスに従ってCC-ALFフィルタをどのように選択するかに関する指示を信号通知してもよく、例えば、分類インデックスごとのCC-ALFフィルタインデックスが信号通知されてもよい。
5.クロマサンプルを改善するために使用される前に、改善(例えば、導出されたオフセット)を修正することが提案される。
a.一例において、導出されたオフセットは、所与の範囲にクリップされてもよい。
i.一例において、オフセットをクリップするかどうか、および/または、どのようにクリップするかは、エンコーダからデコーダに信号通知してもよい。
a.一例において、Offset1はOffset2に等しい。
b.一例において、Offset1にOffset2を加えたものは、0に等しくてもよい。
c.一例において、Offset2は、Offset1の線形関数として導出されてもよく、例えば、Offset2はa*Offset1+bに等しい。
d.一例において、クリッピング動作は、Offset1からOffset2を導出するために用いられてもよい。
e.一例において、Offset2は、オフセット1および連帯CbおよびCrモードのスライスレベル符号フラグ(例えば、slice_joint_cbcr_sign_flag)に基づいて導出されてもよい。
i.一例において、slice_joint_cbcr_sign_flagが0である場合、offset2は、offset1に等しく設定されてもよい。
a)あるいは、一例において、slice_joint_cbcr_sign_flagが1である場合、offset2は、-offset1に等しく設定されてもよい。
f.一例において、2つの対応するクロマサンプル(例えば、CbおよびCr)のために、1つのCC-ALFフィルタのセットが使用されてもよい。
i.あるいは、さらに、2つのクロマ成分に対し、CC-ALFフィルタの指示は、2回ではなく1回だけ信号通知してもよい。
g.あるいは、さらに、クロマ成分に対するオフセットの補正をさらに信号通知または導出してもよい。
i.一例において、輝度サンプルから導出されたオフセット(Oで表される)は、第1のクロマ成分(例えば、Cb)の1つのサンプルを改善するために直接的に使用されてもよく、OおよびOの補正は、共に、第2のクロマ成分(例えば、Cr)の1つのサンプルを改善するために使用されてもよい。
a.一例において、サブブロック内のすべてのクロマサンプルに対して、オフセット導出処理を、1回だけ呼び出してもよい。
b.一例において、サブブロック内のクロマサンプルに対し、同じオフセットが利用されてもよい。
i.あるいは、少なくとも第2の色成分から導出されたオフセットはさらに修正されてもよく、例えば、少なくとも第2の色成分から導出されたオフセットは内部オフセットとして設定されてもよく、サブブロックにおけるサンプルの最終オフセットを内部オフセットから導出してもよい。
c.一例において、サブブロックの寸法は、M×N(例えば、2×2;2×1,1×2)に設定されてよい。
d.一例において、サブブロックの寸法は、色フォーマット(例えば、4:4:4または4:2:0)に依存してもよい。
e.一例において、サブブロックの寸法は、異なるブロック(例えば、CTB)において異なってもよい。
f.一例において、サブブロックの寸法は、異なる色成分において異なってもよい。
g.一例において、CC-ALFフィルタサポート領域は、サブブロックの寸法に依存してもよい。
h.一例において、サブブロックサイズおよび/またはCC-ALF起動の粒度は、映像ユニットにおいて信号通知されてもよい。
a.一例において、輝度サンプルの差は、フィルタサポート(領域)における1つの輝度サンプルと対応する輝度サンプルとの間の差として定義されてもよい。クロマサンプル座標を(x,y)で示すと仮定する。
i.一例において、対応する輝度サンプルは、4:4:4フォーマットにおける(x,y)に位置する輝度サンプルである。
ii.一例において、対応する輝度サンプルは、非4:4:4フォーマットにおける(2x,2y)に位置する輝度サンプルである。
iii.一例において、対応する輝度サンプルは、4:2:0フォーマットにおける(2x,2y)および(2x,2y+1)に位置する2つのサンプルの関数(例えば、平均)として導出される。
iv.一例において、式(18)におけるフィルタリング処理は、以下のように書き換えられてもよい。
(x,y)は、改善されているクロマ成分iの位置である。
(xC,yC)は、(x,y)に基づく輝度位置である。
Siは、クロマ成分iのための輝度のフィルタサポートである。
ci(x0,y0)はフィルタ係数を表す。
なお、対応するサンプルが(xC,yC)として定義される場合、x0およびy0の両方が0に等しい際には、これらはSiから除外される。
b.あるいは、さらに、輝度サンプル差は、使用する前に、クリッピングするなど、さらに修正されてもよい。
i.一例において、式(18)におけるフィルタリング処理は、以下のように書き換えられてもよい。
(x,y)は、改善されているクロマ成分iの位置である。
(xC,yC)は、(x,y)に基づく輝度位置である。
Siは、クロマ成分iのための輝度のフィルタサポートである。
ci(x0,y0)はフィルタ係数を表す。
なお、対応するサンプルが(xC,yC)として定義される場合、x0およびy0の両方が0に等しい際には、これらはSiから除外され、関数Clipは(x0,y0)に依存してもよい。
ii.一例において、クリッピングを行うかどうか、および/または、どのようにクリッピングを行うかは、信号通知されてもよい。
iii.一例において、クリッピングパラメータは、デコーダに信号通知されてもよい。
a)あるいは、さらに、輝度ALF処理におけるクリッピングパラメータの信号通知方法が、CC-ALFにおけるクリッピングパラメータを信号通知するために用いられてもよい。
iv.一例において、輝度ALF処理において使用されるクリッピングパラメータ(利用可能である場合)は、CC-ALFにおいて再使用されてもよい。
9.一例において、APSがCC-ALFに関連する情報を含むかどうかを示すために、APSにおいて少なくとも1つの構文要素が信号通知される。
a.一例において、CC-ALFに関連する情報を含むAPSは、新しいAPSタイプとしてマークされてもよい。
b.CbおよびCr CC-ALFフィルタの信号通知の指示(例えば、alf_cross_component_cb_filter_signal_flagおよびalf_cross_component_cr_filter_signal_flag)、1つの構文要素(例えば、alf_cross_conponent_filter_signal_flagによって示される)と連帯してコーディングされてもよい。
i.あるいは、構文要素は非バイナリ値であってもよい。
a.一例において、コーディングツールXは、以下であってもよい。
i.クロマ成分に対するSAO
ii.LMCSにおけるクロマ残差スケーリング
iii.クロマ成分のデブロッキング
iv.クロマ成分のALF
b.一例において、CC-ALF関連サイド情報の信号通知は、コーディングツールXを有効化/無効化するという条件チェックに従っててもよい。
c.一例において、コーディングツールX関連サイド情報の信号通知は、CC-ALFを有効化/無効化するという条件チェックに従ってもよい。
d.一例において、コーディングツール(CC-ALFまたはXのいずれか)が無効化された場合、対応するサイド情報は信号通知されない。
e.CC-ALFおよびコーディングツールXが排他的に使用されるかどうかの決定は、シーケンス全体に対して、またはピクチャ全体に対して、またはスライス全体に対して、またはタイル、サブピクチャ、CTB、コーディングブロック等の領域に対して行われてもよい。
a.一例において、ALFパラメータが輝度成分のために信号通知されない場合、CC-ALFは強制的に無効化される。
i.あるいは、CC-ALF関連サイド情報の信号通知は、輝度成分(例えば、alf_luma_filter_signal_flag)に対するALFの使用の条件チェックに従ってもよい。
ii.あるいは、さらに、ALFパラメータが信号通知されない場合、CC-ALF関連サイド情報の信号通知は省略されてもよい。
b.一例において、輝度成分に対してALFが無効化されている場合、CC-ALFは無効化されることを強制される。
i.あるいは、さらに、CC-ALF関連サイド情報(例えば、slice_cross_component_alf_cb_enabled_flag、slice_cross_component_alf_cr_enabled_flag、alf_ctb_cross_component_cb_idc、またはalf_ctb_cross_component_cr_idc)の信号通知は、輝度成分(例えば、slice_alf_enabled_flag、またはalf_ctb_flag)に対するALFの使用の条件チェックに従ってもよい。
ii.あるいは、さらに、CC-ALF関連サイド情報の信号通知が省略されてもよい。
a.一例において、CC-ALF関連情報(例えば、slice_cross_component_alf_cb_enabled_flag、slice_cross_component_alf_cr_enabled_flag)の信号通知は、利用可能なALF APSの数が0に等しくないという条件チェックに従う。あるいは、CC-ALF関連情報の信号通知は、利用可能なALF APSの数が0よりも大きいという条件チェックに従う。
b.一例において、利用可能なALF APSの数量が0に等しい場合、CC-ALF関連情報(例えば、slice_cross_component_alf_cb_enabled_flag、slice_cross_component_alf_cr_enabled_flag)の信号通知は省略されてもよい。
c.あるいは、適合ビットストリームは、CC-ALFおよび/またはALFに対する信号通知されたAPSインデックスが、送信されたALF APSの数以上であることを満たすものとする。
d.あるいは、適合ビットストリームは、CC-ALFおよび/またはALFに対する信号通知されたAPSインデックスが、1つの利用可能なALF APSを参照することを満たすものとする。
e.あるいは、CC-ALFの使用を信号通知するかどうかは、CC-ALF情報を含む利用可能なALF APSの数に依存してもよい。
13.CC-ALFは、ブロックの予測ステージにおいて適用されてよい。
a.一例において、エンコーダ側において、予測誤差は、オリジナルブロックおよびCC-ALFフィルタリングされた結果、例えば、オリジナル信号とCC-ALFフィルタリングされた結果との間の差に基づいて生成されてもよい。
b.一例において、エンコーダ側において、予測誤差は、オリジナルブロック、所与の予測モードに従う予測ブロック、CC-ALFフィルタリングされた結果(例えば、オリジナル信号から予測信号を減算したものからCC-ALFフィルタリングされた結果を減算したものに設定される)に基づき生成されてもよい。
c.一例において、デコーダ側において、ブロックの再構成は、CC-ALFフィルタリングされた結果および残差に依存してもよい。
d.一例において、デコーダ側において、ブロックの再構成は、CC-ALFフィルタリングされた結果、残差、およびイントラ/インター/他のコーディングモードから生成された予測ブロックに依存してもよい。
e.一例において、上記例は、ブロック内の部分サンプルについては有効化されるが、残りのサンプルについては無効化されてもよい。
i.一例において、部分サンプルは、最初のN個の行/列におけるサンプルを表してもよい。
ii.一例において、部分サンプルは、最後のN個の行/列におけるサンプルを表してもよい。
iii.一例において、Nは、CC-ALFにおいて使用されるフィルタ形状に依存してもよい。
a.一例において、CC-ALFは、すべてのインループフィルタの前に適用されてもよい。
b.一例において、CC-ALFは、ブロックの再構成の後に適用されてもよく、フィルタリングされた再構成ブロックは、次のブロックを予測するために利用されてもよい。
c.一例において、CC-ALFは、SAOの前に適用されてもよい。
a.一例において、ALFの有効化に従って、CC-ALFの使用の指示が条件付きで信号通知されてもよい。
b.一例において、CC-ALFの使用の指示は、クロマ色フォーマットおよび/または別個のプレーンコーディング有効化フラグに従って、条件付きで信号通知されてもよい。
c.一例において、スライス/CTB/CTUにおけるCC-ALFの使用の指示は、映像ユニットに対してCC-ALFのチェックが有効化されているという条件に従ってもよい。
d.一例において、CC-ALFを有効化してよいかどうかを示すために、SPS/VPS/PPS/ピクチャヘッダ/スライスヘッダにおいて構文要素(例えば、フラグ)が信号通知されてもよい。
i.あるいは、さらに、映像ユニットに対してALFが有効化されている場合にのみ(例えば、sps_alf_enabled_flagが1に等しい場合にのみ)、構文要素はコーディングされてもよい。
ii.あるいは、さらに、構文要素は、映像ユニットに対してALFが有効化されており、ChromaArrayTypeが0に等しくない場合にのみ(例えば、sps_alf_enabled_flagが1に等しく、ChromaArrayTypeはゼロではない場合にのみ)コーディングされてもよい。
a.一例において、輝度成分に対してALFが無効化された場合、CC-ALFは、明確に信号通知されることなく同様に無効化される。
a.一例において、M×Nの領域のクロマALFフィルタリング処理に起因するフィルタリングされたサンプルは、M×Nの領域のクロマ成分のCC-ALFに入力される前に、さらに修正されてもよい。
b.一例において、第1のM×Nの領域に対するクロマALFフィルタリング処理および/またはCC-ALFに起因するフィルタリングされたサンプルは、第2のM×Nの領域への入力として利用されてもよい。
c.一例において、まずM×Nの領域におけるクロマ成分のCC-ALFが行われ、次にM×Nの領域におけるクロマ成分のALFが行われてよい。
i.一例において、1つのM×Nの領域に対し、クロマALFフィルタリング処理の入力は、CC-ALFの出力であってもよい。
ii.一例において、M×Nの領域のサンプルは、M×Nの領域のクロマ成分のALFに入力される前に、CC-ALFにより修正されてしまってもよい。
d.一例において、M×Nの領域は、CTBであってもよい。
e.一例において、M×Nの領域は、CTBより小さくてもよい。
i.一例において、M×Nの領域は、1つのサンプルであってもよい。
f.順序は、VPS/DPS/SPS/PPS/ピクチャヘッダ/スライスヘッダなどで、エンコーダからデコーダに信号通知されてもよい。
a.一例において、構文要素の値は非バイナリであってもよい。
i.一例において、Kに等しい構文の値は、所与の色成分に対して非線形ALFおよびCC-ALFの両方が無効化されていることを示す。
ii.一例において、Lに等しい構文の値は、所与の色成分に対して非線形ALFおよびCC-ALFの両方が有効化されていることを示す。
iii.一例において、Mに等しい構文の値は、所与の色成分に対してCC-ALFが無効化されている間、非線形ALFのみが有効化されていることを示す。
iv.一例において、Nに等しい構文の値は、所与の色成分に対して非線形ALFが無効化されている間、CC-ALFのみが有効化されていることを示す。
v.上記例において、K,L,M,Nは、4つの整数値であり、例えば、K=0,L=3,M=1、N=2である。
b.構文要素の値は、固定長、ユーナリー(unary)、トランケイテッドユーナリー(truncated unary)、k次EG等の2値化方法でコーディングされてもよい。
a.映像コンテンツ(例えば、スクリーンコンテンツまたは自然コンテンツ)
b.一例において、デフォルトモードは、DPS/SPS/VPS/PPS/APS/ピクチャヘッダ/スライスヘッダ/タイルグループヘッダ/LCU(Largest Coding Unit)/CU(Coding Unit)/LCU行/LCUグループ/TU/PUブロック/映像符号化ユニットにおいて信号通知されてもよい。
c.CU/PU/TU/ブロック/映像コーディングユニットの位置
d.現在のブロックおよび/またはその近傍のブロックの復号化情報
i.現在のブロックおよび/またはその近傍のブロックのブロック寸法/ブロック形状
e.カラーフォーマットの指示(例えば、4:2:0、4:4:4、RGB、YUV等)
f.コーディングツリー構造(例えば、デュアルツリーまたはシングルツリー)
g.スライス/タイルグループのタイプおよび/またはピクチャのタイプ
h.色成分(例えば、輝度成分および/またはクロマ成分にのみ適用されてもよい)。
i.時間層ID
j.標準のプロファイル/レベル/層
Claims (13)
- 映像データの処理の方法であって、
映像の映像ユニットと、前記映像のビットストリームとの間の変換の間、SPS(Sequence Parameter Set)レベルにて前記ビットストリームにクロスコンポーネントフィルタリングツールの利用の指示を条件付きで含めるかを、適応ループフィルタツールが有効化されているかに基づいて判定することであって、前記クロスコンポーネントフィルタリングツールにおいて、複数のクロマサンプルの値は、複数の輝度サンプルの値を用いることによって改善される、ことと、
前記判定に基づいて、前記変換を実行することと、
を有し、
前記複数のクロマサンプルのうちの1つのクロマサンプルに対する前記クロスコンポーネントフィルタリングツールにて用いられる第1のオフセットは、フィルタサポート領域における複数の輝度サンプルの前記値と、前記映像ユニットのフィルタ係数に基づいて導出され、前記フィルタサポート領域は、前記クロスコンポーネントフィルタリングツールに対して用いられ、かつ、ダイヤモンド形状の輝度の領域であり、
第2のオフセットは、前記第1のオフセットに対するクリッピング動作を用いることに基づいて導出され、前記第2のオフセットは、所与の範囲にクリップされ、
前記変換は、前記クロスコンポーネントフィルタリングツールを適用し、前記第2のオフセットに基づいて前記クロマサンプルを改善することにより実行される、方法。 - 前記クロスコンポーネントフィルタリングツールの利用の前記指示は、クロマカラーフォーマットに更に基づいて前記ビットストリームに条件付きで含まれる、請求項1に記載の方法。
- 前記クロスコンポーネントフィルタリングツールの適用性を示す第1の構文要素は、前記指示が、前記クロスコンポーネントフィルタリングツールが前記SPSレベルにて有効化されていることを示す場合に、ピクチャヘッダまたはスライスヘッダにおいて前記ビットストリームに含まれる、請求項1または2に記載の方法。
- 前記指示は、前記適応ループフィルタツールが無効化されている場合、明示的に含まれない、請求項1から3のいずれか一項に記載の方法。
- 前記クロスコンポーネントフィルタリングツールに関する情報は、前記適応ループフィルタツールが無効化されている場合、前記ビットストリームから除外される、請求項1から4のいずれか一項に記載の方法。
- 前記クロスコンポーネントフィルタリングツールに関する前記情報は、前記クロスコンポーネントフィルタリングツールがCbの色成分に対して有効化されているか否かを規定する第2の構文要素、または、前記クロスコンポーネントフィルタリングツールがCrの色成分に対して有効化されているか否かを規定する第3の構文要素、の少なくとも1つを含む、請求項5に記載の方法。
- 前記クロスコンポーネントフィルタリングツールに関する前記情報は更に、前記第2の構文要素が、前記クロスコンポーネントフィルタリングツールが前記Cbの色成分に対して有効化されていることを示す場合、現在のスライスの前記Cbの色成分が参照する、第1の適応ループフィルタの第1の識別子を規定する第4の構文要素を含み、
前記クロスコンポーネントフィルタリングツールに関する前記情報は更に、前記第3の構文要素が、前記クロスコンポーネントフィルタリングツールが前記Crの色成分に対して有効化されていることを示す場合、前記現在のスライスの前記Crの色成分が参照する、第2の適応ループフィルタの第2の識別子を規定する第5の構文要素を含む、
請求項6に記載の方法。 - 適合ビットストリームは、前記ビットストリームに含まれる前記クロスコンポーネントフィルタリングツールに対する適応ループフィルタの識別子が1つの利用可能な適応ループフィルタを参照するものとすることを満たす、請求項1から7のいずれか一項に記載の方法。
- 前記変換は、前記映像を前記ビットストリームに符号化することを含む、請求項1から8のいずれか一項に記載の方法。
- 前記変換は、前記映像を前記ビットストリームから復号化することを含む、請求項1から8のいずれか一項に記載の方法。
- プロセッサと、命令を有する非一時的メモリを有する、映像データを処理するための装置であって、
前記命令は、前記プロセッサによって実行された際に、前記プロセッサに、
映像の映像ユニットと、前記映像のビットストリームとの間の変換の間、適応ループフィルタツールが有効化されているかに基づいて、SPS(Sequence Parameter Set)レベルにて前記ビットストリームにクロスコンポーネントフィルタリングツールの利用の指示を条件付きで含めるかを判定することであって、前記クロスコンポーネントフィルタリングツールにおいて、クロマ成分の複数のサンプルの値は、輝度成分の複数のサンプルの値を用いることによって改善される、ことと、
前記判定に基づいて、前記変換を実行することと、
を行わせ、
複数のクロマサンプルのうちの1つのクロマサンプルに対する前記クロスコンポーネントフィルタリングツールにて用いられる第1のオフセットは、フィルタサポート領域における複数の輝度サンプルの値と、前記映像ユニットのフィルタ係数に基づいて導出され、前記フィルタサポート領域は、前記クロスコンポーネントフィルタリングツールに対して用いられ、かつ、ダイヤモンド形状の輝度の領域であり、
第2のオフセットは、前記第1のオフセットに対するクリッピング動作を用いることに基づいて導出され、前記第2のオフセットは、所与の範囲にクリップされ、
前記変換は、前記クロスコンポーネントフィルタリングツールを適用し、前記第2のオフセットに基づいて前記クロマサンプルを改善することにより実行される、装置。 - プロセッサに、
映像の映像ユニットと、前記映像のビットストリームとの間の変換の間、SPS(Sequence Parameter Set)レベルにて前記ビットストリームにクロスコンポーネントフィルタリングツールの利用の指示を条件付きで含めるかを、適応ループフィルタツールが有効化されているかに基づいて判定することであって、前記クロスコンポーネントフィルタリングツールにおいて、複数のクロマサンプルの値は、複数の輝度サンプルの値を用いることによって改善される、ことと、
前記判定に基づいて、前記変換を実行することと、
を行わせ、
前記複数のクロマサンプルのうちの1つのクロマサンプルに対する前記クロスコンポーネントフィルタリングツールにて用いられる第1のオフセットは、フィルタサポート領域における複数の輝度サンプルの前記値と、前記映像ユニットのフィルタ係数に基づいて導出され、前記フィルタサポート領域は、前記クロスコンポーネントフィルタリングツールに対して用いられ、かつ、ダイヤモンド形状の輝度の領域であり、
第2のオフセットは、前記第1のオフセットに対するクリッピング動作を用いることに基づいて導出され、前記第2のオフセットは、所与の範囲にクリップされ、
前記変換は、前記クロスコンポーネントフィルタリングツールを適用し、前記第2のオフセットに基づいて前記クロマサンプルを改善することにより実行される、命令を格納した非一時的コンピュータ可読記憶媒体。 - 映像のビットストリームを格納するための方法であって、
映像の映像ユニットに対し、SPS(Sequence Parameter Set)レベルにて前記ビットストリームにクロスコンポーネントフィルタリングツールの利用の指示を条件付きで含めるかを、適応ループフィルタツールが有効化されているかに基づいて判定することであって、前記クロスコンポーネントフィルタリングツールにおいて、複数のクロマサンプルの値は、複数の輝度サンプルの値を用いることによって改善される、ことと、
前記判定に基づいて、前記ビットストリームを生成することと、
非一時的コンピュータ可読記録媒体に前記ビットストリームを格納することと、
を有し、
前記複数のクロマサンプルのうちの1つのクロマサンプルに対する前記クロスコンポーネントフィルタリングツールにて用いられる第1のオフセットは、フィルタサポート領域における複数の輝度サンプルの前記値と、前記映像ユニットのフィルタ係数に基づいて導出され、前記フィルタサポート領域は、前記クロスコンポーネントフィルタリングツールに対して用いられ、かつ、ダイヤモンド形状の輝度の領域であり、
第2のオフセットは、前記第1のオフセットに対するクリッピング動作を用いることに基づいて導出され、前記第2のオフセットは、所与の範囲にクリップされ、
前記生成は、前記クロスコンポーネントフィルタリングツールを適用し、前記第2のオフセットに基づいて前記クロマサンプルを改善することにより実行される、方法。
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CNPCT/CN2019/113955 | 2019-10-29 | ||
| CN2019113955 | 2019-10-29 | ||
| PCT/CN2020/124705 WO2021083259A1 (en) | 2019-10-29 | 2020-10-29 | Signaling of cross-component adaptive loop filter |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2022554307A JP2022554307A (ja) | 2022-12-28 |
| JP7485761B2 true JP7485761B2 (ja) | 2024-05-16 |
Family
ID=75714833
Family Applications (4)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2022525482A Active JP7485761B2 (ja) | 2019-10-29 | 2020-10-29 | クロスコンポーネント適応ループフィルタの信号通知 |
| JP2022525485A Active JP7389252B2 (ja) | 2019-10-29 | 2020-10-29 | クロスコンポーネント適応ループフィルタ |
| JP2022525484A Active JP7389251B2 (ja) | 2019-10-29 | 2020-10-29 | 輝度の差分を用いるクロスコンポーネント適応ループフィルタ |
| JP2023186875A Active JP7662742B2 (ja) | 2019-10-29 | 2023-10-31 | クロスコンポーネント適応ループフィルタ |
Family Applications After (3)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2022525485A Active JP7389252B2 (ja) | 2019-10-29 | 2020-10-29 | クロスコンポーネント適応ループフィルタ |
| JP2022525484A Active JP7389251B2 (ja) | 2019-10-29 | 2020-10-29 | 輝度の差分を用いるクロスコンポーネント適応ループフィルタ |
| JP2023186875A Active JP7662742B2 (ja) | 2019-10-29 | 2023-10-31 | クロスコンポーネント適応ループフィルタ |
Country Status (6)
| Country | Link |
|---|---|
| US (4) | US11736697B2 (ja) |
| EP (3) | EP4042692A4 (ja) |
| JP (4) | JP7485761B2 (ja) |
| KR (3) | KR102707834B1 (ja) |
| CN (4) | CN115244924B (ja) |
| WO (3) | WO2021083258A1 (ja) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2024010138A (ja) * | 2019-10-29 | 2024-01-23 | 北京字節跳動網絡技術有限公司 | クロスコンポーネント適応ループフィルタ |
Families Citing this family (30)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114979663B (zh) | 2019-09-24 | 2023-08-04 | 华为技术有限公司 | 解码器、编码器及其实现的方法 |
| US11425405B2 (en) * | 2019-11-15 | 2022-08-23 | Qualcomm Incorporated | Cross-component adaptive loop filter in video coding |
| EP4078952A4 (en) | 2019-12-17 | 2023-01-25 | Telefonaktiebolaget Lm Ericsson (Publ) | Low complexity image filter |
| GB2590636B (en) * | 2019-12-20 | 2024-01-10 | Canon Kk | High level syntax for video coding and decoding |
| CN117596413A (zh) * | 2019-12-31 | 2024-02-23 | 北京大学 | 视频处理方法及装置 |
| EP4107941A4 (en) * | 2020-03-23 | 2023-04-19 | Beijing Bytedance Network Technology Co., Ltd. | PREDICTION REFINEMENT FOR AFFINE MERGE AND AFFINER MOTION VECTOR PREDICTION MODE |
| US11595676B2 (en) * | 2020-09-16 | 2023-02-28 | Tencent America LLC | Method and apparatus for video coding |
| WO2022115698A1 (en) | 2020-11-30 | 2022-06-02 | Beijing Dajia Internet Information Technology Co., Ltd. | Chroma coding enhancement in cross-component sample adaptive offset |
| US11778177B2 (en) | 2020-12-23 | 2023-10-03 | Qualcomm Incorporated | Adaptive loop filter with fixed filters |
| US12335470B2 (en) * | 2021-02-26 | 2025-06-17 | Alibaba Group Holding Limited | Directional cross component filter for video coding |
| US11683530B2 (en) * | 2021-03-19 | 2023-06-20 | Tencent America LLC | Adaptive non-linear mapping for sample offset |
| JP7727757B2 (ja) * | 2021-05-26 | 2025-08-21 | ベイジン ダジア インターネット インフォメーション テクノロジー カンパニー リミテッド | 方法、電子装置、および非一時的コンピュータ可読ストレージ媒体 |
| KR20230002091A (ko) * | 2021-06-29 | 2023-01-05 | 주식회사 케이티 | 화면내 예측 기반의 비디오 신호 부호화/복호화 방법 및 장치, 그리고 비트스트림을 저장한 기록 매체 |
| US11863775B2 (en) * | 2021-07-21 | 2024-01-02 | Tencent America LLC | Cross-component transform coefficient level reconstruction |
| CN116456086A (zh) * | 2022-01-07 | 2023-07-18 | 腾讯科技(深圳)有限公司 | 环路滤波方法、视频编解码方法、装置、介质及电子设备 |
| EP4544773A1 (en) * | 2022-06-21 | 2025-04-30 | InterDigital CE Patent Holdings, SAS | Methods and apparatuses for encoding and decoding an image or a video |
| EP4548580A1 (en) * | 2022-06-28 | 2025-05-07 | Beijing Dajia Internet Information Technology Co., Ltd. | Methods and apparatus on chroma motion compensation using adaptive cross-component filtering |
| CN119790651A (zh) * | 2022-08-18 | 2025-04-08 | 现代自动车株式会社 | 基于非线性交叉分量关系利用cc-alf的视频编解码的方法和装置 |
| US20230034367A1 (en) * | 2022-09-28 | 2023-02-02 | Intel Corporation | Adaptive loop filter classification and selection for video coding |
| US12439037B2 (en) * | 2022-12-22 | 2025-10-07 | Qualcomm Incorporated | Area optimized storage scheme for cross-component adaptive loop filtering |
| US12262019B2 (en) | 2023-01-13 | 2025-03-25 | Tencent America LLC | Adaptive bands for filter offset selection in cross-component sample offset |
| CN116248900B (zh) * | 2023-02-24 | 2025-09-02 | 中山大学 | 一种非线性跨分量预测模型的系数优化方法 |
| US12388991B2 (en) | 2023-02-27 | 2025-08-12 | Tencent America LLC | Feature based cross-component sample offset optimization and signaling improvement |
| CN121399945A (zh) * | 2023-04-21 | 2026-01-23 | 腾讯美国有限责任公司 | 对色度信令的交叉分量残差预测及intratmp模式 |
| CN121128166A (zh) * | 2023-05-15 | 2025-12-12 | 北京达佳互联信息技术有限公司 | 基于自适应跨分量滤波的色度运动补偿方法与装置 |
| US12425598B2 (en) | 2023-08-03 | 2025-09-23 | Tencent America LLC | Cross component sample offset filtering with asymmetric quantizer |
| US12445623B2 (en) * | 2023-08-14 | 2025-10-14 | Tencent America LLC | Adaptive range for clipping processes for video and image compression |
| US12413720B2 (en) * | 2023-08-31 | 2025-09-09 | Tencent America LLC | Cross component sample offset filtering with interpolated filter taps |
| WO2025101477A1 (en) * | 2023-11-06 | 2025-05-15 | Beijing Dajia Internet Information Technology Co., Ltd | Methods and devices for adaptive loop filter and cross- component adaptive loop filter |
| WO2025221445A1 (en) * | 2024-04-15 | 2025-10-23 | Qualcomm Incorporated | Adaptive loop filter (alf) and/or cross-component alf for video coding |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20150264099A1 (en) | 2014-03-14 | 2015-09-17 | Sharp Laboratories Of America, Inc. | Systems and methods for constraining a bitstream |
| US20150271515A1 (en) | 2014-01-10 | 2015-09-24 | Qualcomm Incorporated | Block vector coding for intra block copy in video coding |
| JP2022545838A (ja) | 2019-08-29 | 2022-10-31 | エルジー エレクトロニクス インコーポレイティド | フィルタリングベースの映像コーディング装置及び方法 |
| JP7389252B2 (ja) | 2019-10-29 | 2023-11-29 | 北京字節跳動網絡技術有限公司 | クロスコンポーネント適応ループフィルタ |
Family Cites Families (93)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2970472B2 (ja) * | 1995-06-01 | 1999-11-02 | 日本電気株式会社 | 固体撮像装置 |
| US7136417B2 (en) | 2002-07-15 | 2006-11-14 | Scientific-Atlanta, Inc. | Chroma conversion optimization |
| US7397515B2 (en) | 2004-01-30 | 2008-07-08 | Broadcom Corporation | Method and system for cross-chrominance removal using motion detection |
| US8452117B2 (en) * | 2009-02-10 | 2013-05-28 | Silicon Image, Inc. | Block noise detection and filtering |
| US20130028326A1 (en) | 2010-04-09 | 2013-01-31 | Mitsubishi Electric Corporation | Moving image encoding device and moving image decoding device |
| US9094658B2 (en) * | 2010-05-10 | 2015-07-28 | Mediatek Inc. | Method and apparatus of adaptive loop filtering |
| WO2012155553A1 (en) * | 2011-05-16 | 2012-11-22 | Mediatek Inc. | Apparatus and method of sample adaptive offset for luma and chroma components |
| WO2013031315A1 (ja) * | 2011-08-30 | 2013-03-07 | ソニー株式会社 | 画像処理装置及び画像処理方法 |
| US9185404B2 (en) | 2011-10-07 | 2015-11-10 | Qualcomm Incorporated | Performing transform dependent de-blocking filtering |
| US9807403B2 (en) * | 2011-10-21 | 2017-10-31 | Qualcomm Incorporated | Adaptive loop filtering for chroma components |
| US9247258B2 (en) | 2011-10-26 | 2016-01-26 | Qualcomm Incorporated | Unified design for picture partitioning schemes |
| US9077998B2 (en) | 2011-11-04 | 2015-07-07 | Qualcomm Incorporated | Padding of segments in coded slice NAL units |
| US9414054B2 (en) | 2012-07-02 | 2016-08-09 | Microsoft Technology Licensing, Llc | Control and use of chroma quantization parameter values |
| EP2901703A2 (en) | 2012-09-28 | 2015-08-05 | VID SCALE, Inc. | Cross-plane filtering for chroma signal enhancement in video coding |
| EP2941871A2 (en) | 2013-01-07 | 2015-11-11 | VID SCALE, Inc. | Enhanced deblocking filters for video coding |
| US9578339B2 (en) | 2013-03-05 | 2017-02-21 | Qualcomm Incorporated | Parallel processing for video coding |
| US9503732B2 (en) * | 2013-04-10 | 2016-11-22 | Arris Enterprises, Inc. | Re-sampling with phase offset adjustment for luma and chroma to select filters in scalable video coding |
| US9686561B2 (en) * | 2013-06-17 | 2017-06-20 | Qualcomm Incorporated | Inter-component filtering |
| US9578328B2 (en) | 2013-07-15 | 2017-02-21 | Qualcomm Incorporated | Cross-layer parallel processing and offset delay parameters for video coding |
| HK1218820A1 (zh) | 2013-09-27 | 2017-03-10 | 高通股份有限公司 | 用於深度幀內預測模式的殘餘譯碼 |
| US9628822B2 (en) | 2014-01-30 | 2017-04-18 | Qualcomm Incorporated | Low complexity sample adaptive offset encoding |
| US9807406B2 (en) | 2014-03-17 | 2017-10-31 | Qualcomm Incorporated | Picture flushing and decoded picture buffer parameter inference for multi-layer bitstreams |
| US10200700B2 (en) * | 2014-06-20 | 2019-02-05 | Qualcomm Incorporated | Cross-component prediction in video coding |
| US20150382016A1 (en) * | 2014-06-27 | 2015-12-31 | Mitsubishi Electric Research Laboratories, Inc. | Method for Processing Multi-Component Video and Images |
| JP2017531382A (ja) | 2014-09-12 | 2017-10-19 | ヴィド スケール インコーポレイテッド | ビデオ符号化のための成分間相関解除 |
| US20160105685A1 (en) * | 2014-10-08 | 2016-04-14 | Qualcomm Incorporated | Boundary filtering and cross-component prediction in video coding |
| US9838662B2 (en) * | 2014-10-10 | 2017-12-05 | Qualcomm Incorporated | Harmonization of cross-component prediction and adaptive color transform in video coding |
| KR20170071594A (ko) | 2014-10-28 | 2017-06-23 | 미디어텍 싱가폴 피티이. 엘티디. | 비디오 코딩을 위한 가이드된 크로스-컴포넌트 예측 방법 |
| US9591325B2 (en) | 2015-01-27 | 2017-03-07 | Microsoft Technology Licensing, Llc | Special case handling for merged chroma blocks in intra block copy prediction mode |
| US10057574B2 (en) | 2015-02-11 | 2018-08-21 | Qualcomm Incorporated | Coding tree unit (CTU) level adaptive loop filter (ALF) |
| US20170006283A1 (en) | 2015-06-30 | 2017-01-05 | Microsoft Technology Licensing, Llc | Computationally efficient sample adaptive offset filtering during video encoding |
| KR102460912B1 (ko) * | 2015-07-08 | 2022-10-28 | 인터디지털 매디슨 페턴트 홀딩스 에스에이에스 | 교차 평면 필터링을 이용한 향상된 크로마 코딩 |
| WO2017045101A1 (en) | 2015-09-14 | 2017-03-23 | Mediatek Singapore Pte. Ltd. | Advanced deblocking filter in video coding |
| CN107113422B (zh) | 2015-11-06 | 2020-08-25 | 微软技术许可有限责任公司 | 一种用于视频编码和解码的参考图片管理的计算机系统 |
| WO2017123487A1 (en) * | 2016-01-15 | 2017-07-20 | Vid Scale, Inc. | System and method for enhanced motion compensation using adaptive filtering |
| US11064195B2 (en) | 2016-02-15 | 2021-07-13 | Qualcomm Incorporated | Merging filters for multiple classes of blocks for video coding |
| US10419755B2 (en) * | 2016-05-16 | 2019-09-17 | Qualcomm Incorporated | Confusion of multiple filters in adaptive loop filtering in video coding |
| US10887621B2 (en) | 2016-07-08 | 2021-01-05 | Vid Scale, Inc. | 360-degree video coding using geometry projection |
| US11095922B2 (en) * | 2016-08-02 | 2021-08-17 | Qualcomm Incorporated | Geometry transformation-based adaptive loop filtering |
| US10419757B2 (en) * | 2016-08-31 | 2019-09-17 | Qualcomm Incorporated | Cross-component filter |
| US20180184127A1 (en) | 2016-12-22 | 2018-06-28 | Qualcomm Incorporated | Determining neighboring samples for bilateral filtering in video coding |
| US10506230B2 (en) | 2017-01-04 | 2019-12-10 | Qualcomm Incorporated | Modified adaptive loop filter temporal prediction for temporal scalability support |
| KR20200005539A (ko) | 2017-04-11 | 2020-01-15 | 브이아이디 스케일, 인크. | 면 연속성을 사용하는 360 도 비디오 코딩 |
| US10778974B2 (en) | 2017-07-05 | 2020-09-15 | Qualcomm Incorporated | Adaptive loop filter with enhanced classification methods |
| US10728573B2 (en) | 2017-09-08 | 2020-07-28 | Qualcomm Incorporated | Motion compensated boundary pixel padding |
| JP7343487B2 (ja) | 2017-09-20 | 2023-09-12 | ヴィド スケール インコーポレイテッド | 360度ビデオ符号化におけるフェイス不連続の処理 |
| US20210067802A1 (en) | 2017-09-26 | 2021-03-04 | Samsung Electronics Co., Ltd. | Video decoding method and device using cross-component prediction, and video encoding method and device using cross-component prediction |
| US10965941B2 (en) | 2017-10-09 | 2021-03-30 | Qualcomm Incorporated | Position-dependent prediction combinations in video coding |
| WO2019089695A1 (en) | 2017-11-01 | 2019-05-09 | Vid Scale, Inc. | Methods for simplifying adaptive loop filter in video coding |
| CN111316649B (zh) | 2017-11-01 | 2024-06-11 | Vid拓展公司 | 重叠块运动补偿 |
| CN107801024B (zh) | 2017-11-09 | 2019-07-12 | 北京大学深圳研究生院 | 一种用于帧内预测的边界滤波方法 |
| US10721469B2 (en) | 2017-11-28 | 2020-07-21 | Qualcomm Incorporated | Line buffer reduction for adaptive loop filtering in video coding |
| CN118509596A (zh) | 2017-12-19 | 2024-08-16 | Vid拓展公司 | 用于360度视频译码的面不连续性滤波 |
| EP3732880A4 (en) | 2017-12-29 | 2021-04-28 | Sharp Kabushiki Kaisha | SYSTEMS AND METHODS FOR DIVIDING VIDEO BLOCKS AT A BORDER OF AN IMAGE FOR VIDEO ENCODING |
| US10972729B2 (en) | 2018-01-20 | 2021-04-06 | Qualcomm Incorporated | Deblocking filter selection and application in video coding |
| US20190238845A1 (en) | 2018-01-26 | 2019-08-01 | Qualcomm Incorporated | Adaptive loop filtering on deblocking filter results in video coding |
| CN113573057B (zh) * | 2018-02-01 | 2023-07-18 | 寰发股份有限公司 | 具有视频数据自适应量化的视频编码或解码方法和装置 |
| WO2019157717A1 (zh) | 2018-02-14 | 2019-08-22 | 北京大学 | 运动补偿的方法、装置和计算机系统 |
| GB2571314A (en) * | 2018-02-23 | 2019-08-28 | Canon Kk | Methods and devices for linear component sample prediction using a double classification |
| US10708592B2 (en) | 2018-04-02 | 2020-07-07 | Qualcomm Incorporated | Deblocking filter for video coding and processing |
| US20190306502A1 (en) | 2018-04-02 | 2019-10-03 | Qualcomm Incorporated | System and method for improved adaptive loop filtering |
| WO2019194647A1 (ko) * | 2018-04-06 | 2019-10-10 | 가온미디어 주식회사 | 필터 정보 기반의 적응적 루프 필터링 방법, 그를 이용한 영상 부호화 및 복호화 방법 |
| WO2020035837A1 (en) | 2018-08-17 | 2020-02-20 | Beijing Bytedance Network Technology Co., Ltd. | Simplified cross component prediction |
| CN110896480B (zh) | 2018-09-12 | 2024-09-10 | 北京字节跳动网络技术有限公司 | 交叉分量线性模型中的尺寸相关的下采样 |
| CN116055732A (zh) | 2018-09-14 | 2023-05-02 | 华为技术有限公司 | 视频译码方法,设备以及非瞬时性计算机可读介质 |
| CN110971931A (zh) * | 2018-09-30 | 2020-04-07 | 北京微播视界科技有限公司 | 视频水印添加方法、装置、电子设备及存储介质 |
| CN116939198A (zh) | 2018-10-23 | 2023-10-24 | 北京字节跳动网络技术有限公司 | 并置的局部照明补偿和修改的帧间预测编解码 |
| CN112997488B (zh) | 2018-11-06 | 2024-04-12 | 北京字节跳动网络技术有限公司 | 依赖于位置的帧内预测 |
| CN113170122B (zh) | 2018-12-01 | 2023-06-27 | 北京字节跳动网络技术有限公司 | 帧内预测的参数推导 |
| SG11202105759QA (en) | 2018-12-07 | 2021-06-29 | Beijing Bytedance Network Technology Co Ltd | Context-based intra prediction |
| CN113287311B (zh) | 2018-12-22 | 2024-03-12 | 北京字节跳动网络技术有限公司 | 两步交叉分量预测模式的指示 |
| ES2993577T3 (en) | 2019-01-09 | 2025-01-02 | Huawei Tech Co Ltd | A video encoder, a video decoder and corresponding methods |
| CN113383554B (zh) | 2019-01-13 | 2022-12-16 | 北京字节跳动网络技术有限公司 | LUT和共享Merge列表之间的交互 |
| MY207950A (en) | 2019-02-22 | 2025-03-31 | Beijing Bytedance Network Tech Co Ltd | Neighboring sample selection for intra prediction |
| MX392417B (es) | 2019-02-24 | 2025-03-24 | Beijing Bytedance Network Tech Co Ltd | Derivación de parámetros para intrapredicción. |
| PT3931746T (pt) | 2019-02-27 | 2025-06-23 | Huawei Tech Co Ltd | Conjunto de parâmetros de adaptação de mapeamento de luma com escalonamento de croma na codificação de vídeo |
| KR20210130735A (ko) | 2019-03-02 | 2021-11-01 | 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 | 인-루프 필터링에 대한 제한들 |
| ES2983276T3 (es) | 2019-03-11 | 2024-10-22 | Huawei Tech Co Ltd | Recorte de filtro de interpolación para vectores de movimiento de subimagen |
| CN117499644A (zh) | 2019-03-14 | 2024-02-02 | 北京字节跳动网络技术有限公司 | 环路整形信息的信令和语法 |
| MX2021011247A (es) | 2019-03-24 | 2021-10-01 | Beijing Bytedance Network Tech Co Ltd | Filtrado de bucle adaptativo no lineal en procesamiento de video. |
| WO2020192642A1 (en) | 2019-03-24 | 2020-10-01 | Beijing Bytedance Network Technology Co., Ltd. | Conditions in parameter derivation for intra prediction |
| CN113678464B (zh) | 2019-04-15 | 2022-12-02 | 北京字节跳动网络技术有限公司 | 非线性自适应环路滤波器中的参数的时域预测 |
| WO2020211809A1 (en) | 2019-04-16 | 2020-10-22 | Beijing Bytedance Network Technology Co., Ltd. | On adaptive loop filtering for video coding |
| US11197030B2 (en) | 2019-08-08 | 2021-12-07 | Panasonic Intellectual Property Corporation Of America | System and method for video coding |
| GB2586484B (en) * | 2019-08-20 | 2023-03-08 | Canon Kk | A filter |
| US11234010B2 (en) * | 2019-08-28 | 2022-01-25 | Qualcomm Incorporated | Cross-component adaptive loop filtering for video coding |
| PL4024858T3 (pl) | 2019-08-29 | 2025-10-06 | Lg Electronics Inc. | Sposób i urządzenie do kodowania obrazu w oparciu o międzykomponentowe adaptacyjne filtrowanie w pętli |
| KR20250161058A (ko) | 2019-08-29 | 2025-11-14 | 엘지전자 주식회사 | 인루프 필터링 기반 영상 코딩 장치 및 방법 |
| CN119767042A (zh) * | 2019-08-29 | 2025-04-04 | Lg电子株式会社 | 图像编码/解码方法、数据的传输方法和存储介质 |
| US11202068B2 (en) * | 2019-09-16 | 2021-12-14 | Mediatek Inc. | Method and apparatus of constrained cross-component adaptive loop filtering for video coding |
| US11115671B2 (en) * | 2019-09-18 | 2021-09-07 | Panasonic Intellectual Property Corporation Of America | System and method for video coding |
| KR20220081999A (ko) | 2019-09-23 | 2022-06-16 | 브이아이디 스케일, 인크. | 공동 컴포넌트 비디오 프레임 필터링 |
| US11265558B2 (en) | 2019-11-22 | 2022-03-01 | Qualcomm Incorporated | Cross-component adaptive loop filter |
-
2020
- 2020-10-29 JP JP2022525482A patent/JP7485761B2/ja active Active
- 2020-10-29 KR KR1020227013598A patent/KR102707834B1/ko active Active
- 2020-10-29 EP EP20882345.0A patent/EP4042692A4/en active Pending
- 2020-10-29 WO PCT/CN2020/124701 patent/WO2021083258A1/en not_active Ceased
- 2020-10-29 KR KR1020227013600A patent/KR102717414B1/ko active Active
- 2020-10-29 WO PCT/CN2020/124700 patent/WO2021083257A1/en not_active Ceased
- 2020-10-29 CN CN202080076587.8A patent/CN115244924B/zh active Active
- 2020-10-29 JP JP2022525485A patent/JP7389252B2/ja active Active
- 2020-10-29 EP EP20882124.9A patent/EP4042684A4/en active Pending
- 2020-10-29 CN CN202311591061.5A patent/CN117528097A/zh active Pending
- 2020-10-29 CN CN202080076586.3A patent/CN114846793B/zh active Active
- 2020-10-29 WO PCT/CN2020/124705 patent/WO2021083259A1/en not_active Ceased
- 2020-10-29 KR KR1020227013595A patent/KR102717413B1/ko active Active
- 2020-10-29 JP JP2022525484A patent/JP7389251B2/ja active Active
- 2020-10-29 CN CN202080076672.4A patent/CN114631313B/zh active Active
- 2020-10-29 EP EP20881603.3A patent/EP4035363A4/en active Pending
-
2022
- 2022-04-29 US US17/732,692 patent/US11736697B2/en active Active
- 2022-04-29 US US17/732,743 patent/US11722674B2/en active Active
- 2022-04-29 US US17/732,777 patent/US11622115B2/en active Active
-
2023
- 2023-08-21 US US18/453,041 patent/US12206859B2/en active Active
- 2023-10-31 JP JP2023186875A patent/JP7662742B2/ja active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20150271515A1 (en) | 2014-01-10 | 2015-09-24 | Qualcomm Incorporated | Block vector coding for intra block copy in video coding |
| US20150264099A1 (en) | 2014-03-14 | 2015-09-17 | Sharp Laboratories Of America, Inc. | Systems and methods for constraining a bitstream |
| JP2022545838A (ja) | 2019-08-29 | 2022-10-31 | エルジー エレクトロニクス インコーポレイティド | フィルタリングベースの映像コーディング装置及び方法 |
| JP7389252B2 (ja) | 2019-10-29 | 2023-11-29 | 北京字節跳動網絡技術有限公司 | クロスコンポーネント適応ループフィルタ |
Non-Patent Citations (4)
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2024010138A (ja) * | 2019-10-29 | 2024-01-23 | 北京字節跳動網絡技術有限公司 | クロスコンポーネント適応ループフィルタ |
| JP7662742B2 (ja) | 2019-10-29 | 2025-04-15 | 北京字節跳動網絡技術有限公司 | クロスコンポーネント適応ループフィルタ |
Also Published As
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP7662742B2 (ja) | クロスコンポーネント適応ループフィルタ | |
| JP7651660B2 (ja) | クロス成分適応ループフィルタ | |
| US12096013B2 (en) | Signaling for transform skip mode | |
| US12278998B2 (en) | Scaling process for coding block |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220513 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220513 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230425 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230719 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20231017 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240115 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240409 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240502 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 7485761 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |