本公開的實施例一般涉及視頻編解碼技術(shù),并且更具體地,涉及用于圖像/視頻編解碼的基于神經(jīng)網(wǎng)絡(luò)(nn)的濾波器的組合。
背景技術(shù):
1、如今,數(shù)字視頻功能正被應(yīng)用于人們生活的各個方面。針對視頻編碼/解碼,已經(jīng)提出了多種類型的視頻壓縮技術(shù),諸如,mpeg-2、mpeg-4、itu-t?h.263、itu-t?h.264/mpeg-4第10部分高級視頻編解碼(avc)、itu-t?h.265高效視頻編解碼(hevc)標(biāo)準(zhǔn)、通用視頻編解碼(vvc)標(biāo)準(zhǔn)。然而,傳統(tǒng)視頻編解碼技術(shù)的編解碼效率通常非常低,這是不期望的。
技術(shù)實現(xiàn)思路
1、本公開的實施例提供了一種用于視頻處理的解決方案。
2、在第一方面,提出了一種用于視頻處理的方法。該方法包括:在視頻的視頻單元與視頻單元的碼流之間的轉(zhuǎn)換期間,基于模型將多個組合的濾波器應(yīng)用于視頻單元;以及基于應(yīng)用執(zhí)行轉(zhuǎn)換。根據(jù)本公開的第一方面的方法自適應(yīng)地組合濾波器,這可以有利地提高編解碼效率和編解碼性能。
3、在第二方面,提出了另一種用于視頻處理的方法。該方法包括:在視頻的視頻單元與視頻單元的碼流之間的轉(zhuǎn)換期間,確定指示啟用多個濾波器的組合應(yīng)用的至少一個語法元素;以及基于至少一個語法元素執(zhí)行轉(zhuǎn)換。根據(jù)本公開的第二方面的方法定義了指示啟用濾波器的組合應(yīng)用的至少一個語法元素,其有利地提高了編解碼效率和編解碼性能。
4、在第三方面,提出了一種用于處理視頻數(shù)據(jù)的裝置。該用于處理視頻數(shù)據(jù)的裝置包括處理器和其上具有指令的非暫態(tài)存儲器,其中該指令在由處理器執(zhí)行時使處理器執(zhí)行根據(jù)第一方面的方法。
5、在第四方面,提出了一種用于處理視頻數(shù)據(jù)的裝置。該用于處理視頻數(shù)據(jù)的裝置包括處理器和其上具有指令的非暫態(tài)存儲器,其中該指令在由處理器執(zhí)行時使處理器執(zhí)行根據(jù)第二方面的方法。
6、在第五方面,提出了一種非暫態(tài)計算機(jī)可讀記錄介質(zhì)。該非暫態(tài)計算機(jī)可讀記錄介質(zhì)存儲視頻的通過由視頻處理裝置執(zhí)行的方法而生成的碼流。該方法包括:基于模型將多個組合的濾波器應(yīng)用于視頻單元;以及基于應(yīng)用生成視頻單元的碼流。
7、在第六方面,提出了一種用于存儲視頻的碼流的方法。該方法包括:基于模型將多個組合的濾波器應(yīng)用于視頻的視頻單元;基于應(yīng)用生成視頻單元的碼流;以及將碼流存儲在非暫態(tài)計算機(jī)可讀記錄介質(zhì)中。
8、在第七方面,提出了另一種非暫態(tài)計算機(jī)可讀記錄介質(zhì)。該非暫態(tài)計算機(jī)可讀記錄介質(zhì)存儲視頻的視頻單元的通過由視頻處理裝置執(zhí)行的方法而生成的碼流。該方法包括:確定指示啟用多個濾波器的組合應(yīng)用的至少一個語法元素;以及基于至少一個語法元素,生成視頻單元的碼流。
9、在第八方面,提出了一種用于存儲視頻的碼流的方法。該方法包括:確定指示啟用多個濾波器的組合應(yīng)用的至少一個語法元素;基于至少一個語法元素,生成視頻的視頻單元的碼流;以及將碼流存儲在非暫態(tài)計算機(jī)可讀記錄介質(zhì)中。
10、提供本
技術(shù)實現(xiàn)要素:
部分是為了以簡化的形式介紹以下具體實施方式中進(jìn)一步描述的概念的選擇。本發(fā)明內(nèi)容部分不旨在標(biāo)識所要求保護(hù)的主題的關(guān)鍵特征或基本特征,也不旨在用于限制所要求保護(hù)主題的范圍。
1.一種視頻處理的方法,包括:
2.根據(jù)權(quán)利要求1所述的方法,其中所述應(yīng)用是自適應(yīng)的。
3.根據(jù)權(quán)利要求1所述的方法,其中所述應(yīng)用取決于所述視頻單元的統(tǒng)計。
4.根據(jù)權(quán)利要求1所述的方法,其中所述模型是線性模型或神經(jīng)網(wǎng)絡(luò)(nn)模型。
5.根據(jù)權(quán)利要求1所述的方法,其中由所述多個濾波器輸出的樣本被置入經(jīng)解碼的圖片緩沖中或由所述多個濾波器輸出的樣本是最終顯示信號。
6.根據(jù)權(quán)利要求1所述的方法,其中所述多個濾波器包括nn濾波器和/或非-nn濾波器。
7.根據(jù)權(quán)利要求1所述的方法,其中所述視頻單元的樣本通過應(yīng)用所述多個濾波器被限幅。
8.根據(jù)權(quán)利要求7所述的方法,其中所述限幅取決于所述視頻單元的所述編解碼模式和/或編解碼統(tǒng)計。
9.根據(jù)權(quán)利要求3或8所述的方法,其中所述編解碼統(tǒng)計包括預(yù)測模式、量化參數(shù)(qp)、時間層或條帶類型中的至少一項。
10.根據(jù)權(quán)利要求7所述的方法,其中所述限幅取決于所述多個濾波器的輸入信號和/或內(nèi)部信號的所述位深度。
11.根據(jù)權(quán)利要求1所述的方法,其中所述模型是線性模型。
12.根據(jù)權(quán)利要求11所述的方法,其中所述視頻單元的當(dāng)前樣本的鄰近樣本被涉及在所述線性模型中。
13.根據(jù)權(quán)利要求12所述的方法,其中所述鄰近樣本包括與所述當(dāng)前樣本相鄰和/或不相鄰的樣本。
14.根據(jù)權(quán)利要求11所述的方法,其中所述線性模型被表示如下:
15.根據(jù)權(quán)利要求14所述的方法,其中所述融合樣本或所述融合樣本的經(jīng)限幅的值是最終重建。
16.根據(jù)權(quán)利要求14所述的方法,其中b等于0并且y=∑ak*xk。
17.根據(jù)權(quán)利要求14所述的方法,其中∑ak等于常數(shù)值。
18.根據(jù)權(quán)利要求16所述的方法,其中∑ak=1并且y=∑ak-1*xk-1+(1-∑ak-1)*xk+b。
19.根據(jù)權(quán)利要求14所述的方法,其中b=0且∑ak=1,并且y=∑ak-1*xk-1+(1-∑ak-1)*xk。
20.根據(jù)權(quán)利要求14所述的方法,其中k是1、2、3、4或5。
21.根據(jù)權(quán)利要求14所述的方法,其中k=1且y=a1*x1+b,或
22.根據(jù)權(quán)利要求14所述的方法,其中k=2且b=0,使得y=a1*x1+a2*x2。
23.根據(jù)權(quán)利要求14所述的方法,其中k=2且∑ak=1,使得y=a1*x1+(1-a1)*x2+b。
24.根據(jù)權(quán)利要求14所述的方法,其中k=2且b=0且∑ak=1,使得y=a1*x1+(1-a1)*x2。
25.根據(jù)權(quán)利要求14所述的方法,其中k=3且b=0,使得y=a1*x1+a2*x2+a3*x3。
26.根據(jù)權(quán)利要求14所述的方法,其中k=3且∑ak=1,使得y=a1*x1+a2*x2+(1-a1-a2)*x3+b。
27.根據(jù)權(quán)利要求14所述的方法,其中k=3且b=0且∑ak=1,使得y=a1*x1+a2*x2+(1-a1-a2)*x3。
28.根據(jù)權(quán)利要求14所述的方法,其中k=2,所述多個濾波器包括第一濾波器和第二濾波器,并且所述第一濾波器和所述第二濾波器都是nn濾波器。
29.根據(jù)權(quán)利要求28所述的方法,其中所述第一濾波器的模型或網(wǎng)絡(luò)結(jié)構(gòu)與所述第二濾波器的所述模型不同。
30.根據(jù)權(quán)利要求28所述的方法,其中所述第一濾波器的模型或網(wǎng)絡(luò)結(jié)構(gòu)是所述第二濾波器的所述模型的經(jīng)簡化的版本。
31.根據(jù)權(quán)利要求28所述的方法,其中所述第一濾波器的模型是所述第二濾波器的所述模型的經(jīng)簡化的版本。
32.根據(jù)權(quán)利要求28所述的方法,其中所述第一濾波器的輸入?yún)?shù)與所述第二濾波器的輸入?yún)?shù)不同。
33.根據(jù)權(quán)利要求32所述的方法,其中所述第一濾波器的模型或網(wǎng)絡(luò)結(jié)構(gòu)與所述第二濾波器的所述模型相同。
34.根據(jù)權(quán)利要求32所述的方法,其中所述第一濾波器的模型或網(wǎng)絡(luò)結(jié)構(gòu)與所述第二濾波器的所述模型不同。
35.根據(jù)權(quán)利要求32所述的方法,其中所述第一濾波器與所述第二濾波器之間的差異是訓(xùn)練數(shù)據(jù)。
36.根據(jù)權(quán)利要求35所述的方法,其中所述訓(xùn)練數(shù)據(jù)包括質(zhì)量-級別指示符。
37.根據(jù)權(quán)利要求36所述的方法,其中針對所述第一濾波器和所述第二濾波器,作為輸入的所述質(zhì)量-級別指示符是不同的。
38.根據(jù)權(quán)利要求36所述的方法,其中所述質(zhì)量-級別指示符是量化參數(shù)(qp)或λ或恒定速率因子(crf)值或比特率。
39.根據(jù)權(quán)利要求14所述的方法,其中k=2,所述多個濾波器包括第一濾波器和第二濾波器,所述第一濾波器是nn濾波器,并且所述第二濾波器是以下之一:
40.根據(jù)權(quán)利要求14所述的方法,其中k=2,所述多個濾波器包括第一濾波器和第二濾波器,所述第一濾波器是nn濾波器,并且所述第二濾波器是包括以下至少一項的組:
41.根據(jù)權(quán)利要求14所述的方法,其中k=3,所述多個濾波器包括第一濾波器、第二濾波器和第三濾波器,并且所述第一濾波器、所述第二濾波器和所述第三濾波器都是nn濾波器。
42.根據(jù)權(quán)利要求41所述的方法,其中所述第一濾波器、所述第二濾波器和所述第三濾波器的模型或網(wǎng)絡(luò)結(jié)構(gòu)互不相同。
43.根據(jù)權(quán)利要求41所述的方法,其中所述第一濾波器和/或所述第二濾波器的模型或網(wǎng)絡(luò)結(jié)構(gòu)是所述第三濾波器的所述模型或所述網(wǎng)絡(luò)結(jié)構(gòu)的經(jīng)簡化的版本,或
44.根據(jù)權(quán)利要求41所述的方法,其中所述第一濾波器、所述第二濾波器和/或所述第三濾波器的所述輸入?yún)?shù)互不相同。
45.根據(jù)權(quán)利要求44所述的方法,其中所述第一濾波器、所述第二濾波器和/或所述第三濾波器的模型或網(wǎng)絡(luò)結(jié)構(gòu)相同或互不相同。
46.根據(jù)權(quán)利要求45所述的方法,其中所述第一濾波器、所述第二濾波器和/或所述第三濾波器之間的所述差異是訓(xùn)練數(shù)據(jù)。
47.根據(jù)權(quán)利要求46所述的方法,其中所述訓(xùn)練數(shù)據(jù)包括質(zhì)量-級別指示符。
48.根據(jù)權(quán)利要求47所述的方法,其中針對所述第一濾波器、所述第二濾波器和/或所述第三濾波器,作為輸入的所述質(zhì)量-級別指示符是不同的。
49.根據(jù)權(quán)利要求47所述的方法,其中所述質(zhì)量-級別指示符是量化參數(shù)(qp)或λ或恒定速率因子(crf)值或比特率。
50.根據(jù)權(quán)利要求14所述的方法,其中k=3,所述多個濾波器包括第一濾波器、第二濾波器和第三濾波器,所述第一濾波器、第二濾波器和第三濾波器中的每一項是以下之一:
51.根據(jù)權(quán)利要求14所述的方法,其中k=3,所述多個濾波器包括第一濾波器、第二濾波器和第三濾波器,所述第一濾波器、第二濾波器和第三濾波器中的每一項是nn濾波器或組中的一個,所述組包括以下至少一項:
52.根據(jù)權(quán)利要求14所述的方法,其中k、ak或b中的至少一項是自適應(yīng)值或常數(shù)值,或者通過一個或多個指示符被指示。
53.根據(jù)權(quán)利要求14所述的方法,其中k、ak或b中的至少一項取決于所述視頻單元的編解碼模式和/或統(tǒng)計。
54.根據(jù)權(quán)利要求14所述的方法,其中k、ak或b中的至少一項是預(yù)定值。
55.根據(jù)權(quán)利要求54所述的方法,其中ak是1.0、7/8、3/4、0.75、1/2、0.5、1/4、0.25或0.0中的一個。
56.根據(jù)權(quán)利要求14所述的方法,其中k、ak或b中的至少一項從預(yù)定值、常數(shù)值和/或指示符中被選擇。
57.根據(jù)權(quán)利要求1所述的方法,其中非線性模型與所述多個濾波器和/或所述視頻單元的當(dāng)前樣本的鄰近樣本一起被應(yīng)用于經(jīng)濾波的樣本。
58.根據(jù)權(quán)利要求57所述的方法,其中所述鄰近樣本包括與所述當(dāng)前樣本相鄰和/或不相鄰的樣本。
59.根據(jù)權(quán)利要求1所述的方法,其中是否和/或如何構(gòu)建所述多個濾波器的一個或多個候選列表取決于所述視頻單元的編解碼統(tǒng)計。
60.根據(jù)權(quán)利要求59所述的方法,其中所述編解碼統(tǒng)計包括預(yù)測模式、量化參數(shù)(qp)或條帶類型中的至少一項。
61.根據(jù)權(quán)利要求59所述的方法,其中所述候選列表的數(shù)目是常數(shù)。
62.根據(jù)權(quán)利要求61所述的方法,其中所述候選列表的數(shù)目是0、1、2、3或4,或
63.根據(jù)權(quán)利要求59所述的方法,其中所述候選列表的數(shù)目取決于所述多個濾波器中的nn濾波器的數(shù)目。
64.根據(jù)權(quán)利要求63所述的方法,其中所述候選列表的數(shù)目等于所述nn濾波器的數(shù)目。
65.根據(jù)權(quán)利要求63所述的方法,其中所述候選列表的數(shù)目等于所述nn濾波器的數(shù)目與預(yù)定值的總和。
66.根據(jù)權(quán)利要求65所述的方法,其中所述預(yù)定值是-1、0、1、2、3或4,或
67.根據(jù)權(quán)利要求63所述的方法,其中所述候選列表的數(shù)目是所述nn濾波器的數(shù)目的兩倍。
68.根據(jù)權(quán)利要求59所述的方法,其中所述候選列表的數(shù)目通過一個或多個指示符被指示。
69.根據(jù)權(quán)利要求59所述的方法,其中所述多個濾波器的融合候選包括第一數(shù)目的濾波器。
70.根據(jù)權(quán)利要求69所述的方法,其中所述第一數(shù)目是0、1、2、3或4中的一個。
71.根據(jù)權(quán)利要求69所述的方法,其中所述第一數(shù)目取決于所述多個濾波器中的所述nn濾波器的數(shù)目。
72.根據(jù)權(quán)利要求71所述的方法,其中所述第一數(shù)目等于所述多個濾波器中的所述nn濾波器的數(shù)目。
73.根據(jù)權(quán)利要求69所述的方法,其中所述第一數(shù)目等于所述多個濾波器的總數(shù)目。
74.根據(jù)權(quán)利要求59所述的方法,其中所述多個濾波器包括第一nn濾波器、第二nn濾波器和第三nn濾波器。
75.根據(jù)權(quán)利要求74所述的方法,其中第一融合候選模式是所述第一nn濾波器的函數(shù)與所述第二nn濾波器的函數(shù)的融合。
76.根據(jù)權(quán)利要求74所述的方法,其中第二融合候選模式是所述第二nn濾波器的函數(shù)與所述第三nn濾波器的函數(shù)的融合。
77.根據(jù)權(quán)利要求74所述的方法,其中第三融合候選模式是所述第三nn濾波器的函數(shù)與所述第一nn濾波器的函數(shù)的融合。
78.根據(jù)權(quán)利要求75-77中任一項所述的方法,其中目標(biāo)nn濾波器的函數(shù)與所述目標(biāo)濾波器相同,其中所述目標(biāo)濾波器是所述第一nn濾波器、所述第二nn濾波器或所述第三nn濾波器中的一個。
79.根據(jù)權(quán)利要求75-77中任一項所述的方法,其中目標(biāo)nn濾波器的函數(shù)是所述目標(biāo)濾波器的經(jīng)簡化的版本,其中所述目標(biāo)濾波器是所述第一nn濾波器、所述第二nn濾波器或所述第三nn濾波器中的一個。
80.根據(jù)權(quán)利要求75-77中任一項所述的方法,其中目標(biāo)nn濾波器的函數(shù)取決于所述目標(biāo)濾波器,其中所述目標(biāo)濾波器是所述第一nn濾波器、所述第二nn濾波器或所述第三nn濾波器中的一個。
81.根據(jù)權(quán)利要求75-77中任一項所述的方法,其中目標(biāo)nn濾波器的函數(shù)針對所述目標(biāo)濾波器的不同實現(xiàn)是自適應(yīng)的,其中所述目標(biāo)濾波器是所述第一nn濾波器、所述第二nn濾波器或所述第三nn濾波器中的一個。
82.根據(jù)權(quán)利要求59所述的方法,其中所述多個濾波器的融合候選的順序是自適應(yīng)的。
83.根據(jù)權(quán)利要求59所述的方法,其中所述多個濾波器的融合候選的順序取決于所述視頻單元的編解碼統(tǒng)計。
84.根據(jù)權(quán)利要求59所述的方法,其中所述多個濾波器的融合候選的順序是預(yù)先設(shè)計的。
85.根據(jù)權(quán)利要求59所述的方法,其中融合候選中的一個或每一個僅包括nn濾波器。
86.根據(jù)權(quán)利要求59所述的方法,其中融合候選中的一個或每一個包括nn濾波器和非-nn濾波器。
87.根據(jù)權(quán)利要求86所述的方法,其中非-nn濾波器是以下之一,或者是包括以下至少一項的組:
88.根據(jù)權(quán)利要求1所述的方法,其中是否利用所述多個濾波器的融合結(jié)果和/或利用所述多個濾波器的融合結(jié)果的方式取決于以下至少一項:
89.根據(jù)權(quán)利要求88所述的方法,其中所述信號在以下至少一項中:
90.根據(jù)權(quán)利要求1所述的方法,其中所述多個濾波器中的濾波器的數(shù)目是整數(shù)。
91.根據(jù)權(quán)利要求90所述的方法,其中所述濾波器的數(shù)目是0、1、2、3、4、5或6,或
92.根據(jù)權(quán)利要求91所述的方法,其中所述統(tǒng)計包括以下至少一項:
93.根據(jù)權(quán)利要求91所述的方法,其中所述多個濾波器的使用取決于以下至少一項中的指示符:
94.根據(jù)權(quán)利要求1所述的方法,其中所述多個濾波器是濾波器組。
95.根據(jù)權(quán)利要求88所述的方法,其中由于所述多個濾波器的所述融合結(jié)果,限幅被應(yīng)用于樣本。
96.根據(jù)權(quán)利要求95所述的方法,其中所述限幅取決于所述視頻單元的編解碼模式和/或編解碼統(tǒng)計。
97.根據(jù)權(quán)利要求83或96所述的方法,其中所述編解碼統(tǒng)計包括預(yù)測模式、量化參數(shù)(qp)、時間層或條帶類型中的至少一項。
98.根據(jù)權(quán)利要求95所述的方法,其中所述限幅取決于所述多個濾波器的輸入信號和/或內(nèi)部信號的位深度。
99.根據(jù)權(quán)利要求88所述的方法,其中所述融合結(jié)果被置入經(jīng)解碼的圖片緩沖中。
100.根據(jù)權(quán)利要求88所述的方法,其中所述融合結(jié)果是最終顯示信號。
101.根據(jù)權(quán)利要求1所述的方法,其中所述多個濾波器中的第一濾波器的模型是所述多個濾波器中的第二濾波器的模型的經(jīng)簡化的版本。
102.根據(jù)權(quán)利要求101所述的方法,其中所述多個濾波器是nn濾波器。
103.根據(jù)權(quán)利要求102所述的方法,其中所述nn濾波器的模型的深度不同,
104.根據(jù)權(quán)利要求103所述的方法,其中被用于所述應(yīng)用中的所述nn濾波器的模型具有較淺的深度。
105.根據(jù)權(quán)利要求103所述的方法,其中所述nn濾波器的所述模型具有較少的特征圖。
106.根據(jù)權(quán)利要求103所述的方法,其中被用于所述應(yīng)用中的所述nn濾波器的模型的所述殘差塊的數(shù)目更少,或者
107.根據(jù)權(quán)利要求102所述的方法,其中所述多個濾波器的經(jīng)簡化的模型和正常模型被用于所述應(yīng)用中。
108.一種視頻處理的方法,包括:
109.根據(jù)權(quán)利要求108所述的方法,其中所述至少一個語法元素在第一級別被指示。
110.根據(jù)權(quán)利要求109所述的方法,其中所述第一級別是序列級別,并且所述至少一個語法元素被包括在序列參數(shù)集(sps)或序列頭中。
111.根據(jù)權(quán)利要求109所述的方法,其中所述至少一個語法元素包括指示所述組合應(yīng)用是否被啟用的第一標(biāo)志。
112.根據(jù)權(quán)利要求111所述的方法,其中如果所述第一標(biāo)志為真或1,則所述組合應(yīng)用被啟用,或如果所述標(biāo)志為假或0,則所述組合應(yīng)用不被啟用。
113.根據(jù)權(quán)利要求109所述的方法,其中所述第一級別處的所述至少一個語法元素包括指示潛在地被用于所述多個濾波器的所述組合應(yīng)用中的融合模式的數(shù)目的語法元素。
114.根據(jù)權(quán)利要求113所述的方法,其中所述至少一個語法元素僅在所述組合應(yīng)用被啟用的情況下通過信號被傳輸。
115.根據(jù)權(quán)利要求109所述的方法,其中所述第一級別處的所述至少一個語法元素包括指示所述組合應(yīng)用是否將在所述第一級別中被使用的語法元素。
116.根據(jù)權(quán)利要求109所述的方法,其中所述第一級別處的所述至少一個語法元素包括指示所述組合應(yīng)用是否能夠在第二級別中自適應(yīng)地/非自適應(yīng)地被使用或被選擇的語法元素。
117.根據(jù)權(quán)利要求108所述的方法,其中所述至少一個語法元素在不同于第一級別的第二級別處被指示。
118.根據(jù)權(quán)利要求117所述的方法,其中所述第二級別是圖片級別或條帶級別。
119.根據(jù)權(quán)利要求118所述的方法,其中所述第二級別是所述圖片級別,并且所述至少一個語法元素被包括在圖片頭(ph)或圖片參數(shù)集(pps)中。
120.根據(jù)權(quán)利要求118所述的方法,其中所述第二級別是所述條帶級別,并且所述至少一個語法元素被包括在條帶頭(sh)中。
121.根據(jù)權(quán)利要求117所述的方法,其中所述第二級別處的所述至少一個語法元素在碼流中有條件地被指示。
122.根據(jù)權(quán)利要求121所述的方法,其中所述至少一個語法元素是否被指示是基于在所述第一級別處被指示的一個或多個語法元素。
123.根據(jù)權(quán)利要求117所述的方法,其中在所述第二級別處被指示的所述至少一個語法元素包括指示所述組合應(yīng)用是否在所述第二級別中被啟用的第一標(biāo)志。
124.根據(jù)權(quán)利要求117所述的方法,其中在所述第二級別處被指示的所述至少一個語法元素包括指示能夠在所述第二級別中被使用的所述融合模式的數(shù)目的語法元素。
125.根據(jù)權(quán)利要求124所述的方法,其中所述融合模式的數(shù)目是默認(rèn)值。
126.根據(jù)權(quán)利要求125所述的方法,其中所述默認(rèn)值是0、1、2或3。
127.根據(jù)權(quán)利要求124所述的方法,其中所述至少一個語法元素不在碼流中被指示。
128.根據(jù)權(quán)利要求117所述的方法,其中在所述第二級別處被指示的所述至少一個語法元素包括指示所述組合應(yīng)用是否將在所述第二級別處被使用的語法元素。
129.根據(jù)權(quán)利要求117所述的方法,其中在所述第二級別處被指示的所述至少一個語法元素包括指示所述多個濾波器的融合候選的索引的語法元素。
130.根據(jù)權(quán)利要求129所述的方法,其中所述融合候選的所述索引與選擇濾波器的所述索引的指示符相同。
131.根據(jù)權(quán)利要求129所述的方法,其中所述至少一個語法元素是否被指示是基于指示所述融合模式的數(shù)目的語法元素。
132.根據(jù)權(quán)利要求117所述的方法,其中在所述第二級別處被指示的所述至少一個語法元素包括指示融合參數(shù)的語法元素。
133.根據(jù)權(quán)利要求132所述的方法,其中所述至少一個語法元素指示在一個融合模式中被使用的所述濾波器的數(shù)目。
134.根據(jù)權(quán)利要求132所述的方法,其中所述多個濾波器的所述組合應(yīng)用是基于由以下表示的線性模式:
135.根據(jù)權(quán)利要求134所述的方法,其中ak等于所述至少一個語法元素的值乘以/除以因子t。
136.根據(jù)權(quán)利要求135所述的方法,其中所述因子t等于2^w,2^w表示2的w次方,
137.根據(jù)權(quán)利要求135所述的方法,其中t是正整數(shù)。
138.根據(jù)權(quán)利要求134所述的方法,其中所述至少一個語法元素是否將在所述碼流中被指示取決于先前的間接語法元素。
139.根據(jù)權(quán)利要求132所述的方法,其中針對所述多個濾波器的融合候選的語法元素不同。
140.根據(jù)權(quán)利要求117所述的方法,其中第二級別處的所述至少一個語法元素包括指示所述組合應(yīng)用是否能夠在第三級別處自適應(yīng)地/非自適應(yīng)地被使用或被選擇的語法元素。
141.根據(jù)權(quán)利要求108所述的方法,其中所述至少一個語法元素在第三級別處被指示,所述第三級別不同于第一級別或第二級別。
142.根據(jù)權(quán)利要求141所述的方法,其中所述第三級別對應(yīng)于片、編解碼樹單元(ctu)、編解碼樹塊(ctb)、塊、子圖片、圖塊、條帶或包括多個樣本的區(qū)域中的一者。
143.根據(jù)權(quán)利要求141所述的方法,其中所述第三級別處的所述至少一個語法元素在碼流中有條件地被指示。
144.根據(jù)權(quán)利要求141所述的方法,其中所述至少一個語法元素是否被指示是基于在所述第一級別或所述第二級別處被指示的一個或多個語法元素。
145.根據(jù)權(quán)利要求141所述的方法,其中在所述第三級別處被指示的所述至少一個語法元素包括指示所述組合應(yīng)用是否在所述第三級別中被啟用的第一標(biāo)志。
146.根據(jù)權(quán)利要求141所述的方法,其中在所述第三級別處被指示的所述至少一個語法元素包括指示所述組合應(yīng)用是否將在所述第三級別中被使用的語法元素。
147.根據(jù)權(quán)利要求141所述的方法,其中在所述第三級別處被指示的所述至少一個語法元素包括指示所述多個濾波器的融合候選的索引的語法元素。
148.根據(jù)權(quán)利要求147所述的方法,其中所述融合候選的所述索引與選擇濾波器的所述索引的指示符相同。
149.根據(jù)權(quán)利要求147所述的方法,其中所述至少一個語法元素是否被指示是基于指示所述第二級別中的所述融合模式的數(shù)目的語法元素。
150.根據(jù)權(quán)利要求147所述的方法,其中所述至少一個語法元素是否被指示是基于指示所述第二級別中的所述融合候選的索引的數(shù)目的語法元素。
151.根據(jù)權(quán)利要求141所述的方法,其中在所述第三級別處被指示的所述至少一個語法元素包括指示融合參數(shù)的語法元素。
152.根據(jù)權(quán)利要求151所述的方法,其中所述至少一個語法元素指示是在所述第二級別中還是在所述第三級別中使用所述融合參數(shù)。
153.根據(jù)權(quán)利要求151所述的方法,其中所述第三級別處的所述至少一個語法元素中的一個有條件地通過信號被傳輸。
154.根據(jù)權(quán)利要求153所述的方法,其中所述第三級別處的所述至少一個語法元素是否被指示是基于指示是在所述第二級別中還是在所述第三級別中使用所述融合參數(shù)的語法元素。
155.根據(jù)權(quán)利要求141所述的方法,其中所述至少一個語法元素指示在一個融合模式中被使用的所述濾波器的數(shù)目。
156.根據(jù)權(quán)利要求141所述的方法,其中所述多個濾波器的所述組合應(yīng)用是基于由以下表示的線性模式:
157.根據(jù)權(quán)利要求156所述的方法,其中ak等于所述至少一個語法元素的值乘以/除以因子t。
158.根據(jù)權(quán)利要求157所述的方法,其中所述因子t等于2^w,2^w表示2的w次方,
159.根據(jù)權(quán)利要求157所述的方法,其中t是正整數(shù)。
160.根據(jù)權(quán)利要求156所述的方法,其中所述至少一個語法元素是否將在所述碼流中被指示取決于先前的間接語法元素。
161.根據(jù)權(quán)利要求141所述的方法,其中針對所述多個濾波器的融合候選的語法元素不同。
162.根據(jù)權(quán)利要求108所述的方法,其中所述至少一個語法元素中的一個被設(shè)定為默認(rèn)值。
163.根據(jù)權(quán)利要求162所述的方法,其中所述至少一個語法元素不在碼流中被指示。
164.根據(jù)權(quán)利要求162所述的方法,其中所述至少一個語法元素中的第一語法元素僅在所述第一語法元素不在所述碼流中被指示的情況下才被設(shè)定為默認(rèn)值。
165.根據(jù)權(quán)利要求162=164中任一項所述的方法,其中所述默認(rèn)值是:-1、0、1、2、3或4中的一個。
166.根據(jù)權(quán)利要求108所述的方法,其中所述至少一個語法元素通過上下文編解碼或旁路編解碼被指示。
167.根據(jù)權(quán)利要求108所述的方法,其中所述至少一個語法元素使用以下之一被二元化:
168.根據(jù)權(quán)利要求167所述的方法,其中k是正整數(shù),或其中k等于0、1、2、3、4、5或6。
169.根據(jù)權(quán)利要求108所述的方法,其中針對不同顏色分量所述至少一個語法元素獨立地被指示。
170.根據(jù)權(quán)利要求169所述的方法,其中所述至少一個語法元素僅針對第一組顏色分量被指示。
171.根據(jù)權(quán)利要求170所述的方法,其中所述第一組顏色分量包括y或cb或cr顏色分量。
172.根據(jù)權(quán)利要求170所述的方法,其中所述第一組顏色分量包括r或g或b顏色分量。
173.根據(jù)權(quán)利要求170所述的方法,其中除所述第一組顏色分量以外的分量的信息通過第二組顏色分量的一個或多個語法元素被指示。
174.根據(jù)權(quán)利要求169所述的方法,其中所述至少一個語法元素針對所有可用顏色分量被指示。
175.根據(jù)權(quán)利要求169所述的方法,其中所述至少一個語法元素針對亮度顏色分量被指示。
176.根據(jù)權(quán)利要求169所述的方法,其中所述至少一個語法元素針對色度顏色分量被指示。
177.根據(jù)權(quán)利要求176所述的方法,其中cb顏色分量和cr顏色分量共享相同的語法元素。
178.根據(jù)權(quán)利要求169所述的方法,其中所述至少一個語法元素針對y和/或cb和/或cr顏色分量被指示。
179.根據(jù)權(quán)利要求169所述的方法,其中所述至少一個語法元素針對r和/或g和/或b顏色分量被指示。
180.根據(jù)權(quán)利要求175所述的方法,其中亮度顏色分量指示y分量。
181.根據(jù)權(quán)利要求176所述的方法,其中色度顏色分量指示cb分量或cr分量。
182.根據(jù)權(quán)利要求169所述的方法,其中所述至少一個語法元素通過所述顏色分量被索引。
183.根據(jù)權(quán)利要求108所述的方法,其中所述多個濾波器被組合應(yīng)用于基于nn的編解碼方法。
184.根據(jù)權(quán)利要求183所述的方法,其中所述多個濾波器中的至少一個濾波器通過幀內(nèi)預(yù)測方法被替換。
185.根據(jù)權(quán)利要求184所述的方法,其中所述幀內(nèi)預(yù)測方法是基于nn的方法或基于非-nn的方法。
186.根據(jù)權(quán)利要求183所述的方法,其中所述多個濾波器中的至少一個濾波器通過幀間預(yù)測方法被替換。
187.根據(jù)權(quán)利要求186所述的方法,其中所述幀間預(yù)測方法是基于nn的方法或基于非-nn的方法。
188.根據(jù)權(quán)利要求183所述的方法,其中所述多個濾波器被應(yīng)用于統(tǒng)一的nn濾波方法,或
189.根據(jù)權(quán)利要求183所述的方法,其中所述多個濾波器被應(yīng)用于基于nn的幀內(nèi)方法或基于nn的幀間方法中的至少一者。
190.根據(jù)權(quán)利要求183所述的方法,其中所述多個濾波器被應(yīng)用于基于非-nn的幀內(nèi)方法或基于非-nn的幀間方法中的至少一者。
191.根據(jù)權(quán)利要求183所述的方法,其中所述多個濾波器中的一個濾波器是基于nn的幀內(nèi)或幀間方法,并且所述多個濾波器中的另一個濾波器是基于非-nn的幀內(nèi)或幀間方法。
192.根據(jù)權(quán)利要求191所述的方法,其中所述多個濾波器中的所述一個濾波器和所述另一濾波器被組合。
193.根據(jù)權(quán)利要求1-192中任一項所述的方法,其中所述轉(zhuǎn)換包括將所述視頻單元編碼到所述碼流中。
194.根據(jù)權(quán)利要求1-192中任一項所述的方法,其中所述轉(zhuǎn)換包括從所述碼流解碼所述視頻單元。
195.一種用于處理視頻數(shù)據(jù)的裝置,包括處理器和其上具有指令的非暫態(tài)存儲器,其中所述指令在由所述處理器執(zhí)行時使所述處理器執(zhí)行根據(jù)權(quán)利要求1-192中任一項所述的方法。
196.一種非暫態(tài)計算機(jī)可讀存儲介質(zhì),存儲使處理器執(zhí)行根據(jù)權(quán)利要求1-192中任一項所述的方法的指令。
197.一種非暫態(tài)計算機(jī)可讀記錄介質(zhì),存儲視頻的視頻單元的通過由視頻處理裝置執(zhí)行的方法而生成的碼流,其中所述方法包括:
198.一種用于存儲視頻的碼流的方法,包括:
199.一種非暫態(tài)計算機(jī)可讀記錄介質(zhì),存儲視頻的視頻單元的通過由視頻處理裝置執(zhí)行的方法而生成的碼流,其中所述方法包括:
200.一種用于存儲視頻的碼流的方法,包括: