本發(fā)明涉及計算機視覺，尤其涉及一種基于優(yōu)先搜索的手勢判別方法、裝置、設(shè)備及介質(zhì)。

背景技術(shù)：

1、隨著計算機視覺技術(shù)的逐漸發(fā)展，手勢識別系統(tǒng)被應(yīng)用于車輛中，以提高用戶體驗。但是，目前的手勢識別系統(tǒng)主要關(guān)注單一的靜態(tài)手勢或簡單的動態(tài)手勢識別。

2、然而，在多用戶環(huán)境中，尤其是車內(nèi)環(huán)境，傳統(tǒng)手勢識別系統(tǒng)通常需要對每個手勢獨立進行分類識別，并統(tǒng)計各類手勢的出現(xiàn)頻率，往往難以準(zhǔn)確區(qū)分和處理同時發(fā)生的多種手勢，存在多種手勢同時進行時識別率及準(zhǔn)確率低下的問題。

3、因此，如何對同一時間段內(nèi)出現(xiàn)的多個手勢中優(yōu)先級較高的手勢進行識別，提高手勢識別的效率及準(zhǔn)確性，是目前亟待解決的問題。

技術(shù)實現(xiàn)思路

1、本發(fā)明提供了一種基于優(yōu)先搜索的手勢判別方法、裝置、設(shè)備及介質(zhì)，可以解決對同一時間段內(nèi)出現(xiàn)的多個手勢中優(yōu)先級較高的手勢進行識別時，手勢識別的效率及準(zhǔn)確性較低的問題。

2、根據(jù)本發(fā)明的一方面，提供了一種基于優(yōu)先搜索的手勢判別方法，包括：

3、獲取目標(biāo)車輛對應(yīng)的標(biāo)準(zhǔn)化視頻；其中，標(biāo)準(zhǔn)化視頻包含標(biāo)準(zhǔn)化視頻幀；

4、區(qū)域裁剪處理標(biāo)準(zhǔn)化視頻中的當(dāng)前標(biāo)準(zhǔn)化視頻幀，得到包含至少一個手部區(qū)域的目標(biāo)標(biāo)準(zhǔn)化視頻幀；

5、基于預(yù)設(shè)關(guān)鍵點檢測網(wǎng)絡(luò)模型對所述目標(biāo)標(biāo)準(zhǔn)化視頻幀中的目標(biāo)手部區(qū)域進行關(guān)鍵點提取，得到所述目標(biāo)標(biāo)準(zhǔn)化視頻幀對應(yīng)的關(guān)鍵點信息集合；其中，關(guān)鍵點信息集合包含標(biāo)準(zhǔn)關(guān)鍵點信息隊列，各標(biāo)準(zhǔn)關(guān)鍵點信息隊列與目標(biāo)手部區(qū)域?qū)?yīng)；

6、基于預(yù)設(shè)優(yōu)先搜索方法與預(yù)設(shè)投票方法對關(guān)鍵點信息集合進行篩選處理，得到關(guān)鍵點信息集合中的目標(biāo)關(guān)鍵點信息隊列；

7、基于預(yù)設(shè)分類網(wǎng)絡(luò)確定目標(biāo)關(guān)鍵點信息隊列對應(yīng)的手勢類別，作為目標(biāo)標(biāo)準(zhǔn)化視頻幀對應(yīng)的目標(biāo)手勢識別信息。

8、根據(jù)本發(fā)明的另一方面，提供了一種基于優(yōu)先搜索的手勢判別裝置，包括：

9、視頻獲取模塊，用于獲取目標(biāo)車輛對應(yīng)的標(biāo)準(zhǔn)化視頻；其中，標(biāo)準(zhǔn)化視頻包含標(biāo)準(zhǔn)化視頻幀；

10、區(qū)域裁剪模塊，用于區(qū)域裁剪處理標(biāo)準(zhǔn)化視頻中的當(dāng)前標(biāo)準(zhǔn)化視頻幀，得到包含至少一個手部區(qū)域的目標(biāo)標(biāo)準(zhǔn)化視頻幀；

11、關(guān)鍵點提取模塊，用于基于預(yù)設(shè)關(guān)鍵點檢測網(wǎng)絡(luò)模型對所述目標(biāo)標(biāo)準(zhǔn)化視頻幀中的目標(biāo)手部區(qū)域進行關(guān)鍵點提取，得到所述目標(biāo)標(biāo)準(zhǔn)化視頻幀對應(yīng)的關(guān)鍵點信息集合；其中，關(guān)鍵點信息集合包含標(biāo)準(zhǔn)關(guān)鍵點信息隊列，各標(biāo)準(zhǔn)關(guān)鍵點信息隊列與目標(biāo)手部區(qū)域?qū)?yīng)；

12、隊列篩選模塊，用于基于預(yù)設(shè)優(yōu)先搜索方法與預(yù)設(shè)投票方法對關(guān)鍵點信息集合進行篩選處理，得到關(guān)鍵點信息集合中的目標(biāo)關(guān)鍵點信息隊列；

13、手勢識別模塊，用于基于預(yù)設(shè)分類網(wǎng)絡(luò)確定目標(biāo)關(guān)鍵點信息隊列對應(yīng)的手勢類別，作為目標(biāo)標(biāo)準(zhǔn)化視頻幀對應(yīng)的目標(biāo)手勢識別信息。

14、根據(jù)本發(fā)明的另一方面，提供了一種電子設(shè)備，所述電子設(shè)備包括：

15、至少一個處理器；以及

16、與所述至少一個處理器通信連接的存儲器；其中，

17、所述存儲器存儲有可被所述至少一個處理器執(zhí)行的計算機程序，所述計算機程序被所述至少一個處理器執(zhí)行，以使所述至少一個處理器能夠執(zhí)行本發(fā)明任一實施例所述的基于優(yōu)先搜索的手勢判別方法。

18、根據(jù)本發(fā)明的另一方面，提供了一種計算機可讀存儲介質(zhì)，所述計算機可讀存儲介質(zhì)存儲有計算機指令，所述計算機指令用于使處理器執(zhí)行時實現(xiàn)本發(fā)明任一實施例所述的基于優(yōu)先搜索的手勢判別方法。

19、根據(jù)本發(fā)明的另一方面，提供了一種計算機程序產(chǎn)品，包括計算機程序，所述計算機程序在被處理器執(zhí)行時實現(xiàn)本發(fā)明任一實施例所述的基于優(yōu)先搜索的手勢判別方法。

20、本發(fā)明實施例的技術(shù)方案，通過區(qū)域裁剪處理目標(biāo)車輛對應(yīng)的標(biāo)準(zhǔn)化視頻中的當(dāng)前標(biāo)準(zhǔn)化視頻幀，得到包含至少一個手部區(qū)域的目標(biāo)標(biāo)準(zhǔn)化視頻幀，進而，基于預(yù)設(shè)關(guān)鍵點檢測網(wǎng)絡(luò)模型對目標(biāo)標(biāo)準(zhǔn)化視頻幀中的目標(biāo)手部區(qū)域進行關(guān)鍵點提取，得到包含標(biāo)準(zhǔn)關(guān)鍵點信息隊列的關(guān)鍵點信息集合，并基于預(yù)設(shè)優(yōu)先搜索方法與預(yù)設(shè)投票方法對關(guān)鍵點信息集合進行篩選處理，得到關(guān)鍵點信息集合中的目標(biāo)關(guān)鍵點信息隊列，最后，基于預(yù)設(shè)分類網(wǎng)絡(luò)確定目標(biāo)關(guān)鍵點信息隊列對應(yīng)的手勢類別，作為目標(biāo)標(biāo)準(zhǔn)化視頻幀對應(yīng)的目標(biāo)手勢識別信息，解決了對同一時間段內(nèi)出現(xiàn)的多個手勢中優(yōu)先級較高的手勢進行識別時手勢識別的效率及準(zhǔn)確性較低的問題，能夠先識別出同一時間段內(nèi)出現(xiàn)數(shù)量最高的手勢，再進行手勢類別的識別，提高了手勢識別的效率及準(zhǔn)確性。

21、應(yīng)當(dāng)理解，本部分所描述的內(nèi)容并非旨在標(biāo)識本發(fā)明的實施例的關(guān)鍵或重要特征，也不用于限制本發(fā)明的范圍。本發(fā)明的其它特征將通過以下的說明書而變得容易理解。

技術(shù)特征：

1.一種基于優(yōu)先搜索的手勢判別方法，其特征在于，包括：

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述基于預(yù)設(shè)關(guān)鍵點檢測網(wǎng)絡(luò)模型對所述目標(biāo)標(biāo)準(zhǔn)化視頻幀中的目標(biāo)手部區(qū)域進行關(guān)鍵點提取，得到所述目標(biāo)標(biāo)準(zhǔn)化視頻幀對應(yīng)的關(guān)鍵點信息集合，包括：

3.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述基于預(yù)設(shè)優(yōu)先搜索方法與預(yù)設(shè)投票方法對關(guān)鍵點信息集合進行篩選處理，得到關(guān)鍵點信息集合中的目標(biāo)關(guān)鍵點信息隊列，包括：

4.根據(jù)權(quán)利要求3中所述的方法，其特征在于，所述基于預(yù)設(shè)優(yōu)先搜索方法對各待選關(guān)鍵點信息隊列中的目標(biāo)關(guān)鍵點進行級別評估處理，得到各目標(biāo)關(guān)鍵點對應(yīng)的綜合評級數(shù)值，包括：

5.根據(jù)權(quán)利要求3所述的方法，其特征在于，所述基于預(yù)設(shè)投票方法及各目標(biāo)關(guān)鍵點對應(yīng)的綜合評級數(shù)值對各待選關(guān)鍵點信息隊列進行篩選處理，得到目標(biāo)關(guān)鍵點信息隊列，包括：

6.根據(jù)權(quán)利要求3所述的方法，其特征在于，在所述獲取關(guān)鍵點信息集合中各標(biāo)準(zhǔn)關(guān)鍵點信息隊列的隊列長度，并數(shù)值比較各標(biāo)準(zhǔn)關(guān)鍵點信息隊列的隊列長度，得到關(guān)鍵點信息集合中隊列長度相同的待選關(guān)鍵點信息隊列之后，還包括：

7.根據(jù)權(quán)利要求1所述的方法，其特征在于，在所述基于預(yù)設(shè)分類網(wǎng)絡(luò)確定目標(biāo)關(guān)鍵點信息隊列對應(yīng)的手勢類別，作為目標(biāo)標(biāo)準(zhǔn)化視頻幀對應(yīng)的目標(biāo)手勢識別信息之后，還包括：

8.一種基于優(yōu)先搜索的手勢判別裝置，其特征在于，包括：

9.一種電子設(shè)備，其特征在于，所述電子設(shè)備包括：

10.一種計算機可讀存儲介質(zhì)，其特征在于，所述計算機可讀存儲介質(zhì)存儲有計算機指令，所述計算機指令用于使處理器執(zhí)行時實現(xiàn)權(quán)利要求1-7中任一項所述的基于優(yōu)先搜索的手勢判別方法。

技術(shù)總結(jié)
本發(fā)明公開了一種基于優(yōu)先搜索的手勢判別方法、裝置、設(shè)備及介質(zhì)。該方法包括：區(qū)域裁剪處理目標(biāo)車輛對應(yīng)的標(biāo)準(zhǔn)化視頻中的當(dāng)前標(biāo)準(zhǔn)化視頻幀，得到包含至少一個手部區(qū)域的目標(biāo)標(biāo)準(zhǔn)化視頻幀；基于預(yù)設(shè)關(guān)鍵點檢測網(wǎng)絡(luò)模型對目標(biāo)標(biāo)準(zhǔn)化視頻幀中的目標(biāo)手部區(qū)域進行關(guān)鍵點提取，得到關(guān)鍵點信息集合；基于預(yù)設(shè)優(yōu)先搜索方法與預(yù)設(shè)投票方法對關(guān)鍵點信息集合進行篩選處理，得到關(guān)鍵點信息集合中的目標(biāo)關(guān)鍵點信息隊列；基于預(yù)設(shè)分類網(wǎng)絡(luò)確定目標(biāo)關(guān)鍵點信息隊列對應(yīng)的手勢類別，作為目標(biāo)標(biāo)準(zhǔn)化視頻幀對應(yīng)的目標(biāo)手勢識別信息。通過本發(fā)明的技術(shù)方案，能夠?qū)ν粫r間段內(nèi)出現(xiàn)的多個手勢中優(yōu)先級較高的手勢進行識別，提高了手勢識別的效率及準(zhǔn)確性。

技術(shù)研發(fā)人員：高長勝,趙興科,袁魯峰,付振,王明月,何金鑫,劉相超,張俊,侯睿
受保護的技術(shù)使用者：中國第一汽車股份有限公司
技術(shù)研發(fā)日：
技術(shù)公布日：2024/10/21