本申請(qǐng)涉及圖像處理，尤其涉及一種牙齒異常部位識(shí)別方法、牙齒異常部位識(shí)別模型的訓(xùn)練方法、裝置、電子設(shè)備及計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)。

背景技術(shù)：

1、在數(shù)字化口腔掃描場(chǎng)景中，醫(yī)生會(huì)根據(jù)患者的三維牙齒模型，整理生成相應(yīng)的口腔檢測(cè)報(bào)告，以便對(duì)患者的口腔問(wèn)題進(jìn)行分析和匯總，該過(guò)程通常需要醫(yī)生根據(jù)自身的經(jīng)驗(yàn)識(shí)別和判斷出口腔疾病，手動(dòng)截圖后反饋給患者，操作上較為繁瑣，需要耗費(fèi)一定的時(shí)間成本和人力成本；并且三維牙齒模型通常需要醫(yī)生手動(dòng)地進(jìn)行旋轉(zhuǎn)和觀測(cè)，在此過(guò)程中進(jìn)行異常部位的識(shí)別，觀測(cè)角度的選擇不當(dāng)會(huì)導(dǎo)致存在異常部位被誤檢和漏檢的情況。

技術(shù)實(shí)現(xiàn)思路

1、有鑒于此，本申請(qǐng)?zhí)峁┮环N牙齒異常部位識(shí)別方法、牙齒異常部位識(shí)別模型的訓(xùn)練方法、電子設(shè)備及計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)。

2、具體地，本申請(qǐng)是通過(guò)如下技術(shù)方案實(shí)現(xiàn)的：

3、根據(jù)本申請(qǐng)實(shí)施例的第一方面，提供一種牙齒異常部位識(shí)別方法，包括：

4、按照多個(gè)不同的投影視角對(duì)待識(shí)別的第一牙齒模型進(jìn)行投影，得到多張第一牙齒圖像；其中，多個(gè)不同的投影視角用于使第一牙齒模型中的每顆牙齒在多張第一牙齒圖像中具有在至少兩個(gè)投影視角下的投影結(jié)果；

5、利用預(yù)先訓(xùn)練好的牙齒異常部位識(shí)別模型對(duì)多張第一牙齒圖像進(jìn)行牙齒異常部位識(shí)別處理，得到與多張第一牙齒圖像分別對(duì)應(yīng)的異常部位識(shí)別結(jié)果；其中，牙齒異常部位識(shí)別模型基于若干訓(xùn)練樣本進(jìn)行有監(jiān)督訓(xùn)練得到，訓(xùn)練樣本包括第二牙齒模型在多個(gè)不同的投影視角下的多張第二牙齒圖像以及與每張第二牙齒圖像對(duì)應(yīng)的異常部位標(biāo)簽；

6、對(duì)與多張第一牙齒圖像分別對(duì)應(yīng)的異常部位識(shí)別結(jié)果進(jìn)行篩選處理，以確定目標(biāo)異常部位。

7、根據(jù)本申請(qǐng)實(shí)施例的第二方面，提供一種牙齒異常部位識(shí)別模型的訓(xùn)練方法，包括：

8、獲取若干訓(xùn)練樣本，訓(xùn)練樣本包括第二牙齒模型在多個(gè)不同的投影視角下的多張第二牙齒圖像以及與每張第二牙齒圖像對(duì)應(yīng)的異常部位標(biāo)簽；在多張第二牙齒圖像中，第二牙齒模型中的每顆牙齒具有在至少兩個(gè)投影視角下的投影結(jié)果；不同訓(xùn)練樣本對(duì)應(yīng)不同的第二牙齒模型；

9、將訓(xùn)練樣本輸入待訓(xùn)練的牙齒異常部位識(shí)別模型中，以由待訓(xùn)練的牙齒異常部位識(shí)別模型基于多張第二牙齒圖像進(jìn)行牙齒異常部位識(shí)別，得到與多張第二牙齒圖像分別對(duì)應(yīng)的異常部位識(shí)別結(jié)果，并以最小化各張第二牙齒圖像對(duì)應(yīng)的異常部位識(shí)別結(jié)果和與該張第二牙齒圖像對(duì)應(yīng)的異常部位標(biāo)簽之間的差異為優(yōu)化目標(biāo)，對(duì)待訓(xùn)練的牙齒異常部位識(shí)別模型進(jìn)行訓(xùn)練；

10、其中，訓(xùn)練好的牙齒異常部位識(shí)別模型應(yīng)用于如第一方面的牙齒異常部位識(shí)別方法中。根據(jù)本申請(qǐng)實(shí)施例的第三方面，提供一種牙齒異常部位識(shí)別裝置，包括：

11、第一牙齒圖像獲取模塊，用于按照多個(gè)不同的投影視角對(duì)待識(shí)別的第一牙齒模型進(jìn)行投影，得到多張第一牙齒圖像；其中，多個(gè)不同的投影視角用于使第一牙齒模型中的每顆牙齒在多張第一牙齒圖像中具有在至少兩個(gè)投影視角下的投影結(jié)果；

12、牙齒異常部位識(shí)別模塊，用于利用預(yù)先訓(xùn)練好的牙齒異常部位識(shí)別模型對(duì)多張第一牙齒圖像進(jìn)行牙齒異常部位識(shí)別處理，得到與多張第一牙齒圖像分別對(duì)應(yīng)的異常部位識(shí)別結(jié)果；其中，牙齒異常部位識(shí)別模型基于若干訓(xùn)練樣本進(jìn)行有監(jiān)督訓(xùn)練得到，訓(xùn)練樣本包括第二牙齒模型在多個(gè)不同的投影視角下的多張第二牙齒圖像以及與每張第二牙齒圖像對(duì)應(yīng)的異常部位標(biāo)簽；

13、目標(biāo)圖像確定模塊，用于對(duì)與多張第一牙齒圖像分別對(duì)應(yīng)的異常部位識(shí)別結(jié)果進(jìn)行篩選處理，以確定目標(biāo)異常部位。

14、根據(jù)本申請(qǐng)實(shí)施例的第四方面，提供一種牙齒異常部位識(shí)別模型的訓(xùn)練裝置，包括：

15、訓(xùn)練樣本獲取模塊，用于獲取若干訓(xùn)練樣本，訓(xùn)練樣本包括第二牙齒模型在多個(gè)不同的投影視角下的多張第二牙齒圖像以及與每張第二牙齒圖像對(duì)應(yīng)的異常部位標(biāo)簽；在多張第二牙齒圖像中，第二牙齒模型中的每顆牙齒具有在至少兩個(gè)投影視角下的投影結(jié)果；不同訓(xùn)練樣本對(duì)應(yīng)不同的第二牙齒模型；

16、模型訓(xùn)練模塊，用于將訓(xùn)練樣本輸入待訓(xùn)練的牙齒異常部位識(shí)別模型中，以由待訓(xùn)練的牙齒異常部位識(shí)別模型基于多張第二牙齒圖像進(jìn)行牙齒異常部位識(shí)別，得到與多張第二牙齒圖像分別對(duì)應(yīng)的異常部位識(shí)別結(jié)果，并以最小化各張第二牙齒圖像對(duì)應(yīng)的異常部位識(shí)別結(jié)果和與該張第二牙齒圖像對(duì)應(yīng)的異常部位標(biāo)簽之間的差異為優(yōu)化目標(biāo)，對(duì)待訓(xùn)練的牙齒異常部位識(shí)別模型進(jìn)行訓(xùn)練；其中，訓(xùn)練好的牙齒異常部位識(shí)別模型應(yīng)用于如第三方面提及的牙齒異常部位識(shí)別裝置中。

17、根據(jù)本申請(qǐng)實(shí)施例的第五方面，提供一種電子設(shè)備，包括存儲(chǔ)器、處理器及存儲(chǔ)在存儲(chǔ)器上并可在處理器上運(yùn)行的可執(zhí)行指令；

18、其中，處理器執(zhí)行可執(zhí)行指令時(shí)實(shí)現(xiàn)如第一方面提及的方法中的步驟。

19、根據(jù)本申請(qǐng)實(shí)施例的第六方面，提供一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，其上存儲(chǔ)有計(jì)算機(jī)指令，計(jì)算機(jī)指令被處理器執(zhí)行時(shí)實(shí)現(xiàn)第一方面任意一項(xiàng)所述方法的步驟。

20、根據(jù)本申請(qǐng)實(shí)施例的第七方面，提供一種計(jì)算機(jī)程序產(chǎn)品，包括計(jì)算機(jī)程序/指令，該計(jì)算機(jī)程序/指令被處理器執(zhí)行時(shí)實(shí)現(xiàn)第一方面中任一項(xiàng)所述方法的步驟。

21、本申請(qǐng)的實(shí)施例提供的技術(shù)方案可以包括以下有益效果：

22、本申請(qǐng)實(shí)施例提供的牙齒異常部位識(shí)別模型的訓(xùn)練方法，通過(guò)獲取第二牙齒模型在不同投影視角下的多張第二牙齒圖像，并為每張第二牙齒圖像標(biāo)注對(duì)應(yīng)的異常部位標(biāo)簽，構(gòu)建了豐富的訓(xùn)練數(shù)據(jù)集，這種多投影視角的第二牙齒圖像能夠覆蓋牙齒的各個(gè)部分，確保沒(méi)有區(qū)域被遺漏，從而確保模型基于該訓(xùn)練數(shù)據(jù)集進(jìn)行有監(jiān)督訓(xùn)練之后，牙齒異常部位識(shí)別模型學(xué)習(xí)到牙齒的不同視角下的特征，能夠更全面地理解牙齒的形態(tài)和結(jié)構(gòu)，提高模型對(duì)實(shí)際應(yīng)用中各種投影視角下的牙齒圖像的適應(yīng)性。

23、本申請(qǐng)實(shí)施例提供的牙齒異常部位識(shí)別方法，能夠利用多個(gè)不同的投影視角下的第一牙齒圖像進(jìn)行ai（借助于預(yù)先訓(xùn)練好的牙齒異常部位識(shí)別模型）預(yù)測(cè)，減少了醫(yī)生的操作步驟，提高識(shí)別效率，并且參考多個(gè)不同的投影視角下的牙齒圖像可以有效避免出現(xiàn)視覺(jué)盲區(qū)問(wèn)題，提高異常部位識(shí)別的識(shí)別準(zhǔn)確性，避免或減少出現(xiàn)異常部位被誤檢和漏檢的情況；最后通過(guò)對(duì)異常部位識(shí)別結(jié)果進(jìn)行篩選處理，確保最終確定的目標(biāo)圖像攜帶有效的病變信息。

24、應(yīng)當(dāng)理解的是，以上的一般描述和后文的細(xì)節(jié)描述僅是示例性和解釋性的，并不能限制本申請(qǐng)。

技術(shù)特征：

1.一種牙齒異常部位識(shí)別方法，其特征在于，包括：

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述按照多個(gè)不同的投影視角對(duì)待識(shí)別的第一牙齒模型進(jìn)行投影，得到多張第一牙齒圖像，包括：

3.根據(jù)權(quán)利要求2所述的方法，其特征在于，所述每顆牙齒的牙位信息包括每顆牙齒的牙位號(hào)和牙齒關(guān)鍵點(diǎn)中的至少一種。

4.根據(jù)權(quán)利要求1所述的方法，其特征在于，在所述利用預(yù)先訓(xùn)練好的牙齒異常部位識(shí)別模型對(duì)所述多張第一牙齒圖像進(jìn)行牙齒異常部位識(shí)別處理之前，還包括：

5.根據(jù)權(quán)利要求4所述的方法，其特征在于，所述將多張所述目標(biāo)圖像輸入所述牙齒異常部位識(shí)別模型，以由所述牙齒異常部位識(shí)別模型對(duì)多張所述目標(biāo)圖像進(jìn)行牙齒異常部位識(shí)別處理，得到與多張所述目標(biāo)圖像分別對(duì)應(yīng)的異常部位識(shí)別結(jié)果，包括：

6.根據(jù)權(quán)利要求5所述的方法，其特征在于，所述基于所述口腔環(huán)境中的各個(gè)部位對(duì)應(yīng)的顏色紋理特征和幾何特征進(jìn)行分類，包括：

7.根據(jù)權(quán)利要求4所述的方法，其特征在于，所述第一牙齒模型中的三維點(diǎn)包括至少兩種類型的幾何信息；

8.根據(jù)權(quán)利要求4至7任意一項(xiàng)所述的方法，其特征在于，所述三維點(diǎn)的幾何信息包括以下至少一種類型：所述三維點(diǎn)的曲率、深度以及法向量；

9.根據(jù)權(quán)利要求1所述的方法，其特征在于，各張所述第一牙齒圖像對(duì)應(yīng)的異常部位識(shí)別結(jié)果包括疊加顯示在所述第一牙齒圖像上的至少一個(gè)用于指示異常部位的圖形框；

10.根據(jù)權(quán)利要求9所述的方法，其特征在于，各張所述第一牙齒圖像對(duì)應(yīng)的異常部位識(shí)別結(jié)果還包括與各個(gè)所述圖形框?qū)?yīng)的異常類型；其中，所述異常類型包括契型缺損、牙結(jié)石、色素沉積、齲齒、牙齦紅腫以及牙齦萎縮中的至少一種；

11.根據(jù)權(quán)利要求9或10所述的方法，其特征在于，還包括：

12.一種牙齒異常部位識(shí)別模型的訓(xùn)練方法，其特征在于，包括：

13.根據(jù)權(quán)利要求12所述的方法，其特征在于，所述訓(xùn)練樣本還包括第二牙齒模型中的三維點(diǎn)的幾何信息在所述多個(gè)不同的投影視角下的多張第二幾何信息圖；所述多張第二幾何信息圖與所述多張第二牙齒圖像一一對(duì)應(yīng)；

14.根據(jù)權(quán)利要求12所述的方法，其特征在于，獲取所述訓(xùn)練樣本中的所述與每張第二牙齒圖像對(duì)應(yīng)的異常部位標(biāo)簽，包括：

15.一種牙齒異常部位識(shí)別裝置，其特征在于，包括：

16.一種電子設(shè)備，其特征在于，包括存儲(chǔ)器、處理器及存儲(chǔ)在存儲(chǔ)器上并可在處理器上運(yùn)行的可執(zhí)行指令；

17.一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，其上存儲(chǔ)有計(jì)算機(jī)指令，其特征在于，所述計(jì)算機(jī)指令被處理器執(zhí)行時(shí)實(shí)現(xiàn)權(quán)利要求1至14任意一項(xiàng)所述方法的步驟。

技術(shù)總結(jié)
本申請(qǐng)?zhí)峁┮环N牙齒異常部位識(shí)別方法、模型訓(xùn)練方法、裝置、設(shè)備及存儲(chǔ)介質(zhì)。牙齒異常部位識(shí)別方法包括：按照多個(gè)不同的投影視角將待識(shí)別的第一牙齒模型從三維空間投影到二維空間，得到多張第一牙齒圖像；其中，不同的投影視角用于使第一牙齒模型中的每顆牙齒在多張第一牙齒圖像中具有在至少兩個(gè)投影視角下的投影結(jié)果；利用預(yù)先訓(xùn)練好的牙齒異常部位識(shí)別模型對(duì)多張第一牙齒圖像進(jìn)行牙齒異常部位識(shí)別處理，得到與多張第一牙齒圖像分別對(duì)應(yīng)的異常部位識(shí)別結(jié)果；對(duì)與多張第一牙齒圖像分別對(duì)應(yīng)的異常部位識(shí)別結(jié)果進(jìn)行篩選處理，以確定目標(biāo)異常部位。實(shí)現(xiàn)提高牙齒異常部位識(shí)別效率和識(shí)別準(zhǔn)確率。

技術(shù)研發(fā)人員：皮成祥,江騰飛,王嘉磊,王珊,張健
受保護(hù)的技術(shù)使用者：先臨三維科技股份有限公司
技術(shù)研發(fā)日：
技術(shù)公布日：2024/10/21