本發(fā)明涉及無線，具體地說，涉及一種無線網(wǎng)絡(luò)資源調(diào)度方法、裝置、介質(zhì)及產(chǎn)品。

背景技術(shù)：

1、為保證終端能夠進(jìn)行上下行數(shù)據(jù)傳輸，無線網(wǎng)絡(luò)需要對空口無線資源進(jìn)行管理和調(diào)度?，F(xiàn)有的無線網(wǎng)絡(luò)資源調(diào)度方案通常采用多目標(biāo)優(yōu)化問題進(jìn)行求解，以降低復(fù)雜度。然而由于神經(jīng)網(wǎng)絡(luò)權(quán)重的初始隨機(jī)化，算法在訓(xùn)練初期會出現(xiàn)性能“低谷”，導(dǎo)致用戶服務(wù)質(zhì)量較差，網(wǎng)絡(luò)資源效率較低。

技術(shù)實(shí)現(xiàn)思路

1、與現(xiàn)有技術(shù)相比，本發(fā)明提出一種無線網(wǎng)絡(luò)資源調(diào)度方法、裝置、介質(zhì)及產(chǎn)品，能夠避免算法在訓(xùn)練初期出現(xiàn)的性能低谷，提高用戶服務(wù)質(zhì)量和網(wǎng)絡(luò)資源效率。

2、本發(fā)明實(shí)施例提供一種無線網(wǎng)絡(luò)資源調(diào)度方法，所述方法包括：

3、對待調(diào)度用戶的業(yè)務(wù)進(jìn)行基站調(diào)度策略的參數(shù)更新訓(xùn)練，確定訓(xùn)練過程中基站節(jié)點(diǎn)的當(dāng)前策略動作；

4、計(jì)算訓(xùn)練過程中執(zhí)行當(dāng)前策略動作后用戶的qoe指標(biāo)數(shù)據(jù)，根據(jù)得到的qoe指標(biāo)數(shù)據(jù)確定符合預(yù)設(shè)的質(zhì)量要求的策略動作，作為訓(xùn)練片段保存；

5、根據(jù)預(yù)設(shè)的約束型策略優(yōu)化算法對保存的訓(xùn)練片段進(jìn)行求解，確定基站節(jié)點(diǎn)的網(wǎng)絡(luò)參數(shù)，進(jìn)行資源調(diào)度。

6、優(yōu)選地，根據(jù)得到的qoe指標(biāo)數(shù)據(jù)確定符合預(yù)設(shè)的質(zhì)量要求的策略動作，作為訓(xùn)練片段保存，包括：

7、根據(jù)所述待調(diào)度用戶的業(yè)務(wù)的場景類型確定分配策略的部署方式；

8、當(dāng)所述部署方式為離線更新時，根據(jù)參數(shù)更新訓(xùn)練時的迭代次數(shù)確定當(dāng)前階段；

9、當(dāng)所述當(dāng)前階段處于第一階段時，判斷得到的qoe指標(biāo)數(shù)據(jù)是否符合所述質(zhì)量要求，根據(jù)判斷結(jié)果確定對應(yīng)的策略動作，作為訓(xùn)練片段保存。

10、優(yōu)選地，根據(jù)得到的qoe指標(biāo)數(shù)據(jù)確定符合預(yù)設(shè)的質(zhì)量要求的策略動作，作為訓(xùn)練片段保存，包括：

11、根據(jù)所述待調(diào)度用戶的業(yè)務(wù)的場景類型確定分配策略的部署方式；

12、當(dāng)所述部署方式為在線更新時，判斷得到的qoe指標(biāo)數(shù)據(jù)是否符合所述質(zhì)量要求，根據(jù)判斷結(jié)果確定對應(yīng)的策略動作，作為訓(xùn)練片段保存。

13、優(yōu)選地，所述計(jì)算迭代過程中執(zhí)行當(dāng)前策略動作后用戶的qoe指標(biāo)數(shù)據(jù)，包括

14、根據(jù)當(dāng)前策略動作為所述待調(diào)度用戶的業(yè)務(wù)預(yù)分配多維資源；

15、計(jì)算資源分配后所述待調(diào)度用戶的延遲時間和丟包率作為所述qoe指標(biāo)數(shù)據(jù)；

16、判斷得到的qoe指標(biāo)數(shù)據(jù)是否符合所述質(zhì)量要求，包括：

17、判斷所述延遲時間小于預(yù)設(shè)的時間閾值，且所述丟包率小于預(yù)設(shè)的丟包率閾值是否成立；

18、若是，判斷結(jié)果為符合所述質(zhì)量要求；

19、若否，判斷結(jié)果為不符合所述質(zhì)量要求。

20、優(yōu)選地，根據(jù)判斷結(jié)果確定對應(yīng)的策略動作，作為訓(xùn)練片段保存，方法還包括：

21、當(dāng)判斷結(jié)果為不符合所述質(zhì)量要求時，按照基站節(jié)點(diǎn)的最大能力為用戶分配多維資源，更新基站節(jié)點(diǎn)的策略動作，并保存更新后的策略動作作為訓(xùn)練片段；

22、當(dāng)判斷結(jié)果為符合所述質(zhì)量要求時，將當(dāng)前策略動作保存為訓(xùn)練片段。

23、優(yōu)選地，根據(jù)參數(shù)更新訓(xùn)練時的迭代次數(shù)確定當(dāng)前階段，包括：

24、當(dāng)?shù)螖?shù)小于預(yù)設(shè)的收斂閾值時，判定當(dāng)前階段處于第一階段；

25、當(dāng)?shù)螖?shù)不小于所述收斂閾值時，判定當(dāng)前階段處于第二階段。

26、作為一種優(yōu)選方案，所述方法還包括：

27、計(jì)算基站節(jié)點(diǎn)接入的所有用戶的評價指標(biāo)；

28、根據(jù)不同用戶的評價指標(biāo)按照預(yù)設(shè)的權(quán)重值加權(quán)求和，計(jì)算不同用戶的優(yōu)先級指標(biāo)；

29、按照不同用戶的優(yōu)先級指標(biāo)順序依次確定所述待調(diào)度用戶。

30、優(yōu)選地，計(jì)算基站節(jié)點(diǎn)接入的所有用戶的評價指標(biāo)，包括：

31、計(jì)算用戶當(dāng)前通信的瞬時速率與平均速率的比值作為速率指標(biāo)；

32、計(jì)算用戶的丟包率為指數(shù)的指數(shù)函數(shù)，按照預(yù)設(shè)的權(quán)重比例計(jì)算用戶的延遲抖動時間與延遲時間加權(quán)求和，計(jì)算指數(shù)函數(shù)的值與加權(quán)求和值的比值，作為延遲指標(biāo)；

33、將所述速率指標(biāo)、所述延遲指標(biāo)以及用戶的5g?qos標(biāo)識符作為所述評價指標(biāo)。

34、優(yōu)選地，在對待調(diào)度用戶的業(yè)務(wù)進(jìn)行基站調(diào)度策略的參數(shù)更新訓(xùn)練，確定訓(xùn)練過程中基站節(jié)點(diǎn)的當(dāng)前策略動作之前，所述方法還包括：

35、識別待調(diào)度用戶的業(yè)務(wù)類型；

36、當(dāng)所述業(yè)務(wù)類型為音視頻業(yè)務(wù)或數(shù)據(jù)業(yè)務(wù)時，根據(jù)業(yè)務(wù)的數(shù)據(jù)包與預(yù)設(shè)的時頻資源映射關(guān)系，為所述待調(diào)度用戶的業(yè)務(wù)分配資源塊，進(jìn)行資源調(diào)度；

37、當(dāng)所述業(yè)務(wù)類型不為音視頻業(yè)務(wù)或數(shù)據(jù)業(yè)務(wù)時，對待調(diào)度用戶的業(yè)務(wù)進(jìn)行基站調(diào)度策略的參數(shù)更新訓(xùn)練，確定訓(xùn)練過程中基站節(jié)點(diǎn)的當(dāng)前策略動作。

38、本發(fā)明實(shí)施例還提供一種無線網(wǎng)絡(luò)資源調(diào)度裝置，所述裝置包括：

39、訓(xùn)練模塊，用于對待調(diào)度用戶的業(yè)務(wù)進(jìn)行基站調(diào)度策略的參數(shù)更新訓(xùn)練，確定訓(xùn)練過程中基站節(jié)點(diǎn)的當(dāng)前策略動作；

40、動作更新模塊，用于計(jì)算訓(xùn)練過程中執(zhí)行當(dāng)前策略動作后用戶的qoe指標(biāo)數(shù)據(jù)，根據(jù)得到的qoe指標(biāo)數(shù)據(jù)確定符合預(yù)設(shè)的質(zhì)量要求的策略動作，作為訓(xùn)練片段保存；

41、調(diào)度模塊，用于根據(jù)預(yù)設(shè)的約束型策略優(yōu)化算法對保存的訓(xùn)練片段進(jìn)行求解，確定基站節(jié)點(diǎn)的網(wǎng)絡(luò)參數(shù)，進(jìn)行資源調(diào)度。

42、本發(fā)明實(shí)施例還提供一種無線網(wǎng)絡(luò)資源調(diào)度裝置，包括處理器、存儲器以及存儲在所述存儲器中且被配置為由所述處理器執(zhí)行的計(jì)算機(jī)程序，所述處理器執(zhí)行所述計(jì)算機(jī)程序時實(shí)現(xiàn)如上述任一項(xiàng)實(shí)施例所述的一種無線網(wǎng)絡(luò)資源調(diào)度方法。

43、本發(fā)明實(shí)施例還提供一種計(jì)算機(jī)可讀存儲介質(zhì)，所述計(jì)算機(jī)可讀存儲介質(zhì)包括存儲的計(jì)算機(jī)程序，其中，在所述計(jì)算機(jī)程序運(yùn)行時控制所述計(jì)算機(jī)可讀存儲介質(zhì)所在設(shè)備執(zhí)行如上述任一項(xiàng)實(shí)施例所述的一種無線網(wǎng)絡(luò)資源調(diào)度方法。

44、本發(fā)明實(shí)施例還提供一種計(jì)算機(jī)程序產(chǎn)品，包括計(jì)算機(jī)程序/指令，該計(jì)算機(jī)程序/指令被處理器執(zhí)行時實(shí)現(xiàn)上述任一項(xiàng)實(shí)施例所述的方法的步驟。

45、與現(xiàn)有技術(shù)相比，本發(fā)明提供一種無線網(wǎng)絡(luò)資源調(diào)度方法、裝置、介質(zhì)及產(chǎn)品，通過對待調(diào)度用戶的業(yè)務(wù)進(jìn)行基站調(diào)度策略的參數(shù)更新訓(xùn)練，確定訓(xùn)練過程中基站節(jié)點(diǎn)的當(dāng)前策略動作；計(jì)算訓(xùn)練過程中執(zhí)行當(dāng)前策略動作后用戶的qoe指標(biāo)數(shù)據(jù)，根據(jù)得到的qoe指標(biāo)數(shù)據(jù)確定符合預(yù)設(shè)的質(zhì)量要求的策略動作，作為訓(xùn)練片段保存；根據(jù)預(yù)設(shè)的約束型策略優(yōu)化算法對保存的訓(xùn)練片段進(jìn)行求解，確定基站節(jié)點(diǎn)的網(wǎng)絡(luò)參數(shù)，進(jìn)行資源調(diào)度。本申請方案能夠避免算法在訓(xùn)練初期出現(xiàn)的性能低谷，提高用戶服務(wù)質(zhì)量和網(wǎng)絡(luò)資源效率。

技術(shù)特征：

1.一種無線網(wǎng)絡(luò)資源調(diào)度方法，其特征在于，所述方法包括：

2.根據(jù)權(quán)利要求1所述的無線網(wǎng)絡(luò)資源調(diào)度方法，其特征在于，根據(jù)得到的qoe指標(biāo)數(shù)據(jù)確定符合預(yù)設(shè)的質(zhì)量要求的策略動作，作為訓(xùn)練片段保存，包括：

3.根據(jù)權(quán)利要求1所述的無線網(wǎng)絡(luò)資源調(diào)度方法，其特征在于，根據(jù)得到的qoe指標(biāo)數(shù)據(jù)確定符合預(yù)設(shè)的質(zhì)量要求的策略動作，作為訓(xùn)練片段保存，包括：

4.根據(jù)權(quán)利要求2或3所述的無線網(wǎng)絡(luò)資源調(diào)度方法，其特征在于，所述計(jì)算迭代過程中執(zhí)行當(dāng)前策略動作后用戶的qoe指標(biāo)數(shù)據(jù)，包括

5.根據(jù)權(quán)利要求2或3所述的無線網(wǎng)絡(luò)資源調(diào)度方法，其特征在于，根據(jù)判斷結(jié)果確定對應(yīng)的策略動作，作為訓(xùn)練片段保存，方法還包括：

6.根據(jù)權(quán)利要求2所述的無線網(wǎng)絡(luò)資源調(diào)度方法，其特征在于，根據(jù)參數(shù)更新訓(xùn)練時的迭代次數(shù)確定當(dāng)前階段，包括：

7.根據(jù)權(quán)利要求1所述的無線網(wǎng)絡(luò)資源調(diào)度方法，其特征在于，所述方法還包括：

8.根據(jù)權(quán)利要求1所述的無線網(wǎng)絡(luò)資源調(diào)度方法，其特征在于，計(jì)算基站節(jié)點(diǎn)接入的所有用戶的評價指標(biāo)，包括：

9.根據(jù)權(quán)利要求1所述的無線網(wǎng)絡(luò)資源調(diào)度方法，其特征在于，在對待調(diào)度用戶的業(yè)務(wù)進(jìn)行基站調(diào)度策略的參數(shù)更新訓(xùn)練，確定訓(xùn)練過程中基站節(jié)點(diǎn)的當(dāng)前策略動作之前，所述方法還包括：

10.一種無線網(wǎng)絡(luò)資源調(diào)度裝置，其特征在于，所述裝置包括：

11.一種無線網(wǎng)絡(luò)資源調(diào)度裝置，其特征在于，包括處理器、存儲器以及存儲在所述存儲器中且被配置為由所述處理器執(zhí)行的計(jì)算機(jī)程序，所述處理器執(zhí)行所述計(jì)算機(jī)程序時實(shí)現(xiàn)如權(quán)利要求1至9中任意一項(xiàng)所述的無線網(wǎng)絡(luò)資源調(diào)度方法。

12.一種計(jì)算機(jī)可讀存儲介質(zhì)，其特征在于，所述計(jì)算機(jī)可讀存儲介質(zhì)包括存儲的計(jì)算機(jī)程序，其中，在所述計(jì)算機(jī)程序運(yùn)行時控制所述計(jì)算機(jī)可讀存儲介質(zhì)所在設(shè)備執(zhí)行如權(quán)利要求1至9中任意一項(xiàng)所述的無線網(wǎng)絡(luò)資源調(diào)度方法。

13.一種計(jì)算機(jī)程序產(chǎn)品，包括計(jì)算機(jī)程序/指令，其特征在于，該計(jì)算機(jī)程序/指令被處理器執(zhí)行時實(shí)現(xiàn)權(quán)利要求1至9中任意一項(xiàng)所述的無線網(wǎng)絡(luò)資源調(diào)度方法的步驟。

技術(shù)總結(jié)
本發(fā)明公開了一種無線網(wǎng)絡(luò)資源調(diào)度方法、裝置、介質(zhì)及產(chǎn)品，通過對待調(diào)度用戶的業(yè)務(wù)進(jìn)行基站調(diào)度策略的參數(shù)更新訓(xùn)練，確定訓(xùn)練過程中基站節(jié)點(diǎn)的當(dāng)前策略動作；計(jì)算訓(xùn)練過程中執(zhí)行當(dāng)前策略動作后用戶的QoE指標(biāo)數(shù)據(jù)，根據(jù)得到的QoE指標(biāo)數(shù)據(jù)確定符合預(yù)設(shè)的質(zhì)量要求的策略動作，作為訓(xùn)練片段保存；根據(jù)預(yù)設(shè)的約束型策略優(yōu)化算法對保存的訓(xùn)練片段進(jìn)行求解，確定基站節(jié)點(diǎn)的網(wǎng)絡(luò)參數(shù)，進(jìn)行資源調(diào)度。本申請方案能夠避免算法在訓(xùn)練初期出現(xiàn)的性能低谷，提高用戶服務(wù)質(zhì)量和網(wǎng)絡(luò)資源效率。

技術(shù)研發(fā)人員：董君宇,高松濤,曹陽陽,于一鳴,潘都,程日濤
受保護(hù)的技術(shù)使用者：中國移動通信集團(tuán)設(shè)計(jì)院有限公司
技術(shù)研發(fā)日：
技術(shù)公布日：2024/10/21