買專利賣專利找龍圖騰，真高效！ 查專利查商標用IPTOP,全免費！專利年費監控用IP管家,真方便！

龍圖騰網恭喜河南中煙工業有限責任公司申請的專利基于強化學習的虛擬無線傳感網絡資源分配方法、系統、電子設備及計算機可讀存儲介質獲國家發明授權專利權，本發明授權專利權由國家知識產權局授予，授權公告號為：CN115243377B 。

龍圖騰網通過國家知識產權局官網在2025-05-13發布的發明授權授權公告中獲悉：該發明授權的專利申請號/專利號為：202210782127.8，技術領域涉及：H04W72/50；該發明授權基于強化學習的虛擬無線傳感網絡資源分配方法、系統、電子設備及計算機可讀存儲介質是由周廣旭;郭越;李長進;侯俊峰;張紅軍;李松;王建濤;楊光設計研發完成，并于2022-06-30向國家知識產權局提交的專利申請。

本基于強化學習的虛擬無線傳感網絡資源分配方法、系統、電子設備及計算機可讀存儲介質在說明書摘要公布了：本發明公開了基于強化學習的虛擬無線傳感網絡資源分配方法、系統、電子設備及計算機可讀存儲介質。從虛擬化無線傳感網絡的服務請求角度出發，提出了一種基于強化學習的虛擬化無線傳感網絡資源分配策略，首先建立基于業務感測信息質量要求和資源容量約束下的虛擬傳感網絡請求部署效用最大化模型；之后考慮到業務請求具有隨機性且網絡環境動態變化，將其資源優化問題轉化為馬爾科夫決策過程，最后采用基于進化算法的元學習強化學習算法與虛擬化無線傳感網絡環境不斷交互以獲得較優資源分配策略；該方法在滿足資源需求的同時，有效提高了服務提供商收益，并降低了虛擬傳感網絡請求部署成本。

本發明授權基于強化學習的虛擬無線傳感網絡資源分配方法、系統、電子設備及計算機可讀存儲介質在權利要求書中公布了：1.一種基于強化學習的虛擬無線傳感網絡資源分配方法，其特征在于，所述方法包括：步驟S1、預先獲取任一時刻到達的虛擬無線傳感網絡請求的所需資源需求；步驟S2、依據所述所需資源需求和預先建立的部署效用最大化模型從底層無線傳感網絡中選取候選物理節點集合，并根據所述候選物理節點集合得到相應的候選無線鏈路集合，其中，基于感測信息質量要求和資源需求約束條件預先建立所述部署效用最大化模型；步驟S3、將所述候選物理節點集合和所述候選無線鏈路集合代入馬爾科夫決策模型，并利用強化學習算法從所述候選物理節點集合中選擇一個候選物理節點作為最佳物理節點，并根據所述最佳物理節點從所述候選無線鏈路集合中選擇相應的一個候選無線鏈路作為最佳無線鏈路，以為所述虛擬無線傳感網絡請求分配相應的通信帶寬和傳感器節點計算資源；在所述步驟S3之后還包括：步驟S4、將虛擬節點映射到強化學習算法選擇的最佳物理節點上；在所述步驟S4中，如果所述虛擬節點成功映射到所述最佳物理節點上，則輸出映射成功提示；如果所述虛擬節點未成功映射到所述最佳物理節點上，則從所述候選物理節點集合去除所述最佳物理節點，并判斷所述虛擬節點的映射次數，如果所述映射次數大于預設次數閾值，則輸出映射失敗提示，如果所述映射次數小于所述預設次數閾值，則重新轉入步驟S3；在所述步驟S2中，所述部署效用最大化模型的目標函數表示為：maxUt---1； 這里，表示業務請求感興趣的區域位置坐標，crens表示節點處理能力閾值，brels表示系統資源的閾值，blv表示該虛擬鏈路對帶寬資源的需求；此外，表示感測信息質量需求；d為感測區域位置之間的歐式距離，為服務請求距離閾值；進一步，c1表示在任意物理傳感節點上由虛擬傳感節點所占用的處理資源應小于該物理傳感節點可用的處理資源；c2表示虛擬鏈路所占用的帶寬資源應小于其對應物理鏈路的帶寬資源；c3表示為感測信息質量要求；c4和c5表示變量的取值范圍約束；目標函數為Ut＝Rt-Ct，其中Rt和Ct分別表示其收益和成本；在所述步驟S3中，通過馬爾科夫決策模型將虛擬無線傳感網絡請求定義為一個多元組M＝S,A,P,R；其中S是狀態空間，A是動作空間，P是轉移概率，R是獎勵函數，st∈S為時刻t的系統狀態，包括虛擬無線傳感網絡請求的到達與離開、虛擬無線傳感網絡請求的所需資源需求以及當前底層無線傳感網絡的可用資源情況；動作at∈A為根據當前網絡狀態、傳感節點處理和鏈路資源分配情況；在狀態st執行動作at后，完成當前時刻虛擬無線傳感網絡請求的部署，此時得到一個立即回報Rt＝Ut；狀態轉移概率prst+1∈St+1|st,at，表示在狀態st下采取動作at轉移至st+1的概率；在所述步驟S3中，所述強化學習算法為結合基于進化算法的元學習強化學習算法，通過設計內外兩成循環，外層循環主要執行算法性能評估，從一堆的候選算法中選出獲得的獎勵回報最大的那一批算法；而內層循環主要執行算法篩選，把每種算法都訓練到最好狀態后，再利用外層循環進行性能評估，實現自動選出最優的虛擬無線傳感網絡資源分配算法。

如需購買、轉讓、實施、許可或投資類似專利技術，可聯系本專利的申請人或專利權人河南中煙工業有限責任公司，其通訊地址為：450000 河南省鄭州市鄭東新區榆林南路16號；或者聯系龍圖騰網官方客服，聯系龍圖騰網可撥打電話0551-65771310或微信搜索“龍圖騰網”。