恭喜南京信息工程大學林妍獲國家專利權
買專利賣專利找龍圖騰,真高效! 查專利查商標用IPTOP,全免費!專利年費監控用IP管家,真方便!
龍圖騰網恭喜南京信息工程大學申請的專利一種基于架構蒸餾技術的生成對抗網絡架構搜索方法和系統獲國家發明授權專利權,本發明授權專利權由國家知識產權局授予,授權公告號為:CN119886228B 。
龍圖騰網通過國家知識產權局官網在2025-05-27發布的發明授權授權公告中獲悉:該發明授權的專利申請號/專利號為:202510370364.7,技術領域涉及:G06N3/0475;該發明授權一種基于架構蒸餾技術的生成對抗網絡架構搜索方法和系統是由林妍;薛羽;于小兵;楊強;申曉寧;金婷;王修來設計研發完成,并于2025-03-27向國家知識產權局提交的專利申請。
本一種基于架構蒸餾技術的生成對抗網絡架構搜索方法和系統在說明書摘要公布了:本發明提供了一種基于架構蒸餾技術的生成對抗網絡架構搜索方法和系統,所述方法定義一個搜索空間,構建融合了所有候選操作的超網,對超網進行預熱訓練,經過初始的預熱訓練后,評估子網的性能,篩選出對網絡性能不利的操作并丟棄。在超網的訓練過程中,通過架構知識蒸餾方法進行網絡權重優化,設計匹配優化網絡以有效地選擇教師網絡,使教師網絡與學生子網達到最優匹配,通過架構蒸餾技術將教師網絡的知識傳遞給其他子網,以指導超網訓練。使用多目標優化策略挑選出超網中表現最佳的網絡架構。本發明通過架構間的知識傳遞,提升子網的訓練效果,相比傳統的搜索方法具有更高的效率和更好的性能,能夠更快地找到適合任務的最優神經網絡架構。
本發明授權一種基于架構蒸餾技術的生成對抗網絡架構搜索方法和系統在權利要求書中公布了:1.一種基于架構蒸餾技術的生成對抗網絡架構搜索方法,其特征在于,包括以下步驟:步驟1,設計生成對抗網絡架構搜索的搜索空間,定義候選操作集,確定架構搜索的范圍,所述候選操作集中的候選操作包括普通候選操作和上采樣候選操作兩種類型;步驟2,根據步驟1中設計的搜索空間,構建一個包含所有候選架構的生成對抗網絡超網,所述超網涵蓋所有可能的候選架構,支持后續的架構優化;步驟3,對超網進行Nw輪的預熱訓練,利用生成對抗損失優化超網的權重參數;步驟4,對預熱訓練后的超網進行評估,剔除低性能的候選操作,基于統計分析優化搜索空間,以提高搜索效率和最終架構性能;步驟5,初始化一個子網集P和一個匹配優化網絡,其中,子網集P用于維護一個歷史 最優子網的動態列表,匹配優化網絡用于計算最優子網與采樣子網的匹配程度; 步驟6,使用匹配優化網絡從子網集P中選擇匹配度最高的歷史架構,作為當前采樣 子網的教師模型; 步驟7,計算架構蒸餾損失和生成器損失,用于更新采樣子網的權重,通過架構知識蒸餾技術從教師網絡中學習優化信息,加速訓練過程;步驟8,通過反向傳播算法,將更新權重后的生成器損失作為反饋,更新匹配優化網絡的權重;步驟9,根據評估指標和歷史最優值的差距決定是否更新子網集,采用多目標優化算法對子網集中的架構進行非支配排序,保留帕累托前沿解,超過存儲容量時,移除最劣架構;步驟10,交替執行步驟6~步驟9,直至達到預先設置的最大循環次數,得到訓練完成的超網;步驟11,在子網集中選擇性能最優的子網,作為最終的網絡架構;從超網中搜索到的生成器網絡架構將應用于圖像生成,把輸入的隨機噪聲通過生成器轉換成彩色圖片。
如需購買、轉讓、實施、許可或投資類似專利技術,可聯系本專利的申請人或專利權人南京信息工程大學,其通訊地址為:210044 江蘇省南京市江北新區寧六路219號;或者聯系龍圖騰網官方客服,聯系龍圖騰網可撥打電話0551-65771310或微信搜索“龍圖騰網”。
1、本報告根據公開、合法渠道獲得相關數據和信息,力求客觀、公正,但并不保證數據的最終完整性和準確性。
2、報告中的分析和結論僅反映本公司于發布本報告當日的職業理解,僅供參考使用,不能作為本公司承擔任何法律責任的依據或者憑證。