買專利賣專利找龍圖騰，真高效！ 查專利查商標用IPTOP,全免費！專利年費監控用IP管家,真方便！

龍圖騰網恭喜江西財經大學申請的專利基于協同注意力機制的視聽顯著性預測方法與系統獲國家發明授權專利權，本發明授權專利權由國家知識產權局授予，授權公告號為：CN119988894B 。

龍圖騰網通過國家知識產權局官網在2025-06-13發布的發明授權授權公告中獲悉：該發明授權的專利申請號/專利號為：202510470452.4，技術領域涉及：G06F18/20；該發明授權基于協同注意力機制的視聽顯著性預測方法與系統是由毛阿敏;鄢杰斌;方玉明;蔡超;劉振宇設計研發完成，并于2025-04-15向國家知識產權局提交的專利申請。

本基于協同注意力機制的視聽顯著性預測方法與系統在說明書摘要公布了：本發明提出一種基于協同注意力機制的視聽顯著性預測方法與系統，該方法包括：獲得預處理后的幀圖像和處理后的音頻信號；將預處理后的幀圖像通過視覺編碼進行特征提取，得到高層視覺特征；基于處理后的音頻信號得到初步的音頻特征；將初步的音頻特征通過音頻時序提取器進行處理，得到音頻顯著特征；通過高層視覺特征和音頻顯著特征得到視覺?音頻融合特征和音頻?視覺融合特征；基于視覺?音頻融合特征和音頻?視覺融合特征得到對齊融合后的視聽特征；基于對齊融合后的視聽特征得到顯著預測圖。本發明采用逐幀策略融合視聽特征，在時空上精確對齊了音視頻特征，且不再依賴于視頻數據集的預訓練，最終準確的定位到顯著目標。

本發明授權基于協同注意力機制的視聽顯著性預測方法與系統在權利要求書中公布了：1.一種基于協同注意力機制的視聽顯著性預測方法，其特征在于，所述方法包括如下步驟： 步驟1、獲取視頻中的每一幀圖像，對每一幀圖像進行預處理，得到預處理后的幀圖像； 對音頻信號進行預處理，得到處理后的音頻信號； 步驟2、將預處理后的幀圖像通過視覺編碼進行特征提取，得到四個尺度的視覺特征； 將處理后的音頻信號通過音頻編碼進行音頻特征提取，得到初步的音頻特征； 將初步的音頻特征通過音頻時序提取器進行處理，得到音頻顯著特征； 步驟3、將四個尺度的視覺特征中的高層視覺特征和音頻顯著特征通過視覺感知引導器處理得到視覺-音頻融合特征； 將高層視覺特征和音頻顯著特征通過音頻感知引導器處理，得到音頻-視覺融合特征； 步驟4、將視覺-音頻融合特征和音頻-視覺融合特征依次進行時空對抗學習和特征融合，以得到對齊融合后的視聽特征； 步驟5、將對齊融合后的視聽特征經過多層的解碼器處理，得到顯著預測圖； 在所述步驟4中，將視覺-音頻融合特征和音頻-視覺融合特征依次進行時空對抗學習和特征融合，以得到對齊融合后的視聽特征，其中，通過視覺-音頻融合特征和音頻-視覺融合特征構建音頻-視覺對稱損失，對應過程存在的關系式為： ； 其中，表示視覺-音頻對稱損失函數，表示計算特征之間的相似性，表示停止梯度操作，表示L2正則化，表示第幀的音頻-視覺融合特征，表示第幀的視覺-音頻融合特征。

如需購買、轉讓、實施、許可或投資類似專利技術，可聯系本專利的申請人或專利權人江西財經大學，其通訊地址為：330000 江西省南昌市經濟技術開發區雙港東大街169號；或者聯系龍圖騰網官方客服，聯系龍圖騰網可撥打電話0551-65771310或微信搜索“龍圖騰網”。