買專利賣專利找龍圖騰，真高效！ 查專利查商標用IPTOP,全免費！專利年費監控用IP管家,真方便！

龍圖騰網恭喜遼寧北斗衛星導航平臺有限公司申請的專利一種基于音視頻特征交互融合的視頻質量評價方法和裝置獲國家發明授權專利權，本發明授權專利權由國家知識產權局授予，授權公告號為：CN119693860B 。

龍圖騰網通過國家知識產權局官網在2025-05-16發布的發明授權授權公告中獲悉：該發明授權的專利申請號/專利號為：202510194992.4，技術領域涉及：G06V20/40；該發明授權一種基于音視頻特征交互融合的視頻質量評價方法和裝置是由武靖愷;劉允;韓少野;徐波;呂景松;董玉杰;付立軍;李鑫;代紅梅;蔣金河設計研發完成，并于2025-02-21向國家知識產權局提交的專利申請。

本一種基于音視頻特征交互融合的視頻質量評價方法和裝置在說明書摘要公布了：本發明涉及視頻分析領域，具體為一種基于音視頻特征交互融合的視頻質量評價方法和裝置。所述方法包括獲取原始數據集，原始數據集包括視頻數據和音頻數據；對原始數據集進行預處理，得到視頻幀數據和音頻頻譜數據；將視頻幀數據輸入視頻特征提取模型，得到視頻幀特征；將音頻頻譜數據輸入音頻特征提取模型，得到音頻幀特征；將視頻幀特征和音頻幀特征輸入特征交互融合模型，得到音視頻交互融合幀特征；將音視頻交互融合幀特征輸入質量評價模型，輸出音視頻的質量評價分數，將音視頻的質量評價分數作為視頻質量評價結果。以此方式，可以充分利用視頻的音視頻語義特征和交互關系，更能準確地評估視頻質量。

本發明授權一種基于音視頻特征交互融合的視頻質量評價方法和裝置在權利要求書中公布了：1.一種基于音視頻特征交互融合的視頻質量評價方法，其特征在于，包括：獲取原始數據集，所述原始數據集包括視頻數據和音頻數據；對所述原始數據集進行預處理，得到視頻幀數據和音頻頻譜數據，包括：等間隔的提取視頻幀，并將相鄰視頻幀作差，獲取視頻幀差圖，再分別將每個視頻幀的視頻幀、視頻幀差圖劃分為K個圖像塊，得到每個視頻幀的視頻幀圖像塊和視頻幀差圖像塊，所有視頻幀的視頻幀圖像塊和視頻幀差圖像塊構成視頻幀數據；將音頻數據轉換為音頻頻譜圖，再將音頻頻譜圖分割成與視頻幀數據對應的音頻頻譜圖像，得到音頻頻譜數據；將視頻幀數據輸入視頻特征提取模型，得到視頻幀特征；以及將音頻頻譜數據輸入音頻特征提取模型，得到音頻幀特征；所述將視頻幀數據輸入視頻特征提取模型，得到視頻幀特征，包括：將視頻幀數據中的每個視頻幀的視頻幀圖像塊和視頻幀差圖像塊分別輸入第一VisionMamba模塊，得到每個視頻幀的視頻幀圖像塊特征和視頻幀差圖像塊特征；計算每個視頻幀的視頻幀圖像塊特征的平均值和視頻幀差圖像塊特征的平均值，再將視頻幀圖像塊特征的平均值和視頻幀差圖像塊特征的平均值進行拼接，得到視頻幀特征；將所述視頻幀特征和音頻幀特征輸入特征交互融合模型，得到音視頻交互融合幀特征，包括：所述特征交互融合模型，包括三個相同的MultimodalTransformer模塊：第一MultimodalTransformer模塊的輸入數據為視頻幀特征、音頻幀特征，輸出第一級融合幀特征；第二MultimodalTransformer模塊的輸入數據為視頻幀特征與第一級融合幀特征相加得到的第一級視頻幀融合特征、音頻幀特征與第一級融合幀特征相加得到的第一級音頻幀融合特征，輸出第二級融合幀特征；第三MultimodalTransformer模塊的輸入數據為第一級視頻幀融合特征與第二級融合幀特征相加得到的第二級視頻幀融合特征、第一級音頻幀融合特征與第二級融合幀特征相加得到的第二級音頻幀融合特征，輸出第三級融合幀特征，并將第三級融合幀特征作為音視頻交互融合幀特征；將所述音視頻交互融合幀特征輸入質量評價模型，輸出音視頻的質量評價分數，將音視頻的質量評價分數作為視頻質量評價結果。

如需購買、轉讓、實施、許可或投資類似專利技術，可聯系本專利的申請人或專利權人遼寧北斗衛星導航平臺有限公司，其通訊地址為：110167 遼寧省沈陽市中國(遼寧)自由貿易試驗區沈陽片區全運路109-1號(109-1號)2層247-9148室；或者聯系龍圖騰網官方客服，聯系龍圖騰網可撥打電話0551-65771310或微信搜索“龍圖騰網”。