恭喜北京科技大學王榮全獲國家專利權
買專利賣專利找龍圖騰,真高效! 查專利查商標用IPTOP,全免費!專利年費監控用IP管家,真方便!
龍圖騰網恭喜北京科技大學申請的專利基于預訓練模型和金字塔圖融合的多模態人格預測方法獲國家發明授權專利權,本發明授權專利權由國家知識產權局授予,授權公告號為:CN119337325B 。
龍圖騰網通過國家知識產權局官網在2025-04-04發布的發明授權授權公告中獲悉:該發明授權的專利申請號/專利號為:202411884879.0,技術領域涉及:G06F18/25;該發明授權基于預訓練模型和金字塔圖融合的多模態人格預測方法是由王榮全;馬惠敏設計研發完成,并于2024-12-20向國家知識產權局提交的專利申請。
本基于預訓練模型和金字塔圖融合的多模態人格預測方法在說明書摘要公布了:本發明提供一種基于預訓練模型和金字塔圖融合的多模態人格預測方法及裝置,涉及情感計算技術領域。該方法包括:根據原始視頻以及預設的人格描述詞列表,通過預訓練模型進行單模態特征提取,獲得三類單模態特征;基于相似性函數,根據三類單模態特征進行兩單模態間相似性計算,得到雙模態關聯特征;根據文本數據和三類單模態特征,通過特征編碼器進行特征拼接,獲得三模態組合特征;根據三類單模態特征、雙模態關聯特征和三模態組合特征通過金字塔圖融合網絡進行特征融合,獲得多模態融合特征;輸入雙層感知機進行人格預測,獲得人格預測結果。本發明是一種集成預訓練模型以及金字塔圖融合網絡的準確度高的多模態人格預測方法。
本發明授權基于預訓練模型和金字塔圖融合的多模態人格預測方法在權利要求書中公布了:1.一種基于預訓練模型和金字塔圖融合的多模態人格預測方法,其特征在于,所述方法包括:使用視頻采集設備進行視頻錄制,獲取原始視頻;對所述原始視頻進行數據預處理獲得場景數據、音頻數據以及文本數據;基于擴展長短期記憶網絡,根據所述場景數據、所述音頻數據和預設的人格描述詞列表,通過預訓練模型進行單模態特征提取,獲得三類單模態特征;所述預訓練模型包括預訓練CLIP模型以及預訓練CLAP模型;基于相似性函數,根據所述三類單模態特征進行兩單模態間的相似性計算,得到三個雙模態關聯特征;基于預訓練模型、通用特征編碼器和雙層感知機,根據所述文本數據以及所述三類單模態特征進行特征融合,獲得三模態組合特征;根據所述三類單模態特征、所述雙模態關聯特征和所述三模態組合特征,通過金字塔圖融合網絡進行特征融合,獲得多模態融合特征;其中,所述根據所述三類單模態特征、所述雙模態關聯特征和所述三模態組合特征,通過金字塔圖融合網絡進行特征融合,獲得多模態融合特征,包括:根據所述三類單模態特征、所述雙模態關聯特征和所述三模態組合特征構建靜態多模態圖;根據所述靜態多模態圖,通過金字塔圖融合網絡進行特征融合,獲得多模態融合特征;將所述多模態融合特征輸入雙層感知機進行人格預測,獲得人格預測結果。
如需購買、轉讓、實施、許可或投資類似專利技術,可聯系本專利的申請人或專利權人北京科技大學,其通訊地址為:100083 北京市海淀區學院路30號;或者聯系龍圖騰網官方客服,聯系龍圖騰網可撥打電話0551-65771310或微信搜索“龍圖騰網”。
1、本報告根據公開、合法渠道獲得相關數據和信息,力求客觀、公正,但并不保證數據的最終完整性和準確性。
2、報告中的分析和結論僅反映本公司于發布本報告當日的職業理解,僅供參考使用,不能作為本公司承擔任何法律責任的依據或者憑證。