恭喜中國電信股份有限公司黃金龍獲國家專利權
買專利賣專利找龍圖騰,真高效! 查專利查商標用IPTOP,全免費!專利年費監控用IP管家,真方便!
龍圖騰網恭喜中國電信股份有限公司申請的專利時序動作提名方法及裝置獲國家發明授權專利權,本發明授權專利權由國家知識產權局授予,授權公告號為:CN114973095B 。
龍圖騰網通過國家知識產權局官網在2025-04-01發布的發明授權授權公告中獲悉:該發明授權的專利申請號/專利號為:202210648422.4,技術領域涉及:G06V20/40;該發明授權時序動作提名方法及裝置是由黃金龍;張琳;賀嘉;何美斌設計研發完成,并于2022-06-09向國家知識產權局提交的專利申請。
本時序動作提名方法及裝置在說明書摘要公布了:本申請公開了一種時序動作提名方法及裝置。其中,該方法包括:獲取待處理視頻,將待處理視頻劃分為多個第一視頻片段;基于預訓練的原子動作評估模型確定每個第一視頻片段對應的原子動作概率,得到原子動作概率集;基于原子動作概率集合從多個第一視頻片段對應的標記時間點中確定動作邊界集合,并基于動作邊界集合確定多個候選動作提名;提取每個候選動作提名對應的候選提名特征,并基于候選提名特征確定每個候選動作提名的置信度;基于多個候選動作提名的置信度對多個候選動作提名進行非極大值抑制處理,得到目標動作提名。本申請解決了相關技術中對視頻進行時序動作檢測時獲取動作提名的過程較為復雜,且召回率不高的技術問題。
本發明授權時序動作提名方法及裝置在權利要求書中公布了:1.一種時序動作提名方法,其特征在于,包括:獲取待處理視頻,將所述待處理視頻劃分為多個第一視頻片段,其中,每個所述第一視頻片段具有對應的標記時間點;基于預訓練的原子動作評估模型確定每個所述第一視頻片段對應的原子動作概率,得到原子動作概率集合,其中,所述原子動作評估模型為Transformer模型,所述原子動作包括:動作開始,動作進行中和動作結束;基于所述原子動作概率集合從所述多個第一視頻片段對應的標記時間點中確定動作邊界集合,并基于所述動作邊界集合確定多個候選動作提名;提取每個所述候選動作提名對應的候選提名特征,并基于所述候選提名特征確定每個所述候選動作提名的置信度;基于所述多個候選動作提名的置信度對所述多個候選動作提名進行非極大值抑制處理,得到目標動作提名;其中,基于預訓練的原子動作評估模型確定每個所述第一視頻片段對應的原子動作概率,得到原子動作概率集合,包括:將所述多個第一視頻片段依次輸入所述原子動作評估模型,得到每個所述第一視頻片段對應的所述原子動作概率,所述原子動作概率包括:動作開始概率,動作進行中概率和動作結束概率;將所述多個第一視頻片段對應的所述原子動作概率作為所述原子動作概率集合,所述原子動作概率集合包括:動作開始概率集合,動作進行中概率集合和動作結束概率集合;其中,所述原子動作評估模型的訓練過程包括:獲取訓練樣本視頻及標注信息,所述標注信息用于標注所述訓練樣本視頻中的動作實例;將所述訓練樣本視頻劃分為多個第二視頻片段,并基于待訓練的原子動作評估模型預測每個所述第二視頻片段對應的所述原子動作概率;基于每個所述第二視頻片段對應的所述動作開始概率及所述標注信息構建第一損失函數;基于每個所述第二視頻片段對應的所述動作進行中概率及所述標注信息構建第二損失函數;基于每個所述第二視頻片段對應的所述動作結束概率及所述標注信息構建第三損失函數;基于每三個相鄰的所述第二視頻片段對應的所述動作開始概率、所述動作進行中概率及所述動作結束概率確定順序概率,并基于所有所述順序概率構建第四損失函數,其中,所述順序概率用于表示所述每三個相鄰的所述第二視頻片段是否滿足原子動作順序;基于所述第一損失函數、所述第二損失函數、所述第三損失函數和所述第四損失函數構建目標損失函數;基于所述目標損失函數,通過反向傳播梯度下降的方式調整所述待訓練的原子動作評估模型的模型參數;其中,所述第四損失函數定義為動作懲罰函數,用如下公式表示: 式中,vpi-1,pi,pi+1表示原子動作關系限制函數,pi-1、pi、pi+1分別表示第i-1、i、i+1個時間窗口內的真實標注值,在pi-1、pi、pi+1被判定為連續重復的標記或者符合原子動作步驟順序時,vpi-1,pi,pi+1的值標定為0,否則vpi-1,pi,pi+1的值標定為1。
如需購買、轉讓、實施、許可或投資類似專利技術,可聯系本專利的申請人或專利權人中國電信股份有限公司,其通訊地址為:100033 北京市西城區金融街31號;或者聯系龍圖騰網官方客服,聯系龍圖騰網可撥打電話0551-65771310或微信搜索“龍圖騰網”。
1、本報告根據公開、合法渠道獲得相關數據和信息,力求客觀、公正,但并不保證數據的最終完整性和準確性。
2、報告中的分析和結論僅反映本公司于發布本報告當日的職業理解,僅供參考使用,不能作為本公司承擔任何法律責任的依據或者憑證。