恭喜谷東科技有限公司曹晉獲國家專利權
買專利賣專利找龍圖騰,真高效! 查專利查商標用IPTOP,全免費!專利年費監控用IP管家,真方便!
龍圖騰網恭喜谷東科技有限公司申請的專利利用AR眼鏡進行手語識別的方法、AR眼鏡及存儲介質獲國家發明授權專利權,本發明授權專利權由國家知識產權局授予,授權公告號為:CN118015696B 。
龍圖騰網通過國家知識產權局官網在2025-05-13發布的發明授權授權公告中獲悉:該發明授權的專利申請號/專利號為:202410044354.X,技術領域涉及:G06V40/20;該發明授權利用AR眼鏡進行手語識別的方法、AR眼鏡及存儲介質是由曹晉;崔海濤;李星設計研發完成,并于2024-01-11向國家知識產權局提交的專利申請。
本利用AR眼鏡進行手語識別的方法、AR眼鏡及存儲介質在說明書摘要公布了:本發明涉及人工智能領域,具體涉及一種利用AR眼鏡進行手語識別的方法、AR眼鏡及存儲介質,旨在提高手語識別的精準度。本發明的手語識別方法包括:通過AR眼鏡獲取交流視頻;將交流視頻輸入第一YOLOv8模型檢測是否存在唇語;若存在唇語,則根據交流視頻分別生成手勢語句和唇語語句并組合為識別結果;若不存在唇語,則根據交流視頻生成手勢語句作為識別結果;將識別結果以文本的形式在AR眼鏡上進行顯示或以語音形式播放。本發明使用唇語與手語雙重識別的方法,提高了手語識別的精準度,利用AR眼鏡進行識別增加了手語識別的實時性。
本發明授權利用AR眼鏡進行手語識別的方法、AR眼鏡及存儲介質在權利要求書中公布了:1.一種利用AR眼鏡進行手語識別的方法,其特征在于,所述方法包括:通過AR眼鏡獲取交流視頻;將所述交流視頻輸入第一YOLOv8模型檢測是否存在唇語;若存在唇語,則根據所述交流視頻分別生成手勢語句和唇語語句并組合為識別結果;若不存在唇語,則根據所述交流視頻生成手勢語句作為識別結果;將所述識別結果以文本的形式在所述AR眼鏡上進行顯示或以語音形式播放;其中,“根據所述交流視頻分別生成手勢語句和唇語語句并組合為識別結果”的步驟包括:將所述交流視頻輸入第二YOLOv8模型獲取原子動作序列和對應的第一離散語句以及手勢置信度均值;將所述原子動作序列和所述第一離散語句輸入雙門LSTM模型,生成手勢對應的第二離散語句;將所述交流視頻輸入所述第一YOLOv8模型獲取唇語對應的第三離散語句以及唇語置信度均值;將所述第二離散語句輸入第一Transformer模型,使得所述第一Transformer模型結合上下文語境對所述第二離散語句進行語義理解,進而對缺失或不通順的部分進行補充或調整,得到所述手勢語句;將所述第三離散語句輸入第二Transformer模型,使得所述第二Transformer模型結合上下文語境對所述第三離散語句進行語義理解,進而對缺失或不通順的部分進行補充或調整,得到所述唇語語句;根據所述手勢置信度均值、所述唇語置信度均值和預設權重對所述手勢語句和所述唇語語句進行組合,得到識別結果;將所述識別結果分別反饋到所述第一Transformer模型和所述第二Transformer模型,融入所述上下文語境中參與后續的語義理解。
如需購買、轉讓、實施、許可或投資類似專利技術,可聯系本專利的申請人或專利權人谷東科技有限公司,其通訊地址為:510700 廣東省廣州市黃埔區科學大道90-96號(雙數)901、902、903、904房;或者聯系龍圖騰網官方客服,聯系龍圖騰網可撥打電話0551-65771310或微信搜索“龍圖騰網”。
1、本報告根據公開、合法渠道獲得相關數據和信息,力求客觀、公正,但并不保證數據的最終完整性和準確性。
2、報告中的分析和結論僅反映本公司于發布本報告當日的職業理解,僅供參考使用,不能作為本公司承擔任何法律責任的依據或者憑證。