買專利賣專利找龍圖騰，真高效！ 查專利查商標用IPTOP,全免費！專利年費監控用IP管家,真方便！

龍圖騰網恭喜上海武桐樹高新技術有限公司申請的專利一種用于驅動二次元數字人實時互動的多模態大模型系統獲國家發明授權專利權，本發明授權專利權由國家知識產權局授予，授權公告號為：CN119251885B 。

龍圖騰網通過國家知識產權局官網在2025-04-04發布的發明授權授權公告中獲悉：該發明授權的專利申請號/專利號為：202411307492.9，技術領域涉及：G06V40/16；該發明授權一種用于驅動二次元數字人實時互動的多模態大模型系統是由陳亮;郭超;陳少平設計研發完成，并于2024-09-19向國家知識產權局提交的專利申請。

本一種用于驅動二次元數字人實時互動的多模態大模型系統在說明書摘要公布了：本發明公開了一種用于驅動二次元數字人實時互動的多模態大模型系統，涉及數字人大模型技術領域，包括數據采集模塊、多模態處理模塊、實時互動模塊，所述數據采集模塊用于使用計算機視覺技術對用戶的面部進行區域劃分和特征提取，并對頭部晃動幅度和頻率進行檢測，以及在用戶之間視頻交流時對用戶的瞳孔注視點進行檢測，所述多模態處理模塊用于對采集到的面部特征數據和瞳孔注視點數據進行分析，評估各個面部區域的吸引力，決定各個區域采用實時捕捉還是表情模板的方式，所述實時互動模塊用于根據呈現表情的方式對用戶對應的數字人表情加以控制，進行各個用戶之間的互動，本發明，具有結合兩者優點的特點。

本發明授權一種用于驅動二次元數字人實時互動的多模態大模型系統在權利要求書中公布了：1.一種用于驅動二次元數字人實時互動的多模態大模型系統，其特征在于：包括數據采集模塊、多模態處理模塊、實時互動模塊，所述數據采集模塊用于使用計算機視覺技術對用戶的面部進行區域劃分和特征提取，并對頭部晃動幅度和頻率進行檢測，以及在用戶之間視頻交流時對用戶的瞳孔注視點進行檢測，所述多模態處理模塊用于對采集到的面部特征數據和瞳孔注視點數據進行分析，評估各個面部區域的吸引力，決定各個區域采用實時捕捉還是表情模板的方式，所述實時互動模塊用于根據呈現表情的方式對用戶對應的數字人表情加以控制，進行各個用戶之間的互動；所述數據采集模塊包括攝像單元、面部區域識別模塊、表情特征提取模塊、數據庫、頭部晃動檢測模塊、計時模塊、瞳孔注視點捕捉模塊，所述攝像單元與面部區域識別模塊電連接，所述面部區域識別模塊與表情特征提取模塊電連接，所述表情特征提取模塊與數據庫電連接，所述頭部晃動檢測模塊與計時模塊和面部區域識別模塊電連接，所述攝像單元用于拍攝用戶的面部，所述面部區域識別模塊用于識別面部并將面部劃分為多個區域，所述表情特征提取模塊用于提取與面部各個區域的表情特征，所述數據庫用于儲存各個用戶的表情特征數據，所述頭部晃動檢測模塊用于檢測用戶頭部的晃動頻率和幅度，所述計時模塊用于統計時間，所述瞳孔注視點捕捉模塊用于在用戶之間視頻交流時對用戶的瞳孔注視點進行檢測；所述多模態處理模塊包括吸引力評估模塊、預先設定模塊、自動設定模塊，所述吸引力評估模塊與瞳孔注視點捕捉模塊電連接，所述預先設定模塊與面部區域識別模塊電連接，所述自動設定模塊與吸引力評估模塊、頭部晃動檢測模塊和面部區域識別模塊電連接，所述吸引力評估模塊用于根據其他用戶普遍的瞳孔注視點數據來評估當前用戶各個面部區域的吸引力，所述預先設定模塊用于根據吸引力數據設定哪些面部區域采用實時捕捉，哪些面部區域采用表情模板，所述自動設定模塊用于結合用戶的頭部晃動頻率和各個面部區域的吸引力決定采用實時捕捉的面部區域比例；所述實時互動模塊包括表情定性模塊、表情模板庫、模板化顯示模塊、實時捕捉顯示模塊，所述表情定性模塊與表情特征提取模塊電連接，所述表情模板庫用于儲存數字人的表情模板，所述模板化顯示模塊用于在數字人面部特征上采用表情模板來顯示對應的面部區域，所述實時捕捉顯示模塊用于在數字人面部特征上利用實時捕捉的方式來顯示對應的面部區域。

如需購買、轉讓、實施、許可或投資類似專利技術，可聯系本專利的申請人或專利權人上海武桐樹高新技術有限公司，其通訊地址為：200120 上海市浦東新區紅楓路288號三層A3-20室；或者聯系龍圖騰網官方客服，聯系龍圖騰網可撥打電話0551-65771310或微信搜索“龍圖騰網”。