買專利賣專利找龍圖騰，真高效！ 查專利查商標(biāo)用IPTOP,全免費(fèi)！專利年費(fèi)監(jiān)控用IP管家,真方便！

龍圖騰網(wǎng)恭喜數(shù)據(jù)堂(北京)科技股份有限公司申請(qǐng)的專利多模態(tài)大模型訓(xùn)練數(shù)據(jù)采集方法及系統(tǒng)獲國(guó)家發(fā)明授權(quán)專利權(quán)，本發(fā)明授權(quán)專利權(quán)由國(guó)家知識(shí)產(chǎn)權(quán)局授予，授權(quán)公告號(hào)為：CN119380144B 。

龍圖騰網(wǎng)通過(guò)國(guó)家知識(shí)產(chǎn)權(quán)局官網(wǎng)在2025-04-04發(fā)布的發(fā)明授權(quán)授權(quán)公告中獲悉：該發(fā)明授權(quán)的專利申請(qǐng)?zhí)?專利號(hào)為：202411946438.9，技術(shù)領(lǐng)域涉及：G06V10/774；該發(fā)明授權(quán)多模態(tài)大模型訓(xùn)練數(shù)據(jù)采集方法及系統(tǒng)是由齊紅威;豐強(qiáng)澤;王大亮;高禹;鄭繼龍;史紅欣設(shè)計(jì)研發(fā)完成，并于2024-12-27向國(guó)家知識(shí)產(chǎn)權(quán)局提交的專利申請(qǐng)。

本多模態(tài)大模型訓(xùn)練數(shù)據(jù)采集方法及系統(tǒng)在說(shuō)明書摘要公布了：本申請(qǐng)涉及計(jì)算機(jī)技術(shù)領(lǐng)域，其具體地公開了一種多模態(tài)大模型訓(xùn)練數(shù)據(jù)采集方法及系統(tǒng)，其采用基于深度學(xué)習(xí)的數(shù)據(jù)處理技術(shù)對(duì)語(yǔ)義對(duì)齊的圖像數(shù)據(jù)和圖像內(nèi)容文本描述數(shù)據(jù)進(jìn)行語(yǔ)義特征提取和跨模態(tài)聯(lián)合編碼，以捕捉到模態(tài)間的語(yǔ)義關(guān)聯(lián)，實(shí)現(xiàn)跨模態(tài)的語(yǔ)義信息融合，并在此基礎(chǔ)上進(jìn)一步進(jìn)行圖像樣本的生成，進(jìn)而，通過(guò)對(duì)生成的圖像樣本與原始圖像數(shù)據(jù)進(jìn)行語(yǔ)義偏移度量，以智能識(shí)別生成的圖像樣本是否為合格增強(qiáng)樣本。通過(guò)這種方式，可以有效地豐富多模態(tài)訓(xùn)練數(shù)據(jù)集，確保數(shù)據(jù)的質(zhì)量，解決多模態(tài)數(shù)據(jù)增強(qiáng)過(guò)程中跨模態(tài)語(yǔ)義一致性的問(wèn)題，從而提高多模態(tài)大模型的訓(xùn)練效率。

本發(fā)明授權(quán)多模態(tài)大模型訓(xùn)練數(shù)據(jù)采集方法及系統(tǒng)在權(quán)利要求書中公布了：1.一種多模態(tài)大模型訓(xùn)練數(shù)據(jù)采集方法，其特征在于，包括：獲取被標(biāo)記為對(duì)齊的第一模態(tài)數(shù)據(jù)和第二模態(tài)數(shù)據(jù)，其中，所述第一模態(tài)數(shù)據(jù)為圖像，所述第二模態(tài)數(shù)據(jù)為圖像內(nèi)容文本描述；對(duì)所述第一模態(tài)數(shù)據(jù)和所述第二模態(tài)數(shù)據(jù)分別進(jìn)行語(yǔ)義特征提取以得到圖像語(yǔ)義編碼特征圖和圖像內(nèi)容文本描述語(yǔ)義編碼特征向量；對(duì)所述圖像語(yǔ)義編碼特征圖和所述圖像內(nèi)容文本描述語(yǔ)義編碼特征向量進(jìn)行跨模態(tài)聯(lián)合編碼以得到圖像-圖像文本描述跨模態(tài)提示引導(dǎo)聯(lián)合編碼特征圖；基于所述圖像-圖像文本描述跨模態(tài)提示引導(dǎo)聯(lián)合編碼特征圖進(jìn)行圖像生成以得到生成圖像樣本；基于所述生成圖像樣本與所述第一模態(tài)數(shù)據(jù)之間的語(yǔ)義偏移，確定所述生成圖像樣本是否為合格增強(qiáng)樣本；其中，對(duì)所述圖像語(yǔ)義編碼特征圖和所述圖像內(nèi)容文本描述語(yǔ)義編碼特征向量進(jìn)行跨模態(tài)聯(lián)合編碼，包括：對(duì)所述圖像語(yǔ)義編碼特征圖和所述圖像內(nèi)容文本描述語(yǔ)義編碼特征向量進(jìn)行細(xì)粒度局部查詢編碼以得到圖像-圖像文本描述局部查詢提示語(yǔ)義編碼向量的集合；以所述圖像-圖像文本描述局部查詢提示語(yǔ)義編碼向量的集合作為提示信息，對(duì)所述圖像語(yǔ)義編碼特征圖進(jìn)行細(xì)粒度特征調(diào)制以得到所述圖像-圖像文本描述跨模態(tài)提示引導(dǎo)聯(lián)合編碼特征圖。

如需購(gòu)買、轉(zhuǎn)讓、實(shí)施、許可或投資類似專利技術(shù)，可聯(lián)系本專利的申請(qǐng)人或?qū)＠麢?quán)人數(shù)據(jù)堂(北京)科技股份有限公司，其通訊地址為：100080 北京市海淀區(qū)寶盛南路1號(hào)院11號(hào)樓1層101-01；或者聯(lián)系龍圖騰網(wǎng)官方客服，聯(lián)系龍圖騰網(wǎng)可撥打電話0551-65771310或微信搜索“龍圖騰網(wǎng)”。