買專利賣專利找龍圖騰，真高效！ 查專利查商標(biāo)用IPTOP,全免費！專利年費監(jiān)控用IP管家,真方便！

龍圖騰網(wǎng)恭喜西安電子科技大學(xué)申請的專利基于模態(tài)差異特征引導(dǎo)的紅外可見光融合識別系統(tǒng)和方法獲國家發(fā)明授權(quán)專利權(quán)，本發(fā)明授權(quán)專利權(quán)由國家知識產(chǎn)權(quán)局授予，授權(quán)公告號為：CN114898189B 。

龍圖騰網(wǎng)通過國家知識產(chǎn)權(quán)局官網(wǎng)在2025-03-21發(fā)布的發(fā)明授權(quán)授權(quán)公告中獲悉：該發(fā)明授權(quán)的專利申請?zhí)?專利號為：202210333408.5，技術(shù)領(lǐng)域涉及：G06V10/80；該發(fā)明授權(quán)基于模態(tài)差異特征引導(dǎo)的紅外可見光融合識別系統(tǒng)和方法是由秦翰林;羅國慧;延翔;歐洪璇;孫鵬;張昱賡;陳嘉欣;馮冬竹設(shè)計研發(fā)完成，并于2022-03-31向國家知識產(chǎn)權(quán)局提交的專利申請。

本基于模態(tài)差異特征引導(dǎo)的紅外可見光融合識別系統(tǒng)和方法在說明書摘要公布了：本發(fā)明公開了一種基于模態(tài)差異特征引導(dǎo)的紅外可見光融合識別系統(tǒng)，包括雙流骨干網(wǎng)絡(luò)模塊、光照熱度感知模塊和級聯(lián)區(qū)域提議模塊，其中，所述雙流骨干網(wǎng)絡(luò)模塊包括紅外特征提取單元、可見光特征提取單元以及特征引導(dǎo)單元，其中，紅外特征提取單元獲取原始紅外圖像的不同尺度紅外特征，可見光特征提取單元獲取可見光圖像的不同尺度可見光特征；特征引導(dǎo)單元獲得加權(quán)的紅外特征和加權(quán)的可見光特征；光照熱度感知模塊獲取可見光特征的可信度權(quán)值和紅外特征的可信度權(quán)值；級聯(lián)區(qū)域提議模塊用于獲得目標(biāo)的識別結(jié)果。本發(fā)明采用模態(tài)間特征差異引導(dǎo)補充學(xué)習(xí)的層級間特征生成方式，提升了模態(tài)間特征表示的依賴性，并提高了網(wǎng)絡(luò)系統(tǒng)的泛化能力。

本發(fā)明授權(quán)基于模態(tài)差異特征引導(dǎo)的紅外可見光融合識別系統(tǒng)和方法在權(quán)利要求書中公布了：1.一種基于模態(tài)差異特征引導(dǎo)的紅外可見光融合識別系統(tǒng)，其特征在于，包括雙流骨干網(wǎng)絡(luò)模塊、光照熱度感知模塊和級聯(lián)區(qū)域提議模塊，其中，所述雙流骨干網(wǎng)絡(luò)模塊包括紅外特征提取單元、可見光特征提取單元以及特征引導(dǎo)單元，其中，所述紅外特征提取單元用于獲取原始紅外圖像的不同尺度紅外特征，所述可見光特征提取單元用于獲取與所述紅外圖像為同一場景的可見光圖像的不同尺度可見光特征；所述特征引導(dǎo)單元用于對當(dāng)前尺度的紅外特征和可見光特征進(jìn)行融合和加權(quán)，獲得加權(quán)的紅外特征和加權(quán)的可見光特征，以交叉引導(dǎo)所述紅外特征提取單元和所述可見光特征提取單元中下一尺度紅外特征和可見光特征的形成；所述光照熱度感知模塊用于根據(jù)原始紅外圖像的圖像熱度值、原始可見光圖像的圖像照明值，獲得可見光特征的可信度權(quán)值和紅外特征的可信度權(quán)值；所述級聯(lián)區(qū)域提議模塊用于根據(jù)不同尺度的紅外特征、不同尺度的可見光特征、以及可見光特征的可信度權(quán)值和紅外特征的可信度權(quán)值，獲得目標(biāo)的識別結(jié)果；所述紅外特征提取單元包括多個級聯(lián)的紅外特征提取卷積層，以獲得不同尺度的紅外光特征；所述可見光特征提取單元包括多個級聯(lián)的可見光特征提取單元，以獲得不同尺度的可見光特征；所述特征引導(dǎo)單元包括多個級聯(lián)的模態(tài)差異引導(dǎo)子單元，其中，所述模態(tài)差異引導(dǎo)子單元利用當(dāng)前尺度的紅外光特征和可見光特征以及上一個模態(tài)差異引導(dǎo)子單元獲取的紅外可見光融合向量，獲得加權(quán)的紅外特征、加權(quán)的可見光特征以及紅外可見光融合向量，并將加權(quán)的紅外特征傳輸至下一尺度的可見光特征提取單元，將加權(quán)的可見光特征傳輸至下一尺度的紅外特征提取單元，以交叉引導(dǎo)所述紅外特征提取單元和所述可見光特征提取單元中下一尺度紅外特征和可見光特征的形成，同時將所述紅外可見光融合向量傳輸至下一個模態(tài)差異引導(dǎo)子單元，所述模態(tài)差異引導(dǎo)子單元具體用于：對當(dāng)前可見光特征、當(dāng)前紅外特征以及前一模態(tài)差異引導(dǎo)子單元輸出的可見光紅外融合特征進(jìn)行融合，并通過三個并行的3×3卷積層進(jìn)行特征分離，獲得包括更多語義信息的可見光特征、紅外特征以及可見光紅外融合特征，隨后利用Sigmoid激活函數(shù)得到當(dāng)前可見光特征和當(dāng)前紅外特征對應(yīng)的權(quán)值，從而形成加權(quán)的可見光特征和加權(quán)的紅外特征；所述光照熱度感知模塊包括光照熱度感知單元、光照感知機制單元和熱度感知機制單元，其中，所述光照熱度感知單元用于根據(jù)輸入的原始可見光圖像和原始紅外圖像進(jìn)獲得目標(biāo)區(qū)域的最低光照值和最高光照值，以及目標(biāo)區(qū)域的最低熱度值和最高熱度值；所述光照感知機制單元用于根據(jù)目標(biāo)區(qū)域的最低光照值和最高光照值，獲得在當(dāng)前光照條件下的可見光特征可信度權(quán)值和紅外特征可信度權(quán)值；所述熱度感知機制單元用于根據(jù)目標(biāo)區(qū)域的最低熱度值和最高熱度值，獲得在當(dāng)前熱度條件下的可見光特征可信度權(quán)值和紅外特征可信度權(quán)值；利用所述光照熱度感知模塊獲得的熱度光照感知參數(shù)，即，當(dāng)前光照條件下的可見光特征可信度權(quán)值和紅外特征可信度權(quán)值，以及當(dāng)前熱度條件下的可見光特征可信度權(quán)值和紅外特征可信度權(quán)值對目標(biāo)類別近似度估計值和目標(biāo)位置偏移估計值進(jìn)行調(diào)整。

如需購買、轉(zhuǎn)讓、實施、許可或投資類似專利技術(shù)，可聯(lián)系本專利的申請人或?qū)＠麢?quán)人西安電子科技大學(xué)，其通訊地址為：710000 陜西省西安市雁塔區(qū)太白南路2號；或者聯(lián)系龍圖騰網(wǎng)官方客服，聯(lián)系龍圖騰網(wǎng)可撥打電話0551-65771310或微信搜索“龍圖騰網(wǎng)”。