買專利賣專利找龍圖騰，真高效！ 查專利查商標(biāo)用IPTOP,全免費(fèi)！專利年費(fèi)監(jiān)控用IP管家,真方便！

龍圖騰網(wǎng)恭喜杭州海康威視數(shù)字技術(shù)股份有限公司申請(qǐng)的專利基于強(qiáng)化學(xué)習(xí)的智能漏洞掃描策略生成方法及裝置獲國(guó)家發(fā)明授權(quán)專利權(quán)，本發(fā)明授權(quán)專利權(quán)由國(guó)家知識(shí)產(chǎn)權(quán)局授予，授權(quán)公告號(hào)為：CN119892505B 。

龍圖騰網(wǎng)通過國(guó)家知識(shí)產(chǎn)權(quán)局官網(wǎng)在2025-06-20發(fā)布的發(fā)明授權(quán)授權(quán)公告中獲悉：該發(fā)明授權(quán)的專利申請(qǐng)?zhí)?專利號(hào)為：202510361591.3，技術(shù)領(lǐng)域涉及：H04L9/40；該發(fā)明授權(quán)基于強(qiáng)化學(xué)習(xí)的智能漏洞掃描策略生成方法及裝置是由王濱;常江;萬里;許光全;趙曦濱設(shè)計(jì)研發(fā)完成，并于2025-03-25向國(guó)家知識(shí)產(chǎn)權(quán)局提交的專利申請(qǐng)。

本基于強(qiáng)化學(xué)習(xí)的智能漏洞掃描策略生成方法及裝置在說明書摘要公布了：本申請(qǐng)?zhí)峁┝嘶趶?qiáng)化學(xué)習(xí)的智能漏洞掃描策略生成方法及裝置。本實(shí)施例通過強(qiáng)化學(xué)習(xí)基于實(shí)時(shí)感知的目標(biāo)設(shè)備的設(shè)備特征向量、以及目標(biāo)設(shè)備的歷史掃描結(jié)果，動(dòng)態(tài)生成當(dāng)前的掃描插件選擇策略，以保證動(dòng)態(tài)生成的掃描插件選擇策略具有較強(qiáng)的動(dòng)態(tài)適應(yīng)能力，從而減少誤報(bào)和漏報(bào)。進(jìn)一步地，本實(shí)施例借助于強(qiáng)化學(xué)習(xí)的獎(jiǎng)勵(lì)機(jī)制，根據(jù)不同掃描插件的歷史表現(xiàn)和目標(biāo)設(shè)備當(dāng)前的掃描結(jié)果（甚至再加上用戶反饋信息），實(shí)時(shí)優(yōu)化調(diào)整強(qiáng)化學(xué)習(xí)模型中的Actor模型，以實(shí)現(xiàn)不斷優(yōu)化后續(xù)的掃描插件選擇策略，提升檢測(cè)效率和準(zhǔn)確性。

本發(fā)明授權(quán)基于強(qiáng)化學(xué)習(xí)的智能漏洞掃描策略生成方法及裝置在權(quán)利要求書中公布了：1.一種基于強(qiáng)化學(xué)習(xí)的智能漏洞掃描策略生成方法，其特征在于，該方法應(yīng)用于掃描裝置，該方法包括：確定目標(biāo)設(shè)備的設(shè)備畫像中各特征數(shù)據(jù)匹配的編碼方式；所述設(shè)備畫像是基于主動(dòng)對(duì)所述目標(biāo)設(shè)備掃描得到的所述目標(biāo)設(shè)備的設(shè)備信息生成的；所述設(shè)備畫像中包含多個(gè)不同特征類型對(duì)應(yīng)的特征數(shù)據(jù)，至少兩個(gè)不同特征類型的特征數(shù)據(jù)所匹配的編碼方式不同；依據(jù)設(shè)備畫像中各特征數(shù)據(jù)匹配的編碼方式，對(duì)設(shè)備畫像中各特征數(shù)據(jù)進(jìn)行編碼，并根據(jù)各特征數(shù)據(jù)的編碼結(jié)果，生成目標(biāo)設(shè)備的設(shè)備特征向量；基于目標(biāo)設(shè)備被執(zhí)行的歷史掃描行為，獲得參考掃描結(jié)果；所述參考掃描結(jié)果至少包括：各掃描插件在對(duì)所述目標(biāo)設(shè)備進(jìn)行掃描時(shí)的掃描情況，所述掃描情況至少包括：異常信息漏報(bào)、誤報(bào)、未識(shí)別異常信息、正確識(shí)別異常信息；使用當(dāng)前強(qiáng)化學(xué)習(xí)模型中的策略模型Actor模型，基于所述設(shè)備特征向量和所述參考掃描結(jié)果，評(píng)估各掃描插件的潛在收益以得到掃描插件選擇策略；并針對(duì)掃描插件選擇策略指示的當(dāng)前對(duì)所述目標(biāo)設(shè)備進(jìn)行掃描時(shí)需使用的每一掃描插件，根據(jù)該掃描插件在執(zhí)行時(shí)占用的資源、該掃描插件可掃描出的異常信息的風(fēng)險(xiǎn)情況、以及該掃描插件被使用的最近時(shí)間，確定該掃描插件在當(dāng)前對(duì)所述目標(biāo)設(shè)備進(jìn)行掃描時(shí)的掃描優(yōu)先級(jí)；根據(jù)各掃描插件的掃描優(yōu)先級(jí)并按照優(yōu)先調(diào)度算法，調(diào)度各掃描插件對(duì)目標(biāo)設(shè)備進(jìn)行掃描，得到各掃描插件的當(dāng)前掃描結(jié)果；基于各掃描插件的當(dāng)前掃描結(jié)果以及各掃描插件的獎(jiǎng)勵(lì)函數(shù)確定各掃描插件的獎(jiǎng)勵(lì)值，并由當(dāng)前強(qiáng)化學(xué)習(xí)模型中的價(jià)值Critic模型，基于各掃描插件的獎(jiǎng)勵(lì)值評(píng)估所述掃描插件選擇策略的行為表現(xiàn)，以根據(jù)Critic模型的評(píng)估結(jié)果優(yōu)化所述Actor模型；優(yōu)化后的Actor模型相比優(yōu)化前，輸出更優(yōu)的掃描插件選擇策略。

如需購買、轉(zhuǎn)讓、實(shí)施、許可或投資類似專利技術(shù)，可聯(lián)系本專利的申請(qǐng)人或?qū)＠麢?quán)人杭州海康威視數(shù)字技術(shù)股份有限公司，其通訊地址為：310051 浙江省杭州市濱江區(qū)阡陌路555號(hào)；或者聯(lián)系龍圖騰網(wǎng)官方客服，聯(lián)系龍圖騰網(wǎng)可撥打電話0551-65771310或微信搜索“龍圖騰網(wǎng)”。