恭喜上海夢魚信息科技有限公司梁挺義獲國家專利權
買專利賣專利找龍圖騰,真高效! 查專利查商標用IPTOP,全免費!專利年費監(jiān)控用IP管家,真方便!
龍圖騰網恭喜上海夢魚信息科技有限公司申請的專利一種智能搜集日志、數(shù)據(jù)并快速形成關系拓撲的方法獲國家發(fā)明授權專利權,本發(fā)明授權專利權由國家知識產權局授予,授權公告號為:CN114297231B 。
龍圖騰網通過國家知識產權局官網在2025-04-01發(fā)布的發(fā)明授權授權公告中獲悉:該發(fā)明授權的專利申請?zhí)?專利號為:202111641900.0,技術領域涉及:G06F16/2453;該發(fā)明授權一種智能搜集日志、數(shù)據(jù)并快速形成關系拓撲的方法是由梁挺義;吳鵬程;郭德宇設計研發(fā)完成,并于2021-12-29向國家知識產權局提交的專利申請。
本一種智能搜集日志、數(shù)據(jù)并快速形成關系拓撲的方法在說明書摘要公布了:本發(fā)明公開了一種智能搜集日志、數(shù)據(jù)并快速形成關系拓撲的方法。它具體包括如下步驟:外部組件負責與內核進行交互,負責在不影響內核工作效率的情況下獲取有效的數(shù)據(jù)構建日志并主動上報;通過數(shù)據(jù)采集模塊負責各類日志的無差別實時采集,獲得原始日志數(shù)據(jù)塊;通過數(shù)據(jù)聚合模塊負責對各類實時收錄的原始日志數(shù)據(jù)按照真實存在的關聯(lián)關系進行關系梳理,并構建真實準確的關系型標準數(shù)據(jù),實現(xiàn)標準化輸出;通過數(shù)據(jù)請求模塊負責注冊、登錄外部數(shù)據(jù)請求的傳輸方式并傳輸給第三方日志分析平臺進行日志清洗、日志標記和日志分類,注冊成功后的數(shù)據(jù)請求被響應,否則無效。本發(fā)明的有益效果是:提高數(shù)據(jù)質量和內容辨識度,減輕計算單元的計算壓力。
本發(fā)明授權一種智能搜集日志、數(shù)據(jù)并快速形成關系拓撲的方法在權利要求書中公布了:1.一種智能搜集日志、數(shù)據(jù)并快速形成關系拓撲的方法,其特征是,由組件管理模塊進行業(yè)務驅動,組件管理模塊作為核心模塊,為增量服務提供注冊及接入入口并對外部組件進行驅動、監(jiān)控和管理,所有外部組件需要符合組件管理模塊的注冊標準,具體包括如下步驟:(1)日志處理:外部組件負責與內核進行交互,負責在不影響內核工作效率的情況下獲取有效的數(shù)據(jù)構建日志并主動上報;(2)數(shù)據(jù)采集:通過數(shù)據(jù)采集模塊負責各類日志的無差別實時采集,獲得原始日志數(shù)據(jù)塊;(3)數(shù)據(jù)聚合:通過數(shù)據(jù)聚合模塊負責對各類實時收錄的原始日志數(shù)據(jù)按照真實存在的關聯(lián)關系進行關系梳理,并構建真實準確的關系型標準數(shù)據(jù),實現(xiàn)標準化輸出;數(shù)據(jù)聚合模塊是將采集到的原始數(shù)據(jù)進行關系構建,將無關系的原始數(shù)據(jù)通過真實的關聯(lián)內容構建為一種關系型數(shù)據(jù),數(shù)據(jù)聚合模塊包括數(shù)據(jù)清洗、數(shù)據(jù)聚合、數(shù)據(jù)標準化三大內容,具體如下:(31)數(shù)據(jù)清洗功能依托于制定的數(shù)據(jù)清洗的規(guī)則,此類規(guī)則由組件管理模塊進行維護并且通過模塊化和針對不同設備進行自定義配置兩種方式進行配置,用戶通過組件管理模塊的管理界面對清洗的規(guī)則進行定義,主要對重復數(shù)據(jù)、冗余數(shù)據(jù)和規(guī)則內指定的清洗內容進行清洗;(32)清洗完畢的數(shù)據(jù)作為數(shù)據(jù)聚合的數(shù)據(jù)源進行使用,在進行數(shù)據(jù)聚合時,須確保數(shù)據(jù)聚合模塊已經具備所有正常工作的外部組件的數(shù)據(jù)驅動,數(shù)據(jù)聚合模塊會通過各組件的數(shù)據(jù)驅動對各類組件提供的日志內容進行數(shù)據(jù)錄入,錄入過程中會將已裝載到數(shù)據(jù)模型中的外部組件所提供的日志文件轉化為數(shù)據(jù)模型的可識別數(shù)據(jù)進行有效數(shù)據(jù)的提取,提取完的數(shù)據(jù)內容由數(shù)據(jù)模型進行關系關聯(lián)分析并形成關系拓撲并將各部分數(shù)據(jù)內容進行定義、分類,最后重組為新的關系型數(shù)據(jù)并進行存儲;(33)接收使用方的數(shù)據(jù)請求后,數(shù)據(jù)標準化會根據(jù)使用方請求的數(shù)據(jù)格式、最大長度將庫中的數(shù)據(jù)內容按時間規(guī)則進行抽取,形成標準的附帶描述的格式化數(shù)據(jù),抽取出的關系型數(shù)據(jù)最終按照第三方要求的格式封裝并發(fā)送給第三方,提高第三方對數(shù)據(jù)內容的辨識度,減輕第三方梳理數(shù)據(jù)關系的計算壓力;為防止數(shù)據(jù)爆倉,所有被抽取的數(shù)據(jù)將按照順序從本地數(shù)據(jù)庫中刪除,不再存儲;(4)數(shù)據(jù)請求:通過數(shù)據(jù)請求模塊負責注冊、登錄外部數(shù)據(jù)請求的傳輸方式并傳輸給第三方日志分析平臺進行日志清洗、日志標記和日志分類,注冊成功后的數(shù)據(jù)請求被響應,否則無效;其中,組件管理模塊的具體操作方法如下:(a)外部組件通過組件管理模塊的注冊單元進行接入,組件管理模塊的注冊單元會對申請接入的外部組件進行自動化的可行性測試,將外部組件添加到組件執(zhí)行庫中,添加成功后,外部組件會被復制到NCA-autoScript組件目錄中,即可進行組件的認證、測試和加載;外部組件負責指定類別日志的搜集和上傳動作,在外部組件的制作過程中必須將申請到的組件唯一電子認證證書固化到外部組件中,傳輸方式和數(shù)據(jù)格式必須符合組件管理模塊規(guī)定的標準;(b)組件管理模塊在進行外部組件的注冊過程中會通過網絡通信進行組件認證,認證唯一條件為固化到外部組件內部的唯一電子認證證書,認證成功后,外部組件會發(fā)送測試數(shù)據(jù)到組件管理模塊的通信接口進行數(shù)據(jù)解析并等待回執(zhí),若收到的回執(zhí)內容與發(fā)送的數(shù)據(jù)內容匹配,則將外部組件從NCA-autoScript移動到CA-autoScript目錄中,并標記狀態(tài)為已認證;(c)已認證的組件通過網絡通信傳輸給目標設備進行使用,各設備裝載的已認證的組件在當前設備的組件列表中進行查閱,作業(yè)人員對指定設備的相關已認證的組件進行啟用、停用、重啟、卸載操作;(d)目標設備中的已認證的組件會實時地向設備中的監(jiān)控模塊上報心跳數(shù)據(jù),若發(fā)現(xiàn)已認證的組件出現(xiàn)異常情況,會向組件管理模塊發(fā)送組件異常信息并嘗試重啟組件進行修復,組件管理模塊對目標設備的已認證的組件運行異常的情況進行報警并紅色高亮標記,若目標設備通過內部自我修復的方式恢復組件的正常使用會再次向組件管理模塊發(fā)送服務恢復的通告,組件管理模塊則停止目標的異常告警并撤銷相關的高亮標記行為。
如需購買、轉讓、實施、許可或投資類似專利技術,可聯(lián)系本專利的申請人或專利權人上海夢魚信息科技有限公司,其通訊地址為:200000 上海市浦東新區(qū)中國(上海)自由貿易試驗區(qū)臨港新片區(qū)環(huán)湖西二路888號C樓;或者聯(lián)系龍圖騰網官方客服,聯(lián)系龍圖騰網可撥打電話0551-65771310或微信搜索“龍圖騰網”。
1、本報告根據(jù)公開、合法渠道獲得相關數(shù)據(jù)和信息,力求客觀、公正,但并不保證數(shù)據(jù)的最終完整性和準確性。
2、報告中的分析和結論僅反映本公司于發(fā)布本報告當日的職業(yè)理解,僅供參考使用,不能作為本公司承擔任何法律責任的依據(jù)或者憑證。