恭喜蘇州國雙軟件有限公司滿悅獲國家專利權
買專利賣專利找龍圖騰,真高效! 查專利查商標用IPTOP,全免費!專利年費監控用IP管家,真方便!
龍圖騰網恭喜蘇州國雙軟件有限公司申請的專利爬蟲任務報錯的處理方法及裝置獲國家發明授權專利權,本發明授權專利權由國家知識產權局授予,授權公告號為:CN114661972B 。
龍圖騰網通過國家知識產權局官網在2025-04-29發布的發明授權授權公告中獲悉:該發明授權的專利申請號/專利號為:202011545965.0,技術領域涉及:G06F16/951;該發明授權爬蟲任務報錯的處理方法及裝置是由滿悅設計研發完成,并于2020-12-23向國家知識產權局提交的專利申請。
本爬蟲任務報錯的處理方法及裝置在說明書摘要公布了:本發明公開了一種爬蟲任務報錯的處理方法及裝置,涉及爬蟲技術領域,主要為解決目前爬蟲任務報錯的處理過程中,人工成本過高的問題。該方法包括:在獲取到報錯任務后,將所述報錯任務按照任務參數進行分組,得到任務分組,其中,每個所述任務分組中至少包括一個所述報錯任務,所述報錯任務為爬蟲執行爬取任務后反饋爬取失敗的任務;通過爬蟲按照所述任務分組執行所述報錯任務,并得到每個任務分組的分組任務結果;根據所述分組任務結果,判斷所述報錯任務是否執行成功;若不成功,則將所述報錯任務確定為異常任務并輸出。本發明用于爬蟲任務報錯的處理過程。
本發明授權爬蟲任務報錯的處理方法及裝置在權利要求書中公布了:1.一種爬蟲任務報錯的處理方法,其特征在于,包括:在獲取到報錯任務后,將所述報錯任務按照任務參數進行分組,得到任務分組,其中,每個所述任務分組中至少包括一個所述報錯任務,所述報錯任務為爬蟲執行爬取任務后反饋爬取失敗的任務;通過爬蟲按照所述任務分組執行所述報錯任務,并得到每個任務分組的分組任務結果;根據所述分組任務結果,判斷所述報錯任務是否執行成功;若不成功,則將所述報錯任務確定為異常任務并輸出;在所述通過爬蟲按照所述任務分組執行所述報錯任務,并得到每個任務分組的分組任務結果之前,所述方法還包括:將多個所述任務分組設置為一個任務批次;在所述將所述報錯任務確定為異常任務并輸出之前,所述方法還包括:根據所述分組任務結果,確定所述每個任務批次的任務完成率,所述任務完成率用于表征所述任務批次中分組任務結果中爬取成功的比例;所述將所述報錯任務確定為異常任務并輸出,包括:若所述任務完成率低于預設比例閾值,則將所述報錯任務確定為異常任務并輸出;若所述任務完成率高于預設比例閾值,則將所述報錯任務添加到下一個所述任務批次中的所述任務分組中。
如需購買、轉讓、實施、許可或投資類似專利技術,可聯系本專利的申請人或專利權人蘇州國雙軟件有限公司,其通訊地址為:江蘇省蘇州市高新區塔園路101號悅峰大廈1801室;或者聯系龍圖騰網官方客服,聯系龍圖騰網可撥打電話0551-65771310或微信搜索“龍圖騰網”。
1、本報告根據公開、合法渠道獲得相關數據和信息,力求客觀、公正,但并不保證數據的最終完整性和準確性。
2、報告中的分析和結論僅反映本公司于發布本報告當日的職業理解,僅供參考使用,不能作為本公司承擔任何法律責任的依據或者憑證。