買專利賣專利找龍圖騰，真高效！ 查專利查商標用IPTOP,全免費！專利年費監控用IP管家,真方便！

龍圖騰網恭喜重慶大學產業技術研究院;張濤;重慶瞰圖科技有限公司申請的專利一種基于深度強化學習的施工場地監控布置方法獲國家發明授權專利權，本發明授權專利權由國家知識產權局授予，授權公告號為：CN119849888B 。

龍圖騰網通過國家知識產權局官網在2025-05-30發布的發明授權授權公告中獲悉：該發明授權的專利申請號/專利號為：202510329424.0，技術領域涉及：G06Q10/0631；該發明授權一種基于深度強化學習的施工場地監控布置方法是由張濤;閆辰騫;劉書其;張璇;曹一;李龍;劉文彬;周浩設計研發完成，并于2025-03-20向國家知識產權局提交的專利申請。

本一種基于深度強化學習的施工場地監控布置方法在說明書摘要公布了：本發明公開了一種基于深度強化學習的施工場地監控布置方法，涉及模型應用技術領域。本發明中監控布置建模為多智能體強化學習模型的設計，通過多智能體的深度強化學習，經過共同目標的引導，促使各智能體以協同和自適應的方式行動，最終實現施工場地監控的智能布置；且本發明提出的基于深度強化學習的施工場地監控智能布置方法，能夠高效自動化地進行監控布置設計，相較于傳統的人工經驗和固定規則方法，能夠顯著提高布置效率與精度，通過將監控設備視為智能體進行聯合優化，能夠實現全局協調與自適應布置，避免了人工方法帶來的不靈活和低效問題，提高監控布置效率與精度。

本發明授權一種基于深度強化學習的施工場地監控布置方法在權利要求書中公布了：1.一種基于深度強化學習的施工場地監控布置方法，其特征在于：至少包括以下步驟：S1：將監控布置問題建模為多智能體強化學習模型，將每個監控都作為一個智能體，即稱為監控-智能體，每個監控-智能體在施工場地自由自動，監控-智能體之間是相互合作的關系，監控-智能體之間相互配合，來實現監控覆蓋的全面化，以及成本的最小化，最終決定自己的位置；進行監控布置建模的計算過程至少包括以下步驟：將監控布置問題從一個平面設計問題轉化為一個隨著時間變化和環境變化進行路徑規劃的問題；此時數學模型符合多智能體強化學習的數學建模原則；隨著每個監控-智能體i在根據當前狀態和當前時間步t進行一個動作，環境根據當前的狀態和動作反饋一個新的狀態和獎勵；針對每個智能體，其目標為最大化期望的累計獎勵，如式（1）所示： ，其中，是折扣因子，取0.99，用來表示未來獎勵的當前價值；N表示監控-智能體的個數；S2：搭建基于深度強化學習的監控-智能體，通過深度強化學習和共同目標的引導，促使各智能體以協同和自適應的方式行動，最終實現施工場地監控的智能布置；所述監控-智能體的深度強化學習的至少包括監控-智能體的動作、監控-智能體的觀察內容和監控-智能體的獎勵；所述監控-智能體的動作中每個智能體輸出的動作格式是相同的，即；其中，表示監控i的類型，表示監控i在平面中位置，表示監控i的高度，表示監控i的朝向，需要注意的是，為離散動作，其動作列表為；其中，表示第m個監控設備類型，0則表示此智能體失效，即在場地中不布置此監控；通過將0作為備選方案，使得算法不僅能夠決策智能體的位置還能決策智能體的個數，使得設計結果更加靈活和多樣；此外，為了監控提高智能體神經網絡的泛化能力以及加快收斂速度，將這四個參數的動作空間設計為連續動作，且放縮至；所述監控-智能體的觀察內容至少包括以下內容：監控布置的不能超過施工區域的邊界，因此每個智能體需要觀察到施工區域的邊界，即，其中，表示第k個施工區域邊界坐標點；每個監控-智能體需要觀察施工結構的區域，即 ，其中，表示第m個工程結構的第q邊界點的x坐標；每個監控-智能體i需要觀察到自己的型號，觀察的范圍，以及所在的平面位置，高度以及朝向角度，即； 表示監控i能夠觀察的角度，是監控i的固有屬性；表示監控i在平面中位置；表示監控i的高度；表示監控i的朝向；每個監控-智能體i需要觀察到其他智能體的位置以及參數，即 ；所述監控-智能體的獎勵為環境對監控布置的反饋；監控-智能體獲得的獎勵引導著智能體向更優的位置進行移動，同時促使智能體選擇更適合自己的設備類型，此外，由于監控-智能體的目標為共同目標，不存在相互競爭的關系，因此將全局的獎勵作為每個監控-智能體的獎勵；當然智能體的獎勵設置需要考慮多方面的考慮，如式（2）所示，其中，和表示不同因素的權重，由設計師確定或經過實驗調整確定： ，其中，是監控的覆蓋獎勵，用來引導智能體覆蓋更多的區域，如式（3）所示： ， 是監控覆蓋的面積，是場地的面積； 是監控的設備購置獎勵，引導智能體使用更少的設備購置費用，如式（4）所示： ， 表示第i個設備的購置費用，N表示所有設備的個數； 是監控的安裝施工獎勵，引導智能體使用更少的安裝施工費用，如式（5）所示： ，其中，N表示所有設備的個數，即設備個數越少安裝施工費用越少； 表示設備的種類個數，即設備的種類越少安裝的復雜程度越小，即費用越少；S3：搭建基于注意力機制的智能體網絡架構。

如需購買、轉讓、實施、許可或投資類似專利技術，可聯系本專利的申請人或專利權人重慶大學產業技術研究院;張濤;重慶瞰圖科技有限公司，其通訊地址為：401331 重慶市沙坪壩區大學城南一路263號5幢；或者聯系龍圖騰網官方客服，聯系龍圖騰網可撥打電話0551-65771310或微信搜索“龍圖騰網”。