[發明專利]交通信號燈的調控方法、裝置及計算機可讀存儲介質有效
| 申請號： | 201910074683.8 | 申請日： | 2019-01-25 |
| 公開（公告）號： | CN111489568B | 公開（公告）日： | 2022-08-02 |
| 發明（設計）人： | 肖楠;余亮;劉躍虎;張欣 | 申請（專利權）人： | 阿里巴巴集團控股有限公司 |
| 主分類號： | G08G1/08 | 分類號： | G08G1/08;G06N3/04;G06N3/08 |
| 代理公司： | 北京博雅睿泉專利代理事務所(特殊普通合伙) 11442 | 代理人： | 郭少晶 |
| 地址： | 英屬開曼群島大開*** | 國省代碼： | 暫無信息 |
| 權利要求書： | 查看更多 | 說明書： | 查看更多 |
| 摘要： | |||
| 搜索關鍵詞： | 交通 信號燈 調控 方法 裝置 計算機 可讀 存儲 介質 | ||
1.一種交通信號燈的調控方法，其特征在于，所述方法包括：
根據歷史控制數據獲取訓練樣本，其中，每一訓練樣本包括歷史信號燈配時、歷史交通測量以及歷史交通指標，所述歷史控制數據是已有的、基于交通模型的信號燈調控算法與信號燈控制系統交互過程中的輸入輸出數據；
根據所述訓練樣本對損失函數進行訓練，得到映射函數，其中，所述損失函數包括時間差分損失函數、監督學習損失函數以及正則化損失函數，所述監督學習損失函數是指以基于交通模型的信號燈調控算法的歷史控制數據為預測目標的映射函數的輸出誤差函數，用于提升后續步驟中深度強化學習算法的初始啟動性能；
獲取實際交通測量以及實際交通指標；
根據所述映射函數、所述實際交通測量以及實際交通指標，計算得到待輸出信號燈配時。
2.根據權利要求1所述的方法，其特征在于，所述根據所述訓練樣本進行訓練，得到映射函數，包括：
根據所述訓練樣本，對損失函數進行訓練，得到所述映射函數。
3.根據權利要求2所述的方法，其特征在于，所述損失函數是分別設定對應權重值的時間差分損失函數、監督學習損失函數以及正則化損失函數加權求和。
4.根據權利要求1所述的方法，其特征在于，所述根據所述訓練樣本進行訓練，得到映射函數，包括：
根據每一所述訓練樣本，以所述映射函數的待定系數為變量，分別確定每一所述訓練樣本的信號燈配時預測表達式；
根據每一所述訓練樣本的所述信號燈配時預測表達式以及每一所述訓練樣本的歷史信號燈配時，構建損失函數；
根據所述損失函數確定所述待定系數，完成本次對所述映射函數的訓練。
5.根據權利要求1所述的方法，其特征在于，計算得到待輸出信號燈配時之后，所述方法還包括：
獲取所述待輸出信號燈配時、所述實際交通測量以及所述實際交通指標作為新的訓練樣本；
根據所述新的訓練樣本，修正所述映射函數。
6.根據權利要求1所述的方法，其特征在于，交通測量至少包括路口各車道或各相位的車流量統計；
交通指標至少包括車輛延時；
信號燈配時包括以下至少一項：信號周期、綠信比、相位差和相序。
7.根據權利要求1所述的方法，其特征在于，所述方法還包括：
將所述待輸出信號燈配時、所述實際交通測量以及所述實際交通指標作為所述歷史控制數據進行存儲。
8.一種交通信號燈的調控裝置，其特征在于，所述裝置包括：
歷史數據獲取模塊，用于根據歷史控制數據獲取訓練樣本，其中，每一訓練樣本包括歷史信號燈配時、歷史交通測量以及歷史交通指標，所述歷史控制數據是已有的、基于交通模型的信號燈調控算法與信號燈控制系統交互過程中的輸入輸出數據；
訓練模塊，用于根據所述訓練樣本對損失函數進行訓練，得到映射函數，其中，所述損失函數包括時間差分損失函數、監督學習損失函數以及正則化損失函數，所述監督學習損失函數是指以基于交通模型的信號燈調控算法的歷史控制數據為預測目標的映射函數的輸出誤差函數，用于提升后續步驟中深度強化學習算法的初始啟動性能；
實際數據獲取模塊，用于獲取實際交通測量以及實際交通指標；
計算模塊，用于根據所述映射函數、所述實際交通測量以及實際交通指標，計算得到待輸出信號燈配時。
9.一種交通信號燈的調控裝置，其特征在于，所述裝置包括：存儲器和處理器；所述存儲器用于存儲可執行的指令，所述處理器用于根據所述指令的控制執行根據權利要求1-7中的任何一項所述的交通信號燈的調控方法中的操作。
10.一種計算機可讀存儲介質，其特征在于，所述存儲介質上存儲有計算機程序，所述計算機程序在被處理器執行時實現根據權利要求1至7中任一項所述的交通信號燈的調控方法。
該專利技術資料僅供研究查看技術是否侵權等信息，商用須獲得專利權人授權。該專利全部權利屬于阿里巴巴集團控股有限公司，未經阿里巴巴集團控股有限公司許可，擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作，請聯系【客服】
本文鏈接：http://www.17sss.com.cn/pat/books/201910074683.8/1.html，轉載請聲明來源鉆瓜專利網。
- 上一篇：一種石墨烯量子點的制備方法
- 下一篇：一種推拉式織物回收箱
