隨著城市交通與經(jīng)濟(jì)發(fā)展的矛盾日趨尖銳,交通擁堵、交通安全已成為社會(huì)關(guān)注的焦點(diǎn)。城市交通控制作為組織、控制交通流的主要手段之一,在解決城市交通問題中擔(dān)負(fù)著重要責(zé)任。如何運(yùn)用現(xiàn)代的科技手段來緩解日益嚴(yán)峻的交通壓力是目前研究的重點(diǎn)。 基于目前交通問題及交通系統(tǒng)發(fā)展的現(xiàn)狀,本文根據(jù)交通流實(shí)時(shí)變化的特征,研究了智能體在城市交通信號(hào)控制中的應(yīng)用。主要研究?jī)?nèi)容有如下幾個(gè)方面: 論文首先研究了基于多智能體的城市交通信號(hào)控制的架構(gòu)。采用分層遞階的智能體結(jié)構(gòu),并給出了具體的結(jié)構(gòu)模型。 論文進(jìn)一步把交通控制的最小單元——單路口作為研究對(duì)象,引入強(qiáng)化學(xué)習(xí)中的Q學(xué)習(xí)算法。針對(duì)Q學(xué)習(xí)算法收斂速度較慢的缺點(diǎn),充分利用學(xué)習(xí)過程中的經(jīng)驗(yàn)知識(shí),進(jìn)而學(xué)習(xí)環(huán)境的模型,加快迭代的速度,最終實(shí)現(xiàn)Agent對(duì)路口交通流的優(yōu)化控制。在VISSIM中對(duì)單個(gè)路口采用改進(jìn)的算法進(jìn)行了仿真,并與定時(shí)控制、標(biāo)準(zhǔn)Q學(xué)習(xí)進(jìn)行了對(duì)比,結(jié)果表明了所提出的基于模型的Q學(xué)習(xí)算法的有效性。 論文最后主要解決了區(qū)域交通的控制與協(xié)調(diào)。采用改進(jìn)的Q學(xué)習(xí)算法和遺傳算法分別實(shí)現(xiàn)路口Agent的局部學(xué)習(xí)和區(qū)域的全局優(yōu)化,通過Agent之間的博弈來實(shí)現(xiàn)各個(gè)路口之間的協(xié)調(diào)...

【文章頁數(shù)】：58 頁

【學(xué)位級(jí)別】：碩士

【文章目錄】：
摘要
Abstract
1 緒論
    1.1 研究背景
    1.2 研究現(xiàn)狀以及存在的問題
    1.3 交通信號(hào)控制的基本參數(shù)
    1.4 主要研究?jī)?nèi)容介紹
    1.5 本章內(nèi)容小結(jié)
2 基于多智能體的城市交通信號(hào)控制架構(gòu)研究
    2.1 智能體——Agent
    2.2 基于多智能體 MAS 的交通控制可行性研究
    2.3 交通信號(hào)控制的分層次多智能體架構(gòu)
    2.4 本章小結(jié)
3 基于強(qiáng)化學(xué)習(xí)的單交叉口信號(hào)控制
    3.1 Agent 的強(qiáng)化學(xué)習(xí)
    3.2 改進(jìn)的基于環(huán)境模型的 Q 學(xué)習(xí)算法
    3.3 基于強(qiáng)化學(xué)習(xí)的單交叉口仿真研究
    3.4 本章小結(jié)
4 區(qū)域交通控制與協(xié)調(diào)優(yōu)化
    4.1 基于改進(jìn) Q 學(xué)習(xí)和遺傳算法的區(qū)域交通控制優(yōu)化
    4.2 基于對(duì)策論的 Agent 協(xié)調(diào)機(jī)制研究
    4.3 區(qū)域交通控制仿真研究
    4.4 本章小結(jié)
5 總結(jié)與展望
    5.1 論文總結(jié)
    5.2 研究展望
致謝
參考文獻(xiàn)



本文編號(hào)：3818118