欧美性猛交xxxx免费看_牛牛在线视频国产免费_天堂草原电视剧在线观看免费_国产粉嫩高清在线观看_国产欧美日本亚洲精品一5区

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

復(fù)雜交通場景下的自動駕駛車輛軌跡預(yù)測

jf_C6sANWk1 ? 來源:智能汽車設(shè)計 ? 2023-01-03 11:46 ? 次閱讀

為了能夠滿足自動駕駛汽車在復(fù)雜交通場景中安全高效運行,自動駕駛汽車必須做到對周圍對象不確定性行為進行準(zhǔn)確預(yù)測。作為自動駕駛的關(guān)鍵技術(shù),近年來不斷有新的軌跡預(yù)測思路和算法被提出,尤其是針對復(fù)雜交通場景中的對象軌跡預(yù)測。通過將復(fù)雜交通場景中的預(yù)測對象分為:車輛軌跡預(yù)測和行人軌跡預(yù)測2類,在此基礎(chǔ)上對不同預(yù)測對象采用近年來的主流預(yù)測算法進行分類總結(jié)。最后討論了當(dāng)前行為預(yù)測存在的問題,并提出了一些有價值的研究展望。

1 前言

近年,自動駕駛技術(shù)飛速發(fā)展,促進了感知技術(shù)的研究,目標(biāo)檢測、識別追蹤等感知方面的技術(shù)也得到了快速發(fā)展。然而,隨著自動駕駛技術(shù)研究邁向L5級,國內(nèi)的自動駕駛車輛實現(xiàn)了固定場景或者相對復(fù)雜場景下的低速運用,如何實現(xiàn)自動駕駛車輛全場景任意速度運行的課題成為當(dāng)前研究的熱點。

自動駕駛的行為預(yù)測技術(shù)便是實現(xiàn)這一愿景的核心挑戰(zhàn),因為只有自動駕駛車輛能像人類駕駛一樣對周圍目標(biāo)(車輛、行人等)的意圖和未來軌跡做出準(zhǔn)確的判斷,才能合理規(guī)劃自身的運動軌跡,實現(xiàn)安全、平穩(wěn)的導(dǎo)航。行為預(yù)測作為自動駕駛領(lǐng)域最具挑戰(zhàn)性的研究方向,主要包含2個方面:車輛軌跡預(yù)測和行人軌跡預(yù)測。

其最明顯的特點就在于預(yù)測對象未來意圖和行為的不確定性,即每個預(yù)測對象的未來動作主要受對象主觀影響,導(dǎo)致就算是同一場景甚至是同一工作狀態(tài)下不同的對象也會做出不同的行為決策,由于這種預(yù)測對象多模態(tài)決策的存在,使得本就復(fù)雜的軌跡預(yù)測問題變得更加復(fù)雜。

本文針對復(fù)雜交通場景下的自動駕駛車輛軌跡預(yù)測問題,綜述近幾年的相關(guān)研究成果,并且以復(fù)雜交通場景下的不同預(yù)測對象進行分類展開總結(jié)。文章第2章節(jié)主要對復(fù)雜交通場景進行了簡要概述。文章的第3章節(jié)分為2個部分展開:

(1)總結(jié)了復(fù)雜交通場景下車輛在可觀測和受遮擋情況下的軌跡預(yù)測的相關(guān)成果。

(2)總結(jié)了復(fù)雜交通場景下行人在可觀測和受遮擋情況下軌跡預(yù)測的相關(guān)成果。

最后,第4章節(jié)進行總結(jié)并且基于當(dāng)下領(lǐng)域的研究現(xiàn)狀提出展望。

2 復(fù)雜交通場景概述

復(fù)雜交通場景的類型主要可以歸為2大類:

(1)交通道路結(jié)構(gòu)復(fù)雜的各種交叉口場景。

(2)車輛高速行駛的高速路段場景。

交叉口作為1種典型的復(fù)雜交通場景,因為其道路結(jié)構(gòu)復(fù)雜存在較多沖突點以及交通參與者類型較多,所以在其發(fā)揮自身重要交通作用的同時也存在著十分嚴重的問題,據(jù)美國國家公路安全管理局的報告顯示美國有超過四分之一的交通事故發(fā)生在交叉路口場景,其中在無信號燈交叉路口的事故率大約占到了50%[1]。

而針對高速路段場景,雖然自身的交通道路結(jié)構(gòu)和交通參與者的類型沒有交叉口場景那么復(fù)雜,但因為高速路段車輛機動速度快,所以相比于一般道路場景在車輛的變道、超車、匯流等特定場景下更加復(fù)雜,需要更快的反應(yīng)速度和反應(yīng)精度。所以針對復(fù)雜交通場景的特點對自動駕駛車輛的軌跡預(yù)測的準(zhǔn)確性和效率提出了很高的要求。

結(jié)合交通道路拓撲結(jié)構(gòu)、交通參與者類型數(shù)量、參與者自身速度3個方面的特點,主要總結(jié)了6種典型的復(fù)雜交通場景:T形路口場景、十字路口場景、錯位交叉路口場景、路口匯流場景、環(huán)島場景、復(fù)雜混合路口場景,如圖1所示。

5fccd392-88e1-11ed-bfe3-dac502259ad0.jpg

圖1 復(fù)雜交通路口場景

3 預(yù)測對象分類與算法總結(jié)

在本章中,將復(fù)雜交通場景中自動駕駛汽車的行為預(yù)測對象分為車輛軌跡預(yù)測、行人軌跡預(yù)測2類,在此基礎(chǔ)上針對不同預(yù)測對象綜述總結(jié)近年來的主要研究方法。

3.1 車輛的軌跡預(yù)測

車輛的軌跡預(yù)測,即是通過自動駕駛車輛自身所裝配的各種傳感器去準(zhǔn)確檢測周圍車輛當(dāng)前的位置、速度、運動方向等信息然后用于對其未來軌跡的預(yù)測。近年來對于車輛的軌跡預(yù)測方法主要分為2類:基于強化學(xué)習(xí)模型方法和基于神經(jīng)網(wǎng)絡(luò)的交互學(xué)習(xí)和社會感知方法。

基于模型的方法運用適當(dāng)學(xué)習(xí)算法達到在特定場景中運用的效果?;诓┺哪P偷姆椒ń瓿1挥米?a target="_blank">智能車的軌跡預(yù)測,Li等針對交叉路口和高速路段場景提出了1種兩人實時的動態(tài)博弈模型,運用分層預(yù)測思想,在考慮預(yù)測軌跡的成本和安全系數(shù)的基礎(chǔ)上結(jié)合認知行為模型得出預(yù)測軌跡,Chandra等在單一博弈模型方法的基礎(chǔ)上創(chuàng)新的將博弈模型與基于機器人學(xué)開發(fā)的1種可以通過傳感器檢測周圍目標(biāo)動作的GAMEPLAY方法結(jié)合,在通過用于行為建模和預(yù)測的CMMetric算法對周圍車輛的CMetric值排序從而確定周圍車輛的通行順序以此來預(yù)測軌跡。

以上2種基于博弈模型的方法都是針對2者之間的博弈,無法滿足目標(biāo)車輛較多場景的軌跡預(yù)測。Hang等針對這個問題,提出了1種基于模型預(yù)測控制(Model Predictive Control,MPC)建立聯(lián)盟博弈方法,考慮不同交互駕駛行為的多車道合并場景的車輛協(xié)同軌跡預(yù)測問題,其核心思想是將多車道合并區(qū)域的車輛進行相互博弈,并且這種博弈是相互關(guān)聯(lián)的,最終拓展成為整個局部區(qū)域的所有車輛的博弈,通過求解整體代價最小的方式去預(yù)測軌跡。此聯(lián)盟博弈方法是1種傳統(tǒng)兩者博弈模型的拓展,能夠應(yīng)用于復(fù)雜場景下的多對象車輛博弈。

除了基于博弈模型的軌跡預(yù)測外,Shu等針對交叉路口場景的左轉(zhuǎn)問題提出了根據(jù)道路模型(圖2),標(biāo)記出關(guān)鍵轉(zhuǎn)折點,在關(guān)鍵轉(zhuǎn)折點處運用分層規(guī)劃的思想,采用部分可觀測馬爾可夫(Partially Observable Markov Decision Processes,POMDP)架構(gòu)將關(guān)鍵點處的軌跡問題分為高、低2個層次的路徑預(yù)測,通過高層路徑預(yù)測獲得候選路徑,再通過低層擬人思想獲取最優(yōu)預(yù)測軌跡。

Bouton等在單POMDP方法的基礎(chǔ)上提出新的利用效用融合的POMDP方法,通過先對每個目標(biāo)單獨計算最優(yōu)狀態(tài),在融合獲得全局最優(yōu)狀態(tài),從而推斷目標(biāo)車輛的未來軌跡預(yù)測。

5fdb8efa-88e1-11ed-bfe3-dac502259ad0.jpg

圖2 基于ECT標(biāo)準(zhǔn)交叉口分層次預(yù)測規(guī)劃方法

基于神經(jīng)網(wǎng)絡(luò)的交互學(xué)習(xí)方法是近年來對于自動駕駛軌跡預(yù)測的主流研究方向。其中,基于深度學(xué)習(xí)的長短期記憶網(wǎng)絡(luò)(Long-Short Term Memory,LSTM)及其變體近年來常被用于自動駕駛車輛的軌跡預(yù)測研究,LSTM網(wǎng)絡(luò)作為循環(huán)神經(jīng)網(wǎng)絡(luò)(Recurrent Neural Network,RNN)的1種升級變體,因其具有門控裝置,可以控制每一時刻信息的記憶與遺忘,對信息有了篩選保留的能力,可以進行長序列的信息處理,對于自動駕駛車輛軌跡的長期預(yù)測效果很好。

Zeng等將軌跡預(yù)測問題轉(zhuǎn)化為序列預(yù)測問題,通過將復(fù)雜交叉路口場景中的車輛軌跡進行序列化,提出了1種基于序列生成模型(Sequence to Sequence,Seq2Seq)結(jié)構(gòu),在時間圖和空間圖上運用LSTM網(wǎng)絡(luò)獲取預(yù)測車輛當(dāng)前的位姿和關(guān)鍵交互信息。從而自動駕駛車輛提供更合理的軌跡預(yù)測。

Han等針對高速公路交織區(qū)域的車輛變道場景,提出了注意力Seq2Seq網(wǎng)絡(luò),采用LSTM編-解碼器進行目標(biāo)車輛的變道軌跡預(yù)測,并結(jié)合注意力機制關(guān)注變道過程中的關(guān)鍵信息,其在長時期的變道軌跡預(yù)測中有明顯的優(yōu)勢。

但采用單一的LSTM神經(jīng)網(wǎng)絡(luò)用于預(yù)測軌跡仍有很多缺陷,所以有研究人員也提出采用混合神經(jīng)網(wǎng)絡(luò)去完善預(yù)測效果。Ji等提出LSTM網(wǎng)絡(luò)的預(yù)測模型,模型由意識識別和軌跡輸出模塊組成。前者利用Softmax函數(shù)得出換道和車道保持的概率,在通過基于LSTM的編-解碼器和混合密度網(wǎng)絡(luò)(Mixture Density Networks,MDN)的輸出模塊輸出包含軌跡被采用概率的多模態(tài)預(yù)測軌跡。

Pan等提出了1種利用車輛歷史運動和環(huán)境信息預(yù)測軌跡的深度神經(jīng)網(wǎng)絡(luò)(Deep Neural Networks,DNN),利用LSTM和注意力機制學(xué)習(xí)車輛意圖和車輛位置變化,從而預(yù)測軌跡。Hsu等提出了1種結(jié)合卷積LSTM和深度卷積神經(jīng)網(wǎng)絡(luò)(Convolutional Neural Networks,CNN)的卷積-循環(huán)框架(CNNLSTM),通過檢測周圍車輛的尾部信號燈狀態(tài)去預(yù)測車輛意圖,例如通過檢測到轉(zhuǎn)向燈亮起,預(yù)測車輛將會進行轉(zhuǎn)向,通過檢測剎車燈亮起,預(yù)測車輛將會減速或停車,但由于其只對車輛尾部信號燈狀態(tài)進行研究,不能滿足多場景化需求。

Frossard等在此循環(huán)框架中加入1種充分學(xué)習(xí)模型,利用空間和時間特征分類轉(zhuǎn)向信號狀態(tài),通過判斷不同運動方向(同向、反向)車輛信號燈狀態(tài)預(yù)測車輛意圖(圖3)。Jeong等提出基于LSTM-RNN結(jié)構(gòu)的運動預(yù)測器僅使用從傳感器上采集的信息,在只考慮自身與周圍車輛狀態(tài)的前提下,將基于MPC得到的目標(biāo)車輛的未來狀態(tài),作為車輛間相互作用的特征量輸入基于LSTM-RNN的運動預(yù)測器去預(yù)測軌跡(圖4)。

5ff36462-88e1-11ed-bfe3-dac502259ad0.jpg

圖3 卷積-循環(huán)網(wǎng)絡(luò)框架

6017b52e-88e1-11ed-bfe3-dac502259ad0.jpg

圖4 LSTM-RNN單步預(yù)測器框架

此外,由于基于神經(jīng)網(wǎng)絡(luò)的多模態(tài)軌跡預(yù)測能夠提供更長期的預(yù)測,近年來也常被用于自動駕駛車輛的軌跡預(yù)測研究,例如Cui等針對復(fù)雜交互場景提出的1種通過將周圍車輛進行編碼處理為光柵圖像輸入深度神經(jīng)網(wǎng)絡(luò)(CNN)中實現(xiàn)多模態(tài)的軌跡預(yù)測模型,并且這些預(yù)測軌跡都包含了對應(yīng)的軌跡可能被采納的概率值。Choi等提出的基于圖神經(jīng)網(wǎng)絡(luò)(Graph Neural Networks,GNN)的跨模式框架,通過將多種傳感器對同一目標(biāo)的檢測數(shù)據(jù)進行聯(lián)合學(xué)習(xí)和優(yōu)化獲得預(yù)測軌跡。

Li等針對高交互的復(fù)雜場景,提出了1種用于長時間軌跡預(yù)測的基于條件軌跡預(yù)測的條件生成神經(jīng)系統(tǒng)(Conditional Generative Neural System,CGNS),此系統(tǒng)利用已有的數(shù)據(jù)庫場景信息和實時檢測數(shù)據(jù)預(yù)測周圍多個高交互車輛的未來軌跡,聯(lián)合2者并引入注意力機制對關(guān)鍵區(qū)域進行標(biāo)注,生成多模態(tài)的預(yù)測軌跡。

Kim等提出1種新的基于車道感知預(yù)測網(wǎng)絡(luò)的軌跡預(yù)測模型(圖5),區(qū)別于以前使用光柵圖像作為輸入,而是直接從語義地圖中提取車道信息來進行軌跡預(yù)測,對所預(yù)測車輛、預(yù)測車輛周圍的車輛和有清晰環(huán)境信息與目標(biāo)車輛交互信息的車道3者之間的復(fù)雜關(guān)系進行捕捉,結(jié)合無監(jiān)督學(xué)習(xí)模型通過設(shè)置的權(quán)重去確定最合理預(yù)測軌跡的車道,提高預(yù)測精度,最后基于在編-解碼器結(jié)合周圍環(huán)境生成多模態(tài)的未來軌跡。

6037fe38-88e1-11ed-bfe3-dac502259ad0.jpg

圖5 Lapred網(wǎng)絡(luò)總體結(jié)構(gòu)

此外,針對自動駕駛車輛的傳感器檢測能力受周圍環(huán)境的影響很大,常常出現(xiàn)由于周圍環(huán)境遮擋、檢測目標(biāo)距離太遠、天氣能見度低等各種因素的影響無法對目標(biāo)進行準(zhǔn)確檢測,從而導(dǎo)致漏檢誤檢的情況發(fā)生,使得自動駕駛車輛無法對周圍目標(biāo)車輛作出正確預(yù)測。

Ren等提出具有安全意識基于深度學(xué)習(xí)的社會感知神經(jīng)網(wǎng)絡(luò)模型(圖6),用于預(yù)測最早占用地圖(Occupancy Grid Map,OGM)對可見和不可見車輛占用的每個位置,確定其最早時間,用于描述車輛未來的運動。其本質(zhì)目的是用于預(yù)測可能導(dǎo)致碰撞的危險軌跡,并且為了安全和準(zhǔn)確,應(yīng)使每個軌跡點的預(yù)計到達時間提前于實際到達時間,但在一定范圍內(nèi)。

與之相似的Wang等提出的基于深度神經(jīng)網(wǎng)絡(luò)的占用預(yù)測網(wǎng)絡(luò)(Occupancy Prediction Network,OPNet),通過利用環(huán)境信息學(xué)習(xí)先驗知識來預(yù)測遮擋空間中對象分布的輕量級3維卷積網(wǎng)絡(luò)。Sun等提出1種基于社會感知神經(jīng)網(wǎng)絡(luò)的社會凝聚力智能車軌跡預(yù)測方法,可以根據(jù)周圍絕大多數(shù)與自車行為相似的車輛(相鄰?fù)蜍嚨阑蛲嚨儡囕v)行為來調(diào)整自身行為,及周圍大部分相關(guān)車輛進行什么行為,自己也進行什么行為,并且對于不同的場景算法還可以關(guān)注特定場景中的關(guān)鍵參數(shù)達到優(yōu)化軌跡預(yù)測,例如高速場景下主要關(guān)注周圍車輛的速度信息。

60510bf8-88e1-11ed-bfe3-dac502259ad0.jpg

圖6 U-Net軌跡預(yù)測網(wǎng)絡(luò)框架

除了以上基于模型和基于神經(jīng)網(wǎng)絡(luò)的軌跡預(yù)測方法以外,ALBRECHT和Li等提出了1種基于逆向規(guī)劃的方法,主要通過檢測周圍車輛當(dāng)前的動作來推斷其在當(dāng)前場景下的目標(biāo)點(將要駛?cè)氲穆房?,在以目標(biāo)點為基礎(chǔ)來預(yù)測車輛的軌跡,同時采用蒙特卡羅樹搜索(Monte Carlo Tree Search,MCTS)算法來規(guī)劃自身軌跡,只不過Li等的方法區(qū)別于ALBRECHT等的最終獲得預(yù)測軌跡是多模態(tài)的而非單獨的最佳預(yù)測軌跡。Narayanan等提出了1個ALAN(A Lane Anchors)的預(yù)測框架,不再運用柵格圖像和高精地圖作為輸入信息,創(chuàng)新的采用車道中心線為參考,輸出具有強語義的環(huán)境感知數(shù)據(jù),并且獲得多模態(tài)的預(yù)測軌跡。

本小節(jié)總結(jié)了車輛在復(fù)雜交通場景中的軌跡預(yù)測算法并將算法分為基于強化學(xué)習(xí)模型的算法、基于神經(jīng)網(wǎng)絡(luò)的算法與其它算法3部分,見表1。

表1 復(fù)雜交通場景中的車輛軌跡預(yù)測算法

606828ec-88e1-11ed-bfe3-dac502259ad0.jpg

3.2 行人的軌跡預(yù)測

由于行人的運動具有高度的不確定性和多模態(tài)性,自動駕駛系統(tǒng)無法在有限的計算時間內(nèi)做出反應(yīng),如果僅根據(jù)當(dāng)前的行人狀態(tài)去規(guī)劃自身路徑無法滿足時效性并且還可能導(dǎo)致安全事故發(fā)生,所以行人軌跡的預(yù)測一直都是自動駕駛汽車發(fā)展面臨的挑戰(zhàn)之一。

目前,行人軌跡預(yù)測研究思路主要分為2類:

(1)基于模型的方法;

(2)基于神經(jīng)網(wǎng)絡(luò)和注意力機制結(jié)合的方法。

基于模型的方法有基于高斯過程模型、基于社會力模型等。Mínguez等提出了1種通過采集行人身體的關(guān)鍵部位特征比如肩部的信息,運用基于平衡的高斯過程動力學(xué)模型去預(yù)測行人軌跡。Rinke等在社會力模型的基礎(chǔ)上,提出了1種多層次的道路使用者運動及其交互的描述方法,將行人運動目標(biāo)點與可能軌跡分層討論。

通過先確定目標(biāo)點在利用拉格朗日多項式依次估計其他軌跡然后在運用基于社會力模型的規(guī)避沖突策略進行軌跡選擇,生成最佳預(yù)測軌跡。Yang等提出將社會力模型和行人走、停決策結(jié)合的改進社會力模型(圖7),去預(yù)測行人未來2 s運動軌跡的終點的行人軌跡預(yù)測方法。

但基于模型的方法對理論和場景的依賴性強,并且需要大量的數(shù)據(jù)去訓(xùn)練模型,所以近年更多的研究者還是致力于基于神經(jīng)網(wǎng)絡(luò)和注意力機制結(jié)合的方法,一般以RNN/LSTM/GRU等遞歸神經(jīng)網(wǎng)絡(luò)及其變體為主結(jié)合注意力機制。Zhou等通過考慮單個行人的運動信息以及和周圍行人的交互信息,運用循環(huán)神經(jīng)網(wǎng)絡(luò)(RNN)和圖卷積網(wǎng)絡(luò)(Graph Convolutional Networks,GCN)對行人狀態(tài)以及彼此交互進行模擬(圖8),并結(jié)合注意力機制和結(jié)伴損失函數(shù)來預(yù)測軌跡。

Zhang等提出將生成對抗網(wǎng)絡(luò)和注意力機制結(jié)合的方法,其核心是通過注意力機制處理環(huán)境中的關(guān)鍵信息,通過社會注意力機制處理人與人之間的行為交互信息,在通過基于LSTM網(wǎng)絡(luò)的對抗模塊去預(yù)測多條合理軌跡。Liang等提出1種用于預(yù)測人軌跡和未來活動的神經(jīng)網(wǎng)絡(luò)模型,通過捕捉人類外觀、肢體動作、與周圍環(huán)境的交互等視覺特征生成模型用于軌跡預(yù)測。

Liu等提出了1種基于圖卷積的行人是否橫穿道路的預(yù)測模型,通過只關(guān)注行人與周圍環(huán)境的關(guān)系以及行人自身的肢體動作進行推理,預(yù)測未來一個時間范圍內(nèi)行人軌跡。Shi等提出了1種新穎的解析圖卷積網(wǎng)絡(luò)(Sparse Graph Convolution Network,SGCN),將稀疏有向交互和運動趨勢相結(jié)合,用于行人軌跡預(yù)測,采用基于注意力機制的稀疏圖學(xué)習(xí)方法對軌跡點進行打分,并反饋到非對稱卷積網(wǎng)絡(luò)中,以獲得高級交互特征,歸一化處理后得到的鄰接矩陣可以表示稀疏圖,最后結(jié)合圖卷積網(wǎng)絡(luò)估計用于軌跡預(yù)測的雙高斯分布的參數(shù)去預(yù)測軌跡。

相比于以前的預(yù)測建模方法,它對交互的行人信息、車輛信息、環(huán)境信息進行了有針對性的選擇,而非以往的直接將一定范圍內(nèi)的所有以上信息無差別的用于建模(圖8)。Tim等提出1種考慮動力學(xué)約束的基于學(xué)習(xí)的多智能體軌跡預(yù)測方法,除了考慮先前軌跡,還同時考慮了目標(biāo)的動力學(xué)約束,確保了實際下的可行性,同時對其他的不同來源的數(shù)據(jù)信息進行融合,給出更具有針對性的預(yù)測軌跡。

Neumann等使用自我監(jiān)督方式訓(xùn)練的預(yù)測網(wǎng)絡(luò),基于行人的運動相對于全局場景的影響小,將場景中的行人運動和自己車輛運動分開考慮,訓(xùn)練了1個自我運動預(yù)測網(wǎng)絡(luò),核心思想可以理解為一定時間內(nèi)先得出自身的軌跡,然后通過自我的監(jiān)督方法,抵消掉自身位置變化對行人軌跡預(yù)測的影響,相當(dāng)于這時車載攝像頭是靜止于某個點的去觀測行人的運動,行人軌跡變化的參考與自車的狀態(tài)無關(guān),而只以預(yù)測行人周圍的元素為參考去預(yù)測,這種不考慮可變視點就可以避免因為不斷變化的攝像頭視點、遮擋和其他場景動態(tài)帶來的預(yù)測困難。

60b5eac8-88e1-11ed-bfe3-dac502259ad0.jpg

圖7 Trajectory++軌跡預(yù)測網(wǎng)絡(luò)框架

60d96cd2-88e1-11ed-bfe3-dac502259ad0.jpg

圖8 SGCN網(wǎng)絡(luò)框架

Lian等[37]提出應(yīng)對復(fù)雜場景下行人軌跡預(yù)測的方法,基于LSTM網(wǎng)絡(luò)建立了基于人-車交互的行人軌跡預(yù)測模型(Vehicles And Pedestrians Trajectory Prediction Model Based On LSTM,VP-LSTM),核心思想是以行人的速度、行人間位置關(guān)系、人車間位置關(guān)系為初始數(shù)據(jù)通過社會注意力機制進行篩選,將篩選信息通過LSTM網(wǎng)絡(luò)得出預(yù)測軌跡。

Hu等[38]提出的預(yù)測行人運動預(yù)測系統(tǒng)(Pedestrian Motion Prediction System Based On NMMP,PMP-NMMP),先通過基于LSTM網(wǎng)絡(luò)的NMMP架構(gòu)進行行人的軌跡預(yù)測,NMMP架構(gòu)系統(tǒng)包含單一分支和交互分支2個部分,單一分支用于對每個參與者進行軌跡預(yù)測和交互分支用于對參與者間的可能交互進行預(yù)測,由2個分支結(jié)合得出候選軌跡,最后PMP將候選軌跡分類為真軌跡或假軌跡,得到最終預(yù)測軌跡。

除了以上基于模型和基于神經(jīng)網(wǎng)絡(luò)和注意力機制結(jié)合的軌跡預(yù)測方法以外,Yao等[39]針對目前模型預(yù)測多基于以往軌跡多次預(yù)測導(dǎo)致的隨重復(fù)預(yù)測次數(shù)增加誤差不斷增大問題,提出基于目標(biāo)估計的雙向多模態(tài)軌跡預(yù)測方法,模型由2部分組成:

(1)多模態(tài)目標(biāo)估計器用于先估計可能的目標(biāo)終點;

(2)目標(biāo)條件雙向軌跡預(yù)測器,進行以當(dāng)前點和目標(biāo)點同時作為起始點的雙向軌跡預(yù)測,從而減少較長預(yù)測范圍內(nèi)的累積誤差。

Shafiee等[40]使用條件3維視覺注意機制進行人體軌跡預(yù)測,通過2個并行編碼流和1個解碼流,2個并行編碼流收集與目標(biāo)人體相關(guān)的3維視覺和運動學(xué)信息,只需要對目標(biāo)及其相關(guān)信息進行收集,1個解碼流預(yù)測目標(biāo)人體的未來軌跡,并且引入3D注意機制,提高預(yù)測精度。

本小節(jié)總結(jié)了行人在復(fù)雜交通場景下的軌跡預(yù)測算法并將算法分為基于模型的算法、基于神經(jīng)網(wǎng)絡(luò)和注意力機制相結(jié)合的算法、其它算法3部分,見表2。

表2 復(fù)雜交通場景中的行人軌跡預(yù)測算法

60f83d1a-88e1-11ed-bfe3-dac502259ad0.jpg

4 結(jié)論

隨著自動駕駛技術(shù)的發(fā)展,傳統(tǒng)的預(yù)測方法已經(jīng)無法滿足自動駕駛車輛對任意行駛場景和速度的要求。本文綜合近幾年自動駕駛行為預(yù)測技術(shù)的發(fā)展情況,立足于復(fù)雜的交通交互場景,通過對場景中不同預(yù)測對象進行分類并總結(jié)相應(yīng)的行為預(yù)測算法。

當(dāng)前比較先進的行為預(yù)測思路還是采用神經(jīng)網(wǎng)絡(luò),也取得了不錯的效果,但由于模型訓(xùn)練需要大量的多樣性數(shù)據(jù),導(dǎo)致模型的訓(xùn)練困難。此外,目前的行為預(yù)測系統(tǒng)需要多種傳感器設(shè)備的數(shù)據(jù)支撐,其中就包括了激光雷達一類高成本的設(shè)備。因此,接下來自動駕駛行為預(yù)測的研究可以從以下4方面展開:

(1)創(chuàng)新和優(yōu)化算法,對于基于神經(jīng)網(wǎng)絡(luò)一類需要預(yù)先訓(xùn)練的算法要降低訓(xùn)練的復(fù)雜度,同時在算法層面去減少對傳感器種類和數(shù)量的依賴,能夠在提升預(yù)測效果的基礎(chǔ)上優(yōu)化硬件配置。

(2)車路協(xié)同預(yù)測,目前的自動駕駛軌跡預(yù)測還是主要依賴自動駕駛車輛自身的傳感器進行數(shù)據(jù)采集和預(yù)測,可以考慮將自動駕駛車輛和路測設(shè)備結(jié)合的預(yù)測思路,即將當(dāng)前場景中路測設(shè)備收集的數(shù)據(jù)直接提供或進行預(yù)處理后提供給自動駕駛車輛去進行行為預(yù)測,這樣不僅可以提高預(yù)測準(zhǔn)確度而且可以降低整體的設(shè)備成本。

(3)受遮擋對象的行為預(yù)測,目前這一部分的研究還很少,主要還是基于社會感知的思路去進行預(yù)測,但實際的實現(xiàn)效果并不理想,作為軌跡預(yù)測中無法回避且十分重要的內(nèi)容,需要針對這一問題提出更多方法。

(4)行人行為預(yù)測,行人對象具有目標(biāo)小且行為不確定性大的特點。而當(dāng)前主要采用檢測行人肢體動作和人群交互行為的方法實際運用時準(zhǔn)確率很低,原因在于本身肢體動作的準(zhǔn)確檢測就很困難,再加之要根據(jù)其完成行為預(yù)測可以想象是十分困難的,如果在加上環(huán)境因素(下雨、起霧等)那么這些方法基本就不在可行,所以如何提高行人行為的準(zhǔn)確預(yù)測也需要提出更好的方法。






審核編輯:劉清

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 解碼器
    +關(guān)注

    關(guān)注

    9

    文章

    1152

    瀏覽量

    40960
  • 神經(jīng)網(wǎng)絡(luò)

    關(guān)注

    42

    文章

    4783

    瀏覽量

    101239
  • 自動駕駛汽車
    +關(guān)注

    關(guān)注

    4

    文章

    377

    瀏覽量

    40905

原文標(biāo)題:自動駕駛汽車行為預(yù)測綜述

文章出處:【微信號:阿寶1990,微信公眾號:阿寶1990】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏

    評論

    相關(guān)推薦

    自動駕駛規(guī)控算法驗證到底需要什么樣的場景仿真軟件?

    ModelBase-AD憑借其優(yōu)秀的靜態(tài)場景模型、隨機交通流模型、整車動力學(xué)模型,為各大主機廠和供應(yīng)商提供了準(zhǔn)確的自動駕駛規(guī)控算法驗證仿真環(huán)境,提升了自動駕駛規(guī)控算法驗證效率。
    的頭像 發(fā)表于 02-11 14:16 ?245次閱讀
    <b class='flag-5'>自動駕駛</b>規(guī)控算法驗證到底需要什么樣的<b class='flag-5'>場景</b>仿真軟件?

    吉利汽車自動駕駛脫困專利獲授權(quán)

    自動駕駛車輛復(fù)雜環(huán)境中的應(yīng)對能力。 據(jù)專利摘要顯示,該脫困方法首先通過車輛傳感器獲取自動駕駛過程中的實時感知信息。這些信息隨后被輸入到一個
    的頭像 發(fā)表于 01-15 11:33 ?739次閱讀

    淺析基于自動駕駛的4D-bev標(biāo)注技術(shù)

    4D-bev標(biāo)注技術(shù)是指在3D空間中以時間作為第四個維度進行標(biāo)注的過程。4D-bev通常在地場景較為復(fù)雜自動駕駛場景中使用,其可以通過精準(zhǔn)地跟蹤和記錄動態(tài)對象的運動
    的頭像 發(fā)表于 12-06 15:01 ?1513次閱讀
    淺析基于<b class='flag-5'>自動駕駛</b>的4D-bev標(biāo)注技術(shù)

    一文聊聊自動駕駛測試技術(shù)的挑戰(zhàn)與創(chuàng)新

    隨著自動駕駛技術(shù)的飛速發(fā)展,自動駕駛測試的重要性也日益凸顯。自動駕駛測試不僅需要驗證車輛的感知、決策、控制模塊的獨立性能,還需確保系統(tǒng)在復(fù)雜
    的頭像 發(fā)表于 12-03 15:56 ?307次閱讀
    一文聊聊<b class='flag-5'>自動駕駛</b>測試技術(shù)的挑戰(zhàn)與創(chuàng)新

    汽車雷達回波發(fā)生器的技術(shù)原理和應(yīng)用場景

    的波束并向前傳播,以模擬真實的雷達工作環(huán)境。應(yīng)用場景 自動駕駛系統(tǒng)的開發(fā)和測試:在自動駕駛系統(tǒng)的開發(fā)和測試過程中,汽車電子雷達回波發(fā)生器可以模擬各種交通
    發(fā)表于 11-15 14:06

    一種創(chuàng)新的動態(tài)軌跡預(yù)測方法

    本文提出了一種動態(tài)軌跡預(yù)測方法,通過結(jié)合歷史幀和歷史預(yù)測結(jié)果來提高預(yù)測的穩(wěn)定性和準(zhǔn)確性。它引入了歷史預(yù)測注意力模塊,以編碼連續(xù)
    的頭像 發(fā)表于 10-28 14:34 ?521次閱讀
    一種創(chuàng)新的動態(tài)<b class='flag-5'>軌跡</b><b class='flag-5'>預(yù)測</b>方法

    智能駕駛自動駕駛的關(guān)系

    駕駛的技術(shù)。 智能駕駛包含“單車”智能駕駛和“協(xié)作式”智能駕駛。前者通過攝像頭、雷達等傳感器以及高效準(zhǔn)確的算法,賦予車輛
    的頭像 發(fā)表于 10-23 16:02 ?851次閱讀

    基于場景自動駕駛驗證策略

    可選方案是將實際交通狀況做出總結(jié)生成具有高度代表性的交通場景,通過仿真分析自動駕駛系統(tǒng)在這些場景上的安全性。然而
    的頭像 發(fā)表于 10-22 16:14 ?379次閱讀
    基于<b class='flag-5'>場景</b>的<b class='flag-5'>自動駕駛</b>驗證策略

    自動駕駛HiL測試方案 ——場景仿真3D演示#ADAS #自動駕駛 #VTHiL

    自動駕駛
    北匯信息POLELINK
    發(fā)布于 :2024年10月16日 10:55:35

    激光雷達與純視覺方案,哪個才是自動駕駛最優(yōu)選?

    自動駕駛技術(shù)作為現(xiàn)代交通領(lǐng)域的顛覆性創(chuàng)新,已經(jīng)成為全球汽車制造商和技術(shù)公司的戰(zhàn)略重點。自動駕駛技術(shù)的核心在于車輛感知環(huán)境的能力,這決定了系統(tǒng)能否在復(fù)
    的頭像 發(fā)表于 09-29 10:47 ?618次閱讀

    FPGA在自動駕駛領(lǐng)域有哪些優(yōu)勢?

    較高,但在處理復(fù)雜計算任務(wù)時,F(xiàn)PGA的能效比通常更優(yōu)。這是因為FPGA能夠針對特定任務(wù)進行優(yōu)化,減少不必要的計算和資源浪費。在自動駕駛系統(tǒng)中,這種高能效比有助于延長車輛續(xù)航時間和減少能耗成本
    發(fā)表于 07-29 17:11

    FPGA在自動駕駛領(lǐng)域有哪些應(yīng)用?

    低,適合用于實現(xiàn)高效的圖像算法,如車道線檢測、交通標(biāo)志識別等。 雷達和LiDAR處理:自動駕駛汽車通常會使用雷達和LiDAR(激光雷達)等多種傳感器來獲取環(huán)境信息。FPGA能夠協(xié)助完成這些傳感器
    發(fā)表于 07-29 17:09

    標(biāo)貝數(shù)據(jù)采集標(biāo)注在自動駕駛場景中落地應(yīng)用實例

    AI數(shù)據(jù)服務(wù)作為人工智能和機器學(xué)習(xí)的基礎(chǔ),在自動駕駛領(lǐng)域中有著重要地位。與其他人工智能應(yīng)用場景相比,自動駕駛的落地場景相對復(fù)雜,想要讓汽車本
    的頭像 發(fā)表于 05-28 14:22 ?734次閱讀
    標(biāo)貝數(shù)據(jù)采集標(biāo)注在<b class='flag-5'>自動駕駛</b><b class='flag-5'>場景</b>中落地應(yīng)用實例

    未來已來,多傳感器融合感知是自動駕駛破局的關(guān)鍵

    巨大的進展;自動駕駛開始摒棄手動編碼規(guī)則和機器學(xué)習(xí)模型的方法,轉(zhuǎn)向全面采用端到端的神經(jīng)網(wǎng)絡(luò)AI系統(tǒng),它能模仿學(xué)習(xí)人類司機的駕駛,遇到場景直接輸入傳感器數(shù)據(jù),再直接輸出轉(zhuǎn)向、制動和加速信號。模仿學(xué)習(xí)人類
    發(fā)表于 04-11 10:26

    Waymo自愿召回444輛自動駕駛汽車 L4的自動駕駛還有很多路要走

    近日,谷歌旗下的自動駕駛部門Waymo自愿召回了444輛自動駕駛汽車,原因是其軟件可能無法準(zhǔn)確預(yù)測拖曳車輛的運動軌跡
    的頭像 發(fā)表于 02-26 10:22 ?1261次閱讀
    Waymo自愿召回444輛<b class='flag-5'>自動駕駛</b>汽車 L4的<b class='flag-5'>自動駕駛</b>還有很多路要走