www.久久久久|狼友网站av天堂|精品国产无码a片|一级av色欲av|91在线播放视频|亚洲无码主播在线|国产精品草久在线|明星AV网站在线|污污内射久久一区|婷婷综合视频网站

當前位置:首頁 > 消費電子 > 消費電子
[導讀]為了提高智能車彎道中定位的魯棒性,將室內(nèi)彎道特征信息進行特征提取與匹配來建立路徑,利用自身前景立體視覺感知信息獲得車體彎道轉(zhuǎn)向的判斷和偏航角度的給定,并采用BP控制策略對智能小車實現(xiàn)轉(zhuǎn)彎控制,避免了傳統(tǒng)PID控制方法因被控系統(tǒng)參數(shù)變化時難以克服系統(tǒng)中非線性因素影響,解決了未知環(huán)境與非線性系統(tǒng)對控制帶來的困難。仿真實驗結(jié)果表明方法在轉(zhuǎn)彎時控制的有效性。

0 引言

智能車環(huán)境感知系統(tǒng)的一個重要任務就是實時地提供車輛在行使過程中的位置信息。機器視覺因其有信號探測范圍寬、獲取信息完整、符合人類認知習慣、維護成本低、不產(chǎn)生環(huán)境污染等多優(yōu)點,已在智能車環(huán)境感知系統(tǒng)中廣泛采用。機器視覺車輛環(huán)境感知系統(tǒng)中的主要任務是完成道路及目標的識別和跟蹤,為智能車行使提供必須的本車位置信息和周圍環(huán)境距離信息。

對于現(xiàn)實情況下的道路,一般可以將其分為兩大類,即:結(jié)構(gòu)化道路和非結(jié)構(gòu)化道路。結(jié)構(gòu)化道路上有明顯的道路標記,且這些標記具有較強的幾何特征,道路路面主要是由這些標記界分確定的,如高速公路上道路中間黃色的連續(xù)標志線或白色的間斷標志線以及兩旁白色的連續(xù)標志線;非結(jié)構(gòu)化道路上沒有明顯的道路標記,在二維圖像中道路路面與非路面主要依靠紋理與色彩而區(qū)分的,如沒有標記的水泥路、野外土路或石板路等。

彎道圖像包含豐富的道路信息和環(huán)境信息,解釋了道路周圍場景。彎道檢測是從道路圖像中檢測出彎曲車道線的邊界,這也是對彎道理解的基礎。建立彎道模型;提取車道線像素點;擬合車道線模型屬于目前較常采用的認知方法,并在特定的結(jié)構(gòu)化道路體現(xiàn)出較好的檢測效果。文獻[6]介紹了彎道檢測在車道偏離預警、彎道限速以及彎道防碰撞預警等領域的應用情況,并提出了彎道檢測應該建立三維車道線模型,提高適用性。

均采用的Hough變換求出車道線直線方程,從而確定對應直線段上的最低點和最高點,然后根據(jù)相應準則判斷曲線道路的彎曲方向,最后分段擬合車道線的直線段和曲線段實現(xiàn)車道線的二維重建。

彎道檢測不僅需要識別出道路邊界線,還需要判斷道路彎曲方向,確定轉(zhuǎn)彎的曲率半徑。常用的車道檢測方法可分為2大類:基于道路特征和基于道路模型的方法。目前國外主要常用基于道路模型的方法,即將彎道檢測轉(zhuǎn)化為各種曲線模型中數(shù)學參數(shù)的求解問題。省略彎道曲線模型建立和數(shù)學參數(shù)的復雜求解過程,本文采用立體視覺感知環(huán)境的三維信息,利用它的視差原理對所獲取室內(nèi)道路周邊環(huán)境圖像中角點特征的位置恢復其三維信息來判斷車體的彎道轉(zhuǎn)向和偏航角度。建立了視覺信息直接控制車體驅(qū)動偏離角與偏離距離視覺伺服控制系統(tǒng),初步采用了BP控制策略,利用Simulink仿真環(huán)境實現(xiàn)了針對未知彎道曲率的智能車轉(zhuǎn)彎控制運動。

1 室內(nèi)道路環(huán)境信息的視覺感知

1.1 立體視覺系統(tǒng)模型

采用針孔成像模型將圖像中任何點的投影位置與實際點的物理位置建立連線關系,攝像機光心O 與空間P 點間的連線OP 與圖像平面的交點即為圖像投影的位置(u,v)。用齊次坐標和矩陣表示上述透視投影關系為:

 

 

本文采用的雙目平行相機的模型如圖1所示,C1 與C2 攝像機的焦距相等,各內(nèi)部參數(shù)也相等,而且兩個相機的光軸互相平行,x 軸互相重合,y 軸互相平行,因此,將第一個攝像機沿x 軸平移一段距離b 后與第二個攝像機完全重合。假設C1 坐標系為O1 x1 y1 z1 ,C2 坐標系為O2 x2 y2 z2 ,則在上述攝像機配置下,若任何空間點P 的坐標在 C1 坐標系下為 (x1 ) ,y1,z1 ,在C2 坐標系下為(x1 ) - b,y1,z1 .由中心攝影的比例關系可得:

 

 

其中(u1,v1) ,(u2 ,v2 ) 分別為P1 與P2 的圖像坐標。由P1與P2 的圖像坐標(u2 ,v2 ) ,(u2 ,v2 ) 可求出空間點P 的三維坐標(x1,y1,z1) .

 

 

1.2 室內(nèi)環(huán)境特征向量的提取與匹配

由于噪聲、光照變化、遮擋和透視畸變等因素的影響,空間同一點投影到兩個攝像機的圖像平面上形成的對應點的特性可能不同,對在一幅圖像中的一個特征點或者一小塊子圖像,在另一幅圖像中可能存在好幾個相似的候選匹配。因此需要另外的信息或者約束作為輔助判據(jù),以便能得到惟一準確的匹配。最近鄰法是一種有效的為每個特征點尋找匹配點的方法。最近鄰點被定義為與特征點的不變描述子向量之間的歐氏距離最短的點。

假定參考圖像P 的SIFT 特征點集合為:FP ={FP (1),F(xiàn)P (2),-,FP (m)} ,m 為圖像P 的特征點的個數(shù);待匹配圖像Q 的特征點的個數(shù)為N,SIFT 特征點集合為FQ ={FQ (1),F(xiàn)Q (2),-,FQ (m)} .當在建立參考圖像中的特征點和待匹配圖像的特征篩選對應匹配關系時,應按照圖2所示的算法進行對稱性測試,只有當兩個匹配集中的對應點完全一致時,才視為有效匹配。

 

 

SIFT 特征向量生成后,利用特征點向量的歐式距離來作為兩幅圖像中特征點的相似性判定度量。最近鄰法是一種有效的為每個特征點尋找匹配點的方法。

最近鄰點被定義為與特征點的不變描述子向量之間的歐氏距離最短的點。對特征點集合FP 中的每個點,逐一計算其與特征點集合FQ 中每個點的距離,得到特征點之間的距離集合D.將距離集合D 中的元素進行排序,得到最近鄰距離dmin 和次近鄰距離dn - nim.SIFT算法通過判斷最近鄰和次近鄰距離的比值:

 

 

來區(qū)分正確匹配對和錯誤匹配對。

對于正確的匹配對,其最近鄰距離dmin 要遠遠小于次近鄰距離dn - nim,即DistanceRatio -1;而錯誤的匹配對,由于特征空間的維數(shù)很高,其最近鄰距離dmin 與次近鄰距離dn - nim 差距不大,即DistanceRatio≈ 1.所以可取一個距離比閾值Threh∈(0,1)來區(qū)分正確匹配對和錯誤匹配對。

1.3 運動估計

進行特征點立體匹配和跟蹤匹配如圖2所示,對當前時刻t 獲得圖像對(ImgL1 和ImgL2)進行SIFT 特征匹配之后獲得道路環(huán)境匹配特征點Ni 個,再對相鄰時刻t + 1 獲得的Ni + 1 個特征點計算歐式距離,尋找t 與t + 1時刻獲取圖像中相同的特征點,得到一系列匹配點在車體運動前后的三維坐標。

本文實驗環(huán)境是在室內(nèi),在假定室內(nèi)環(huán)境為理想的水平面的基礎上,同一特征點三維坐標中y 坐標保持基本不變,即車體運動參數(shù)僅在x-z 坐標平面內(nèi)發(fā)生變化。

圖3中點P(x1,y1,z1) 為所提取環(huán)境特征點,在t 時刻立體匹配后得到其在攝像頭坐標系下的三維坐標,由于攝像頭固定安裝在小車上,因此通過坐標系的旋轉(zhuǎn)與平移變換可將點P 的三維坐標轉(zhuǎn)換到小車坐標系ΣBt 下表示。同理,t + 1 時刻所獲取的圖像中相同點P 的(u,v)二維坐標發(fā)生變化,經(jīng)坐標轉(zhuǎn)換后可得到小車坐標系ΣBt + 1 下表示。

 

 

小車t 時刻位于位置A 時,特征點P 在坐標系ΣBt 為參考位置的三維坐標是[x1 ] ,y1,z1T,當經(jīng)過t + 1 時刻后移動到空間位置B 時,同一特征點P 在以B 為參考位置的三維坐標為[x ] t + 1,yt + 1,zt + 1T,所以得到:

 

 

當這些位置滿足3個及以上相同的匹配特征點時,小車所在坐標系間的平移與旋轉(zhuǎn)向量就可以通過以上方程獲得。[!--empirenews.page--]

2 車體的轉(zhuǎn)彎控制

2.1 車體定位參數(shù)計算

環(huán)境特征點投影到車體坐標系下表示后,即為所有的環(huán)境坐標均統(tǒng)一在世界坐標系下的表示。如圖4所示,其中小車前進方向為zw 軸,xw 水平垂直于zw,方向向右,其交點為原點Ow.直線為lmid 為道路中間線,lmid與zw 的夾角為φ,即為車輛的偏航角。點Ow 到左車道線lL 的距離為DL,到右車道線lR 的距離為DR,可行駛區(qū)域的道路寬度為w = DL + DR.

 

 

2.2 彎道控制策略

2.2.1 控制策略

機器人的底層運動控制是非常重要的一個環(huán)節(jié),機器人運動控制的好壞直接決定了能否有效執(zhí)行決策意圖,準確無誤地沿著預定軌跡行進,完成導航任務。傳統(tǒng)的定位控制中,PI、PID是廣泛采用的控制方法,這些方法比較成熟,但卻具有一定的局限性。對被控系統(tǒng)的參數(shù)變化比較敏感,難以克服系統(tǒng)中非線性因素的影響。本文采用BP神經(jīng)網(wǎng)絡控制器在行使過程中經(jīng)學習對網(wǎng)絡進行訓練,以適應當前的環(huán)境路況來調(diào)整車的左右輪速控制量。智能車左右輪速的大小,和車體偏離道路中間線lmid 的距離d 和車運動時方向偏離中間線的角度φ 有關。小車控制輸入為d,φ,輸出為VL,VR .

基于雙目立體視覺獲取得到的三維信息,即為經(jīng)左右圖像SIFT 特征點匹配,在攝像頭坐標系中獲取前景環(huán)境中各關鍵點的坐標信息。選取關鍵點中與機器人基坐標系原點高度靠近的點,并且該點的個數(shù)需大于3,之后,采用最小二乘法擬合可得行駛區(qū)域的邊界直線,即確定了車體定位參數(shù)中左、右車道線lL、lR.直線與圖像右邊界存在交點,即可判斷出彎道轉(zhuǎn)向。同時,擬合確定的左車道線與圖像下邊緣的交點Pl0 為第一個控制點;以圖像右邊界與擬合直線的交點處為第二個控制點Pln.圖5表示為前景環(huán)境中對特征點的匹配結(jié)果圖和判斷可行駛區(qū)域。

對序列圖像進行實時處理時,由于攝像機采集系統(tǒng)速度為30 幀/s,車速在不超過33 cm/s的情況下,采集一幀圖像智能車向前行駛約小于1 cm,連續(xù)采集的兩幀圖像中所判斷的車道左右車道線和彎道方向偏差不會太大。

 

 

2.2.2 控制仿真實驗

實驗采用BP神經(jīng)網(wǎng)絡作為控制對偏離角φ 進行仿真實驗。在Simulink環(huán)境下搭建的系統(tǒng)模型中BP神經(jīng)網(wǎng)絡的搭建如圖6所示。U 為經(jīng)由視覺信息得到的偏航角φ 作為系統(tǒng)輸入量,輸出Y 為小車質(zhì)心速度V.小車左、右輪速可在判斷彎道轉(zhuǎn)向的前提下,由兩輪速差VD 經(jīng)計算得出。若如圖5所示,彎道轉(zhuǎn)向向右:

 

 

 

 

利用Simulink庫中Signal Builder產(chǎn)生變化的Signal仿真實際環(huán)境中視覺系統(tǒng)得到的當前車體的偏移量。

小車經(jīng)左右輪差速轉(zhuǎn)彎運動中質(zhì)心位置實際偏轉(zhuǎn)角度作為網(wǎng)絡的輸入,經(jīng)訓練學習反饋回系統(tǒng)的控制輸入端。圖7為控制仿真結(jié)果圖,由圖示可知該方法基本完成了對信號的控制跟蹤,由此說明了利用雙目立體視覺所獲得的信息,并采用BP網(wǎng)絡自學習對道路的變化可適用于不同彎道的道路,避免了傳統(tǒng)PID控制方法因彎道曲率變化使得小車轉(zhuǎn)彎控制失敗。

 

 

3 結(jié)論

借助機器視覺系統(tǒng)判斷小車可行駛區(qū)域,同時還可清晰地判斷出彎曲線路的走向,避免了彎道方向的復雜判別方法,且該方法普遍適用于不同的道路環(huán)境,特別是非結(jié)構(gòu)化的道路環(huán)境,也增強了算法的實用性和魯棒性。但目前對雙目攝像機進行精確匹配和標定仍然是個技術難題;神經(jīng)網(wǎng)絡訓練方法在選取訓練樣本數(shù)據(jù)和精確定位車輛位置方面也比較困難,這將是進一步研究的主要關鍵問題。

本站聲明: 本文章由作者或相關機構(gòu)授權(quán)發(fā)布,目的在于傳遞更多信息,并不代表本站贊同其觀點,本站亦不保證或承諾內(nèi)容真實性等。需要轉(zhuǎn)載請聯(lián)系該專欄作者,如若文章內(nèi)容侵犯您的權(quán)益,請及時聯(lián)系本站刪除。
換一批
延伸閱讀

9月2日消息,不造車的華為或?qū)⒋呱龈蟮莫毥谦F公司,隨著阿維塔和賽力斯的入局,華為引望愈發(fā)顯得引人矚目。

關鍵字: 阿維塔 塞力斯 華為

加利福尼亞州圣克拉拉縣2024年8月30日 /美通社/ -- 數(shù)字化轉(zhuǎn)型技術解決方案公司Trianz今天宣布,該公司與Amazon Web Services (AWS)簽訂了...

關鍵字: AWS AN BSP 數(shù)字化

倫敦2024年8月29日 /美通社/ -- 英國汽車技術公司SODA.Auto推出其旗艦產(chǎn)品SODA V,這是全球首款涵蓋汽車工程師從創(chuàng)意到認證的所有需求的工具,可用于創(chuàng)建軟件定義汽車。 SODA V工具的開發(fā)耗時1.5...

關鍵字: 汽車 人工智能 智能驅(qū)動 BSP

北京2024年8月28日 /美通社/ -- 越來越多用戶希望企業(yè)業(yè)務能7×24不間斷運行,同時企業(yè)卻面臨越來越多業(yè)務中斷的風險,如企業(yè)系統(tǒng)復雜性的增加,頻繁的功能更新和發(fā)布等。如何確保業(yè)務連續(xù)性,提升韌性,成...

關鍵字: 亞馬遜 解密 控制平面 BSP

8月30日消息,據(jù)媒體報道,騰訊和網(wǎng)易近期正在縮減他們對日本游戲市場的投資。

關鍵字: 騰訊 編碼器 CPU

8月28日消息,今天上午,2024中國國際大數(shù)據(jù)產(chǎn)業(yè)博覽會開幕式在貴陽舉行,華為董事、質(zhì)量流程IT總裁陶景文發(fā)表了演講。

關鍵字: 華為 12nm EDA 半導體

8月28日消息,在2024中國國際大數(shù)據(jù)產(chǎn)業(yè)博覽會上,華為常務董事、華為云CEO張平安發(fā)表演講稱,數(shù)字世界的話語權(quán)最終是由生態(tài)的繁榮決定的。

關鍵字: 華為 12nm 手機 衛(wèi)星通信

要點: 有效應對環(huán)境變化,經(jīng)營業(yè)績穩(wěn)中有升 落實提質(zhì)增效舉措,毛利潤率延續(xù)升勢 戰(zhàn)略布局成效顯著,戰(zhàn)新業(yè)務引領增長 以科技創(chuàng)新為引領,提升企業(yè)核心競爭力 堅持高質(zhì)量發(fā)展策略,塑強核心競爭優(yōu)勢...

關鍵字: 通信 BSP 電信運營商 數(shù)字經(jīng)濟

北京2024年8月27日 /美通社/ -- 8月21日,由中央廣播電視總臺與中國電影電視技術學會聯(lián)合牽頭組建的NVI技術創(chuàng)新聯(lián)盟在BIRTV2024超高清全產(chǎn)業(yè)鏈發(fā)展研討會上宣布正式成立。 活動現(xiàn)場 NVI技術創(chuàng)新聯(lián)...

關鍵字: VI 傳輸協(xié)議 音頻 BSP

北京2024年8月27日 /美通社/ -- 在8月23日舉辦的2024年長三角生態(tài)綠色一體化發(fā)展示范區(qū)聯(lián)合招商會上,軟通動力信息技術(集團)股份有限公司(以下簡稱"軟通動力")與長三角投資(上海)有限...

關鍵字: BSP 信息技術
關閉
關閉