在過(guò)去十年里，隨著智能手機(jī)及其應(yīng)用生態(tài)體系的不斷發(fā)展，汽車電子領(lǐng)域中移動(dòng)相關(guān)應(yīng)用的創(chuàng)新技術(shù)也深受其影響。汽車制造商已經(jīng)開始將用于智能手機(jī)的相同處理器平臺(tái)應(yīng)用到新一代汽車中，使得駕駛體驗(yàn)獲得了質(zhì)的提升的同時(shí)讓汽車變得更加安全和便宜。除此之外，汽車制造商還希望能夠充分利用當(dāng)今移動(dòng)產(chǎn)業(yè)規(guī)模化和應(yīng)用支持的優(yōu)勢(shì)。雖然很多處理器制造商現(xiàn)在能夠提供汽車級(jí)移動(dòng)平臺(tái)，但處理器仍然是按照智能手機(jī)的思路設(shè)計(jì)的。在很多案例中，這樣的平臺(tái)需要進(jìn)行一定的調(diào)整以滿足汽車制造商的需求。而使用FPGA可以快速實(shí)現(xiàn)低成本橋接解決方案，使得現(xiàn)有平臺(tái)能夠完美應(yīng)用于汽車領(lǐng)域。

每當(dāng)設(shè)計(jì)工程師試著將現(xiàn)有平臺(tái)應(yīng)用于全新領(lǐng)域時(shí)總會(huì)面臨很多挑戰(zhàn)。汽車行業(yè)也不例外。FPGA橋接解決方案能夠解決許多問(wèn)題。

汽車平臺(tái)常見的挑戰(zhàn)

根據(jù)系統(tǒng)設(shè)計(jì)、具體的理念和需求，汽車制造商可能需要多個(gè)部件來(lái)實(shí)現(xiàn)合適的解決方案。萊迪思半導(dǎo)體提供的多款FPGA能夠?qū)崿F(xiàn)各類滿足上述要求的解決方案。

·CrossLink™器件 – 低功耗、低成本的傳感器和攝像頭接口橋接解決方案，可用于對(duì)來(lái)自多個(gè)攝像頭接口(視覺(jué)或雷達(dá))的數(shù)據(jù)進(jìn)行聚合以及多路復(fù)用，然后發(fā)送至SoC。

·ECP5™ – 優(yōu)秀、全面的汽車應(yīng)用橋接芯片。ECP5是一款低功耗、低成本的器件，使用SERDES通過(guò)以太網(wǎng)或光纖方便地連接設(shè)備。DSP塊能夠?qū)崿F(xiàn)傳感器數(shù)據(jù)的預(yù)處理和后處理，或是將視頻數(shù)據(jù)轉(zhuǎn)換為各種標(biāo)準(zhǔn)顯示格式。

·MachXO™ – 擁有最高每LUT I/O數(shù)量的小尺寸FPGA，能夠很方便擴(kuò)展I/O以及實(shí)現(xiàn)視頻數(shù)據(jù)的簡(jiǎn)單轉(zhuǎn)換。

以下是橋接解決方案在特定領(lǐng)域中的應(yīng)用。

嵌入式視覺(jué)

雖然嵌入式視覺(jué)聽起來(lái)有點(diǎn)科幻的感覺(jué)，但實(shí)際上它是當(dāng)今最激動(dòng)人心的應(yīng)用發(fā)展趨勢(shì)之一。 顧名思義，它是指機(jī)器查看和收集周圍環(huán)境視覺(jué)數(shù)據(jù)的能力。該技術(shù)使制得造商能夠?qū)崿F(xiàn)可以“看見”的機(jī)器和汽車，可以感知的傳感器以及可以自主做出通知決策的計(jì)算機(jī)。

嵌入式視覺(jué)系統(tǒng)收集的數(shù)據(jù)能夠幫助機(jī)器學(xué)習(xí)技術(shù)變得更加智能，能力更強(qiáng)。人機(jī)界面(HMI)支持機(jī)器實(shí)現(xiàn)更智能的操作和控制，同時(shí)機(jī)器反饋信息以幫助決策。計(jì)算機(jī)視覺(jué)的一個(gè)重點(diǎn)是在目標(biāo)識(shí)別和立體視覺(jué)應(yīng)用中使用多維圖像來(lái)測(cè)量距離和深度。使用傳感器融合技術(shù)，這些系統(tǒng)能夠?qū)?lái)自不同傳感器的數(shù)據(jù)組合成有意義、有用的信息進(jìn)行處理。同時(shí)，這些系統(tǒng)可以通過(guò)高速連接進(jìn)行安全的通信，從而實(shí)現(xiàn)智慧城市、智能工廠和智能汽車。

萊迪思的多款可編程產(chǎn)品可提供協(xié)處理、橋接和互連解決方案，為網(wǎng)絡(luò)邊緣應(yīng)用實(shí)現(xiàn)智能功能。FPGA的靈活性有助于加速產(chǎn)品上市進(jìn)程、降低成本和功耗并最大限度地縮減工業(yè)和汽車級(jí)設(shè)備的尺寸。

高級(jí)駕駛輔助系統(tǒng)(ADAS)鳥瞰全景視野

現(xiàn)代處理器通常只有2個(gè)攝像頭接口，但是許多ADAS系統(tǒng)需要至少4個(gè)接口，在某些情況下甚至需要多達(dá)8個(gè)攝像頭來(lái)精確感知汽車周圍情況。設(shè)計(jì)工程師面臨的另一個(gè)挑戰(zhàn)是如何處理這些攝像頭收集的圖像數(shù)據(jù)。這些數(shù)據(jù)需求通常需要一個(gè)大尺寸ISP(圖像信號(hào)處理器)連接到處理器。萊迪思ECP5 FPGA專為實(shí)現(xiàn)并行處理而設(shè)計(jì)，可加速處理過(guò)程。該器件提供大量的I / O，可以輕松地連接多個(gè)攝像頭。此外，它們的協(xié)處理能力可以提高處理器的效率。

ECP5可以連接多個(gè)攝像頭并執(zhí)行基本或高級(jí)圖像處理任務(wù)，為處理器提供質(zhì)量最高的圖像以便進(jìn)行決策?，F(xiàn)代汽車的鳥瞰全景攝像頭以及前視和后視側(cè)視系統(tǒng)就是一個(gè)實(shí)例。鳥瞰全景系統(tǒng)能夠?qū)崿F(xiàn)從汽車上方20英尺往下俯視的全景視野。這是通過(guò)將4個(gè)(或更多)廣角(FoV)攝像頭的數(shù)據(jù)拼接在一起來(lái)實(shí)現(xiàn)的。ECP5可以聚合所有攝像頭輸入，將圖像拼接在一起，進(jìn)行魚眼校正(這是FoV廣角鏡頭導(dǎo)致的)，執(zhí)行白平衡，使用HDR最大化圖像質(zhì)量等操作，然后將質(zhì)量達(dá)到最佳狀態(tài)的圖像發(fā)送至處理器。

在上述應(yīng)用中，一片ECP5器件即可代替多個(gè)攝像頭接口有限的處理器。這樣就為設(shè)計(jì)工程師提供了降低系統(tǒng)成本和功耗的途徑。

在設(shè)計(jì)上述類型的系統(tǒng)時(shí)必須將以下因素納入考慮范圍之內(nèi)：

·所需的視頻通道數(shù)和分辨率

·快速和穩(wěn)定可靠的傳輸

·預(yù)處理圖像以降低主ADAS處理器的負(fù)載

視頻通道和分辨率

萊迪思CrossLink器件使得設(shè)計(jì)工程師能夠聚合多個(gè)圖像傳感器的數(shù)據(jù)，并通過(guò)單個(gè)CSI-2接口將數(shù)據(jù)傳輸?shù)綉?yīng)用處理器。CrossLink的尺寸很小，可以放在傳感器附近以提升設(shè)計(jì)靈活性。

萊迪思還為CrossLink器件提供了多款現(xiàn)成的IP，可實(shí)現(xiàn)MIPI D-PHY和其他攝像頭或顯示屏接口標(biāo)準(zhǔn)之間的橋接和聚合。這樣設(shè)計(jì)工程師就可以使用帶有OpenLDI、CMOS、LVDS等傳統(tǒng)接口以及現(xiàn)代MIPI CSI-2或DSI接口的攝像頭或顯示屏。

DisplayPort是另一個(gè)在汽車行業(yè)越來(lái)越受歡迎的開放標(biāo)準(zhǔn)。由于自帶嵌入式時(shí)鐘，所需的通道數(shù)量減少，它的電磁干擾(EMI)也更低。它使用微包協(xié)議，可輕松擴(kuò)展以支持更高的分辨率和更長(zhǎng)的距離。使用ECP5提供的專用SERDES通道，DisplayPort(DP)或嵌入式DisplayPort(eDP)能夠用于實(shí)現(xiàn)儀表系統(tǒng)、儀表板/導(dǎo)航顯示屏、后座娛樂(lè)系統(tǒng)等應(yīng)用。

結(jié)合萊迪思汽車級(jí)MHL/HDMI ASSP解決方案，可輕松實(shí)現(xiàn)到智能手機(jī)和平板電腦等現(xiàn)代智能設(shè)備的連接應(yīng)用。

適用于在智能設(shè)備與汽車之間實(shí)現(xiàn)互連的萊迪思MHL/ HDMI ASSP

車內(nèi)的數(shù)據(jù)傳輸

當(dāng)汽車中有很多傳感器需要管理時(shí)，點(diǎn)到點(diǎn)布線的復(fù)雜程度和成本就會(huì)大大提升。將多個(gè)傳感器連接到位于汽車后部的ECP5，可以使用單根電纜將數(shù)據(jù)快速高效地發(fā)送到汽車前部，從而降低重量和成本，并簡(jiǎn)化維修工作。

ECP5的3.2Gbps SERDES為許多網(wǎng)絡(luò)和傳輸應(yīng)用提供強(qiáng)有力的支持。該器件可用于驅(qū)動(dòng)車載網(wǎng)絡(luò)，如BroadR-Reach或以太網(wǎng)，用于連接PHY芯片或收集用于車內(nèi)的傳感器數(shù)據(jù)。ECP5還支持仿真CSI-2接口，可用于連接多個(gè)攝像頭或雷達(dá)設(shè)備。

使用ECP5實(shí)現(xiàn)車內(nèi)傳感器聚合以及網(wǎng)絡(luò)連接

視頻預(yù)處理

ECP5也可用于預(yù)處理視頻。隨著汽車行業(yè)開始采用移動(dòng)處理器，設(shè)計(jì)工程師不得不面對(duì)各種新的接口。舉個(gè)例子，雖然手機(jī)處理器通常具有連接顯示屏的單個(gè)DSI輸出，但汽車市場(chǎng)上的主流顯示屏都使用LVDS。FPGA可以實(shí)現(xiàn)不同分辨率的視頻信號(hào)的預(yù)處理和不同接口之間的橋接。ECP5可用于構(gòu)建應(yīng)用處理器DSI或FPD-Link輸出與大多數(shù)汽車顯示屏LVDS輸入之間的視頻橋接解決方案。此外，ECP5還可用于車載信息娛樂(lè)應(yīng)用，將一路視頻輸出分割為兩路用于后座顯示屏的輸出，或按照特定視頻分辨率要求對(duì)單個(gè)視頻輸出進(jìn)行裁剪和格式化。

帶有雷達(dá)/激光雷達(dá)的高級(jí)駕駛輔助系統(tǒng)

雷達(dá)和激光雷達(dá)不僅適用于自動(dòng)駕駛汽車，還可以作為駕駛輔助工具。具體來(lái)說(shuō)就是用于檢測(cè)危險(xiǎn)目標(biāo)和條件，讓汽車通知駕駛員或者在必要時(shí)自動(dòng)采取措施以保護(hù)乘客的安全。雖然這些系統(tǒng)仍在發(fā)展之中，但可以預(yù)見未來(lái)的汽車將不僅限于對(duì)攝像頭接收到的圖像進(jìn)行圖像信號(hào)處理，還將采用基于雷達(dá)的接近傳感器和基于激光雷達(dá)的地形傳感器。雷達(dá)和激光雷達(dá)系統(tǒng)充分利用了高速M(fèi)IPI接口，并使用CSI-2輸出數(shù)據(jù)。將上述情況與處理器的資源綜合考慮之后，設(shè)計(jì)工程師將再一次面臨MIPI CSI-2接口數(shù)量有限或接口類型不同的挑戰(zhàn)。汽車級(jí)CrossLink器件可用于聚合來(lái)自多個(gè)傳感器的數(shù)據(jù)，或者簡(jiǎn)單地用作橋接解決方案，將CSI-2數(shù)據(jù)轉(zhuǎn)換為應(yīng)用處理器接口能夠接受的格式。

舉個(gè)例子，許多現(xiàn)代的77 GHz雷達(dá)使用CSI-2與ADAS MCU進(jìn)行互連。使用下方圖示的拓?fù)浣Y(jié)構(gòu)，ADAS系統(tǒng)可以通過(guò)多個(gè)CrossLink橋連接到多個(gè)雷達(dá)設(shè)備來(lái)收集汽車周圍所有方向上的數(shù)據(jù)，并將數(shù)據(jù)通過(guò)并行接口發(fā)送至應(yīng)用處理器。

ADAS系統(tǒng)中CrossLink用于雷達(dá)的橋接應(yīng)用

ADAS還需要昂貴的圖像信號(hào)處理(ISP)資源來(lái)識(shí)別對(duì)象或?qū)Ｗ⒂谔囟▽?duì)象而不是普通圖像。隨著用于決策的機(jī)器學(xué)習(xí)算法不斷發(fā)展，汽車的自動(dòng)化程度也越來(lái)越高，F(xiàn)PGA可為設(shè)計(jì)工程師提供所需的靈活性。當(dāng)決策權(quán)歸于計(jì)算機(jī)時(shí)，它必須決定如何處理道路狀況、道路上的對(duì)象，并在在任何情況下都要保證駕駛員的安全。

萊迪思ECP5擁有來(lái)自Helion Vision，GmbH的全套HDR ISP，可用于提高拍攝的圖像質(zhì)量。基于較高質(zhì)量的圖像，使用微處理器軟核即可輕松實(shí)現(xiàn)目標(biāo)識(shí)別功能。

車載信息娛樂(lè)系統(tǒng)(AIS)多屏視頻顯示

如果汽車制造商想要實(shí)現(xiàn)一套AIS系統(tǒng)為整輛汽車提供信息和娛樂(lè)服務(wù)，這就需要支持多個(gè)屏幕輸出、一個(gè)后屏攝像頭輸入以及支持移動(dòng)設(shè)備的視頻和數(shù)據(jù)輸入。

移動(dòng)處理器通常只能驅(qū)動(dòng)一個(gè)DSI顯示屏。而汽車領(lǐng)域使用各類具有LVDS、DSI或DisplayPort等接口的顯示屏。對(duì)于像LVDS這樣的傳統(tǒng)顯示接口，ECP5可以將DSI轉(zhuǎn)換為L(zhǎng)VDS，并確保輸出分辨率與顯示屏兼容。ECP5還支持DisplayPort(DP)和Embedded DisplayPort(eDP)接口的顯示屏。對(duì)于不支持DSI的處理器，CrossLink可以通過(guò)橋接來(lái)驅(qū)動(dòng)DSI顯示屏。設(shè)計(jì)工程師還可以使用MachXO器件支持多個(gè)顯示屏，并且使用HDMI汽車ASSP從移動(dòng)設(shè)備輸入視頻。

客戶應(yīng)用實(shí)例研究

萊迪思的客戶使用ECP5 FPGA實(shí)現(xiàn)了類似的解決方案。客戶的產(chǎn)品提供鳥瞰全景視野解決方案，同時(shí)處理圖像數(shù)據(jù)并提供硬件加速。該解決方案使用安裝于車身上的4個(gè)攝像頭(前、后和兩側(cè))。視頻數(shù)據(jù)經(jīng)過(guò)處理和無(wú)縫拼接可提供汽車周圍的全景圖像。

基于ECP5的環(huán)繞式視野應(yīng)用框圖

如上圖所示，一片ECP5即可代替多個(gè)ARM處理器實(shí)現(xiàn)的鳥瞰全景視野功能。所有4個(gè)攝像頭捕獲的圖像都經(jīng)過(guò)處理與合并，在ISP的幫助下，如白平衡、魚眼校正和除霧功能，可實(shí)現(xiàn)一整套的360度全景環(huán)繞視野功能。這款解決方案可以在汽車制造階段安裝或作為后裝市場(chǎng)產(chǎn)品添加。

每個(gè)攝像頭提供720p模擬高清圖像。最終的環(huán)繞式全景視野解決方案的清晰度是1080p 60 fps。設(shè)計(jì)工程師使用一片低成本、低功耗ECP5 FPGA替代了多個(gè)ARM處理器。同時(shí)需要一個(gè)低端ARM處理器進(jìn)行初始校準(zhǔn)和視頻編碼。

總結(jié)

在許多行業(yè)中，F(xiàn)PGA的靈活性已被證明是非常有價(jià)值的。在汽車市場(chǎng)，F(xiàn)PGA可以幫助解決先進(jìn)的娛樂(lè)和安全系統(tǒng)與移動(dòng)處理器之間的不匹配問(wèn)題。這種商業(yè)模式具有明顯的優(yōu)勢(shì)，讓汽車制造商能夠使用來(lái)自智能手機(jī)領(lǐng)域經(jīng)過(guò)大量市場(chǎng)驗(yàn)證的產(chǎn)品，并迅速適應(yīng)汽車領(lǐng)域不斷變化的需求。

FPGA在其他領(lǐng)域也能發(fā)揮作用。FPGA已經(jīng)開始出現(xiàn)在電機(jī)控制等應(yīng)用中，證明對(duì)于汽車行業(yè)也是有用的?？梢钥隙ǖ氖牵灰嚨碾娮酉到y(tǒng)繼續(xù)發(fā)展，ADAS等系統(tǒng)繼續(xù)推動(dòng)無(wú)人駕駛汽車進(jìn)步，設(shè)計(jì)工程師就需要將更多的傳感器集成到這些系統(tǒng)中。這將推動(dòng)不斷變化的市場(chǎng)對(duì)能夠?qū)崿F(xiàn)攝像頭、傳感器、視頻和更高速連接的FPGA的需求。