聯合馳晶推出基於 Lattice ECP5 的 Full HD 360度全景解決方案

1.1 研發背景: 隨著汽車工業及計算機視覺技術的發展,為了提高駕駛的安全係數,越來越多的技術被應用到汽車電子領域,傳統的倒車影像系統只能覆蓋車尾周圍有限區域,而車輛的兩側及車頭的盲區無疑增加了安全駕駛的隱患,在狹隘擁堵的路段及複雜的停車環境容易引發碰撞、刮擦等交通意外,甚至因為駕駛員視覺盲區導致後輪將兒童捲入車底等嚴重的駕駛安全事故,因此360高清3D全景無縫拼接系統應運而生。

1.2 功能簡介: 本系統需要在車身周圍安裝四個720p的高清攝像頭,通過系統主機自動合成完整的鳥瞰圖。同 時本系統基於3D VR虛擬攝像機投影技術,可根據車輛運行狀態智能切換顯示相應的視覺盲區影像,為車主準確呈現周邊真實環境以及路況信息。

1.3 應用環境: 當駕駛員需要倒車入庫、側方位停車或者在狹窄複雜路況行車時,本360全景系統不僅能夠最大程度幫助駕駛員減少視覺盲區,提高泊車行車駕駛安全,同時,本系統亦內置高清全景行車記錄儀功能,可以幫助車主實時記錄行車影像,在遭遇碰瓷或者惡意碰撞事故等關鍵時刻,本系統可為車主提供有利證據,還原事實真相,保護車主合法權益。

►場景應用圖

►產品實體圖

►展示板照片

►方案方塊圖

►360全景解碼器一體機應用

►核心技術優勢

本系統採用世界領先的ARM+FPGA硬體架構, 也就是業內領先的通用ARMCPU+專用GPU的硬體架構。 由於3D-VR圖像處理涉及十分複雜的3D建模及龐大繁冗的投影運算, 獨立的ARM系統無法承擔如此密集的運算任務,在本系統中,ARM系統主要用來實現桶形畸變矯正規劃,3D建模規劃及3D投影規劃,FPGA作為專用的GPU引擎,主要負責具體的3D投影運算及影像處理。此外,ARM系統內置的DSP,用於影像壓縮及流媒體影像記錄功能。 系統開機後,ARM系統首先為FPGA設定三維資料庫規劃表及3D投影規則表,外部四個攝像頭首先通過NVP6124B進行模數轉換及亮度/色差分離,再通過兩個交織的BT1120接口送給FPGA,FPGA將BT1120的視頻數據解交織後, 存入FPGA對應的DDR3顯存區域, 之後據ARM處理器設定的規則進行桶形畸變矯正,3D建模及投影拼接,及後續車模視角適配等,並在整個過程中統計四個攝像頭的亮度差異並完成自動亮度均衡,使四個攝像頭的圖像無縫融合為一體。 FPGA完成ARM規劃的所有3D圖像運算指令後, 輸出1路CSI接口的高清圖像到ARM系統, 解析度1080p,以完成行車DVR功能,供ARM系統進行H.264壓縮並寫入到系統的存儲介質(TF卡或者U盤)。 本系統的ARM處理器使用全志車用級別晶片T2, FPGA則採用美國Lattice半導體40nm超低功耗ECP5,該晶片由於全部採用定製的硬體並行圖像處理技術,其擁有業內首屈一指的3D圖像運算速度,擁有競爭對手無法企及的低功耗特性。 總之來說,就是相對同行及之前版本來說擁有更高的性能,更低的功耗尤其是更快的開機及反應速度。

►方案規格

1. 功耗:360全景模式+4錄視頻錄像:300mA 睡眠模式情況低於10mA 2. 磁盤容量:支持32G U盤或TF卡 3. 環境溫度:-40度到85度 4. 電壓容差:9v-36v 5. 視頻解析度:1440*960P@30FPS 6. 重力感應:BN250E 7. 喚起:左右轉向燈,遠光燈,倒車燈,雙閃,按鍵等 8. 支持安裝車型:私家車及低於18米以內的非拖車式商用車