2021年5月20日,致力于亞太地區(qū)市場的領先半導體元器件分銷商---大聯(lián)大控股宣布,,其旗下世平推出基于恩智浦(NXP)S32V234的雙目立體視覺解決方案,,可應用于高級駕駛輔助系統(tǒng)(ADAS),。
ADAS作為實現(xiàn)自動駕駛的過渡階段,,可以幫助駕駛員避免碰撞,,從而大幅減少交通事故,,近年來備受關注,。目前,,較為熱門的ADAS應用當屬前方防撞系統(tǒng)(FCW)與車道偏移系統(tǒng)(LDW),,它們可偵測到周圍可能會引發(fā)事故的車輛及行人或預測車道偏移,以實現(xiàn)預防意外事故的功能,。但這兩項應用受限于視覺技術尚不成熟,,僅能針對特定的物件進行測繪,限制了其應用范圍,。
由大聯(lián)大世平推出的基于NXP S32V234雙目立體視覺解決方案,,可顯著提高物體識別率以及識別種類,從而進一步完善ADAS領域的相關應用,。
圖示1-大聯(lián)大世平推出基于NXP S32V234雙目立體視覺解決方案的展示板圖
雙目立體視覺即通過雙目的概念建立物體深度的新維度,,并配合光學焦距設計,可使物體的距離識別更加精確,。該項技術可應用于前車偵測與防撞,、車道偏移、號碼與標志識別,、行人偵測等,。
本方案主要針對前車偵測與分辨,系統(tǒng)通過專屬的雙目立體視覺算法建立三維空間,,當兩顆鏡頭捕捉到影像后,,根據(jù)視差值進行算法流程分析,即可計算出車輛距離(視差值越大距離越近,,反之則越遠),。
圖示2-雙目立體視覺偵測視差原理示意圖
本方案的主平臺來自NXP的第二代視覺處理器系列產品S32V234,可支持計算密集型的圖像處理應用,。傳感器采用了Sony IMX224,,在道路實測中可達到50米的偵測距離。同時借助S32V234 APEX視覺加速器所量身打造的NXP eIQ Auto套件與深度學習框架,,也進一步提升了分辨率與檢測速度,。經實測顯示,該方案的執(zhí)行速度可達到每秒27幀(27FPS)。
此外,,本套方案還提供了一套Sky Eye雙目立體視覺ADAS產品開發(fā)原型與技術資源,,可令開發(fā)者快速上手應用,縮短開發(fā)周期并專注于算法開發(fā),,以設計出高水平的ADAS產品,。
圖示3-大聯(lián)大世平推出基于NXP S32V234雙目立體視覺解決方案方塊圖
核心技術優(yōu)勢:
增加深度維度,可識別物體多,,應用前景廣闊,;
鏡頭相聚30cm擴大視差效果,可偵測更遠車輛(50米),;
周邊配置齊全:多媒體界面(HDMI),、以太網、異步收發(fā)傳輸器(UART)接口,;
物體識別速度快,,準確度高;
可快速上手深度學習套件,。
方案規(guī)格:
主芯片MPU規(guī)格(NXP S32V234):
搭配4顆Quad Cortex-A53高效能處理器,,最高主頻為1GHz;
搭配ISP圖形處理器,、APEX視覺加速器,、GPU圖形加速器等核心;
ISP圖形處理器提供HDR,、色彩轉換,、白平衡、自動曝光等技術,;
- APEX視覺加速器由64個小型運算器組成,,可提高約8倍運算性能;
- GPU圖形加速器(GC3000),,運算速度高達800 MHz,。
提供4MB內部內存與DDR3/DDR3L/LPDDR2外部內存;
提供H.264影像解碼與編碼技術(8-12bit),;
提供SD card,、Ethernet等周邊接口;
符合車用安全規(guī)范ISO 26262標準與車輛安全等級ASIL的要求,。
鏡頭模組Camera Module規(guī)格(Sony IMX224):
提供最高分辨率為1280(H)x960(V)共123萬像素,;
提供最大禎數(shù)率120 frame/s;
提供10 and 12 bit數(shù)位類比轉換器,;
提供低光源時良好的高分辨率彩色圖像,;
符合AEC-Q100 2級,。
外部內存External Memory DDR3規(guī)格(MT41K256M16TW-107):
最高運行時脈為 933 MHz;
儲存容量為512 Byte ,;
操作電壓為1.283至1.45 V ,;
操作溫度為0至95度。
電源管理集成電路PMIC(PF8100/PF8200)規(guī)格:
提供7個高效能降壓轉換器,;
提供4個線性穩(wěn)壓器,;
提供監(jiān)視器監(jiān)控機制;
符合ISO 26262標準與車輛安全等級ASIL-B的要求,。
低靜態(tài)電流同步降壓控制器DCDC規(guī)格(NCV881930):
工作頻率為410 KHz,,具有同步功能;
提供穩(wěn)定的工作電流30μA,;
提供熱關斷(TSD)機制,;
符合AEC-Q100與PPAP標準。