ADAS多種傳感器融合帶來了信息處理的挑戰
Jeff?Van?Washenova?(CEVA?AI和CV市場營銷與商業開發事業部?高級總監)
本文引用地址:http://www.104case.com/article/202004/412539.htm1 汽車ADAS的多種傳感器融合
隨著主動安全功能成為汽車電子中的關鍵要素,圍繞車輛周圍安裝以保護人員安全的傳感器將持續增長。為了實現主動安全功能和高水平自主駕駛,車輛將會需要多個攝像頭、雷達和LiDar。除了傳感器出現增長之外,融合這些傳感器信號以獲取準確和可靠的車輛周圍環境的模型也很重要。這些曾經僅在高檔汽車中出現的電子系統正在遷移到幾乎所有車輛上。消費者需求和更嚴格的車輛安全等級要求,推動了這一發展趨勢。
除了車輛中的傳感器數量增長之外,這些傳感器內的處理運算不僅利用傳統形式的算法(計算機視覺),還利用基于AI的算法以作配合。AI正在進入車輛中的幾乎每個傳感器和電子模塊中,范圍包括自然語言處理到目標檢測和分割。
2 對芯片IP的挑戰
這些發展趨勢帶來了一些挑戰。隨著這些主動安全功能擴展到所有的車輛上,汽車業界要求這些解決方案必需高效、靈活和可擴展。由于AI不斷遷移到這些傳感器中,因此客戶需要能夠進行高效處理的IP產品;但是由于技術的創新速度超過了典型電子模塊的開發周期,因此這些IP還必須具有靈活性,因而,客戶需要能夠適應這種創新變化的IP產品。
除此之外,從運算的角度來看,各類型傳感器具有不同的運算需求,所以解決方案必須靈活處理這些不同類型的運算。一個示例是汽車后部的倒車攝像頭,你需要使用深度學習算法,以及能夠處理傳統計算機視覺算法的處理器。
從硬件方面來看,這帶來了挑戰,也需要能夠與硬件協同工作,經過優化,以便在這些硬件上高效運行軟件開發工具。
3 CEVA的解決方案
芯片IP企業CEVA專注面向汽車電子技術和下一代車輛中之新興技術,這些技術用于主動安全到信息娛樂。目前CEVA擁有一系列IP產品組合,面向計算機視覺、AI、雷達、LiDar、傳感器融合、Car2X通信(DSRC/C-V2X)和音頻處理應用。
其中,CEVA SensPro是業界首個高性能傳感器中樞DSP架構,旨在處理情境感知設備的復雜傳感器處理工作負載。SensPro可以高效地應對汽車、機器人、AR/VR、語音助手、移動設備和智能家居設備中的現代智能系統生成的傳感器數據的巨大增長,滿足業界對專用處理器的需求。這些傳感器包括攝像頭、雷達、LiDAR、飛行時間(ToF)裝置、麥克風、慣性測量單元(IMU),以及任何其他可以生成用于創建情境感知設備之數據的傳感器。
除了SensPro,CEVA處理器還可以在低功耗嵌入式解決方案中以高效的方式運行神經網絡。CEVA NeuPro-S是一款靈活且可擴展的解決方案,具有可以同時滿足傳統計算機視覺和AI加速需求的組件。它還能夠隨著深度學習中的創新而成長,并可以處理現今正在開發的新方法。
為了進一步發展這個平臺方法,CEVA提供一款稱為CEVA深度神經網絡(CDNN)的軟件框架,可以將神經網絡優化為適用于CEVA產品組合的低功耗嵌入式系統。
(注:本文來源于科技期刊《電子產品世界》2020年第05期。)
評論