ADAS多種傳感器融合帶來了信息處理的挑戰(zhàn)
Jeff?Van?Washenova?(CEVA?AI和CV市場營銷與商業(yè)開發(fā)事業(yè)部?高級總監(jiān))
本文引用地址:http://2s4d.com/article/202004/412539.htm1 汽車ADAS的多種傳感器融合
隨著主動安全功能成為汽車電子中的關(guān)鍵要素,圍繞車輛周圍安裝以保護人員安全的傳感器將持續(xù)增長。為了實現(xiàn)主動安全功能和高水平自主駕駛,車輛將會需要多個攝像頭、雷達和LiDar。除了傳感器出現(xiàn)增長之外,融合這些傳感器信號以獲取準確和可靠的車輛周圍環(huán)境的模型也很重要。這些曾經(jīng)僅在高檔汽車中出現(xiàn)的電子系統(tǒng)正在遷移到幾乎所有車輛上。消費者需求和更嚴格的車輛安全等級要求,推動了這一發(fā)展趨勢。
除了車輛中的傳感器數(shù)量增長之外,這些傳感器內(nèi)的處理運算不僅利用傳統(tǒng)形式的算法(計算機視覺),還利用基于AI的算法以作配合。AI正在進入車輛中的幾乎每個傳感器和電子模塊中,范圍包括自然語言處理到目標檢測和分割。
2 對芯片IP的挑戰(zhàn)
這些發(fā)展趨勢帶來了一些挑戰(zhàn)。隨著這些主動安全功能擴展到所有的車輛上,汽車業(yè)界要求這些解決方案必需高效、靈活和可擴展。由于AI不斷遷移到這些傳感器中,因此客戶需要能夠進行高效處理的IP產(chǎn)品;但是由于技術(shù)的創(chuàng)新速度超過了典型電子模塊的開發(fā)周期,因此這些IP還必須具有靈活性,因而,客戶需要能夠適應(yīng)這種創(chuàng)新變化的IP產(chǎn)品。
除此之外,從運算的角度來看,各類型傳感器具有不同的運算需求,所以解決方案必須靈活處理這些不同類型的運算。一個示例是汽車后部的倒車攝像頭,你需要使用深度學(xué)習(xí)算法,以及能夠處理傳統(tǒng)計算機視覺算法的處理器。
從硬件方面來看,這帶來了挑戰(zhàn),也需要能夠與硬件協(xié)同工作,經(jīng)過優(yōu)化,以便在這些硬件上高效運行軟件開發(fā)工具。
3 CEVA的解決方案
芯片IP企業(yè)CEVA專注面向汽車電子技術(shù)和下一代車輛中之新興技術(shù),這些技術(shù)用于主動安全到信息娛樂。目前CEVA擁有一系列IP產(chǎn)品組合,面向計算機視覺、AI、雷達、LiDar、傳感器融合、Car2X通信(DSRC/C-V2X)和音頻處理應(yīng)用。
其中,CEVA SensPro是業(yè)界首個高性能傳感器中樞DSP架構(gòu),旨在處理情境感知設(shè)備的復(fù)雜傳感器處理工作負載。SensPro可以高效地應(yīng)對汽車、機器人、AR/VR、語音助手、移動設(shè)備和智能家居設(shè)備中的現(xiàn)代智能系統(tǒng)生成的傳感器數(shù)據(jù)的巨大增長,滿足業(yè)界對專用處理器的需求。這些傳感器包括攝像頭、雷達、LiDAR、飛行時間(ToF)裝置、麥克風(fēng)、慣性測量單元(IMU),以及任何其他可以生成用于創(chuàng)建情境感知設(shè)備之?dāng)?shù)據(jù)的傳感器。
除了SensPro,CEVA處理器還可以在低功耗嵌入式解決方案中以高效的方式運行神經(jīng)網(wǎng)絡(luò)。CEVA NeuPro-S是一款靈活且可擴展的解決方案,具有可以同時滿足傳統(tǒng)計算機視覺和AI加速需求的組件。它還能夠隨著深度學(xué)習(xí)中的創(chuàng)新而成長,并可以處理現(xiàn)今正在開發(fā)的新方法。
為了進一步發(fā)展這個平臺方法,CEVA提供一款稱為CEVA深度神經(jīng)網(wǎng)絡(luò)(CDNN)的軟件框架,可以將神經(jīng)網(wǎng)絡(luò)優(yōu)化為適用于CEVA產(chǎn)品組合的低功耗嵌入式系統(tǒng)。
?。ㄗⅲ罕疚膩碓从诳萍计诳峨娮赢a(chǎn)品世界》2020年第05期。)
評論