瑞薩電子與上海交大計(jì)算機(jī)系成功舉辦項(xiàng)目群啟動交流會

瑞薩電子作為全球微控制器供應(yīng)商，產(chǎn)品包括模擬器件、功率半導(dǎo)體和嵌入式處理器等。在中國市場，瑞薩電子與眾多本地客戶建立了長期戰(zhàn)略合作伙伴關(guān)系，以推動汽車、物聯(lián)網(wǎng)、工業(yè)及基礎(chǔ)設(shè)施行業(yè)的發(fā)展。近年來，瑞薩電子在實(shí)現(xiàn)持續(xù)的高速增長的同時(shí)，持續(xù)加大研發(fā)投入并根據(jù)中國市場的需求來精準(zhǔn)的研發(fā)相關(guān)產(chǎn)品，力求使新產(chǎn)品更貼合中國市場與客戶的需求。

今年九月底，瑞薩電子全球銷售及市場本部副總裁賴長青、技術(shù)系統(tǒng)和解決方案事業(yè)部總監(jiān)王均峰、工業(yè)自動化高級總監(jiān)徐征及相關(guān)人員拜訪了上海交通大學(xué)計(jì)算機(jī)科學(xué)與工程系，并與系主任吳帆教授、副系主任孔令和、約翰·霍普克羅夫特計(jì)算機(jī)科學(xué)中心副主任金海明等11人進(jìn)行了深入的交流。

上海交大計(jì)算機(jī)系歷史悠長、積淀深厚，近年來科研產(chǎn)出增長迅猛、成績斐然，吳帆主任希望未來持續(xù)采取多種方式推動雙方合作，探索與構(gòu)建校企之間務(wù)實(shí)共贏的創(chuàng)新合作模式。賴長青副總裁表達(dá)了對上海交大計(jì)算機(jī)系科教團(tuán)隊(duì)與科研成果的高度贊賞并非常榮幸能與之合作，以目前進(jìn)行中的項(xiàng)目層面合作為起點(diǎn)，在瑞薩電子后續(xù)的產(chǎn)業(yè)拓展中，尋求更大范圍的合作機(jī)會。

項(xiàng)目介紹

01  嵌入式人工智能（e-AI）for RZ-T2/N2系列芯片

在這個(gè)項(xiàng)目中，我們將至力于在基于Cortex-R52內(nèi)核的MPU芯片上實(shí)現(xiàn)運(yùn)行輕量級機(jī)器學(xué)習(xí)模型的技術(shù)R-ETE（Renesas-Embedded Training Engine面向瑞薩嵌入式設(shè)備的訓(xùn)練引擎）。這項(xiàng)技術(shù)在業(yè)界首次將機(jī)器學(xué)習(xí)技術(shù)與Cortex-R52內(nèi)核作了深度的優(yōu)化，可以使用少量的內(nèi)存資源高效的運(yùn)行AI模型，從而為客戶端的應(yīng)用帶來更智能的決策能力。這一技術(shù)的突破將為工業(yè)實(shí)時(shí)控制與通訊、監(jiān)控、預(yù)測和優(yōu)化復(fù)雜生產(chǎn)和制造過程提供了新的工具和便利。

按照合作計(jì)劃，瑞薩更高性能的基于Cortex-A55和Cortex-R52多核異構(gòu)的MPU上將布署業(yè)界流行的輕量級深度學(xué)習(xí)推理及訓(xùn)練引擎，比如TersorFlow Lite、MNN、NCNN等等。探索通過強(qiáng)化學(xué)習(xí)和聯(lián)邦學(xué)習(xí)等機(jī)器學(xué)習(xí)技術(shù)，賦能機(jī)器人智能控制，工業(yè)伺服的控制系統(tǒng)以及廣泛地應(yīng)用于生產(chǎn)設(shè)備的日常預(yù)測性維護(hù)和過程質(zhì)量控制等場景。

02  RZ-V MPU AI目標(biāo)檢測NAS方案（AI人工智能目標(biāo)檢測神經(jīng)網(wǎng)絡(luò)架構(gòu)搜索）

瑞薩RZ/V系列芯片是帶有AI加速的高性能MPU，不僅搭載了多核的ARM Cortex-A55核，還配備了瑞薩獨(dú)有的AI算法加速模塊（DRP-AI），能夠在超低功耗的條件下達(dá)到最佳的AI算法加速效果。通過與上海交大合作，以瑞薩RZ/V MPU為硬件基礎(chǔ)，用Iterative One-shot NAS搜索算法軟件訓(xùn)練框架與嵌入式MPU平臺相結(jié)合。硬件芯片通過將系統(tǒng)資源利用率、功耗、時(shí)延等數(shù)據(jù)實(shí)時(shí)反饋用于NAS算法模型訓(xùn)練，不僅能精準(zhǔn)的生成嵌入式適應(yīng)的神經(jīng)網(wǎng)絡(luò)模型，還將RZ/V系列芯片的系統(tǒng)資源利用率發(fā)揮到極致。這將極大推動瑞薩AI MPU在工業(yè)制造、智能監(jiān)控、機(jī)器人技術(shù)以及其他領(lǐng)域的發(fā)展。

03  基于RZ/Five（RISC-V）和RZ/G2UL MPU（ARM）的矽璓（XiUOS）智能終端

在這個(gè)項(xiàng)目中，基于ARM Cortex-A55 1.0GHz的RZ/G2UL和RISC-V 1.0 GHz的RZ/Five兩款微處理器的智能終端產(chǎn)品，我們將與上海交通大學(xué)進(jìn)行深度合作，開發(fā)將瑞薩芯片中支持的Linux系統(tǒng)與上海交大的矽璓（XiUOS）開源操作系統(tǒng)進(jìn)行適配，構(gòu)成了松耦合異構(gòu)智能系統(tǒng)。通過靈活的可插拔技術(shù)高效的管理4G、LoRa、協(xié)處理器組件，顯示組件，并通過以太網(wǎng)、RS485、CAN等接口聯(lián)接工業(yè)物聯(lián)網(wǎng)設(shè)備、支撐工業(yè)物聯(lián)應(yīng)用，實(shí)現(xiàn)智能化的“全面感知、泛在互聯(lián)、實(shí)時(shí)認(rèn)知、精準(zhǔn)調(diào)控”。此平臺將充分利用瑞薩RZ/G2UL，RZ/Five處理器的高性能、高可靠、易擴(kuò)展的特性，和矽璓操作系統(tǒng)的松耦合架構(gòu)，豐富的工業(yè)物聯(lián)網(wǎng)“控，知，感，聯(lián)”框架，相信這將為中國客戶在工業(yè)物聯(lián)網(wǎng)應(yīng)用上帶來更便利的選擇。