RK3568核心板ROM-5880助力360°環(huán)視系統(tǒng)破除車輛盲區(qū)

作者：時(shí)間：2023-12-21 來源：研華嵌入式

英飛凌汽車電子生態(tài)圈
- 掃碼關(guān)注
  獲取最新最全汽車電子
  技術(shù)方案與實(shí)用技巧

導(dǎo)讀

本文引用地址：http://www.butianyuan.cn/article/202312/454145.htm

隨著科技的不斷發(fā)展，可視化智能化已經(jīng)成為現(xiàn)代車輛的未來發(fā)展方向。360環(huán)視作為智慧車輛的重要功能，已經(jīng)在乘用車輛大面積使用。近期隨著社會(huì)對(duì)商用車輛，特種車輛可靠性，安全性要求的提高，相關(guān)企業(yè)也開始了360環(huán)視功能的開發(fā)。

01 車輛360環(huán)視應(yīng)用需求

相比于普通車輛，特種車輛車體高，車身長(zhǎng)，容易產(chǎn)生視覺盲區(qū)引發(fā)交通事故。某特種車輛制造商為提高特種車輛的駕駛安全性，在原出色的機(jī)械性能基礎(chǔ)上，引入新技術(shù)來實(shí)現(xiàn)產(chǎn)品智能環(huán)視。結(jié)合其對(duì)特種車輛安全性的追求，該公司決定開發(fā)集成360°環(huán)視和AI 圖像識(shí)別的車輛安全新方案。

為實(shí)現(xiàn)360°環(huán)視功能，控制主機(jī)需接入多個(gè)高清攝像頭獲取實(shí)時(shí)路況，并通過處理，將多個(gè)圖像拼接和矯正，最終呈現(xiàn)在顯示設(shè)備上。該方案進(jìn)一步引入AI進(jìn)行圖像識(shí)別，幫助駕駛員安全駕駛。然而，作為傳統(tǒng)的特種車輛廠商，該廠商缺乏360°環(huán)視和AI 圖像識(shí)別的開發(fā)能力，需要供應(yīng)商提供完整的環(huán)視AI解決方案。同時(shí)，特種車輛的作業(yè)環(huán)境復(fù)雜，故還需要采用抗震，寬溫設(shè)計(jì)抵御劇烈振動(dòng)、工作環(huán)境高低溫度的影響。

在尋求解決方案的過程中，他們了解到研華廣泛應(yīng)用于視覺相關(guān)單元ROM-5880工業(yè)級(jí)核心模塊方案。憑借研華成熟的AI算法開發(fā)能力，以及既有的車輛環(huán)視解決方案，雙方進(jìn)而確定了該項(xiàng)目的合作。

面臨的挑戰(zhàn)

■ 實(shí)時(shí)高清攝像頭接入

■ 圖像數(shù)據(jù)拼接處理能力

■ 寬溫×振動(dòng)防護(hù)

■ AI算法及算力支持

■ Arm平臺(tái)NPU的使用

■ 車規(guī)產(chǎn)品長(zhǎng)生命周期供貨

02 研華解決方案

基于上述挑戰(zhàn)，研華梳理了該公司車輛兼容型號(hào)，設(shè)備使用場(chǎng)景等需求。雙方經(jīng)過多輪交流合作，充分發(fā)揮各自領(lǐng)域的優(yōu)勢(shì)，共同設(shè)計(jì)了初步硬件方案。硬件方案采用ROM-5880核心模塊，可接入MIPI攝像頭，支持4K H.264/H.265視頻解碼，實(shí)現(xiàn)快速圖像處理。同時(shí)搭載1 Tops AI算力NPU，滿足圖像識(shí)別需求。同時(shí)ROM-5880核心板解決方案可通過3.0Grms振動(dòng)標(biāo)準(zhǔn)測(cè)試，以及支持-40~+85°寬溫，確保特種車在嚴(yán)苛環(huán)境下穩(wěn)定運(yùn)行。

此外，研華給客戶提供了前，后，左，右四顆魚眼攝像頭接入方案，通過4路AHD魚眼攝像頭數(shù)據(jù)輸入ROM-5880上的MIPI-CSI采集車輛環(huán)視圖像數(shù)據(jù)，再通過研華自研的軟件方案輸出成360°環(huán)視圖像。同時(shí)在AI方面，研華基于既有的AI視覺算法模型，由客戶提供的圖像數(shù)據(jù)庫(kù)，幫助客戶完成了從AI模型選型，到訓(xùn)練及部署的整套AI視覺方案應(yīng)用。在OS方面，研華獨(dú)有的JelinaOS滿足安全連網(wǎng)更新，快速部署模型，持續(xù)優(yōu)化迭代等需求。

研華既有的視覺算法

03 研華技術(shù)服務(wù)

除設(shè)計(jì)與開發(fā)外，研華作為一個(gè)40年企業(yè)，格外看重對(duì)交付的驗(yàn)證與持續(xù)維護(hù)。所以研華不僅如期完成了系統(tǒng)集成與高標(biāo)準(zhǔn)測(cè)試，也應(yīng)客戶的要求，提供長(zhǎng)達(dá)10年的長(zhǎng)期軟件維護(hù)服務(wù)，既確保各組件的無縫集成，也有效地保障了整體方案的可靠性和穩(wěn)定性。目前客戶已經(jīng)實(shí)裝了3000臺(tái)設(shè)備，且該項(xiàng)目也正在持續(xù)出貨中。