隨著科技的不斷發展，可視化智能化已經成為現代車輛的未來發展方向。360環視作為智慧車輛的重要功能，已經在乘用車輛大面積使用。近期隨著社會對商用車輛，特種車輛可靠性，安全性要求的提高，相關企業也開始了360環視功能的開發。
車輛360環視應用需求
相比于普通車輛，特種車輛車體高，車身長，容易產生視覺盲區引發交通事故。某特種車輛制造商為提高特種車輛的駕駛安全性，在原出色的機械性能基礎上，引入新技術來實現產品智能環視。結合其對特種車輛安全性的追求，該公司決定開發集成360°環視和AI圖像識別的車輛安全新方案。
為實現360°環視功能，控制主機需接入多個高清攝像頭獲取實時路況，并通過處理，將多個圖像拼接和矯正，最終呈現在顯示設備上。該方案進一步引入AI進行圖像識別，幫助駕駛員安全駕駛。然而，作為傳統的特種車輛廠商，該廠商缺乏360°環視和AI圖像識別的開發能力，需要供應商提供完整的環視AI解決方案。同時，特種車輛的作業環境復雜，故還需要采用抗震，寬溫設計抵御劇烈振動、工作環境高低溫度的影響。
在尋求解決方案的過程中，他們了解到研華廣泛應用于視覺相關單元ROM-5880工業級核心模塊方案。憑借研華成熟的AI算法開發能力，以及既有的車輛環視解決方案，雙方進而確定了該項目的合作。
面臨的挑戰
● 實時高清攝像頭接入
● 圖像數據拼接處理能力
● 寬溫×振動防護
● AI算法及算力支持
● Arm平臺NPU的使用
● 車規產品長生命周期供貨
基于上述挑戰，研華梳理了該公司車輛兼容型號，設備使用場景等需求。雙方經過多輪交流合作，充分發揮各自領域的優勢，共同設計了初步硬件方案。硬件方案采用ROM-5880核心模塊，可接入MIPI攝像頭，支持4K H.264/H.265視頻解碼，實現快速圖像處理。同時搭載1 Tops AI算力NPU，滿足圖像識別需求。同時ROM-5880核心板解決方案可通過3.0Grms振動標準測試，以及支持-40~+85°寬溫，確保特種車在嚴苛環境下穩定運行。
此外，研華給客戶提供了前，后，左，右四顆魚眼攝像頭接入方案，通過4路AHD魚眼攝像頭數據輸入ROM-5880上的MIPI-CSI采集車輛環視圖像數據，再通過研華自研的軟件方案輸出成360°環視圖像。同時在AI方面，研華基于既有的AI視覺算法模型，由客戶提供的圖像數據庫，幫助客戶完成了從AI模型選型，到訓練及部署的整套AI視覺方案應用。在OS方面，研華獨有的JelinaOS滿足安全連網更新，快速部署模型，持續優化迭代等需求。
除設計與開發外，研華作為一個40年企業，格外看重對交付的驗證與持續維護。所以研華不僅如期完成了系統集成與高標準測試，也應客戶的要求，提供長達10年的長期軟件維護服務，既確保各組件的無縫集成，也有效地保障了整體方案的可靠性和穩定性。目前客戶已經實裝了3000臺設備，且該項目也正在持續出貨中。
ROM-5880?產品特性
- 基于瑞芯微RK3568四核Cortex-A55，高達2.0GHz
- 搭載1TOPS AI算力NPU
- 板載2/4GB LPDDR4內存和16/32GB存儲
- 支持1x HDMI2.0 4K, 1x signal LVDS or 1x 2ch MIPI DSI or 1x edp
- 支持4K H.264/H.265視頻解碼
- 支持2x USB3.0, 2x USB2.0, 3x UART, 14x GPIO，2x CAN
- 支持2x PCIe3.0, 1x SATA, 1x MIPI CSI, 2x Gigabit LAN
- 支持Linux和Android
