燃油車時(shí)代，汽車的核心屬性無非從動(dòng)力性能、主被動(dòng)安全、駕控感受等維度出發(fā)，因此發(fā)動(dòng)機(jī)、變速箱、底盤才會(huì)被稱為汽車的“三大件”。但汽車新四化浪潮下，軟件定義汽車賦予了汽車更強(qiáng)的能力，尤其是高階智能輔助駕駛技術(shù)、智能座艙將被新增為升級(jí)核心。而AR-HUD功能主要為將汽車核心信息、外界信息、智能導(dǎo)航、生活?yuàn)蕵返榷喾N信息投射在前擋風(fēng)玻璃上，成為車輛信息融合交互的最終入口，是車輛實(shí)現(xiàn)智能化、網(wǎng)聯(lián)化的重要構(gòu)成，未來將為駕駛員提供全新駕駛體驗(yàn)，引領(lǐng)下一代智能汽車融合交互變革。
       駕駛員在駕駛過程中最大的需求就是對(duì)路況信息的掌控，AR-HUD整合攝像頭、雷達(dá)、高精度地圖等車輛獲取的信息，繼而在前擋風(fēng)玻璃上實(shí)現(xiàn)箭頭導(dǎo)航、人像指引等功能，并對(duì)事物(車或人)進(jìn)行標(biāo)記，并實(shí)時(shí)生成圖像。 同時(shí)通過車內(nèi)傳感器捕捉駕駛員眼睛位置，即使在高速及顛簸路面也能對(duì)對(duì)成像畫面進(jìn)行實(shí)時(shí)調(diào)整，保障顯示的清晰和穩(wěn)定。
       AR-HUD的關(guān)鍵在于實(shí)現(xiàn)真正實(shí)景融合的豐富信息，其對(duì)于空間定位要求很高，需要精確到車道級(jí)的定位信息。并在獲取圖像后快速運(yùn)算，在毫秒級(jí)的時(shí)間內(nèi)生成圖像。對(duì)軟件算法以及硬件要求非常高。同時(shí)在渲染層面AR-HUD圖像需要在任何車速下保持實(shí)時(shí)渲染的穩(wěn)定性，避免出現(xiàn)駕駛員眩暈感。所以AR-HUD的軟件算法需要同時(shí)具備眼球捕捉、圖像矯正、圖像識(shí)別與變形、畫面防抖、空間坐標(biāo)顯示等一系列和光學(xué)對(duì)應(yīng)的算法積累，以及圖形圖像的處理運(yùn)算方式。以及與導(dǎo)航和高精度定位等一系列的配合。因此想要HUD實(shí)現(xiàn)真正的AR實(shí)景融合效果，不僅對(duì)HUD的光學(xué)設(shè)計(jì)提出極高的要求，軟件也是ARHUD成像效果保證的重要環(huán)節(jié)，軟件的持續(xù)升級(jí)是ARHUD提升駕駛體驗(yàn)的關(guān)鍵因素。  
       由銳思華創(chuàng)自研的AR-HUD軟件捆綁成AR Generator ? SDK，由AR渲染引擎、AR投影矯正模塊、支持地圖SDK的數(shù)據(jù)接口，支持DMS與AR Camera的圖像數(shù)據(jù)，AR空間坐標(biāo)模塊、核心數(shù)據(jù)融合模塊組成。通過在車機(jī)或域控制器上嵌入AR Generator? SDK，接入Map或HD Map的SDK數(shù)據(jù)、ADAS核心數(shù)據(jù)融合模塊，經(jīng)由AR渲染引擎、ML光學(xué)補(bǔ)償矯正最終將畫面顯示在擋風(fēng)玻璃上。主要功能：基于人工智能進(jìn)行的AR顯示調(diào)整、AR導(dǎo)航、車道警告系統(tǒng)（LDW）、行人檢測（PCW）以及前車防撞（FCW)等功能。

光學(xué)系統(tǒng)實(shí)時(shí)校正與AR圖像引擎SDK
       支持梯形失真校正、幾何和光學(xué)校正、弱光增強(qiáng)或環(huán)境光校正
       視圖規(guī)劃和坐標(biāo)轉(zhuǎn)型
       用于嵌入式平臺(tái)的基于OpenGL的圖形引擎

基于ADAS傳感融合的AR圖形引擎SDK
       基于ADAS的實(shí)景融合顯示架構(gòu)（LDW/FCW/PCW/BSD/ACC/etc）
       透視圖像修正算法
       基于視覺傳感的3D圖像實(shí)時(shí)重建

基于ML/DL的人機(jī)交互系統(tǒng)
       深度識(shí)別算法：眼盒、車道線、情緒、視線、語音、手勢
       基于5G物聯(lián)與高精地圖與高精地圖的AR云平臺(tái)
       基于機(jī)器學(xué)習(xí)的行為預(yù)測交互算法

       除此之外AR Generator SDK支持以最小的工作量定制 HUD或AR HUD應(yīng)用，便于整合各種來源數(shù)據(jù)，同時(shí)適用于Linux系統(tǒng)和Android OS 系統(tǒng)，具有低算力，幾乎無延時(shí)的優(yōu)異性能，可實(shí)現(xiàn)實(shí)時(shí)將路面信息投射在前擋風(fēng)玻璃。
       多種HMI畫面及場景，支持多種皮膚切換，帶來更酷炫的駕駛體驗(yàn)，如賽道模式、可愛模式等等，未來隨著智能駕駛的發(fā)展，可支持接入更多豐富的應(yīng)用，如人臉識(shí)別停車付費(fèi)等等。
       目前銳思華創(chuàng)關(guān)于汽車行業(yè)軟件開發(fā)過程和提升軟件能力的標(biāo)準(zhǔn)化流程管理審核認(rèn)證ASPICE認(rèn)證正在準(zhǔn)備中，基于銳思華創(chuàng)國際化的產(chǎn)業(yè)布局，印度班加羅爾算法和軟件開發(fā)中心及長沙嵌入式軟件開發(fā)中心兩地協(xié)同的軟件團(tuán)隊(duì)，銳思華創(chuàng)計(jì)劃將在2023年通過該項(xiàng)認(rèn)證審核，未來將通過平臺(tái)化的AR軟件，構(gòu)建多場景AR產(chǎn)品開發(fā)落地生態(tài)圈。

（轉(zhuǎn)載）