软件定义汽车之下，融合交互将引领下一代智能汽车变革 ​

燃油车时代，汽车的核心属性无非从动力性能、主被动安全、驾控感受等维度出发，因此发动机、变速箱、底盘才会被称为汽车的“三大件”。但汽车新四化浪潮下，软件定义汽车赋予了汽车更强的能力，尤其是高阶智能辅助驾驶技术、智能座舱将被新增为升级核心。而AR-HUD功能主要为将汽车核心信息、外界信息、智能导航、生活娱乐等多种信息投射在前挡风玻璃上，成为车辆信息融合交互的最终入口，是车辆实现智能化、网联化的重要构成，未来将为驾驶员提供全新驾驶体验，引领下一代智能汽车融合交互变革。

驾驶员在驾驶过程中最大的需求就是对路况信息的掌控，AR-HUD整合摄像头、雷达、高精度地图等车辆获取的信息，继而在前挡风玻璃上实现箭头导航、人像指引等功能，并对事物(车或人)进行标记，并实时生成图像。 同时通过车内传感器捕捉驾驶员眼睛位置，即使在高速及颠簸路面也能对对成像画面进行实时调整，保障显示的清晰和稳定。

AR-HUD的关键在于实现真正实景融合的丰富信息，其对于空间定位要求很高，需要精确到车道级的定位信息。并在获取图像后快速运算，在毫秒级的时间内生成图像。对软件算法以及硬件要求非常高。同时在渲染层面AR-HUD图像需要在任何车速下保持实时渲染的稳定性，避免出现驾驶员眩晕感。所以AR-HUD的软件算法需要同时具备眼球捕捉、图像矫正、图像识别与变形、画面防抖、空间坐标显示等一系列和光学对应的算法积累，以及图形图像的处理运算方式。以及与导航和高精度定位等一系列的配合。因此想要HUD实现真正的AR实景融合效果，不仅对HUD的光学设计提出极高的要求，软件也是ARHUD成像效果保证的重要环节，软件的持续升级是ARHUD提升驾驶体验的关键因素。  

由锐思华创自研的AR-HUD软件捆绑成AR Generator ™ SDK，由AR渲染引擎、AR投影矫正模块、支持地图SDK的数据接口，支持DMS与AR Camera的图像数据，AR空间坐标模块、核心数据融合模块组成。通过在车机或域控制器上嵌入AR Generator® SDK，接入Map或HD Map的SDK数据、ADAS核心数据融合模块，经由AR渲染引擎、ML光学补偿矫正最终将画面显示在挡风玻璃上。主要功能：基于人工智能进行的AR显示调整、AR导航、车道警告系统（LDW）、行人检测（PCW）以及前车防撞（FCW)等功能。

光学系统实时校正与AR图像引擎SDK

支持梯形失真校正、几何和光学校正、弱光增强或环境光校正

视图规划和坐标转型

用于嵌入式平台的基于OpenGL的图形引擎

基于ADAS传感融合的AR图形引擎SDK

基于ADAS的实景融合显示架构（LDW/FCW/PCW/BSD/ACC/etc）

透视图像修正算法

基于视觉传感的3D图像实时重建

基于ML/DL的人机交互系统

深度识别算法：眼盒、车道线、情绪、视线、语音、手势

基于5G物联与高精地图与高精地图的AR云平台

基于机器学习的行为预测交互算法

除此之外AR Generator SDK支持以最小的工作量定制 HUD或AR HUD应用，便于整合各种来源数据，同时适用于Linux系统和Android OS 系统，具有低算力，几乎无延时的优异性能，可实现实时将路面信息投射在前挡风玻璃。

多种HMI画面及场景，支持多种皮肤切换，带来更酷炫的驾驶体验，如赛道模式、可爱模式等等，未来随着智能驾驶的发展，可支持接入更多丰富的应用，如人脸识别停车付费等等。

目前锐思华创关于汽车行业软件开发过程和提升软件能力的标准化流程管理审核认证ASPICE认证正在准备中，基于锐思华创国际化的产业布局，印度班加罗尔算法和软件开发中心及长沙嵌入式软件开发中心两地协同的软件团队，锐思华创计划将在2023年通过该项认证审核，未来将通过平台化的AR软件，构建多场景AR产品开发落地生态圈。