东软集团：AR Creator SDK构建用户极致体验

2023年7月11—12日，由盖世汽车与慕尼黑电子展共同主办的2023智能座舱车载显示与感知大会上，东软集团汽车电子导航技术总监（中国）张鑫指出，AR-HUD逐渐成为车载导航的主流选择，但其仍存在一些用户痛点亟待解决：一是缺乏距离感，贴合性差；二是指引缺乏方向感；三是延迟过高；四是画面抖动。

张鑫表示，东软AR Creator通过业界领先的车载软件技术解决用户痛点，提供辅助驾驶、AR地图导航、车联网生态应用和车路协同等完备的功能体验。通过预测算法提供更贴合的引导效果，加之防抖和延迟补偿算法，帮助用户达成驾驶安全和驾驶体验的双重提升。同时，随着汽车厂商自研自产成为行业新趋势，东软AR HUD SDK产品采用面向服务的跨平台产品设计方案，支持深度定制，赋能客户软件自研，将为行业创造更大的发展空间和价值。

张鑫|东软集团汽车电子导航技术总监（中国）

以下为演讲内容整理：

AR-HUD发展趋势

可以看到，随着技术不断发展，车载导航从C-HUD、W-HUD过渡，目前AR-HUD已然成为市场的主流选择。这是因为AR-HUD的出现，将“驾驶员在驾驶车辆时，需要通过文字、声音符号等途径接收信息，再将这些信息转化为可以理解语义”的过程进行了简化。所以AR-HUD作为具有强大生命力的产业，未来仍会继续向前发展，并且随着全息技术的加持，也会变得更加直观与生动。

当然，随着新技术的出现，AR-HUD依然存在痛点亟待解决：一是传感器信号或地图信息等多种因素导致贴合效果差，无法准确识别正确的形式路径；二是传感器信号的延迟，倾角带来的起伏等待，造成用户的体验感较差。

用户最初可能对需求并不明确，但在过程中会逐渐清晰化。比如在硬件层面上追求画面更亮、范围更大、分辨率更高等。而在软件层面上，需要根据每款车型特点呈现定制化、个性化效果。同时，需要不断丰富功能场景，提高用户体验，从而更好的凸显产品价值。

东软AR Creator

东软AR Creator通过领先的软件算法解决AR-HUD用户的痛点。首先最基础的部分是位姿计算和三维注册，这也是从事AR-HUD业务人员都要面对的问题。我们的优势在于深耕汽车电子领域30余年，在导航产品研发过程中积累了丰富的车载定位经验，能够最大程度的预测和消解传感器信号抖动等问题。

在三维注册部分，我们利用地图信息，重新构建一个虚拟的三维坐标系统，并将获取的车内传感器信号、导航信号、车身信号等叠加进来。就像开启一扇扇小窗，能够看到外面的虚拟世界，以此达成对现实路况的精准还原。

此外，东软AR Creator在辅助驾驶、AR地图导航、车联网生态应用和车路协同中设计了较多的场景，并希望不断引入新元素，为用户提供更丰富、完备的功能体验。只要信息中包含位置，我们就会将其转化成AR性质，合法合规的提供给用户。

图源：演讲嘉宾材料

在AR HUD制作时，我们会考虑坐标信息，例如传统导航在路口只有一个坐标点，其误差较大，我们会与导航供应商进行交流，获得轨迹点。如果没有轨迹点，我们也具备EHP的开发资质，通过接入EHP数据，计算出更精确的轨迹信息。

AR Creator利用车内各种IMU数据、轮速脉冲信号、车身转向角信息来做一个预测信号。这项技术并非一个新颖的概念，但我们对应用场景做了调整，后续也会加入新的传感器，以及加入图像捕捉等视觉技术，重新对位置进行提取。

图源：演讲嘉宾材料

AR SDK赋能车载全场景体验

如今的市场已经不再单纯的是车厂委托软件开发商进行开发的模式，更多时候软件定义汽车意味着，车厂希望自己拥有主动权来定义汽车，而软件供应商只提供基础软件包。采用软硬分离的解决方案，针对不同车型进行定制化开发。

东软在此市场发展趋势下推出了AR Creator SDK产品，提供跨平台并面向服务的产品设计、核心算法原子级API、可配置的功能级服务、UI引擎和3D渲染引擎，最重要的是我们也提供定制化的开发服务，详尽的SDK API文档和技术支持，帮助车厂拥有更多自由和选择权，在快速迭代缩短OTA周期的同时，也能快速适配不同的光机硬件。

AR Creator的部署较为方便，不仅可以部署在车机端，也可以部署在光机或其他域控中，可以用其构建AR场景，形成最终的产品。AR Creator更与安全性“息息相关”，东软AR Creator可以跨越多种OS，不仅支持Linux、安卓系统，同时也支持Autosar和QNX部署。在系统中可以开发自己的APP，也可以单独划分出一个操作系统专门为HUD的屏幕进行渲染。

目前车内屏幕处于上升阶段，未来可能会呈现下降的趋势，也就是“大道至简”，所有屏幕会融为一体，而一旦信息配备了坐标，或许就需要通过AR的方式将其放入车内。

所以我们在开发AR Creator时，希望不仅仅是把它用于HUD，只要是车内屏幕里需要带有位置信息的数据，都可以利用AR Creator SDK来统一实现，同时还会接入车内其他生态信息，实现丰富的车内全场景AR的体验。

（以上内容来自东软集团汽车电子导航技术总监（中国）张鑫于2023年7月11—12日，由盖世汽车与慕尼黑电子展共同主办的2023智能座舱车载显示与感知大会发表的《AR Creator SDK赋能车载全场景AR用户体验构建》主题演讲。）