座舱智能化演进处于什么阶段?大模型如何赋能智能座舱?

最佳答案 匿名用户编辑于2024/03/11 14:19

4.0 至 5.0,从多模态到大模型。

1.座舱智能化演进处于什么阶段?

如果我们将汽车座舱从机械时代到智能时代的发展划分为 5 个阶段,我们认为现阶段下座 舱正处于从 3.0(以特斯拉 Model3/Y 的简配为代表)到 4.0(以理想 L9 的高配为代表) 的全面演进阶段。该阶段重要特征即视听触多模块硬件加速升级,丰富汽车座舱智能生态。

(1)座舱 1.0-2.0:最开始座舱的 1.0 时代,仅有机械仪表盘和车载收音机等寥寥数个车 载元件,座舱主要以功能性为主。行至座舱 2.0 时代(20 世纪 80 年代后),随着信息技术 革命,中控屏应运而生,可以初步显示行车信息及实现舱内控制功能,同时电气式仪表盘 广泛应用,为驾驶员提供更多辅助信息。车载 DVD 功能的出现开启了汽车座舱娱乐化属 性的重要一步。

(2)座舱 3.0-4.0:后随着汽车实现区域集成架构,高性能、高集成、高扩展性的座舱域 控制器以开始助推智能化加速。我们认为在座舱 3.0 时期(2010 年后),中控屏、液晶仪 表盘、音响等基础视听硬件,以及车灯、座椅等均得到了全方位升级;此外 Carplay 等应 用上车也开启了车机互联的时代。随后国内造车新势力不断推进座舱往 4.0 时代发展 (2020 年后),我们看到 HUD、副驾/后排屏、电子后视镜开始陆续上车,杜比音效、AI 语音及手势交互甚至 VR 眼镜等功能不断创新,快速丰富座舱智能化体验。

(3)座舱 5.0:展望未来座舱 5.0 生态,在中央集成架构下,整车智能化水平将达到一个 新的高度。我们认为随着大模型的赋能,AI 语音助手将加速转变为“AI 智能管家”,进行 深度人机情感交互。此外,参考 2023 年 CES 大会上宝马 i Vision Dee 概念车的构思:全 息投影、透明显示、车灯投影、电子墨水、裸眼 3D 等元素或进一步升级。

从上海车展看,座舱 4.0 时代加速来临

我们参加了 2023 年上海国际车展,车展中我们看到造车新势力、传统车企等新产品的展 出和发布。我们看到智能座舱的渗透已经由原先造车新势力“一骑绝尘”的方式,转换全 行业“齐头并进”,行业搭载方案转向座舱多模态升级,印证了 4.0 时代加速到来。具体 而言包括:1)视觉:车载屏幕向大屏化、多屏化、高清化的方向发展,HUD 加速上车。 2)听觉:扬声器、功放数量增加,致力于打造沉浸式听觉享受。 造车新势力:蔚来发布第二代数字座舱,搭载于 EC7、ET7、新款 ES8;理想:L7 延续 L9/L8 亮眼座舱配置,打造家庭座舱体验;极狐:20.3 英寸中控屏与副驾/仪表/HUD 多屏 交互,装载哈曼卡顿音响;广汽埃安:Hyper GT14.6 寸 2.5k 中控屏+23 个 HIFI 扬声器实 现 3D 环绕立体声场。

传统车企:宝马: X1 搭载第 8 代 BMW iDrive 操作系统,配备 10.7 寸悬浮式曲面屏及 HUD,满足驾乘者的个性化需求;大众:新车型 ID.7 VIZZION 主打智能乘坐空间,内置 15 英寸 2k 悬浮中控屏及 AR-HUD,配备哈曼卡顿音响。

2.大模型如何赋能智能座舱?

我们认为 4.0 阶段是座舱往多模态演进的时期,硬件升级>软件升级。目前多模态硬件的 堆栈背后仍是通过“语音+触摸屏”来实现控制,主要交互停留在“命令识别”层面,靠 乘客主动发起方能实现的“被动式交互”,各模态之间仍互为独立。 但我们看到,往后随着硬件逐步上车,座舱交互性和操控便捷性的重要程度逐步凸显。车 企开始探索舱内智能化交互,“语音助手”或成为核心交互载体。我们看到目前新势力在 座舱交互上已经有所突破。例如智能化领先的小鹏语音助手小 P 可以支持多指令识别、离 线响应。蔚来人车交互系统 NOMI 具有较强的学习功能和语音指令识别功能,此外还能根 据不同状况表现出相对应的情感,与车主进行简单对话。而理想的“理想同学”同样属于 可以由关键词触发,能够执行语音/手势/触控命令的初级智能 AI。

往后看大模型的落地,或将加速软件能力升级,推动座舱 5.0 人机主动式交互时代的到来。 大模型有望:(1)通过赋能语音助手对于乘客的语音语义理解能力,提升全功能操控力。 打通其在视觉、听觉、触觉等多模态应用上的操控力,形成深度的乘驾人机主动式互动体 验。(2)打造智能生态差异化,摆脱座舱同质化。通过大模型赋能语音助手或将成为“AI 智能管家”,因算法不同而具有不同的特色和功能,进而形成车企自身独特的智能化差异。

从上海车展看,大模型如何赋能座舱功能

商汤日日新大模型亮相车展,大模型接入座舱。4 月 18 日上海车展上,商汤亮相了其 “日日新 Sensenova”大模型,并展示了其中文语言模型“商量 SenseChat”以及“如 影 SenseAvatar”等与座舱的结合,我们看到通过大模型可以赋予座舱多种生成式 AI 能力, 提供包括情绪感知、智能助手、基于情感的对话、创意内容生成、个性交互等一系列功能, 应用场景也可以拓展到娱乐、办公、购物、休息等。 1) AI 数字人:根据乘客偏好设置,形成数字虚拟人与乘客进行交流,形象趋近于 “AI 座舱管家”,是乘客与车机的交互对象。 2) 信息查询强化:通过语音询问乘客可以获得具体信息查询输出,此外还包括关于 餐厅推荐、旅行路径规划、给儿童创造读物的创意性输出。 3) 图片自动生成:类似 Midjourney 可以为乘客自动生成各种各样的图片。 4) 安全识别:可以根据乘客是否登记分为嘉宾/主人,可以根据不同乘客的记录的偏 好推荐其合适的内容产品。同时具备更好的 DMS(驾驶员监测)、OMS(乘客检 测)、儿童滞留等功能体验。 5) API 接入:支持外接第三方应用,协助实现会议管理、购物、差旅等功能。

百度推出座舱产品车载 OS 和语音 SDK,文心一言于多家用户开展内测。百度 Apollo 在 上海车展前夕举办汽车智能化发布会,发布了全新升级的驾舱图产品矩阵,座舱方面百度 发布车载 OS 和语音 SDK。其中,语音 SDK 基于大模型的本地化部署,具有全双工和毫 秒级响应的优点,可以为车企提供更先进而出色的智能座舱体验。我们看到百度 SDK 突 出优势包括:(1)将一切座舱功能集成到语音助手,可以通过语音实现舱内全功能调节; (2)支持“多路对话”,不同的乘客可以在同一时间与语音助手展开交流并下达指令。目 前包括集度、吉利、长城、红旗、岚图、东风启辰等主机厂已经宣布接入基于文心大模型 的生成式对话产品文心一言(ERNIE Bot),开启自身座舱大模型的内测。 华为积极布局座舱 AI,大模型于秋季首发 M9 上落地。华为盘古大模型基于鲲鹏和昇腾算 力底座,由 NLP(中文语言)大模型、CV(视觉)大模型、科学计算大模型、多模态大 模型和 Graph(图网络)大模型 5 个模型组成。4 月 17 日车展前夕,在华为 nova11 系列 及全场景新品发布会上,余承东宣布 2023 年秋季发布 AITO 问界 M9 将搭载 AI 大模型。 其语音助手“小艺”通过领先的多模态自适应技术,针对语速、语音、文本,对用户指令 进行多维度综合判断,可以实现类似人与人的主动交流。目前“小艺”已经能够:(1)根 据日常通勤的情况自动提供通勤道路异常的提醒;(2)判断长途驾驶场景时,检测到车主 有疲劳驾驶状态主动打开座椅按摩;车内午休/通勤回家后打开自动小憩模式,记录用户喜 欢的氛围。(3)推荐适应当前车辆情况的驾驶模式;(4)停车找位的好帮手。