人妖 小说 蔚来汽车：基于NomiGPT的车载东谈主工智能决议
发布日期：2025-03-27 13:41 点击次数：70
2025 年 3 月 20 日，在第三届 AI 界说汽车论坛上，蔚来汽车数字座舱总监雷鸣先容，蔚来汽车座舱内的智能助理 Nomi 被界说为懂用户的心情伙伴，具有当然拟东谈主交互、贴心可靠赞理、专属心情伙伴三大脾气。其本领框架涵盖秘密安全、原子才略、异构算力等底层复古，通过多模感知大模子、主见底座、主见核心大模子及交互界面，杀青高效交互人妖 小说，具备语音免叫醒、多东谈主目田说等特色功能。
在大模子时期，Nomi 相连新本领抓续进化。团队推出多智能体框架，将座舱核心体验 agent 化，涵盖常识类、生成类、任务类等多种场景，如用车问答、情态生成、福利查询等，擢升用户体验。
雷 鸣 | 蔚来汽车 数字座舱总监
以下为演讲执行整理：
Nomi 智能助理：蔚来汽车座舱智能化的核心力量
在汽车智能化发展的海浪中，蔚来汽车积极探索鼎新，打造的数字座舱对话助理 Nomi，成为了擢升用户体验的要道一环。Nomi 被界说为"懂你的心情伙伴"，这一定位赋予了它私有的职责，即通过先进的交互本领，为用户提供当然、贴心且个性化的服务，在用户与汽车之间搭建起心情疏通的桥梁。
Nomi 具备三大核心脾气。当然拟东谈主的交互是其显赫特征之一，借助语音、视觉及多模感知本领，Nomi 或者杀青与用户当然运动的疏通，为用户带来仿若东谈主与东谈主交流般的体验。在语音交互方面，它能精确识别不同用户的声息，主见各种复杂辅导；在视觉交互上，通过私有的情态展示和灵动视窗，给以用户纯真形象的反馈，让交互充满温度。
图源：蔚来汽车
动作贴心可靠的赞理，Nomi 在车内功能操控和服务提供上进展着伏击作用。它不仅不错老练地完成车辆的各种限度操作，如窜改座椅、限度车窗、缔造导航等，还能为用户提供丰富的生存服务，如查询天气、预订餐厅、播放音乐等，自傲用户在车内的各种化需求，成为用户的给力助手。
专属的心情伴随是 Nomi 的一大亮点。它能左证用户的使用习尚和偏好，提供个性化的服务和心情照顾。无论是左证用户的样貌播放稳健的音乐，如故在颠倒日子奉上温馨的祝颂，Nomi 都能让用户感受到专属的柔顺，为漫长的路径增添乐趣。
在大谈话模子（LLM）时期降临之前，蔚来团队就已在心情体验方面进行了诸多探索与实践。从 2018 年的自界说叫醒词运转，连接推出了心情对话才略、趋承对话、灵动音色等功能，约束丰富和优化 Nomi 的服务体验。到 2024 年，Nomi 照旧具备了全舱免叫醒、一句话多辅导、记事备忘等弘大功能，在心情交互和功能杀青上走在了行业前哨，为用户带来了向上的心情体验。
跟着 LLM 本领的快速发展，Nomi 濒临着新的机遇与挑战。奈何将先进的大模子本领融入自己，擢升服务才略和交互恶果，成为蔚来团队想考的要道问题。这不仅需要在本领框架上进行鼎新，更要在居品方式适配（PMF）上作念出深入探索，以确保 Nomi 在新的本领海浪中抓续为用户创造价值。
NomiGPT 本领框架
NomiGPT 本领框架是蔚来汽车为杀青 Nomi 智能化升级而构建的核心架构，它整合了多种先进本领，旨在为用户提供更高效、智能的交互体验。该框架从底层基础到表层应用，涵盖了多个要道层面。
底层复古包括秘密安全、原子才略和异构算力。在秘密安全方面，蔚来高度疼爱大模子的安全对皆和用户秘密保护，给与先进的加密本领和安全机制，确保用户数据的安全存储与传输。原子才略层集成了丰富的基础功能，波及车辆限度、手机互联、蔚来特色服务（如家电动力贬责、生存服务等），这些原子才略为 Nomi 杀青各种化的功能提供了有劲支抓。异构算力则由云表和车端的算力共同组成，通过合理调配，为大模子的褂讪运行和高效服务提供弘大的计较保险。
中间层是 Nomi 的核心处理区域，包括多模感知大模子和主见核心大模子。多模感知大模子通过语音、面部、触控、手势等多种样貌感知用户和周围环境，蚁集丰富的信息。它不仅能识别用户的语音辅导和面部情态，还能感知车辆的情景、周围的物品以及环境信息，为后续的决策提供全面的数据支抓。主见核心大模子则稳健深度主见用户的央求，通过与多模感知大模子的协同做事，相连用户的追念、偏好和现时情境，作念出准确的决策，并将决策升沉为具体的实行辅导。
Nomi 的交互界面具备多项卓绝脾气。语音免叫醒功能让用户无需常常叫醒 Nomi，即可径直下达辅导，大幅擢升了交互服从；多东谈主目田说支抓不同音区的多个东谈主同期进行对话，禁止了传统交互的步履，使交互愈加当然运动；一句话多辅导功能让用户或者在一条辅导中抒发多个需求，Nomi 不错准确识别并按次实行，极地面提高了操作的方便性。灵动视窗则为用户提供了丰富的信息展示样貌，通过生成式交互框架，或者左证用户的需乞降场景，展示各种化的执行，如舆图导航、音乐播放信息、车辆情景等，杀青信息的多元展示。
Nomi Agents 多智能体框架是 NomiGPT 本领框架的伏击鼎新点。在这个框架中，不同的智能体承担着不同的功能，协同做事以自傲用户的各种需求。常识类 Agent 包括用车问答和大模子百科，用车问答不错解答用户对于车辆操作、信息查询等方面的问题，大模子百科则应用大模子的常识储备，为用户提供庞杂的常识和信息，如百科问答、出行攻略、学习创作等。生成类 Agent 基于大模子的才略，杀青情态生成、专属歌单生成等功能，为用户带来个性化的体验。任务类 Agent 包括探索发现、泊车助手、守卫和服务管家等。探索发现不错匡助用户发现生存好去向，解答车外事物的疑问；泊车助手或者左证用户的需求，寻找稳健的泊车场；守卫稳健归来车辆的看守信息，保险车辆安全；服务管家则基于事件自主预约服务，支抓一语下单，为用户提供方便的服务。
这些智能体通过追念、目的和行径等设施相互配合。它们具备短期追念和长期追念功能，或者记取用户的偏好和历史操作，为个性化服务提供依据；在目的方面，通过想考（COT）和自我反想（reflection），智能体不错制定合理的任求实行目的；行径设施则稳健具体的操作，如车辆限度、舆图导航、媒体播放等。
改日揣摸：AI 本领驱动下的汽车座舱变革
跟着 AI 本领的约束发展，汽车行业正迎来潜入的变革。在改日，AI-OS 将成为汽车智能化的核心操作系统。AI-OS 是面向 AI 从头策动的整车操作系统，它基于微内核构建，具备高安全、强可靠性、强及时性和高性能等特色。通过系统虚构化平台、自研核心中间件以及交融资源调度等本领，AI-OS 或者杀青车 - 端 - 边 - 云协同，买通不同功能域，构建数据闭环，为 AI 应用提供遐想的运行环境。
基于 AI-OS 的 AI Car，将为用户带来 AI 原生体验。它领有大算力、高带宽和低延长的上风，或者快速处理大都数据，杀青各种复杂的功能。同期，AI-OS 支抓车辆的抓续进化，通过软件升级约束优化系统性能和功能，自傲用户日益增长的需求。跨域交融是 AI-OS 的伏击脾气，它禁止了传统汽车系统中各个功能域之间的领域，杀青了信息的分享和协同，擢升了举座的智能化水平。
多模态端到端交互是改日东谈主机交互的发展宗旨，亦然 Nomi 抓续进化的要点。它交融了多模感知、东谈主机交互、决策才略和软硬相连等成分。多模感知让车辆或者更全面地感知用户和环境信息，东谈主机交互则长途于打造愈加当然、方便的交互样貌，决策才略使车辆或者左证感知到的信息作念出准确的判断和决策，软硬相连确保了系统的高效运行。这种多模态端到端交互方式，将为用户提供愈加智能、运动的交互体验，使车辆或者更好地主见和反应用户的需求。
在 AI 本领的支抓下，汽车座舱将成为具身智能的最好载体。汽车具备丰富的传感器和实行机构，或者与周围环境进行及时交互。通过 AI 本领，汽车不错杀青环境感知、自主决策和行径实行，具备一样东谈主类的智能步履才略。举例，车辆不错左证路况和驾驶环境自动休养驾驶方式，提供愈加安全、适意的驾驶体验。
Agent/Multi-Agent 拓荒范式及生态将在汽车规模获得庞杂应用。Nomi 的多智能体框架即是这一范式的实践体现，改日，跟着更多智能体的拓荒和应用，汽车座舱的功能将愈加丰富和个性化。不同的智能体不错左证用户的需乞降场景，协同做事，为用户提供全场所的服务。同期，这一世态的发展也将促进汽车行业与其他规模的交融，激动整个这个词产业的鼎新发展。
日韩av汽车动作 AI 的最好落地场景，具备高频永劫辰伴随和无处不在的触点的上风。Nomi 动作 AI 心情伙伴，将在这一场景中充分进展其核心价值。通过抓续的本领鼎新和优化，Nomi 将约束擢升用户体验，为用户提供愈加智能、贴心、个性化的服务。
蔚来汽车将赓续围绕 NomiGPT 本领框架，约束探索和鼎新。通过加强与其他规模的合作，引入更多先进本领，进一步擢升 Nomi 的智能化水和缓服务才略。同期，蔚来也将积极参与行业圭臬的制定，激动汽车智能化行业的健康发展，为用户创造愈加好意思好的智能出行改日。
（以上执行来自蔚来汽车数字座舱总监雷鸣于 2025 年 3 月 20 日在第三届 AI 界说汽车论坛发表的《基于 NomiGPT 的车载东谈主工智能决议》主题演讲人妖 小说。）