长城汽车：探索AI驱动带来全新交互体验

一直以来，技术变革驱动着人机交互方式的转变。AI是开启AI UI时代的驱动力。2024年3月15日，在2024第四届中国汽车人机交互创新大会上，长城汽车智能座舱体验设计专家邹瑞提到，AI UI有三大关键词：自然交互、AI原生应用与智能体。

自然交互具有多模性，用户可以通过语音、触摸、手势、视觉多种方式与车机系统进行交互。AI原生应用我们会关注两点：一是AI服务化界面，二是AI混合化服务。而智能体具备主动高效、能力扩展和可成长三大特点。

邹瑞认为，AI UI具有五大特点。一是自然化，用户与系统的交互更接近人的自然行为。二是主动化，系统根据场景主动服务用户，提供智能决策。三是专属化，系统给用户提供具有专属化个人特征的智能体，同时给用户提供更加个性化的服务。四是情感化，系统能感知用户情绪，提供不同情绪场景的服务。五是自成长能力，系统越用越好，通过学习用户的使用习惯，陪伴着我们的用户成长；也具有举一反三的能力，通过自我学习能力进行自身知识库的迭代。 

邹瑞｜长城汽车智能座舱体验设计专家

以下为演讲内容整理：

人机交互方式的变革及未来

回顾经典的科幻作品《霹雳游侠》，其中的车载机器人KITT展现了人们对未来汽车技术和人工智能交互的想象。虽然40年前的设定在当时看来是极具前卫的，但现在随着AI技术的进步，我们已经能够实现类似甚至更加先进的交互体验。这表明了科幻作品对未来的准确预测和引领作用，也反映了人类对于智能体交互的持续追求和想象。

在过去，车载人机交互主要依赖于物理按钮和旋钮等，然后进入了图形用户界面时代，为驾驶者提供了更直观、更便捷的操作体验。现在，随着AI技术的发展，我们将迎来AIUI的时代，即人工智能与用户界面的结合。这意味着驾驶者可以通过自然语言与车载智能系统进行交互，无需通过复杂的按钮或图形界面。 

图源：长城汽车

通过GPT这样的AI技术，我们已经看到了未来人机交互的一些可能性。GPT不仅能够进行自然语言处理，还具备上下文感知和对话管理能力，能够跨领域应用知识，并且能够识别用户意图并做出相应的回应，甚至还能够进行多模态交互，为用户提供更加全面、自然的交互体验。

因此，可以说AI技术已经成为人机交互领域的关键推动力量，未来我们可以期待更加智能、自然、人性化的车载人机交互体验，这将极大地提升驾驶者的安全性、舒适性和便利性。 

AI-开启AI UI的时代驱动力

长期以来，技术变革一直驱动着人机交互方式的演变。人工智能是开启AI UI时代的主要推动力量。AI UI是一种结合了人工智能技术的用户界面，旨在通过自然语言处理、机器学习、语音识别等AI技术，提供更智能、更自然的用户交互体验。基于底层的AI技术，用户可以与AI系统进行自然交互。AI UI具有三个关键词：自然交互、AI原生应用和智能体。 

图源：长城汽车

在AI UI中，自然交互是其中的一个关键词。自然交互具有多模态性，用户可以通过语音、触摸、手势、视觉等多种方式与系统进行交互。自然交互具有直觉性，系统可以帮助用户快速理解当前的场景，用户无需多余思考，仅凭直觉就能自然地操作。自然交互具有适用性，系统根据用户当前场景，提供适用的提示或服务，系统通过多模融合来达成多模态的交互接力。自然交互具有流畅性，用户交互过程无缝、连贯，用户在不同模态间切换时，交互行为自然衔接，流畅无阻。

AI UI的第二个关键词是AI原生应用，应用从基于AI向AI原生进化。基于AI指应用使用AI为用户提供新功能，而在AI原生应用中，AI被嵌入应用的核心，成为不可或缺的一部分。AI原生应用关注两个方面：首先是AI服务化界面。AI可以根据用户的行为、偏好和历史数据调整界面的视觉元素，如颜色、字体、图标等，从而为用户提供个性化的视觉体验。通过情感识别技术，AI可以感知用户情绪，并相应调整界面的视觉呈现。此外，界面具有更高的灵活性和适用性，AI根据用户的使用场景和身体特征，动态进行布局优化。其次，基于AI混合化服务使应用之间互相内置，实现功能互通、互相增能，为用户提供更丰富、更智能的服务体验。

AI与人类的交互可分为三种协作模式：嵌入模式、协同模式和智能体模式。在嵌入模式中，人类主导决策并完成绝大部分工作，而AI充当执行人类命令的工具。在协同模式中，AI的决策权明显增大，人类和AI协同工作，共同完成任务。在智能体模式中，生成式AI展现出更强的独立性，自主理解、拆解、规划和执行任务。AI更像一个自主学习的主体，完成绝大部分工作，而人类主要进行监督和评估最终结果。

随着人工智能领域的快速发展，人机协同的方式也将呈现出由人类主导到与AI共同决策，再到AI自主决策的趋势。AI UI的第三个关键词是专属懂你的智能体，其具有三个特点。首先是智能体有主动高效的特点。用户与系统交互时无需特定的提示词，可用自然语言的方式与智能体进行交互，智能体可以主动拆解任务并高效完成。智能体也能基于场景预测，推理用户需求并主动提供对应的服务。 

其次是智能体具有能力扩展的特点。智能体可以通过座舱域生态（移动设备、可穿戴设备和物联网等）进行能力扩展，与座舱互联设备的智能体进行协同，实现更智能的跨设备交互。应用间的智能体可以动态适应操作环境，以多智能体协同达到应用生态的融合。 

第三，智能体具有专属和可成长的特点。专属体现在智能体的人设、性格可随用户变化，能给用户提供个性化服务。可成长体现在智能体有自学习的能力，能够利用其学习能力来实现成长及自我完善。 

AIUI带来的交互新趋势

基于AI UI的三个关键点，将为交互体验带来新的趋势。第一个趋势是交互方式更多元化，原有交互方式经AI赋能带来更好的体验。在过去，用户可能需要在使用隔空手势前进行特定的训练，以便系统能够识别和理解手势。现在，系统能够准确地识别和理解更复杂的手势，甚至在暗光、颠簸等环境下也能保持准确性。系统能够主动适应用户的手势，针对不同用户的手势微习惯进行学习，从而实现更精准、更准确的识别。 

其次，AI在AR体验赋能方面也发挥着重要作用，例如实时对象识别和动态内容生成。系统能够实时识别并追踪用户周围的环境，为用户提供更精准和动态的AR体验，还能根据用户的偏好、实时数据和反馈，动态生成内容。 

带来的第二个趋势是交互界面的进化。自适应界面，系统能够根据用户的眼动轨迹自动调整界面布局，减少冗余信息的干扰。举例来说，当驾驶员需要导航信息时，系统可以识别驾驶员的请求，并根据当前的驾驶情况和车辆状态自动调整地图应用在界面上的显示比例。在高速公路行驶时，系统会自动隐藏地图导航的部分功能，只显示最关键的导航信息，以减少对驾驶员的干扰。当驾驶员减速或停车时，系统会恢复所有功能按钮，方便驾驶员进行其他操作。智能界面，系统根据用户所在位置，激活不同位置的智能表面，提供互动界面，从而实现更加智能化和灵活的车内环境。无界界面，用户可以通过更直观和自然的方式与设备进行交互，无需依赖传统的图形界面或物理按钮。

第三个趋势是交互的个性化和智能化。通过分析用户的数据，系统能够提供个性化的内容和服务推荐，并根据用户的特征调整界面布局和服务。例如，系统根据乘客的性别调整分区空调的温度。智能化体现在预测性交互，系统能够预测用户的需求和意图，并提前准备相应的服务或信息。

第四个趋势是交互的情感化。情感计算系统能够识别、理解、模拟和响应人类的情感，从而提供更加自然、更具有同理心的用户体验。情感识别与理解方面，系统通过分析语音、表情、文本、生理信号等数据来识别用户的情绪，理解情绪的起因、持续时间和变化趋势。 

图源：长城汽车

情感模拟和响应方面，系统可以模拟人类的情感反应，以更加人性化的方式与用户互动。举例来说，车载助手可以根据对话内容表现出同情甚至兴奋的情绪，当识别到用户的高兴或沮丧语气时，系统可以提供相应的情感共鸣和帮助。最后是情感的适应性，系统能够根据用户的情感状态和需求提供更加个性化的服务。例如，音乐推荐系统可以根据用户当前的情绪提供相应的曲目，以增强用户的体验。

总的来说，AI UI的交互体验具有五大特点：自然化、主动化、专属化、情感化和自成长。自然化指的是用户与系统之间的交互更接近人类自然行为，降低学习成本，使得交互更加直观、简单直接。主动化体现在系统能够感知和推理用户的需求，主动为用户提供服务，并根据场景提供智能决策支持。专属化则是根据用户的个人特征和偏好，系统为用户提供专属的服务体验。情感化是系统能够感知和理解用户的情绪，通过对用户情绪的分析，提供相应的情感化服务，使得交互更具有人性化和情感智能。最后，自成长能力使得系统能够通过学习用户的使用习惯和反馈，不断提升自身的性能和服务质量，同时使系统具备举一反三的能力，实现自身知识库的迭代和完善。

随着AI技术的进步，我们正站在一个新的时代门槛上，AI正在重塑与世界互动的方式。我们站在变革的前沿，面对的是挑战，更是无限的可能性。无论技术如何发展，设计始终以用户为中心，这是我们不变的初心。

（以上内容来自长城汽车智能座舱体验设计专家邹瑞于2024年3月15日在2024第四届中国汽车人机交互创新大会发表的《探索AI驱动带来全新交互体验》主题演讲。）