2024年11月18日,智慧车联开放联盟(ICCOA)2024年度会员大会在广州隆重举行。特别邀请了来自不同领域的杰出代表,以“融合创新 智享出行”为主题,分享他们在智能终端与汽车跨端连接融合的经验和见解。OPPO智行解决方案负责人兼ICCOA联盟互融工作组组长张莉带来了“意图标准化助力跨端AI大模型协作”,以下内容为现场发言实录:

尊敬的各位嘉宾,大家好!今天,我非常荣幸站在这里,与大家分享我们对于“意图标准化助力跨端AI大模型协作”的一些思考和探索。

2024年1月,我作为互融工作组组长,为我们定下了两个目标:一是探索手车互融场景下围绕AI大模型的主要需求;二是多连接。今天,我将主要针对第一个目标,与联盟伙伴们进行交流,并期待在后期展开实际工作合作。

年初,AI大模型发展迅猛,但它在智能终端的形态和功能还不明朗。经过一年的探索,我们对其阶段趋势有了更深入的认识。2024年被称为AI手机元年,但不仅仅只有手机,许多车企也同时在车辆上落地了AI大模型,如语音助手、闲聊、百科全书、文生图等功能,为用户带来了自然交互的体验。例如,用户说“我想看星星”,AI大模型能够理解用户的意图,直接打开车窗,让用户享受看星星的乐趣,而不用说“打开天窗”。在这个阶段,AI大模型为用户提供了更直接、更高效的自然交互体验。

随着用户与智能终端的交互从指令转向意图,我们认为AI大模型将进入第二阶段,即超级助理阶段。在这个阶段,AI大模型将越来越了解用户,帮助用户决策,管理应用系统。无论是手机还是车,都将成为用户的超级管家,为用户提供更加智能、便捷的服务。

在智能终端形成超级智能体之后,我们还需要各个应用作为智能体,与终端超级应用组合,共同为用户提供服务。在第三阶段,AI将重构OS,形成超级智能体+多个垂域智能体共同组合的阶段,真正实现用户需求的智能高效完成。

我们发现,随着大模型在终端的演进,用户与终端的交互将从以指令为中心转向以意图为中心。因此,今天的主题是“意图标准化驱动”。根据多个权威机构的数据显示,当前用户平均拥有约3个设备终端,预计到2030年将接近4个。95后、Z世代等用户手中拥有手机、平板、电脑等多种智能终端,而汽车也成为了最大的智能体硬件。这些用户的体验需求与传统用户有很大差异,他们更追求不同屏幕之间的连续化体验。在AI大模型时代,我们需要多智能终端共同协作,为用户提供更好的跨端智能化体验。

为了实现这一目标,我们需要通过意图标准化,为不同终端的同一用户在合适的时间、合适的设备上传递合适的服务。例如,当用户说“我想看星星”时,AI大模型需要结合端侧数据,解析用户的真实意图,并将合适的服务推送到合适的设备上。这需要各个智能终端集合端侧数据,共同解析用户意图,让AI大脑更好地判断用户最真实的需求,并提供相应的服务。在车上的时候,车打开天窗,不在车内时,手机推送看星星的推荐地点或者星星图片。

在这种情况下,我们认为意图标准化需要三大结构:意图框架、卡片和跨端账号。意图框架能够让智能终端更好地理解用户意图;跨端账号可以解决不同设备之间的账户识别问题,确保用户信息和数据的有效性;卡片则可以在更多的屏幕上为用户提供主动和被动的提醒服务及其他内容服务。

跨端意图是指不同设备之间的用户意图交互。例如,“我想看星星”中的“看星星”就是一个意图,“看”是动作,“星星”是名词。我们需要解析“星星”的具体含义,以便更好地理解用户意图。我们希望车企伙伴、手机厂商伙伴和开发者伙伴能够共同定义这一套意图标准,将其入参和出参共同定义好,这样在AI决策大脑之间进行交互和通讯时,就能得到更准确的指令,避免出现混淆。

卡片是智能设备或智能终端设备的重要特点,它能够将后台服务绑定,主动或被动地将用户所需的服务推送给用户。例如,当手机上有一张日程卡片时,用户上车后,这张日程卡片应该能够自动分享到车机上。同时,我们也要注意控制卡片和应用之间的生命周期关系,确保用户体验的一致性。

跨端账号问题也是实现意图标准化的关键。如果没有统一账号,我们就无法识别手机侧和车机侧的用户是否为同一人。因此,我们希望在这套系统下,用户可以直接在手机或车机侧授权登录,授权后手机侧和车机侧的用户将被识别为同一人。这样,我们就能更好地理解用户需求,为用户提供更智能化的服务。

在AI大模型时代,算力、数据和算法是三个重要因素。如果有统一的账号,就能针对同一用户的收集更多的数据,从而为用户带来更智能化的体验,更准确地理解用户需求,帮助用户做出决策。因此,我们希望能够实现账号共享,进一步完善这一系统。

我们希望为用户和开发者带来便利。对于用户来说,他们希望获得更加智能、便捷和随心的体验;对于开发者来说,他们希望能够精确触达用户,提高开发效率。通过手机和车的统一标准,开发者可以一次开发,多端部署,节省开发成本。

这里,我想分享一个案例。基于这套框架,语音互融是可以实现的,而且能够更好地基于用户意图执行指令。我们将在现有的ICCOA Carlink协议基础上进行迭代和升级,避免出现不兼容的情况。我们希望在下一次联盟大会上,已经有一些伙伴开始执行基于意图标准化的语音互融新方案。

最后,我想强调一下周期计划。没有计划的标准化是毫无意义的,我们之前与 vivo、小米的伙伴一起商讨,希望在2025年完成意图标准化工作,并落地一部分产品。需要强调的是,意图标准化不仅支撑语音互融,还将对未来各个智能体的打通起到重要的助力作用。

我们非常希望手机厂商、车企和应用伙伴能够共同参与意图标准的建立和产品的落地。我们后续还将组织几场与车企的研讨会,期待车企伙伴的积极参与,共同将意图标准化落地,为用户在AI大模型时代提供更好的智能、高效、简洁的体验而努力。谢谢大家!