OPPO重构系统级AI体验,明年将深耕多模态和个性化
创始人
2024-10-18 21:28:43
0

10月17日,OPPO开发者大会(ODC24)在杭州开幕,AI和Color OS15成为当天的重头戏。

OPPO软件工程事业部总裁唐凯表示:“ AIOS是AI手机的关键组成部分,我们认为AIOS会经历三个阶段:从第一阶段的系统应用AI化(AI for System),到第二阶段的系统AI化(System for AI),再到第三阶段的AI即系统(AI as System)。面向AI的新未来,我们将继续保持开放的合作态度,与行业领先者密切协作,为用户打造最佳 AI 手机体验。”

而当前,OPPO AI正在对系统进行AI化重构,包括交互范式,计算范式和开发范式的重构。

在交互范式重构方面,OPPO推出全新的SenseNow 智慧框架,让AI真正实现了“听得清、看得懂、说得好、做得快”的多模态直觉交互体验。

SenseNow 智慧框架集成OPPO自主研发的语音多级唤醒和个性化识别技术,实现语音唤醒和识别的准确率达到97%以上。多模态理解让AI拥有看的能力,是SenseNow 智慧框架的核心,检索增强多模态理解技术的使用,让OPPO AI实现了图文混合检索,支持1000多种主体的识别,涵盖景点、美食、人物等。生成式语音合成框架的使用,让AI可以模拟真人说话的语气和节奏,并支持超过20种个性化音色,带来更自然的语音交互体验。同时,SenseNow智慧框架还让OPPO AI可以融合语音、文本和图片等不同类型的信息源,理解用户的复杂意图,完成跨应用的无缝操作。全新小布将支持超过1800项用机指令,让用户只需要简单的语音指令,就可以完成对应的手机设置或应用操作。

OPPO AI中心产品总监张峻透露,OPPO通过SenseNow框架实现了“边看边说”的功能。表面上看这只是一个细微的体验提升,但背后的技术路径完全不同。传统AI交互通常是单一的——要么“看”,要么“说”,但OPPO的一键问屏功能可以做到边看边说,实现同步多模态的交互。这意味着用户在浏览内容时,可以立即询问或发出指令,AI可以实时响应,而不再需要用户在不同模态之间来回切换操作。

而实现这一点的背后有着复杂的分流决策和信息融合理解技术。系统需要同时处理多种输入源,如视觉信息和语音指令,然后对这些输入进行协同处理。OPPO的目标是让AI助理像真人助理一样,能够“边看、边说、边做”,这种无缝的体验背后涉及相当高的技术门槛。

在计算范式重构方面,OPPO端云协同的大模型矩阵架构,大幅提升计算效率,重构了AI时代的计算范式。OPPO致力于在自主训练大模型的技术积累,不仅突破传统计算的算力瓶颈,更专注于计算效率的提升。在最新一次的SuperCLUE榜单中,OPPO安第斯大模型在安全、智能体和数学子榜上都斩获第一,总榜取得国内第二的卓越成绩。

除了不断打磨自主训练的安第斯大模型之外,OPPO秉承开放合作、携手共赢的理念,与国内众多大模型厂商通力合作, 力求把最好的AI体验带给用户。与阿里云等合作伙伴的协作,提升了AI在这些领域的性能和效率。特别是针对垂域模型能力,OPPO在个性化和高效模型调度方面表现突出。

在端侧计算方面,硬件资源的瓶颈制约了端侧大模型的部署。OPPO与芯片厂商联合研发了突破性的端侧LoRA架构,以一个基座模型和多个动态加载小模型的全新架构,大幅降低了手机内存的峰值占用,实现了多个大模型在端侧部署时硬件资源瓶颈的突破。端云协同的多垂域大模型矩阵,让OPPO AI拥有针对用户的不同场景提供最合适的专业大模型服务的能力。全新的智能决策模型路由,通过对用户提供的信息进行多模态理解,并将其精准分流至对应的专家模型。例如系统可以识别用户上传的照片是数学试卷还是人物照片,并提供相应的解题或动态查询服务,实现高效的个性化调度。

OPPO还全新推出AI私密计算云,采用端云协同的硬件级TEE可信计算技术,确保云侧与端侧的计算同样安全可信,任何人包括OPPO在内都无法获取用户数据。这一技术为用户提供了兼具高效与安全的AI体验。

张峻在接受采访时也表示,明年OPPO会在多模态和个性化方向深耕,同时端云协同也将是重点架构。

在开发范式重构方面,OPPO推出了手机行业的首个智能体开发平台,并正式对全行业开放。该平台提供低门槛、零代码的开发工具,帮助开发者快速构建和部署智能体应用,促进智能体生态的繁荣。通过与百度云、火山引擎、支付宝等合作,OPPO为开发者提供丰富的API和端云协同架构,支持智能体在不同场景中的高效运行。该平台不仅降低了AI开发的技术门槛,还加速了从概念到产品落地的过程,推动AI技术的普及与创新。

相关内容

大数据时代,我们需要怎样的...
大数据时代,我们需要怎样的AI+教育?7月5日,“人工智能通识教育...
2025-07-06 18:42:26
前海开源深圳特区精选股票A...
金融界2025年7月6日消息,前海开源深圳特区精选股票A(0117...
2025-07-06 12:44:29
智能门锁预算3500元+用...
快科技7月5日消息,随着物联网与人工智能技术的迭代,智能门锁市场渗...
2025-07-05 21:13:22
约翰斯·霍普金斯大学研发新...
IT之家 7 月 5 日消息,据新华社今日报道,美国约翰斯・霍普金...
2025-07-05 21:12:58
钢材产量同比增长2.1%!...
记者今天从中国钢铁工业协会了解到,1—5月,在政策利好、原燃料价格...
2025-07-05 18:43:20
台州黄岩:AI培训师助力银...
老花镜与手机屏幕交映,智慧银发与前沿科技对话。在浙江台州黄岩,的A...
2025-07-05 18:42:29

热门资讯

原创 2... #春日生活好物种草季#近年来,笔记本电脑市场迎来技术爆发期,尤其在手机厂商跨界入局后,轻薄本在性能、...
AMD锐龙AI 9 HX 37... 2024年6月3日,AMD正式发布全新的锐龙AI 300系列处理器。该系列处理器一经发布就引发大家的...
骁龙本这么猛?联想YOGA A... 在人人都是自媒体的时代,一部手机可以解决出镜拍摄问题,而商务出差、大量码字、图像处理等需求用笔记本则...
5个AI模特生成软件推荐 当前AI模特生成软件市场提供了多样化的解决方案,以下是几款备受推崇的工具: 触站AI:强烈推荐!...
2023年CentOS与Ubu... CentOS与Ubuntu的市场格局与技术特性探讨 在服务器操作系统领域,CentOS与Ubuntu...
苹果macOS 15.1:允许... 苹果公司在其最新的macOS 15.1版本中,推出了一项引人注目的新功能——允许用户将Mac App...
原创 苹... 前言 IQUNIX在做好看的桌面产品上,一直都给我留下非常深刻的印象。而且早期和苹果产品的设计风格...
原创 华... 想在竞争残酷的市场中发力,必须要带来一些激进的卖点,但是随着功能特性的提升,硬件也必须要进行给力才可...
原创 华... 在2024年这个被誉为"AI元年"的关键时刻,随着生成式AI的流行,各家手机厂商都在积极备战AI手机...