首页 > 原创笔记 > 原创笔记 > 用AI重构手机交互 OPPO要打造会看、会听、会说、做得快的AI手机

用AI重构手机交互 OPPO要打造会看、会听、会说、做得快的AI手机

发布时间:2024-10-18 17:13:26

伴随着AI技术的快速发展,AI在手机上的应用也向端侧化、主动化、多模态演进。各手机厂商纷纷投入巨资打造更易用的AI手机。

2024 年 10 月 17 日, 2024 OPPO 开发者大会在杭州启幕。OPPO官宣 AI 新战略,并集中展示了各项AI新成果以及全新升级的ColorOS 15操作系统。

OPPO软件工程事业部总裁唐凯在会上表示:“ AIOS是AI手机的关键组成部分,我们认为AIOS会经历三个阶段:从第一阶段的系统应用AI化(AI for System),到第二阶段的系统AI化(System for AI),再到第三阶段的AI即系统(AI as System)。”

 

AI将重构手机的交互方式

自年初提出 AI 手机战略以来,OPPO 致力于成为 AI 手机的贡献者与普及者,目标是让前沿的 AI 技术从实验室走进用户生活,为用户打造最佳 AI 手机体验。而为达成这个目标,OPPO对交互范式,计算范式和开发范式进行了重构。

对此,OPPO AI中心产品总监张峻在发言中表示:“随着AI随着AI在模型、算力、数据、服务生态等领域的持续演进。Ai将和硬件平台、系统架构、应用交互进行深度的融合,应用级的AI正在向系统级的AI演进。”她强调AI将重构手机的交互方式。AI可以把原来传统的图形交互、触控交互、自然语言交互融合在一起,并结合视觉的理解能力,任务的编排能力,打造更加直接一步到位的多模态交互体验。

在交互范式重构方面,OPPO 推出全新的 SenseNow 智慧框架,实现了 “直觉、简单、好用” 的交互体验。该框架集成自主研发的语音多级唤醒和个性化识别技术,语音唤醒和识别准确率达到 97% 以上。

同时,通过多模态理解让 AI 拥有看的能力,通过检索增强多模态理解技术实现了图文混合检索,可识别 1000 多种主体比如说景点、人物、动植物、美食等。以景点为例,OPPO采集了全国三a级以上超过16,000个景点超百万级的数据,来专项进行图搜增强的训练。因此可以对景点进行精准的识别,并且还能够提供跟它相关的背景信息,历史故事等内容。生成式语音合成框架使 AI 能模拟真人说话语气和节奏,支持 20 多种个性化音色。全新的智能助理小布支持超过 1800 项用机指令,用户可通过简单语音指令完成手机设置、应用等操作。

在计算范式重构方面,端云协同的大模型矩阵架构提升了计算效率。而OPPO 也在自主训练大模型方面不断积累,自研安第斯大模型在 SuperCLUE 榜单中安全、智能体和数学子榜上斩获第一,总榜取得国内第二的成绩。此外,OPPO还与国内众多大模型厂商深度合作,如与阿里云协作提升性能和效率。在端侧计算方面,与芯片厂商联合研发端侧 LoRA 架构,突破硬件资源瓶颈,实现多个大模型在端侧部署。同时推出 AI 私密计算云,采用端云协同的硬件级 TEE 可信计算技术,确保计算安全可信。

在开发范式重构方面,OPPO 推出手机行业首个智能体开发平台并对全行业开放。该平台提供低门槛、零代码的开发工具,帮助开发者快速构建和部署智能体应用。而通过与百度云、火山引擎、支付宝等合作,提供丰富 API 和端云协同架构,支持智能体在不同场景高效运行,降低 AI 开发技术门槛,加速从概念到产品落地过程。

 

ColorOS 15 与 AI 的融合

全新 ColorOS 15是此次大会另一个引人瞩目的亮点,聚焦流畅、AI、设计、易用性等方面,带来了耳目一新的体验。

首先是流畅性大幅提升。这背后是系统从底层到用户层的全面重构,并带来流畅双引擎。“极光引擎” 引入并行绘制框架,实现动画连贯丝滑;“潮汐引擎” 则通过芯片级性能优化,提升流畅与续航。

AI 交互的升级实现了诸多好用易用的新功能。比如:“一键问屏”功能就整合多个贯穿全系统的 AI 能力。它涵盖了:识屏问答、资讯问答、制定攻略、出行买票、一拍即问。小布助手可以理解屏幕内外内容,并根据识别的内容,快速提供准确的回答、建议,而且支持内容的连续追问,甚至可以发出指令,例如修图文件转换格式等。OPPO也特意在现场演示了这个功能,任意拍张照片,即可通过语音询问照片相关各种细节。此外,一键AI修图也很出彩,当你隔窗拍美景时,它可以AI去反光,超远距离拍摄时,可以AI增强像素,运动抓拍可以AI去拖影,AI消除路人也无需圈选,一键即可消除所有路人。

新系统在设计与易用性上也进行了优化。在设计上以易简设计哲学为基石,从自然光影中汲取灵感。围绕易用体验,新增“相册可逆化编辑”(照片美化不满意可一键恢复原片)、与iOS的类原生互传、实况照片Live Photo等功能,以及全新升级的流体云、自由窗口体系等功能,进一步提升了系统的易用性与便捷性。

ColorOS 15于10月17日开启内测,将首发搭载于OPPO Find X8与一加13新品,11月将陆续启动老机型正式版升级计划。

OPPO还在大会上宣布,开放云测服务、新机适配和隐私自动检测服务,降低应用开发调试成本;应用更新能力缩短更新链路。升级「OPPO 有数」服务,开放 OS 数据能力赋能开发者。此外,OPPO的智能体开发平台也吸引了众多开发者,提供统一服务库、优化开发环境等,最快 3 天可完成一套服务的开发、接入和上架。

原创笔记更多>>

日产2026款Navara在澳大利亚公布售价,起售价37413美元,共推四款车型 理想汽车将推出全新L9 Livis版,售价55.98万元 捷豹路虎将于2月9日在印度泰米尔纳德邦工厂启动极光车型组装 韩系车1月在美销量创纪录, 同比增长7.7% 小马智行与摩尔线程正式宣布达成战略合作。双方将聚焦L4级自动驾驶技术落地与规模化应用 起亚确认2026款Niro取消插电式混合动力车型 MINI马来西亚推出三款全新JCW车型 优奇无人物流车在富士康郑州工厂完成PVT下线 沃尔沃汽车2025年营收下滑11%,利润大跌99% 全新奔驰S级即将发布,CEO称其为车型历史上最大更新之一 保时捷多款纯电车型接入特斯拉超充网络 2025年欧洲车市:电气化车型销量大涨,中国品牌份额翻倍 2025年美国十大畅销电动汽车榜单发布:Model Y蝉联榜首,多款EV销量受政策退坡冲击 2025年中国乘用车市场销量已突破3010万辆的历史高位,新能源渗透率跨越51%的门槛 美国多家汽车经销商完成所有权变更 涉及八州十余宗交易 一场岛屿争端,为何让欧洲车企股价集体雪崩? 小鹏发布P7+与G7增程版 搭载5C快充及VLA 2.0 AI系统 岚图汽车与华为引望深化合作 朱江明解答:2026零跑如何冲刺100万销量 祛魅与新生:2025智能驾驶告别狂欢,驶入责任深水区 2025我被奔驰闭环了,在冰雪划出时间的形状 单月狂卖2.2万辆,一度躺进ICU的蔚来被全新ES8救活了? 比亚迪海豹08谍照!定位旗舰级轿车,配BYD最新技术,1季度亮相 聚势 向新 神龙要做新一轮合资车企的价值定义者 破局“油电同智”,上汽大众以双线智能化升级迎战2026产品大年! 百万销量筑基,2026上汽大众全面焕新反攻 12月SUV销量出炉,特斯拉一台车卖了6万多台 比亚迪王朝再放大招!宋Pro长续航版11.98万起,9系双旗舰来袭 拆解2025年度五大现象级神车,看懂中国汽车的“权力更迭” 2025年销量21万台,北京现代,缺少“爆款”车型是软肋