Skip to content

OPPO多模态Agent重构手机交互:从「唤醒-响应」到「持续感知-陪伴」

2026年5月7日

📰 概要

手机AI助手,从「你唤醒我」变成「我一直在」。2026年4月26日,OPPO工程师在AICon上海分享了多模态伴随Agent:以屏幕视频流为输入,构建持续感知与主动执行能力。

传统AI助手只能被动响应单次唤醒。伴随Agent则不同——它一直在「看」屏幕,记住你的操作轨迹,在合适时机主动介入。

这套系统已在OPPO「一键问屏」和「实景问答」两款产品中落地。


🔍 解读

三种核心能力

屏幕多模态意图理解:Agent实时分析屏幕画面,理解你在做什么、可能需要什么。不同于传统助手需要你描述问题,它「看到」你在订机票,主动帮你比较价格。

时序记忆管理:手机上的操作是连续的——你上午搜索了某款产品,下午打开购物App,Agent应该「记得」并推荐相关操作。

工具执行与结果融合:Agent调用多个工具并发执行,然后将结果排序呈现给你。

为什么是范式跃迁?

传统AI助手是「问答」模式,你是提问者,助手是被动的。伴随Agent是「陪伴」模式——它主动感知你的状态,主动提出建议。


💎 深挖

隐私问题绕不开

这套系统需要持续读取屏幕内容才能工作。你的手机一直在「看着」你,你愿意吗?

OPPO的方案是将感知和处理尽量在端侧完成,减少数据上传。但实际效果如何,还需要市场检验。

和苹果Intelligence有何不同?

苹果的AI功能更多是「增强版Siri」——在特定场景下提供帮助。OPPO的伴随Agent野心更大:让AI成为你手机使用的「影子」,持续学习和预测你的行为。

什么情况不适合用?

如果你对手机隐私非常敏感,伴随Agent的持续屏幕感知可能让你感到不安。这个功能需要你主动开启,并且需要你信任手机厂商的端侧处理能力。

你该关注什么?

手机AI正在从「问答」进化为「陪伴」。这场变革的最终形态,可能是一台真正「懂你」的手机——知道你什么时候需要什么,在你开口之前就已经准备好答案。

不要孤军奋战啦!

加入微信群一起学习交流 AI

与大神一起使用 OpenClaw、Hermes、Claude Code、Seedance 2.0、GPT-Image-2 等

微信公众号

扫码关注微信公众号
私信 "加群",将自动获取微信群二维码

探索 AI 世界,掌握智能未来