WAIC面壁分论坛现场:高通如何面向智能体AI打造全栈技术架构
7月19日,面壁面高通公司全球副总裁、分论中国区研发负责人、坛现通何体IEEE Fellow徐晧博士出席“端侧AI创新和行业发展论坛”,场高并发表《智能体AI时代:计算架构与模型效率的智能造全栈技持续创新》主题演讲。
7月19日,术架2026年世界人工智能大会正在进行中,面壁面高通公司全球副总裁、分论中国区研发负责人、坛现通何体IEEE Fellow徐晧博士出席“端侧AI创新和行业发展论坛”,场高并发表《智能体AI时代:计算架构与模型效率的智能造全栈技持续创新》主题演讲。
徐晧博士指出,术架端侧的面壁面AI应用拥有非常广阔的前景,并系统性阐述了智能体浪潮对终端计算架构带来的分论范式变革。他指出,坛现通何体随着手机使用场景从单轮对话迈向多轮交互、再迈向智能体调度,设备所需的Token处理量正以十倍量级递增——从一万、十万到百万级,因此端云协同处理十分重要。为此,高通针对持续运行始终在线工作负载、持续的传感器数据处理和系统性协同需求,面向智能体AI打造新一代设备架构,并与面壁智能等合作伙伴持续推动在端侧模型领域的合作。

以下是演讲全文;
非常高兴和大家分享高通在端侧AI方面所做的硬件,软件,算法和系统开发以及生态合作。
这支视频带我们简单回顾了我们使用手机这一终端的方式,从最开始简单的交互,到今天支持智能体的手机。同样,能够运行智能体的终端品类多种多样,从最小的智能耳机到千瓦级的数据中心,高通不同的硬件平台可以为这一系列的智能终端提供支持。很早之前,我们就注意到面壁在端侧的布局,我们双方有很多的契合点。
接下来,我们看一下为什么端侧这么重要。这里呈现的是一个简单的统计,可以看到不同终端的市场规模在几十亿量级。大多数人现在都很注重数据中心这类大规模训练,但实际上端侧的AI应用也拥有非常广阔的前景。
可以看到,手机从简单的单轮对话、到多轮对话,再到运用智能体,其所需的token量是以十倍量级往上增加的,从一万、十万到百万级。比如,在手机端使用龙虾或者智能体要用到的token数量非常之大,现阶段是端云结合的解决方案,端侧小模型处理隐私性强需要实时处理的任务,云端处理深度推理和规划。将来越来越多的模型处理会在端侧来减少对数据传输和云端token运算的需求。
刚刚面壁的同事也介绍了,端侧模型在未来一至两年内,可以达到与几十倍算力的云端模型同样的功能,并且这个趋势还在不断发展,越来越多的大模型将迁移到端侧,以小模型的形式出现。随着硬件算力的不断提高,这些模型在端侧也将能够轻松运行。
我们看一下,从端侧硬件设计的角度来看,有哪些最重要的设计难点。
第一,在打造智能体手机时,我们需要出色的任务规划,我们通过全新的CPU来做任务规划和控制。
第二,需要随时随地处理传感器信息。以前的手机只是用户给它指令让它执行任务,它不需要24小时判断你在干什么或者你需要什么。但是智能体手机需要主动帮助你、告诉你需要做什么,需要随时感知你在什么地方,比如它感知你现在在大会现场,它可以帮你自动静音;比如它感知你进入座舱,它会自动调节成你喜欢的温度和座椅位置。这都需要有出色的低功耗传感器处理。传感器中枢会对大量的传感器做有效地处理和融合,来精确地感知环境,给智能体提供决策信息。
第三是NPU,来提供强大的模型运算功能。我们会做一系列的模型适配和优化,有效地利用NPU高效张量计算能力来处理2B到3B量级的模型在手机端侧地运行。
此外,还需要有出色的5G或6G连接。现在大部分智能体的功能是在云端运行的,因为需要大量算力,但随着越来越多的模型在端侧运行,需要端侧、云端和边缘云的协同处理,出色的无线连接功能可以把端侧的算力和云端的算力无缝连接。
接下来让我们看看,高通如何带来最有效的硬件支持。首先是高通传感器中枢,它能够为智能体提供更多数据,24小时在线了解关于你的所有信息,为大语言模型或端侧模型的输入提供情境感知,打造个人知识图谱。另一方面,我们的NPU可为端侧提供强劲算力,例如刚才提到的20 亿、30 亿参数mini CPM大模型,都能在端侧流畅运行。
这是高通最新的旗舰移动平台第五代骁龙8至尊版,今年我们还将推出更强大的移动平台,来支持所有的端侧运算;我们的座舱芯片也具备强大算力,可支持更大规模的模型,在车上稳定运行百亿以上的参数大模型。
从应用以及模型的角度来说,我们已经完成从最初的感知AI,到现在的生成式AI和智能体AI的迭代,下一阶段我们将重点推进物理AI,实现从小模型向多功能大模型的转变。我们在算法方面也做了一系列的模型在端侧的适配,比如模型压缩和量化,长上下文的处理和增强,以及端侧模型的不断学习(on device learning)。
最后是从车到机器人的演进过渡,一方面我们要将二维的规划,升级为对三维真实世界的理解;另一方面是针对更多、更复杂的应用场景进行优化与设计。这是我们从汽车芯片到机器人芯片领域需要开展的一系列开发工作。
高通与面壁在手机和车等方面已经有很多深度合作。我们也非常期待未来联合面壁及在座的各位合作伙伴,共同推进智能手机和多种智能终端在端侧的应用和发展。谢谢大家。
(责任编辑:娱乐)
-
滁州网讯近日,交通银行滁州分行成功落地滁州市首笔“免申贷”业务,为本地小微企业滁州市小鹿妈妈生物科技有限公司以下简称“小鹿妈妈”)核定500万元纯信用授
...[详细]
-
《战地风云 6》及《战地风云 禁区冲突》"爆破据点"内容更新已于 6 月 9 日正式上线。本次更新带来全新重制地图与经典竞技模式的回归,为玩家提供更丰富的战术对抗体验。经典地图重制,"开罗市集"正式登
...[详细]
-
最推荐的网上买保险的平台,要过哪几关?8月榜单给出慧择的答案
导读: 保险需求真实且普遍,但大量需求被卡在了决策环节。新京报《保险怎么选不踩坑—
...[详细]
-
玻璃隔风透光、性能稳定,各种类型由于使用场合不同而具备不同的特性,适用范围非常广。我们在挑选玻璃时,除了关注价格以外,还应对其种类和性能有一定了解,扬长避短,才能够找到更适合使用的材料。我们收集资料编
...[详细]
-
“我要寄快递,帮我打开申通。”现在只需对着AI版支付宝“阿宝”,简单说句话就能唤起申通快递,开启AI寄递新体验。7月7日,支付宝正式上线AI开放平台,并且同步开启邀测。申通快递首批入驻支付宝AI生态,
...[详细]
-
新华社成都9月2日电 记者日前从成都理工大学获悉,由该校牵头建设的高频多普勒监测阵列已正式投入运行。该阵列凭借超大空间覆盖范围,将为探索圈层耦合机理、提升地震等自然灾害监测预测能力提供新的观测平台。这
...[详细]
-
2026最新宠物医疗、意外、责任类保险全维度测评 百强口碑优质产品榜单汇总
导读: 2026最新宠物医疗、意外、责任类保险全维度测评 百强口碑优质产品榜单汇总
...[详细]
-
玻璃是目前使用较广泛、应用范围较广的无机非金属材料,能够应用于建筑、日用、艺术、仪表等领域,种类十分丰富。除了常用的钢化玻璃、印花玻璃以外,还有光学玻璃、调光玻璃等对技术要求较高的类型。本篇文章中我们
...[详细]
-
导读: 小孩刚刚来到这个世界没多久,对大人习以为常蓝天白云小鸟,都充满求知欲和探索欲。父母一不注意,就容易磕磕碰碰,烧伤烫伤,儿童意外险就
...[详细]
-
育碧关闭温尼伯工作室和贝尔格莱德工作室 新一轮重组裁员380人
育碧裁员还在继续,新一轮重组导致大约380名员工被裁掉。近日,育碧官宣的裁员和关闭工作室如下:育碧温尼伯工作室关闭,工作室裁员65人育碧贝尔格莱德工作室关闭,约100名员工被解雇育碧巴塞罗那工作室裁员
...[详细]

百年人寿重疾险,百年人寿重疾险怎么样
国产GPU“四小龙”下一步拼什么
《Stupid Never Dies》今秋登陆PS5/PC 地牢动作RPG
玻璃期价上涨压力大,行业资讯
毛利缩水?这款玻璃瓶杏仁露帮经销商跳出价格战泥潭!
