WAIC面壁分论坛现场:高通如何面向智能体AI打造全栈技术架构
7月19日,面壁面高通公司全球副总裁、分论中国区研发负责人、坛现通何体IEEE Fellow徐晧博士出席“端侧AI创新和行业发展论坛”,场高并发表《智能体AI时代:计算架构与模型效率的智能造全栈技持续创新》主题演讲。
7月19日,术架2026年世界人工智能大会正在进行中,面壁面高通公司全球副总裁、分论中国区研发负责人、坛现通何体IEEE Fellow徐晧博士出席“端侧AI创新和行业发展论坛”,场高并发表《智能体AI时代:计算架构与模型效率的智能造全栈技持续创新》主题演讲。
徐晧博士指出,术架端侧的面壁面AI应用拥有非常广阔的前景,并系统性阐述了智能体浪潮对终端计算架构带来的分论范式变革。他指出,坛现通何体随着手机使用场景从单轮对话迈向多轮交互、再迈向智能体调度,设备所需的Token处理量正以十倍量级递增——从一万、十万到百万级,因此端云协同处理十分重要。为此,高通针对持续运行始终在线工作负载、持续的传感器数据处理和系统性协同需求,面向智能体AI打造新一代设备架构,并与面壁智能等合作伙伴持续推动在端侧模型领域的合作。

以下是演讲全文;
非常高兴和大家分享高通在端侧AI方面所做的硬件,软件,算法和系统开发以及生态合作。
这支视频带我们简单回顾了我们使用手机这一终端的方式,从最开始简单的交互,到今天支持智能体的手机。同样,能够运行智能体的终端品类多种多样,从最小的智能耳机到千瓦级的数据中心,高通不同的硬件平台可以为这一系列的智能终端提供支持。很早之前,我们就注意到面壁在端侧的布局,我们双方有很多的契合点。
接下来,我们看一下为什么端侧这么重要。这里呈现的是一个简单的统计,可以看到不同终端的市场规模在几十亿量级。大多数人现在都很注重数据中心这类大规模训练,但实际上端侧的AI应用也拥有非常广阔的前景。
可以看到,手机从简单的单轮对话、到多轮对话,再到运用智能体,其所需的token量是以十倍量级往上增加的,从一万、十万到百万级。比如,在手机端使用龙虾或者智能体要用到的token数量非常之大,现阶段是端云结合的解决方案,端侧小模型处理隐私性强需要实时处理的任务,云端处理深度推理和规划。将来越来越多的模型处理会在端侧来减少对数据传输和云端token运算的需求。
刚刚面壁的同事也介绍了,端侧模型在未来一至两年内,可以达到与几十倍算力的云端模型同样的功能,并且这个趋势还在不断发展,越来越多的大模型将迁移到端侧,以小模型的形式出现。随着硬件算力的不断提高,这些模型在端侧也将能够轻松运行。
我们看一下,从端侧硬件设计的角度来看,有哪些最重要的设计难点。
第一,在打造智能体手机时,我们需要出色的任务规划,我们通过全新的CPU来做任务规划和控制。
第二,需要随时随地处理传感器信息。以前的手机只是用户给它指令让它执行任务,它不需要24小时判断你在干什么或者你需要什么。但是智能体手机需要主动帮助你、告诉你需要做什么,需要随时感知你在什么地方,比如它感知你现在在大会现场,它可以帮你自动静音;比如它感知你进入座舱,它会自动调节成你喜欢的温度和座椅位置。这都需要有出色的低功耗传感器处理。传感器中枢会对大量的传感器做有效地处理和融合,来精确地感知环境,给智能体提供决策信息。
第三是NPU,来提供强大的模型运算功能。我们会做一系列的模型适配和优化,有效地利用NPU高效张量计算能力来处理2B到3B量级的模型在手机端侧地运行。
此外,还需要有出色的5G或6G连接。现在大部分智能体的功能是在云端运行的,因为需要大量算力,但随着越来越多的模型在端侧运行,需要端侧、云端和边缘云的协同处理,出色的无线连接功能可以把端侧的算力和云端的算力无缝连接。
接下来让我们看看,高通如何带来最有效的硬件支持。首先是高通传感器中枢,它能够为智能体提供更多数据,24小时在线了解关于你的所有信息,为大语言模型或端侧模型的输入提供情境感知,打造个人知识图谱。另一方面,我们的NPU可为端侧提供强劲算力,例如刚才提到的20 亿、30 亿参数mini CPM大模型,都能在端侧流畅运行。
这是高通最新的旗舰移动平台第五代骁龙8至尊版,今年我们还将推出更强大的移动平台,来支持所有的端侧运算;我们的座舱芯片也具备强大算力,可支持更大规模的模型,在车上稳定运行百亿以上的参数大模型。
从应用以及模型的角度来说,我们已经完成从最初的感知AI,到现在的生成式AI和智能体AI的迭代,下一阶段我们将重点推进物理AI,实现从小模型向多功能大模型的转变。我们在算法方面也做了一系列的模型在端侧的适配,比如模型压缩和量化,长上下文的处理和增强,以及端侧模型的不断学习(on device learning)。
最后是从车到机器人的演进过渡,一方面我们要将二维的规划,升级为对三维真实世界的理解;另一方面是针对更多、更复杂的应用场景进行优化与设计。这是我们从汽车芯片到机器人芯片领域需要开展的一系列开发工作。
高通与面壁在手机和车等方面已经有很多深度合作。我们也非常期待未来联合面壁及在座的各位合作伙伴,共同推进智能手机和多种智能终端在端侧的应用和发展。谢谢大家。
(责任编辑:百科)
-
导读: 2020最好的重疾险是什么?2022最好的重疾险是什么?2022重疾险的顶端产品是谁?不需要再多加宣传了超级玛丽和达尔文,2021
...[详细]
-
3月23日,现货黄金日内跌逾4.5%,失守4300美元/盎司大关,抹去2026年全年涨幅,今年以来现货黄金年涨幅最高一度至近30%。国际大盘金价降至974元/克,重回三位数时代。记者观察发现,国内品牌
...[详细]
-
随着经济的发展与科学的进步,玻璃行业也不断进步,在研发新品种的同时也对原有的玻璃种类进行了加强。各种类型的深加工玻璃逐渐取代普通平板玻璃,在各自的应用领域大放异彩。为了能够买到质量更好、价格合
...[详细]
-
《焚香记》演出现场现场座无虚席潜江新闻网讯记者 李理) 锣声响,大幕起,伴着婉转悠扬的曲调,生旦净丑粉墨登场,一场凄凉绝唱拉开了帷幕……16日下午,全新改编的花鼓戏《焚香记
...[详细]
-
导读: 35岁女重疾险多少钱?35岁女重疾险要花多少钱?到了35岁,一般上有老下有小,压力还是蛮大的。不少朋友因此会考虑购买一份重疾险,但
...[详细]
-
据悉,用于OLED显示器生产的喷墨打印技术终将于2020年实现量产。到2020年,基底年产量约为105,000片209,000平方米),在接下来的十年内将增长近12倍,达到130万片730万平方米)。
...[详细]
-
绘就城乡协调发展新图景丨市委书记抓乡村振兴(2025.09.22
绘就城乡协调发展新图景丨市委书记抓乡村振兴2025.09.22-09.28)_南方+_南方plus9月22日至28日,广东多地市委书记聚焦“百县千镇万村高质量发展工程”,围绕乡村振兴、城乡融合与区域协
...[详细]
-
国家发展改革委23日发布消息,3月9日国内成品油价格调整以来,受美以伊冲突加剧影响,国际市场原油价格大幅上涨。为减缓国际油价异常上涨带来的冲击,减轻下游用户负担,保障经济平稳运行和社会民生,在保持现行
...[详细]
-
5月28日,滴滴开放日在大连客服职场举办。活动聚焦“体验与服务”,邀请司机、乘客、媒体、行业专家等各界代表参加,针对优化乘客出行体验、提升司机服务和收入两大核心议题,直面真实出行场景,通过司乘沉浸体验
...[详细]
-
东南网6月21日讯福建日报记者 徐士媛)在陈建福的手机里,留存着许多“上了年纪”的老照片。“这是2004年我们志愿服务团和当地孩子们的合影”&ldquo
...[详细]

明光组织企业开展六一儿童节暨爱心妈妈结对帮扶活动_
全国乒乓球锦标赛男子团体 泉州选手郑培锋九战九胜
一次志愿行 一生闽宁情
国家发展改革委对国内成品油价格采取临时调控措施
金融知识进校园 护航青春伴成长——多方联动开展校园金融教育宣传活动
