手机有新意，还要靠AI

我们能在高铁上刷起手机，或许也要感激一位科学家曾经在火车上的工作。

1945年6月，冯·诺伊曼在开往洛斯阿莫斯的火车上，写下了著名的讲演——《EDVAC的第一份草案》。这份集结了当年技术研讨结晶的讲演影响至今：它提出了后世被称作“冯·诺伊曼结构”的计算机模型，即由处置器、存储器、控制器、输入设备与输出设备组成的电脑。经过几十年的开发，今天的计算机的复杂水平已远超当年，仅用冯·诺伊曼所定义的五个模块来归结计算机或许曾经过于简化、分歧时宜，但依旧能够从中了解系统的构建与工作。

手机就是一台超高集成度的电脑。在过去二三十年的展开里，随着需求的升级与技术工艺的提升，它也变得愈加复杂、精密、高效——手机的集成度被绝后进步，好比仅仅在SoC里，被陆续塞进去了GPU、基带、ISP、AI引擎等复杂功用，它们有些原本是分开的芯片与部件，有些则是随着时期潮流的创新技术。但更多芯片产生的复杂性，常常也让消费者感到迷惑：我要的是手机更流利、图像更精密、日用更省电，但你“捆绑销售”给我的其它东西，是让我们掏冤枉钱吗？

好比说，大家都特别喜欢看显卡的繁华，究竟它与游戏表示直接相关。科学计算、深度学习和挖矿等需求，追求显卡带来的高效算力，成了显卡的另一个展开热点。而在功用上，最繁华的当属光线追踪，它能模仿真实世界中光线的折射与反射，让游戏的画面看起来更真实。当然这个运算很耗费显卡算力，高端显卡一翻开光线追踪，游戏帧率立减50%是业界常态。

而在移动端，光线追踪也成了今年的新移动平台。

里最值得关注的功用——这是一眼就能看得到的提升，也是厂商们技术竞赛的中心，好比高通，在前几天召开的骁龙峰会上，就宣布了在第二代骁龙8里，初次引入基于硬件的光线追踪功用，并率先在《逆水寒》手游中落地实装了手机光线追踪功用，而这也是业界第一个低于5瓦的实时光追GPU，在游戏时简直不耗费任何电量。

“显卡”的好音讯一出，消费者们乐开了花——但AI中心就很难有这种好待遇。造手机芯片的巨头们，从高通苹果，到华为谷歌，年年都说我们做了新的人工智能，但它到底有什么用？

同样是在骁龙峰会上，最新的AI技术通知我们：AI简直曾经渗透进了手机的每一项功用。

AI引擎，图个啥

我们为什么需求这么多细分专用的处置器？高效、节能，是两个离不开的目的，显卡如此，AI芯片也是如此。

几年前，高通的AI中心是以“Hexagon DSP”身份呈现的，其中DSP指的是“数字信号处置”，在图像处置、数字音频等范畴有着普遍的应用。而在手机上，这颗DSP的工作更像是一块协处置器，用专用的轻量化运算处置一些特定任务，来给手机的电池减减负。举个例子，在2015年发布的一代神芯骁龙820上，Hexagon 680 DSP就是CPU的幕后功臣——它以一颗专用小核，就能完成通常需求2~3个CPU中心才干完成的视频与音频计算；在DSP里，还特地开辟了一个“低功耗岛”，用尽可能低的能耗，支持手机传感器的全天候运作；它初次引入了极为关键的张量运算（HVX）功用，也就是今天“AI中心”最关键的算力支持，也是由于有了AI中心，手机才得以完成高效的HDR摄影，正式走进计算摄影的时期。

经过几年的展开，算力更强的AI引擎曾经成了诸多功用的基础，而曾经DSP的产品定义，也早已无法精确描画这颗日益强大、复杂的引擎芯片。在今天，它曾经被扩展成为Hexagon处置器，固然它的名声还不像Kryo CPU中心、Adreno GPU中心那样响亮，但早晚也会成为消费者心中的“高通精品”——由于在你看不见的中央，手机里曾经有太多深度学习的模型，支持着你每天的运用。

好比语音助手。手机要辨认你的声音，转成文本；要经过自然言语处置，去了解言语的含义；还要经过更自然的语音合成，播报给你想要的答案。这些运算，放在AI中心上，更好。

AI引擎的升级，就是由这些需求推进的。在第二代骁龙8的全新高通AI引擎中集成的最新一代Hexagon处置器里，高通投入了更多成本：张量加速器尺寸翻倍，带来了提升超越4倍的自然言语处置性能，以及60%的能效提升。

也好比影像视频。计算摄影的底层，就是芯片上的功夫——拍照即运算。各位翻开手机相机，随意拍拍录录，手机就会明显发热，就是这个道理。计算摄影离不开ISP（图像信号处置器）的功劳，而AI引擎，则能应用深度学习的速度优势，进一步辅佐计算摄影的升级。

其实这里大有考究。一颗衔接CMOS的ISP，另一颗是AI引擎，在它们之间需求怎样的“搭桥术”，才干让分属两枚处置器的数据、指令流利互动？在第二代骁龙8中，有一项名为“Hexagon直连”的功用，便是打通AI引擎与ISP的计划示范——从中降生的全球首个“认知ISP”，能实时地中止拍摄场景辨认、优化，并实时反响在手机的屏幕上。

更特别地，手机初次具有了辨认突发事情、记载关键瞬间的才干：好比想要拍摄闪电，就需求在毫秒的时间里做出判别并拍摄，还需求面临极端的高亮度对比，这都需求手机产生认知。

另一个特殊的认知场景，则是手机拍照的背景虚化。曾经手机的背景虚化，需求借助两颗摄像头中止景深判别，但它的精度相当有限。而在今天，借助神经网络计算，能够在有限的景深信息中，算出我们需求的明晰前景、含糊后景，并用更仿真的方式做出表白。

这都是AI在中心场景下的工作——它可能不像显卡那么直接，但我们会越来越离不开它。

万事不决问AI

一颗AI引擎来跑运算，但在认真研讨了骁龙峰会后，我们发现另有玄机——在第二代骁龙8里，以至还藏了另外两颗小AI芯片，其中一颗在高通的传感器中枢里，传感器中枢同样来源于曾经DSP芯片的“低功耗岛”，担任着手机内外部的设备衔接，相比于前代骁龙，这次传感器中枢的AI芯片性能进步2倍，因而初次完成了摄像头的聪慧感知，也被用于强化好比二维码检测、眼球追踪、活动辨认等基于传感器的AI功用。

其真实今天，很多功用是传感器、输出设备与AI运算的综合实力的表示。在第二代骁龙8、第二代高通S5、S3音频芯片的共同作用下，还能完成动态空间音频、时延低到48毫秒的aptX Adaptive衔接技术、无损音乐串流——这些功用，早就是消费者想要的了，但想系统地处置问题，还得做到芯片上。

而另一颗小AI引擎，则藏在骁龙移动平台的王牌功用，5G基带里。

问题来了，怎样连基带都需求人工智能了？

事实上，很多自动化控制，曾经被写在了今天的通讯协议中。好比在几年前，Wi-Fi 6刚刚开端推行提高时，关于为什么要用Wi-Fi 6，我们常常能够拿出一个十分有压服力的理由：波束成形技术。它相当于让路由器和手机的天线打个招呼，让更多的信号定向发送给对方，而不是毫无目的的平均发射信号。当然，最终的结果就是，支持Wi-Fi 6的路由器和电脑手机，信号更强、速度更快。

其实高通在Wi-Fi范畴里不时有很多“黑科技”，好比Wi-Fi 6是双频的，而高通芯片能支持同时衔接2路2.4G信号和2路5G信号，即“实时双频Wi-Fi”或很多人熟习的“实时双Wi-Fi 6技术”。第二代骁龙8，则成为首款支持Wi-Fi 7的手机芯片，在原有的强大基础上，初次完成了支持5GHz和6GHz的高频双并发，高通称其为“高频并发多衔接技术”，在物理层面进一步大幅加速Wi-Fi衔接。

而在5G技术里，波束成形同样是一项关键技术，特别是在毫米波5G，自身信号的穿透力就差，就更依赖波束成形等增强信号的技术了——但毫米波5G可能一两百米就有一个基站，那么多的天线信号，手机就要开端犯傻了：该向哪个基站“握手”传输数据？

这就有了AI的用武之地。第二代骁龙8集成的骁龙X70，就是全球首个和唯逐一个配备5G AI处置器的调制解调器和射频系统。它经过四载波聚合（能够了解为四路信号并行下载）完成了10Gbps的5G传输速度，支持全球简直一切先进的5G网络衔接；骁龙X70初次经过内置的5G AI处置器高效地完成了AI辅助的毫米波波束管理，优化波束聚焦和方向，来处置毫米波的信号难题，并用AI来管理天线，自动优化信道、对立环境变更产生的负面影响——好比在火车或者快速路上，快速切换的基站，AI就能帮你稳住信号。

我们的AI地基

假如以技术炒作曲线（Gartner Hype Circle）的眼光去看，今天我们看起来繁华特殊的人工智能，其实早已步入了稳步提升、发明真实价值的阶段。某种水平上说，AI可能曾经完成了祛魅，变成了一个适用的、低调的东西。正如我们在骁龙峰会上察看到的，在手机上，AI就成了一项项我们每天在用的功用——拍照更分明、语音辨认更快、扫二维码更快、信号更稳定，诸如此类。实践上，业界盘绕这些痛点，推出过一个个不同的处置计划，它们可能叫DSP、NPU或者ASIC，成为某个响亮的品牌名。作为消费者，我们或答应以感激它们给了支持我们拍照、上网、听音乐的底层基础。

AI还将更有可为。好比在图像显现上，今天光线追踪曾经参与了手机，而基于人工智能的DLSS技术也曾经箭在弦上——这是一种经过人工智能运算，提升显卡在高分辨率下帧率性能的关键技术。而在未来，我们还有更多需求想象力的事情。

好比XR。第一代骁龙AR2，AI性能提升2.5倍、支持AR眼镜小于1W功耗，支持9路摄像头中止用户和环境了解，都是算力和需求的匹配。也同样采用支持Wi-Fi 7的FastConnect 7800衔接系统。我们等候AR能够成为下一代个人计算的中枢设备，但想要做得更粗笨、无线工作，那对芯片的请求要比手机还高。

今天我们面对的XR与沉浸式体验的概念，可能依旧处于雏形阶段，而XR未来也更需求AI的支持与创新。好比说有一个概念叫做“注视点渲染”，让显现芯片配合眼球追踪设备，它同样也是传感器、AI芯片与图形芯片的密切配合。而这可能就是AI以后的常态——集成在芯片里的AI引擎无处不在，AI的用武之地也越来越多，芯片之间的配合与衔接，成了进步效率的必定选择。

AI就是这么“结果导向”——它就是要满足我们各种各样的需求。也正是我们的需求，在推进着高通这样的公司，盘绕人工智能、深度学习锻炼，设计更高效的芯片、算法与开发接口，让整个系统高效地运转起来。在骁龙峰会里，我们不只需热繁华闹地看着处置器和GPU的漂亮数据，偶尔关注一下AI，或许也能让你对未来更有等候。