或许在以前，当人与AI助手聊天时，AI响应的第一步，是先把语音转文本，再让语言模型通过文本看懂;而现在有了多模态模型，就能省掉这一步。  不要看这一小步，背后是效率提升的一大步。它带给用户最直观的感受，就是语音交互极速响应，几乎感觉不到延迟，就像和真人说话一样，AI助手能够立刻“听懂”人类语言。 为了让大家更易理解AI智能体，高通技术公司高级副总裁兼技术规划和边缘解决方案业务总经理马德嘉(Durga Malladi)在会后采访中举例说道，比如我拿起手机说：“今晚帮我订一个墨西哥菜餐厅，距离不要太远，评分要高，到店时间预计晚上7点30到8点30之间，而且得是我过去三个月没有去过的餐厅。” 要回答这个问题，智能体会调用各种模型来处理，包括位置信息、个人知识图谱等，而个人知识图谱，是存储在终端侧的用户情境信息(例如喜欢的饮食、锻炼习惯、常用联系人和消息、过往偏好历史)，从而帮助手机理解用户意图。 “每个厂商都有不同的方向来打造智能体。”马德嘉说道，高通有非常广泛的AI合作伙伴，包括Meta、IBM、Mistral、OpenAI、谷歌、智谱、腾讯、百川等。“我相信未来会出现定制的专用智能体，而高通旨在为构建高效的智能体体验，提供所需的底层软件技术支持。” 在生成式AI的表现方面，Hexagon NPU在基础大语言模型上的token生成速率提升了100%;在快速响应方面，在一些主流的大语言模型上，骁龙8至尊版的处理速度超过70 tokens/秒。除了文字和语音交互，AI助手首次可以完全在终端侧，通过摄像头“看到”用户所看到的内容，如此一来，用户可以通过相机或传感器，与AI助手实时互动。  比如吃完饭结账时，只要直接把摄像头对准收据和朋友们，AI助手就能扩展到翻译、汇率换算等相关任务，理解收据上的内容，计算每个人的分摊费用，相当高效。  除了AI助手之外，高通还在把Hexagon NPU与重新设计的AI-ISP结合，重新定义影像体验。以前，ISP会先处理图像，然后发送到NPU进行后处理。现在，NPU可以直接访问RAW原生传感器数据，在4K 60fps下实现基于AI的实时增强。 我们对AI-ISP进行优化，将ISP吞吐量提高了近35%，能效提升25%。通过这一提升，用户可以利用三个4800万像素传感器同时进行拍摄，也能实现完美的抓拍，包括拍快速移动的的宠物。  图：高通NPU支持的宠物摄影特性套件，让智能手机自动对焦跟踪宠物的眼睛。更夸张的是，手机还能观察宠物，在宠物看向镜头的一瞬间按下快门。在拍照之后，AI会继续工作，利用双摄背景虚化，智能增强细节，将照片变惊艳作品。 从移动计算中枢，到AI Hub：霸屏的好友圈里不止是手机 在当下的芯片格局下，让人惊讶的变化，似乎成了最不会让人惊讶的事情，前有Intel和AMD历史性地联手打造X86生态，后有高通自研芯片架构与好友圈技术共舞。 因为仅凭硬件，无法打造出强大的AI。就好比一辆赛车，油箱里没有油，一切都是空谈，所以高通这次基于骁龙8至尊版，也大力改进了AI软件。 高通用AI Hub软件栈，是一套帮助厂商、开发者实现最优化性能表现的工具，充分利用包括CPU、GPU和NPU在内的异构计算技术，所以无论是在手机、PC、汽车、XR任何领域的开发者，都可以用高通AI Hub实现开发自由。  在PC端。高通与微软持续合作，扩展面向Copilot+PC产品的AI功能。高通指出，PC用户90%的时间所使用的应用，都能够在骁龙X系列上原生运行，无论是“AI原生应用”还是“转译运行的应用”。高通支持数百款原生应用程序，包括Chrome、Google Drive、Photoshop、Lightroom、Express、Nord VPNs、Whatsapp、Zoom、Slack和Spotify等。   在XR端。目前骁龙赋能超过80款XR设备，高通与所有主流科技巨头OEM厂商和内容提供商合作创作，推动XR向前发展。   汽车端同样在进化。高通正在与各大汽车厂商一起，实现“AI上车”，用软件定义汽车。这次峰会现场，高通汽车产品路线图中的两款新品也一起亮相，一款是骁龙座舱至尊版平台(Snapdragon Cockpit Elite)，另一款是骁龙Ride至尊版平台(Snapdragon Ride Elite)。  值得一提的是，在汽车相关的会议环节，当理想和长城等中国汽车厂商作为一股新面孔站在舞台中央，台下的全球媒体给予了超级热烈的掌声。喝彩中，中国媒体的自豪感油然而生。外国媒体说：“为什么我们的车就只是在搞车，中国的车在搞音乐搞哲学。”对此，中国媒体同行纷纷交换意见，就喜欢看外国友人“没见过世面”的样子。  理想汽车战略采购负责人吴佐民用三个关键词介绍理想汽车。首先是「目标市场」：汽车是服务于全家人的综合空间，基于该理念，理想汽车定义了可满足用户需求的产品。第二个关键词是「电动化」。理想认为电动化有两条技术路径：REEV、HPC BEV。REEV代表增程式电动车，而HPC BEV则意味着充电12分钟即可补能500公里。第三个关键词是「AI」，特别是应用于智能座舱和自动驾驶的AI，是理想汽车投入大量精力和资源的领域。  长城汽车首席技术官吴会肖现场介绍，基于骁龙8295芯片，长城汽车工程师利用其高性能和高算力开发咖啡智能全新座舱系统Coffee OS 3和“五好”智能座舱。  长城汽车这次空运过来即将发布的摩托车，是全球唯一一台2000毫升排量水平对置8缸发动机、配备8档DCT变速箱，搭载了骁龙8155芯片，配备了摩托车行业最大尺寸的12.3英寸LCD可触控仪表盘，支持OTA远程升级和语音助手等功能。 从“至尊版”的命名不难看出，这两款骁龙汽车平台也采用了高通自研且专为汽车定制的最新一代Oryon CPU，同时配备了面向汽车应用设计的Adreno GPU、以及面向多模态AI设计的专用神经网络处理器Hexagon NPU，三大部分都完成了自研。 据高通技术公司汽车、行业解决方案和云事业群总经理Nakul Duggal介绍，与前代产品骁龙8295芯片相比，这次骁龙至尊版汽车平台CPU性能提升3倍、GPU性能提升3倍，NPU的AI性能提升了12倍。可以支持超过40个多模态传感器，包括多达20个高分辨率摄像头，实现360度全方位覆盖和车内监测。  技术参数相当能打，高通的技术交付，也同样亮眼。我们了解到，全新平台拥有灵活架构，可为汽车制造商提供多样化选择，可以通过骁龙座舱至尊版打造数字座舱，通过骁龙Ride至尊版实现智能驾驶，或者，可以在单一芯片组上同时支持数字座舱和智能驾驶。其中，Snapdragon Ride至尊版支持多个多模态传感器同时运行，实现基于AI的端到端传感器融合，能够生成高度精确和可靠的360度全方位车外覆盖视图。同时，Snapdragon Ride至尊版也能运行大型端到端Transformer等算法，处理数据并做出L3和L4级智能驾驶的实时决策，比如A辆车作出实时减速决策，避免了与闯红灯的B辆车碰撞。  但是，将AI引入汽车，需要多种工具，为了确保汽车制造商和开发者能够用这些AI工具。高通AI Hub，能够帮汽车制造商找到合适的AI模型，处理大量的车辆传感数据，并决定哪些模型可以并行运行。通过高通AI Hub，开发者可以从骁龙汽车平台中选择AI模型，也可以引入自主模型(BYOM)并进行优化，还可以用自己的数据来训练这些模型。  这里让我想到安蒙开场演讲时所说的一句话：“骁龙会一起进化，不仅引领了移动领域的创新步伐，还改变了很多其他行业的创新步伐。”再反观现场，无论是各领域巨头的站台，还是满屏放不下的高通在各领域的好友圈，无一不在证明骁龙的价值。  骁龙峰会2024现场，为高通骁龙站台的合作伙伴包括：微软、Meta、小米、OpenAI、BestBuy、三星、奔驰、宝马、理想、、长城汽车、通用汽车  骁龙移动平台好友圈  骁龙汽车平台好友圈 “当你拿起任何一款基于骁龙打造的旗舰智能手机，都会发现里面有超过40个组件来自高通，包括射频收发器、电源管理、超声波指纹识别等组件”，高通技术公司高级副总裁兼手机业务总经理Christoper Patrick总结说道，高通提供的是全面的系统解决方案。这也应了高通的那句话“Snapdragon is everywhere(骁龙无处不在)”。  AI千里之行始于足下，是高通骁龙进化的最佳写照，也是如今每一个处于AI变革数代的产业角色，体现价值的使命落点。 (作者周雅 来源科技行者) |
