270亿参数大模型塞进iPhone:PrismML如何实现14倍压缩几乎零损失

AI资讯10小时前发布 EdgeClaw
48 00

美国AI初创公司PrismML在7月10日扔出了一颗技术炸弹:阿里巴巴开源的Qwen 3.6-270亿参数模型,被从54GB压缩到不足4GB,在iPhone 17 Pro上实现了无损运行。这不是实验室里的概念验证,而是可以实际下载使用的完整模型。

过去提到”端侧AI”,大多数人的印象是跑个小模型、做做简单的语音识别或图像分类。但PrismML这次做的事情完全不同——270亿参数规模的模型,原本需要高端服务器才能运行,现在被塞进了一部手机。压缩倍率达到14倍,且在复杂对话、逻辑推理和代码编程任务上的表现与原模型几乎没有差异。

手机运行AI大模型的概念图展示芯片电路与神经网络节点环绕智能手机

技术实现上,PrismML采用了一套”组合拳”策略。传统的模型压缩通常依赖单一方法——要么量化降低精度,要么剪枝去掉冗余参数——往往会带来明显的性能损失。PrismML则将多种压缩技术串联使用,在不同环节分别处理不同类型的冗余,最终实现14倍压缩的同时保持模型输出质量。具体技术细节尚未完全公开,但其核心逻辑是在压缩过程中保留模型最关键的”知识密度”。

这件事的意义远不止技术突破本身。据报道,苹果公司已经与PrismML进行了接洽。如果双方达成合作,最直接的受益者将是Siri。目前Siri的复杂任务仍需依赖云端处理,如果能在本地运行270亿参数模型,响应延迟、隐私保护、离线可用性都将从根本上得到改善。

多个智能设备围绕AI核心运行的未来科技场景展现端侧AI普及趋势

对普通用户来说,端侧大模型意味着几个实实在在的变化。首先,AI回答不再需要等待网络往返,本地推理的响应速度可以做到毫秒级。其次,所有数据留在设备上,隐私安全不再依赖厂商的承诺。再者,地铁、飞机等弱网甚至无网环境下,AI助手依然可以正常工作。

万物互联时代多设备端侧AI协同工作的未来概念图呈现创意活力风格

PrismML的突破并非孤立事件。谷歌同期发布了LiteRT.js,让浏览器和边缘设备也能直接运行AI推理。小米则宣布openvela系统升级为”AI硬件智能基座”,在全球1.8亿台设备上支持端侧大模型调度。高通和联发科的新一代芯片NPU算力持续翻倍,为本地运行大模型提供了硬件基础。

270亿参数跑在手机上,半年前这件事听起来像天方夜谭。但PrismML做到了,而且开源版本即将开放下载。2026年下半年,端侧AI或许会成为整个行业最核心的战场之一。当手机、眼镜、手表、汽车都能本地运行大模型时,”智能”这个词的边界会被彻底重新定义。

© 版权声明

相关文章