/ ai资讯

抛弃8GB内存,端侧AI大模型加速内存升级

发布时间:2024-11-05 02:45:53
本站报道(文/黄晶晶)端侧 AI大模型的到来在存储市场产生了最直接的反应。年初在我们对旗舰 智能手机的存储容量统计中,16GB内存 512GB存储成为几乎所有旗舰机型都提供的选择。毕竟AI大模型的运行以及相关应用的激增都比较吃内存和闪存。就在最近,连苹果也开始淘汰8GB版本,逐步走向12GB、16GB内存。 智能终端对存储容量的需求有增无减,同时也加速更先进存储 规格的采用。

苹果、小米纷纷砍掉8GB内存版本

日前,苹果宣布搭载M2和M3 芯片的M acBook Air机型现标配16GB内存,相比此前翻倍,但起售价维持不变,分别仍为7999元和8999元。苹果官网上13英寸M2 MacBook Air、13英寸M3 MacBook Air以及15英寸M3 MacBook Air均淘汰了8GB版本,标配16GB内存,固态硬盘是256GB起步。截至目前,苹果新款MacBook Pro、Mac mini、iMac等设备全部都是16GB内存起步。

近期,小米 公司宣布了其旗舰 产品小米15系列的内存配置重要调整。小米董事长兼CEO雷军表示,小米15将砍掉8GB内存版本,标准版将从12GB起步。

雷军表示,为了最大程度展现端侧 AI的能力,我们决定取消 8GB 版本。小米15系列,在设计工艺、性能功耗、续航表现和使用体验等方方面面都有巨大的提升。

10月28日,小米中国区市场部副总经理、Redmi 品牌总经理王腾在社交平台上解释称,这一决策(指取消8GB内存,从12GB起步)主要是基于未来 手机AI应用的发展趋势。随着端侧AI大模型对内存需求的增加,8GB内存已逐渐无法满足高效运行的需求。他建议,在资金允许的情况下,消费者应选择更大内存的版本,以确保手机能够流畅运行各类AI应用。

另外,对于小米15系列的涨价,雷军表示,去年我跟大家说过,小米14首定是最后一次定价3999元。今年3nm工艺升级,同时供应链 RAM 和 ROM 成本涨幅很大,我们在研发上投入也非常大,小米15 确实需要涨价。我可以保证,即便涨价,小米15 依旧日物超所值!相比往代同内存版本的涨价幅度,也肯定让大家觉得“贵得有理由”,谢谢大家理解!

端侧AI大模型的内存容量

由于端侧AI大模型需要在内存中加载,即便采用压缩技术,越大的模型越吃容量。一方面现在端侧AI大模型有着轻量化的趋势,另一方面足够大容量和性能更高的内存更能满足端侧AI的需求。

今年6月苹果发布apple Intelligence,将强大的生成模型置于 iPhone、iP ad 和 Mac 的核心。它具有的数据处理和情境感知能力。它能够深入理解设备中的各类数据,包括照片、邮件、 信息等,并据此为用户提供个性化的智能服务。分析师郭明錤曾表示,Apple Intelligence采用端侧3B LLM,经过压缩后,随时需要预留约0.7-1. 5GB DRAM来运作Apple Intelligence的端侧LLM。

在安卓阵营,早在去年,端侧AI便成为各大手机终端厂商进行手机创新的主航道,彼时大家都将AI端侧大模型的 参数集中于7B。然而参数越大所需的 处理器、存储等资源越多,轻量化小模型或许更适合于智能终端。

vivo继去年带来了三款端侧大模型(自研十亿、百亿、千亿三个参数量级)之后,发布全新30亿参数量级的蓝心端侧大模型3B。

在对话写作、摘要总结、信息抽取等能力上,蓝心3B可以越级比肩行业7B-9B模型。相比蓝心7B,蓝心 3B极致性能提升300%,平衡模式下功耗优化达46%,极致出词速度可以达到80字/s,系统功耗仅450mA,内存占用仅1. 4GB。蓝心端侧大模型3B真正打破了模型小、能力强、消耗低的“不可能三角定律”。

苹果为了支持Apple Intelligence在手机端的应用,将iPhone 16系列的四款机型全部升级到了8GB内存。为何选定为8GB内存,而不是更高?苹果 硬件技术高级副总裁Johny Srouji表示,Apple Intelligence是促使使用8GB内存的一个主要原因。他还提到,软硬件和产品的完全集成带来了很多好处,苹果软件团队经过多次的内存优化计算,避免内存浪费,综合考虑之后认为8GB是最适合的选择。

我们看到新发布的vivo X200系列和OPPO Find X8系列等手机都是直接从12GB版本起步。安卓阵营旗舰手机的内存容量升级更加积极,苹果反而显得有点保守了。尽管苹果有其软硬件优化的系统级优势,但相信8GB内存的选择,成本也是考虑因素之一。

内存规格不断提升

旗舰智能手机主要采用LP DDR5X内存规格,LPDDR5X能够更好地加速边缘AI运算,提供高存储器频宽和更佳的功耗效率。此前LPDDR5X速率达8.5Gbps,LPDDR5T速率达9.6Gbps的水平,而最近发布的新机甚至还采用了更高速率的LPDDR5X。

例如,OPPO Find X8 系列搭载潮汐引擎×天玑 9400,采用台积电第二代3nm工艺与新一代 ARM架构,搭配高速闪存UFS 4.0与LPDDR5X先进内存规格,带来更强的性能和更均衡的功耗表现。其中,Find X8 Pro采用LPDDR5X内存,Find X8 Pro 卫星 通信版采用了LPDDR5X 10667Mbps版内存。在 vivo X200新机中,vivo X200 Pro 16GB 1TB 卫星通信版本搭载LPDDR5X Ultra Pro,同样达到10667Mbps速度。

此前 三星 半导体就表示,已成功在 联发科下一代天玑旗舰移动平台(天玑9400)完成其最快的10.7千兆比特/秒(Gbps)LPDDR5X DRAM验证。成为当今全球最快的手机内存。

至于苹果新一代新机,iPhone 16采用6400Mbps的LPDDR5,苹果iPhone 16 Pro和16 Pro Max版本都是采用的是LPDDR5X规格的内存,7500Mbps速率。

LPDDR5标准于2019年2月发布,2021年7月JEDEC组织推出了升级版LPDDR5X。为了打造更高性能更能满足端侧AI大模型运算的内存,今年以来JEDEC组织正在积极制定新一代低功耗内存LPDDR6标准,该组织设定了 LPDDR6的速度范围从 10.667Gbps到14.4Gbps。可以看到,三星10.7GbpsLPDDR5X DRAM已经初步达到了该组织拟定的LPDDR6最低速度范围要求。接下来,各大DRAM 厂商势必积极跟进LPDD6的技术和产品,手机内存也将上一个新的台阶。

免责声明:本文为转载,非本网原创内容,不代表本网观点。其原创性以及文中陈述文字和内容未经本站证实,对本文以及其中全部或者部分内容、文字的真实性、完整性、及时性本站不作任何保证或承诺,请读者仅作参考,并请自行核实相关内容。

如有疑问请发送邮件至:bangqikeconnect@gmail.com