抛弃8GB内存,端侧AI大模型加速内存升级

业界 | 2024-11-03| 23

电子发烧友网报道(文/黄晶晶)端侧AI大模型的到来在存储市场产生了最直接的反应。年初在我们对旗舰智能手机的存储容量统计中,16GB内存+512GB存储成为几乎所有旗舰机型都提供的选择。毕竟AI大模型的运行以及相关应用的激增都比较吃内存和闪存。就在最近,连苹果也开始淘汰8GB版本,逐步走向12GB、16GB内存。智能终端对存储容量的需求有增无减,同时也加速更先进存储规格的采用。

苹果、小米纷纷砍掉8GB内存版本

日前,苹果宣布搭载M2和M3芯片的MacBook Air机型现标配16GB内存,相比此前翻倍,但起售价维持不变,分别仍为7999元和8999元。苹果官网上13英寸M2 MacBook Air、13英寸M3 MacBook Air以及15英寸M3 MacBook Air均淘汰了8GB版本,标配16GB内存,固态硬盘是256GB起步。截至目前,苹果新款MacBook Pro、Mac mini、iMac等设备全部都是16GB内存起步。

近期,小米公司宣布了其旗舰产品小米15系列的内存配置重要调整。小米董事长兼CEO雷军表示,小米15将砍掉8GB内存版本,标准版将从12GB起步。

雷军表示,为了最大程度展现端侧 AI的能力,我们决定取消 8GB 版本。小米15系列,在设计工艺、性能功耗、续航表现和使用体验等方方面面都有巨大的提升。

10月28日,小米中国区市场部副总经理、Redmi品牌总经理王腾在社交平台上解释称,这一决策(指取消8GB内存,从12GB起步)主要是基于未来手机AI应用的发展趋势。随着端侧AI大模型对内存需求的增加,8GB内存已逐渐无法满足高效运行的需求。他建议,在资金允许的情况下,消费者应选择更大内存的版本,以确保手机能够流畅运行各类AI应用。

另外,对于小米15系列的涨价,雷军表示,去年我跟大家说过,小米14首定是最后一次定价3999元。今年3nm工艺升级,同时供应链 RAM 和 ROM 成本涨幅很大,我们在研发上投入也非常大,小米15 确实需要涨价。我可以保证,即便涨价,小米15 依旧日物超所值!相比往代同内存版本的涨价幅度,也肯定让大家觉得“贵得有理由”,谢谢大家理解!

端侧AI大模型的内存容量

由于端侧AI大模型需要在内存中加载,即便采用压缩技术,越大的模型越吃容量。一方面现在端侧AI大模型有着轻量化的趋势,另一方面足够大容量和性能更高的内存更能满足端侧AI的需求。

今年6月苹果发布Apple Intelligence,将强大的生成模型置于 iPhone、iPad 和 Mac 的核心。它具有的数据处理和情境感知能力。它能够深入理解设备中的各类数据,包括照片、邮件、信息等,并据此为用户提供个性化的智能服务。分析师郭明錤曾表示,Apple Intelligence采用端侧3B LLM,经过压缩后,随时需要预留约0.7-1.5GB DRAM来运作Apple Intelligence的端侧LLM。

在安卓阵营,早在去年,端侧AI便成为各大手机终端厂商进行手机创新的主航道,彼时大家都将AI端侧大模型的参数集中于7B。然而参数越大所需的处理器、存储等资源越多,轻量化小模型或许更适合于智能终端。

vivo继去年带来了三款端侧大模型(自研十亿、百亿、千亿三个参数量级)之后,发布全新30亿参数量级的蓝心端侧大模型3B。

在对话写作、摘要总结、信息抽取等能力上,蓝心3B可以越级比肩行业7B-9B模型。相比蓝心7B,蓝心 3B极致性能提升300%,平衡模式下功耗优化达46%,极致出词速度可以达到80字/s,系统功耗仅450mA,内存占用仅1.4GB。蓝心端侧大模型3B真正打破了模型小、能力强、消耗低的“不可能三角定律”。

苹果为了支持Apple Intelligence在手机端的应用,将iPhone 16系列的四款机型全部升级到了8GB内存。为何选定为8GB内存,而不是更高?苹果硬件技术高级副总裁Johny Srouji表示,Apple Intelligence是促使使用8GB内存的一个主要原因。他还提到,软硬件和产品的完全集成带来了很多好处,苹果软件团队经过多次的内存优化计算,避免内存浪费,综合考虑之后认为8GB是最适合的选择。

我们看到新发布的vivo X200系列和OPPO Find X8系列等手机都是直接从12GB版本起步。安卓阵营旗舰手机的内存容量升级更加积极,苹果反而显得有点保守了。尽管苹果有其软硬件优化的系统级优势,但相信8GB内存的选择,成本也是考虑因素之一。

内存规格不断提升

旗舰智能手机主要采用LPDDR5X内存规格,LPDDR5X能够更好地加速边缘AI运算,提供高存储器频宽和更佳的功耗效率。此前LPDDR5X速率达8.5Gbps,LPDDR5T速率达9.6Gbps的水平,而最近发布的新机甚至还采用了更高速率的LPDDR5X。

例如,OPPO Find X8 系列搭载潮汐引擎×天玑 9400,采用台积电第二代3nm工艺与新一代ARM架构,搭配高速闪存UFS 4.0与LPDDR5X先进内存规格,带来更强的性能和更均衡的功耗表现。其中,Find X8 Pro采用LPDDR5X内存,Find X8 Pro 卫星通信版采用了LPDDR5X 10667Mbps版内存。在 vivo X200新机中,vivo X200 Pro 16GB + 1TB 卫星通信版本搭载LPDDR5X Ultra Pro,同样达到10667Mbps速度。

此前三星半导体就表示,已成功在联发科下一代天玑旗舰移动平台(天玑9400)完成其最快的10.7千兆比特/秒(Gbps)LPDDR5X DRAM验证。成为当今全球最快的手机内存。

至于苹果新一代新机,iPhone 16采用6400Mbps的LPDDR5,苹果iPhone 16 Pro和16 Pro Max版本都是采用的是LPDDR5X规格的内存,7500Mbps速率。

LPDDR5标准于2019年2月发布,2021年7月JEDEC组织推出了升级版LPDDR5X。为了打造更高性能更能满足端侧AI大模型运算的内存,今年以来JEDEC组织正在积极制定新一代低功耗内存LPDDR6标准,该组织设定了 LPDDR6的速度范围从 10.667Gbps到14.4Gbps。可以看到,三星10.7GbpsLPDDR5X DRAM已经初步达到了该组织拟定的LPDDR6最低速度范围要求。接下来,各大DRAM厂商势必积极跟进LPDD6的技术和产品,手机内存也将上一个新的台阶。

相关推荐相关推荐

三场与AI有关的死亡

三场与AI有关的死亡

2024年,无数人在谈论AI。兴奋的创业者、热情的投资人、担心工作出现变化的普通人,大家都在猜测和规划与AI有关的未来。

业界 5 2024-12-26
AI眼镜形态席卷可穿戴市场!谷歌眼镜几次“流产”,将靠AI翻盘

AI眼镜形态席卷可穿戴市场!谷歌眼镜几次“流产”,将靠AI翻盘

电子发烧友网报道(文/莫婷婷)在ChatGPT进化史上,绕不开的一家厂商是谷歌。2024年12月,谷歌发布 Gemini 2.0,该产品被称为登顶AI巅峰、秒杀ChatGPT O1。始终走在AI技术前沿的谷歌,始终在寻找AI技术的最佳落地场景,可穿戴设备是其中一个目标。

业界 5 2024-12-26
英飞凌:30年持续领跑碳化硅技术,成为首选的零碳技术创新伙伴

英飞凌:30年持续领跑碳化硅技术,成为首选的零碳技术创新伙伴

2024年,全球极端天气频发,成为有气象记录以来最热的一年,飓风、干旱等灾害比往年更加严重。在此背景下,推动社会的绿色低碳转型,提升发展的“绿色含量”已成为广泛共识。在经济社会踏“绿”前行的过程中,第三代半导体尤其是碳化硅作为关键支撑,如何破局 ...

业界 4 2024-12-26
叫板鸿蒙智行!补齐短板,比亚迪高阶智驾“天神之眼”CNOA全国开通

叫板鸿蒙智行!补齐短板,比亚迪高阶智驾“天神之眼”CNOA全国开通

电子发烧友原创 章鹰 软件定义汽车,是2016年百度高级副总裁、自动驾驶事业部总经理王劲提出的概念。其核心思想是,决定未来汽车的是以人工智能为核心的软件技术,而不再是汽车的马力大小,是否真皮沙发座椅,机械性能好坏。2021年,英伟达创始人兼首 ...

业界 4 2024-12-26
国产汽车芯片现状解读:高端少、占比低,该如何破局?

国产汽车芯片现状解读:高端少、占比低,该如何破局?

电子发烧友网报道(文/吴子鹏)近日,中国汽车芯片产业创新战略联盟全体成员大会暨上海车规集成电路全产业链技术创新战略联盟全体大会在上海星河湾酒店成功举办,大会由中国汽车芯片联盟产业创新战略联盟、上海市闵行区人民政府、上海车规集成电路全产业 ...

业界 5 2024-12-26
字节今年AI投入接近BAT三家总和!明年有望直接翻倍

字节今年AI投入接近BAT三家总和!明年有望直接翻倍

【btna科技消息】12月26日消息,浙商证券在其报告中指出,字节跳动在AI上加大流量投放、扩大资本开支、大力扩张团队,研发投入显著领先同行。

业界 5 2024-12-26
好心让同事搭乘电动自行车便车 结果被撞还被同事起诉赔钱

好心让同事搭乘电动自行车便车 结果被撞还被同事起诉赔钱

【btna科技消息】12月26日消息,好心让他人搭乘便车,结果发生事故,提供便车的车主需要担责吗?据报道,近日,无锡市锡山区人民法院披露了一起典型案件。

业界 5 2024-12-26
博帝发布P400 V4 PCIe 4.0 SSD:配轻薄石墨烯散热片

博帝发布P400 V4 PCIe 4.0 SSD:配轻薄石墨烯散热片

【btna科技消息】12月26日消息,博帝推出新款P400 V4 PCIe 4.0 SSD。其配备了高效轻薄的石墨烯散热片,专为提升耐用性而设计。

业界 5 2024-12-26
代号珠峰!OPPO Find X8 Ultra影像尘埃落定

代号珠峰!OPPO Find X8 Ultra影像尘埃落定

【btna科技消息】12月26日消息,OPPO Find X8 Ultra会在春节后登场,该机代号珠峰,暗示是一款巅峰影像旗舰。

业界 4 2024-12-26
英伟达新“王炸” 未发先难产

英伟达新“王炸” 未发先难产

继B200/GB200芯片交付推迟后,英伟达或又面临新品难产的问题。 12月24日,据Wccftech报道,英伟达最新旗舰芯片B300/GB300的参数已经确认。其中B300的显存规格从上代产品的192Gb提升至288Gb;GB300平台将首次使用LPCAMM内存模块设计,并配备带宽提升至1.6T ...

业界 4 2024-12-26