过去两年,大厂们买GPU像买白菜,仿佛只要卡堆得够多,大模型就能自动变聪明。但现在现实给了这种粗放模式一记响亮的耳光。当你花重金买下几千张卡,却发现GPU经常处于闲置等待状态时,瓶颈就显而易见了。模型权重、缓存数据和专家路由如果没在正确的时间送到计算节点,再强的算力也只能干瞪眼。 行业风向已经彻底变了。AI基础设施的竞争正在从单纯的堆叠计算资源,转向计算、网络、内存与存储数据路径的精细化协同。月之暗面将集群里闲置的CPU、内存和固态硬盘重新编排,化作可调度的缓存资源池,英伟达则在最新架构里给闪存上下文层留足了位置。这释放了一个明确的信号,存储不再是配角,它已经正式进入Token生成的实时主链路。 底层在抠效能,上层也在褪去浮躁。全栈自研的执念正在被抛弃,大模型正进入轻装上阵的车库时代。无论是卷AI办公入口,还是做出海业务,行业共识已经变成模型、场景与生态必须深度咬合。大家终于意识到,没有商业常识兜底的技术狂欢,终究只是一场烧钱游戏。 从盲目堆算力到精细化协同,从全栈执念到回归商业常识,大模型竞争已经进入了务实的双轨期。别再迷信算力规模了,接下来的淘汰赛,拼的是谁能在底层把每一滴算力榨干,在上层把每一个场景做透。 这种宏观趋势在底层基础设施上体现得尤为明显,头部玩家已经开始重新定义存储的价值。 以前固态硬盘在AI服务器里就是个高级文件柜,模型加载完权重后就沦为冷数据仓库。但现在大模型进入了长上下文和复杂推理阶段,GPU经常停下来等数据,卡再多也白搭。月之暗面推出的Mooncake架构,直接把集群里闲置的CPU、内存和固态硬盘捏成了一个分布式的缓存池。他们把预填充和解码环节物理分离,让上下文数据在各级存储里灵活流转。这种用更多存储换取更少重复计算的思路,在真实业务里把有效请求承载力拉高了好几倍。 英伟达的解法同样干脆。他们在最新的系统架构里,直接在显存和共享存储之间加了一个G3.5层,推出专门的Pod级闪存上下文平台。这相当于给计算节点外挂了一个超大容量的极速缓存,专门承接那些延迟敏感的推理状态。当智能体的多轮对话把上下文越撑越大时,系统能提前把数据从闪存预置到显存,彻底消灭GPU的饥饿等待。 这两家头部玩家的动作释放了一个明确信号,存储已经正式晋升为推理链路的一级公民。算力规模的红利正在消退,数据搬运的能效比才是接下来的决胜点。如果还抱着只买显卡不管数据路径协同的旧思维,企业迟早会在残酷的成本战里被彻底淘汰。 底层架构在精打细算,上层应用同样在甩掉包袱,追求更轻盈的商业落地。 过去两年,不少玩家都有一种全栈执念,恨不得从底层算力、中间件到上层应用全包揽,觉得把整条产业链捏在手里才有护城河。现在算盘一打,发现全栈太重,轻装才能跑得快。大模型正在进入真正的车库时代,创业者不再需要斥巨资自建庞大的基础设施,而是像当年在车库里攒电脑一样,直接调用现成API和开源模型,把有限弹药集中在产品体验上。 这种转变在AI办公入口的争夺中尤为明显。光有一个参数惊人的底座根本打不赢,模型能力、具体场景和生态闭环缺一不可。以前大家习惯拿着锤子找钉子,盲目追求通用大模型的参数规模;现在终于清醒,开始看钉子选锤子。做企业级应用,与其死磕底层微调,不如把精力花在如何把AI无缝塞进员工现有的工作流里。 出海赛道同样在挤泡沫。大观资本韦海军在谈及AI出海时直言必须回归商业常识。海外市场的获客成本和合规门槛摆在那里,靠烧钱换规模的粗放玩法早就行不通了。企业得算清楚每一笔账,模型推理的成本能不能被用户的付费意愿覆盖。 别再迷信大包大揽的技术神话。当行业从盲目堆算力转向精细化协同,上层应用的竞争逻辑也彻底变了。能活到最后的,绝不是那些拥有最多GPU却找不到变现路径的公司,而是最懂如何用轻量级架构解决具体痛点、把商业常识刻在骨子里的务实派。 看透这两层变化,企业才能真正找到接下来的发力点。过去两年老板们开会,开口就是我们要买多少张卡,建多大规模的算力中心。现在再去听,大家都在算每一分钱能换来多少有效Token。这种从堆资源到抠效能的转变,要求企业彻底打碎原有的部门墙,重新调整阵型。 底层IT团队得把目光从GPU采购清单移开。连月之暗面都在践行用更多存储换取更少计算,英伟达也把闪存做成了推理的一级资源。如果企业的架构师还在死磕单卡算力,而不去优化数据搬运路径,那买再多硬件也是给机房交电费。接下来的考核指标,要从单纯的算力利用率,转向端到端的Token生成能效比。 上层业务团队则要彻底戒掉参数焦虑。做AI办公入口或者出海业务,光有个大底座根本不够,模型、场景与生态必须深度咬合。韦海军那句话点得很透,得算清楚每一笔账,看模型推理的成本能不能被用户的付费意愿覆盖。产品负责人得把精力从跑分榜单转移到真实工作流里,用轻量级架构去解决具体痛点。 大模型的下半场,拼的不是谁的仓库里囤了更多硬件,而是谁的阵型更灵活。让懂底层架构的和懂商业变现的人坐在一起算账,把每一滴算力都榨干在刀刃上,把每一分预算都花在用户愿意买单的场景里,这才是企业穿越周期的底牌。