一共三款模型，首次采用MoE架构，开启了原生多模态的Llama时代！
Llama4Scout，激活17B，16个专家，109B参数；
Llama4Maverick，激活17B，128个专家，402B参数；
Llama4Behemoth，激活288B，16个专家，2T参数。
Llama4发布后排名瞬间跃升，甚至超过了DeepSeek-V3，Meta再一次回到牌桌。
业界首个1000万上下文，RAG已死？
Meta宣称Llama-4-Scout-17B-16E测试中好于Gemma3、Gemini2.0Flash-Lite和Mistral3.1。甚至，小扎剧透了推理模型也不远了。
但也有网友调侃Llama4这次是“赶鸭子上架”，所以Llama4性能到底如何，请看下面网友的实测。
稀疏MoE模型，和苹果芯堪称天作之合
当前，第一批测试结果已经出来了！
苹果ML工程师AwniHannun实测，Llama4Maverick在单台M3Ultra-512GB上使用MLX推理框架时速度极快，达到了50token/秒！
与DeepSeekV3/R1类似，Llama4系都是巨大的稀疏MoE模型。
这些模型拥有极其庞大的参数量，但每次只有少量参数（专家）被激活。由于事先无法预测哪些参数会被激活，因此必须把所有参数同时存放在高速的GPU显存中。
为何对于开源模型，社区大佬都倾向于使用苹果芯片去测试？
一方面，是因为买不到英伟达H100啊。
AwniHannun表示，更重要的是Apple芯片适合稀疏模型。
GPU显存速度快，但成本昂贵。然而AppleSilicon通过统一内存（UnifiedMemory）和UltraFusion技术融合多个芯片，使其能够以更低的成本提供更大容量、中等速度的内存。
一个月前发布的M3UltraMacStudio的统一内存容量高达512GB！
然而，当内存容量增大到这个程度时，内存带宽就不足了。对于512GB版本来说，内存刷新率（每秒GPU可完整遍历所有内存的次数，即内存带宽与容量之比）只有1.56次/秒。与其他硬件对比如下：
NVIDIAH100（80GB）：37.5次/秒
AMDMI300X（192GB）：27.6次/秒
AppleM2Ultra（192GB）：4.16次/秒（比H100慢9倍）
AppleM3Ultra（512GB）：1.56次/秒（比H100慢24倍）
理想情况下，工作负载特性应与硬件特性相匹配。否则，硬件会存在浪费（性能过剩）或瓶颈（性能不足）。对工作负载（此处为批大小=1的推理任务）而言，关键特性是模型稀疏度。
模型的稀疏度定义为1-（激活参数数/总参数数）。
稠密模型稀疏度为0%（因为激活参数=总参数）。各模型稀疏度如下：
Llama3.3405B：总参数=405B，激活参数=405B，稀疏度=0%
DeepSeekV3/R1：总参数=671B，激活参数=37B，稀疏度=94.4%
Llama4Scout：总参数=109B，激活参数=17B，稀疏度=84.4%
Llama4Maverick：总参数=400B，激活参数=17B，稀疏度=95.75%（非常高！）
Llama4Behemoth：总参数=2T，激活参数=288B，稀疏度=85.6%
一般来说，稀疏度越高，越适合内存刷新率较低的AppleSilicon。因此，Llama4Maverick显然是最适合AppleSilicon的模型。
另外更重要的原因就是AppleSilicon是运行大模型最具成本效益的方案，因为统一内存每GB的成本远低于GPU显存：
NVIDIAH100：80GB，3TB/s，售价$25，000，每GB成本$312.50
AMDMI300X：192GB，5.3TB/s，售价$20，000，每GB成本$104.17
AppleM3Ultra：512GB，800GB/s，售价$9，500，每GB成本$18.55
以2万亿参数巨兽Llama4Behemoth为例。
考虑到若用H100来完整容纳Behemoth模型（fp16精度），则需要50块H100，总成本为125万美元；
MI300X的总成本则为42万美元；
但若使用M3Ultra，总成本仅为7.6万美元！
以下是网友@alexocheema对不同版本Mac运行新Llama4版本的情况进行了全面分析。
Llama4这次发布的模型最大一个优点之一就是稀疏模型，这给了本地部署很多想象力，也是开源模型的使命。
以精度4-bit为例，使用MLX推理框架可以在具有足够RAM的Mac上部署这些模型。
网友@awnihannun总结了部署Llama4最新三个模型所需要的最小配置，几乎都可以完成本地部署：
Llama4Scout109B参数：64GB的M4Max；
Llama4Maverick400B参数：256GB的M3Ultra；
Llama4Behemoth2T参数：3台512GB的M3Ultra；
Llama4很强，就是写代码有点菜
说完了硬件，再来看看Llama4的实测效果。
网友@gnukeith测试了Llama4的多模态能力，让模型识别图片中的人物来自于哪个动漫，Llama成功识别！
网友@attentionmech制作了一个模型视觉化网页（简单说就是看模型有多少层，有多深），Llama4视觉上看起来确实令人惊叹。
网友@philip_kiely使用Llama4（Maverick）轻松击败了BrickBreaker氛围测试。
当然，也有翻车的，比如网友@fighto测试了“喜闻乐见”的让模型数r的问题，Llama4Maverick回答错误。
网友@tariquesha1测试了Llama4的图像生成能力。
再来看看Llama4写代码的实战案例。
网友AlexBefest宣布Llama4Maverick——Python六边形测试失败。Python六边形测试可以说是每个新发布大模型的“试金石”了。
下面展示了其他模型在Python六边形测试弹跳小球上的结果，来自Github的KCORES团队。
KCORES团队成员karminski-牙医发布了Llama4Scout和Llama4Maverick的测试结果。
用他的话说，Llama4Scout小参数模型开心就好；足足有402B参数的Maverick模型的表现并不是很满意：
Scout小参数模型大概接近Grok2的水平（咋还倒退了）；
而Mavericks还不如使用DeepSeek-V3-0324；
总之不建议Llama4写代码
按照KCORESLLMArena的评测结果，目前最好的模型GPT-4.5-Preview。
当然，目前的测试只针对写代码，其他长文本和多模态领域还需要更多的测试案例。
Llama4的另一个突破就是支持10M的上下文窗口长度，相当于20个小时的视频。
全网部署Llama4
不管怎么说Llama4的发布依然是开源模型的又一剂强心针。
各家巨头和平台同时宣布支持最新的Llama4。
微软CEOSatyaNadella宣布马上将Scout和Maverick发布在AzureAIFoundry平台。
Cerebras宣布将在下周完成Llama4最新模型的部署。
TogetherAI上也同步推出Llama4模型，作为Meta的发布合作伙伴，还支持TogetherAPI的方式来访问Llama4Maverick和Llama4Scout。
T3Chat也宣布Llama4Scout和Maverick均已启动，Scout由Groq托管，而Maverick由OpenRouter托管，并且声明了小参数模型Scout非常便宜，决定免费发布。
Databricks数据智能平台宣布使用Llama模型来为AI应用程序、智能体和工作流程提供支持。
接下来还会有更多的平台跟进Llama4最新模型，就像几个月前各家平台也是“疯狂”上线DeepSeek一样。
还有一个问题，为啥小扎选在他们的休息日发布Llama4，马上就周一了啊？
Defined和Liftoff的联合创始人NathanLambert说顶尖Lab的领导们都会知道其他Labs的发布计划。
难道说小扎知道下周会有什么“疯狂”的模型发布可能会盖过Llama4的风头，所以“赶鸭子上架”吗。
首先在Llama4的GithubModel_Card的更新日志中，发现一个改动：
模型发布的日期从美国时间的4月7号改到了4月5号（也就是我们4月6号的凌晨）！
所以，周一Meta还会发布什么新模型吗？
在llama.com的官网上，我们看到了llama4-resoning-is-coming的后缀，似乎预示着llama-4推理模型也要马上发布了！
而奥特曼继续放出他的烟雾弹，在社交媒体不停的预热：OpenAI接下来也要放大招了！
而不论是此前奥特曼宣布GPT5、o3和o4-mini的消息，还是Llama4的发布，还是DeepSeek和清华共同发布的论文，似乎预示着一件事：
所有人都在等待并期待着DeepSeek-R2！
请大家做好准备，也许下周即将是“疯狂”的一周。
相关文章
头条焦点
精彩导读
关注我们
【查看完整讨论话题】 | 【用户登录】 | 【用户注册】