两台Mac本地跑起8160亿参数模型

公众号精选传乘AI课堂发布于 2026-10-16

一台 Mac 上能跑起来的 AI,过去顶多是几百亿参数的小模型。10 月 15 日,Meta 放出一个 8160 亿参数的开源模型 Muse Spark Open,居然能在两台 M5 Ultra Mac Studio 上本地跑起来。这不是谁写错了数字,是苹果和 Meta 两家一起把「最贵的模型搬回家」这件事做成了。

先看这个模型有多重。Muse Spark Open 总参数 816B,每次只激活 42B,上下文窗口 100 万 token,是原生多模态,能同时看图和写代码。它靠苹果最新的 MLX 框架,配合 M5 Ultra 的统一内存,两台机器各出 512GB 内存,凑成 1TB,刚好装下整个模型的量化版。跑起来的速度,Meta 说能到上一代 Mac Studio 首 token 的 4.6 倍。它上线当天就接进了 Baseten、Fireworks、Groq、Together AI 等七家 API 平台,权重也放到了 Hugging Face、亚马逊 SageMaker、微软 Foundry 上。

这事背后真正改掉的,不是「开源又一个模型」,而是把算力的门槛从机房搬到了书桌上。以前你想用最强的 AI,只能按月交订阅费,数据还得往别人的服务器上传。现在有人把权重直接放出来,你在自己家里、用自己的机器、自己的数据跑,没人看得到你的输入。这对那些碰不得敏感数据的行业,是实打实的解放。

老周在一家律所管 IT,所里接的案子动不动涉及客户保密协议。过去用云端 AI 做合同摘要,他得先让法务批一圈数据出境条款,光审批流程就要走两周。Muse Spark Open 放出来后,他盘算着用所里两台高配机器本地部署,把卷宗丢进去做初筛,数据不出门。他算了笔账:两台 M5 Ultra 顶配加起来要 4 万美元上下,折合人民币 28 万元,摊到五年,一个月不到 4700 元,比让几个实习律师手动翻卷宗便宜得多,还不用天天担心泄密。所里那 12 个律师,一天经手的合同就有几十份,靠人翻根本来不及,光初筛一页纸的人工成本就要 3 元。

第二个被解放的是做视频的人。Meta 在发布里专门演示了一个案例:让 Muse Spark Open 控制 DaVinci Resolve,逐帧看素材,挑出最有张力的瞬间,再自动裁成竖版。这件事以前要一个剪辑师盯着屏幕干一下午,现在模型自己跑完。开源的意义就在这:它不是给你一个聊天框,是给你一个能接到任何工具上的大脑。

第二层才是关键。开源的真正红利,不在「免费」这俩字,而在「你能改」。云端模型是个黑盒,你只能调参数,不能动它一根筋。开源权重可以让你把它接到自己的工具链里,甚至微调成只懂你这一行的小模型。Meta 这次还同步开了 SGLang、vLLM、TensorRT-LLM、llama.cpp 等一堆推理引擎的适配,等于把「怎么跑」也打包送给你。它还附带一个叫 Helion 的自调优 GPU 内核,在英伟达和 AMD 的卡上能提速 1 到 4 倍。

但别急着下单。这套东西的门槛一点不低:

项目现实情况
硬件成本两台 M5 Ultra Mac Studio,单台 512GB 内存,合计超 4 万美元
部署难度要走 MLX 或 vLLM,普通用户得会敲命令行
适用人群面向开发者和中小团队,不是装个 App 就能用

所以它现在还不是「人人可用」,而是「小团队和开发者可够到」。真正能立刻用上的,是那些本来就懂点技术、又受够了云端数据限制的人。一个自由职业的程序员,或是一个只有三个人的小工作室,用这笔钱买回的是「数据主权」和「不再交订阅费」这两样东西。

值不值得追,取决于你属于哪一种人。如果你要的是开箱即用,那它现在不适合你;如果你手头有敏感数据、又有技术能力,它可能是今年最划算的一笔投入。判断标准很简单:你每月花在云端 AI 订阅上的钱,是不是已经超过了摊薄后的硬件成本?超过了,本地部署就开始划算。

那么问题来了,同样是花钱,订阅和自建到底差在哪?看下面这张账:

对比项云端订阅本地自建
首年成本每月 20 美元起,按用量上不封顶一次性 28 万元硬件,之后零订阅
数据去向上传到第三方服务器全在本机,不出门
能改吗不能,只能调参数权重开源,可微调定制

如果你想知道这东西值不值得追,可以做三件事。第一,去 Hugging Face 搜 meta-models 下的 Muse Spark Open,先把模型卡和评测读一遍,看它的能力是不是你要的那块。第二,如果没两台 Mac,先不急着买硬件,去 Together AI、Fireworks 这些平台用它的 API 跑个样例,感受一下它和你现在用的模型差多少。第三,盯住一件事:开源模型最怕的就是「放出来没人维护」,看 Meta 后续会不会持续更新权重,这决定了它值不值得长期押。

一句话:最强模型第一次能被搬回家,搬得动它的不是钱多,是知道数据该攥在谁手里的人。传乘AI工具站已经把这个模型和它的部署文档收进了 /tool/574,想抄作业的可以去翻。

资料来源Meta Research 官方博客 2026-10-15;Apple ML 研究博客;IT之家/机器之心 2026-10-16。
本文为「传乘AI课堂」公众号文章的授权转载,版权归原作者所有。