苹果与LM Studio合作提升Mac Studio算力以支持本地运行万亿大模型

2026年06月22日 10:27
本文共计816个字,预计阅读时长3分钟。
来源/aibase 责编/jikelaowang 极客老王

在刚刚落幕的 WWDC 2026 期间,人工智能的本地化部署迎来了一个标志性时刻。LM Studio 与苹果达成深度技术合作,成功在由四台 Mac Studio 组成的集群上,流畅运行了月之暗面的万亿参数大模型 Kimi K2.6。这一演示不仅打破了大型模型必须依赖云端集群的刻板印象,更展示了消费级硬件在承载前沿 AI 算力方面的巨大潜力。

Kimi K2.6 作为一款基于 MoE(混合专家)架构的巨型模型,其总参数规模达到惊人的 1 万亿。在四台 Mac Studio 的集群配置下,利用苹果强大的统一内存架构,该系统实现了约 1.5TB 的总内存容量,完美覆盖了该模型推理所需的内存带宽与存储需求。开发者测试数据显示,在这种集群架构下,Kimi K2.6 不仅能保持稳定的运行,特定模式下的生成速度甚至可达到约 28 tokens/s,且整体功耗远低于传统的企业级 GPU 集群。

除了展示强大的算力吞吐能力,本次合作还向外界演示了极具实用价值的跨设备协作场景。通过 LM Studio 旗下的 LM Link 功能,用户可以实现安全、远程的本地化访问。在演示中,研发人员通过 MacBook Neo 笔记本以及 iPhone,就能直接与集群上的模型进行高频互动。值得一提的是,所有交互过程中的数据处理均保留在本地局域网内,实现了真正的“私有化部署”,极大提升了数据隐私安全性。

随着 Thunderbolt 5 等先进互联技术的引入,多设备内存共享能力正成为苹果生态在 AI 时代的“护城河”。本次演示中所使用的 LM Link 功能,已于今年 6 月初正式适配 Mac 及 iOS 平台,支持端到端加密连接。

对于开发者与极客群体而言,这项进展释放了一个明确信号:随着硬件互联技术与本地推理平台的协同进化,万亿参数级的大模型将不再是巨头们的“专属”,通过高效的本地硬件集群,个人或小型团队同样能够构建出高性能、隐私可控的 AI 算力底座。

来源:本地也能跑万亿大模型:苹果与 LM Studio 联手解锁 Mac Studio 算力极限 | AIbase

声明:本文来自aibase,版权归作者所有。文章内容仅代表作者独立观点,不代表A³·爱力方立场,转载目的在于传递更多信息。如有侵权,请联系 copyright#agent.ren。

相关图文

热门资讯

推荐专栏

爱力方

爱力方

机器人前沿资讯及信息解读
机器人大讲堂

机器人大讲堂

中国顶尖的机器人专业媒体服务平台
关注爱力方,掌握前沿具身智能动态

© 2025 A³·爱力方

https://www.agentren.cn/