Meta 开源 Muse Spark Open:816B 参数多模态 MoE 模型
Meta 发布开源权重前沿多模态 MoE 模型 Muse Spark Open,总参数 816B,每个 token 激活约 42B 参数,面向编码与智能体任务,支持文本、图像、视频和音频输入,上下文窗口 1M token。模型提供 BF16 与 NVFP4 两种 checkpoint,NVFP4 面向 NVIDIA Blackwell GPU,并已集成 transformers、llama.cpp、vLLM、SGLang 和 MLX,官方还给出在 64 张 H100 上用 TRL 训练 LoRA 适配器的微调配方。
匹配字段摘要





