MiniCPM5-2B-MLX
MiniCPM5-2B-MLX
OpenBMB 发布 MiniCPM5-2B,为 MiniCPM5 系列继 MiniCPM5-1B 后的第二个稠密 2B Transformer 模型,参数量 2,516,756,480,上下文长度 131,072,面向端侧与资源受限场景。其在 2B 级开源模型中取得 SOTA,平均分 53.9,并超过 Qwen3.5-4B(51.1)等更大模型,优势体现在代码、数学、长上下文、工具调用及 agentic 任务。同步发布 UltraData 系列数据集,含 UltraX、UltraData-Code、UltraData-SFT-Agent-2609(50 万条 agent 样本)及 UltraData-RL-2609(8 万余条 RL 样本)。
亮点
我们发布了 MiniCPM5-2B,这是 MiniCPM5 系列中继 MiniCPM5-1B 之后的第二个模型。它是一个稠密的 2B Transformer,扩展了相同的训练方案,专为端侧、本地部署和资源受限场景而设计,达到了 2B 级开源 SOTA。
🏆 2B 级开源 SOTA:与同尺寸的强开源模型相比,MiniCPM5-2B 在该对比组内取得了 SOTA 性能。它在整体上与 4B 级模型保持竞争力,同时在代码、数学、长上下文理解、工具调用和 agentic 任务方面展现出对同尺寸模型的优势。
📂 开放高质量数据:与模型一同,我们发布了其背后的高质量训练数据集,作为 UltraData 系列的一部分:UltraX,一个高质量的网页预训练数据集;UltraData-Code,采用 L0–L3 分层代码数据管理以推动编码能力的显著提升;UltraData-SFT-Agent-2609,包含 50 万条 agent 训练样本以增强全面的端侧 agent 能力;以及 UltraData-RL-2609,包含 8 万余条覆盖数学、代码、通用知识和长上下文推理的高质量 RL 训练样本。
模型列表
使用此目录选择与您的运行时匹配的模型格式:
MiniCPM5-2B
- MiniCPM5-2B · ModelScope · BF16 最终发布版(经过 RL + OPD 后训练)
- MiniCPM5-2B-SFT · ModelScope · BF16 仅 SFT 检查点(RL / OPD 之前)
- MiniCPM5-2B-Midtrain · ModelScope · BF16 中期训练检查点(SFT 之前)
- MiniCPM5-2B-Base · ModelScope · BF16 基础检查点(仅预训练)
- MiniCPM5-2B-GGUF · ModelScope · 适用于 llama.cpp / Ollama / LM Studio 的 GGUF
- MiniCPM5-2B-MLX · ModelScope · 适用于 Apple Silicon 的 MLX / 4bit 👈 您在这里
- MiniCPM5-2B-GPTQ · ModelScope · GPTQ / 4bit 量化模型
- MiniCPM5-2B-DSpark · ModelScope · 用于推理加速的 DSpark draft 模型
MiniCPM5-1B
- MiniCPM5-1B · ModelScope · BF16 最终发布版(经过 RL + OPD 后训练)
- MiniCPM5-1B-SFT · ModelScope · BF16 仅 SFT 检查点(RL / OPD 之前)
- MiniCPM5-1B-Base · ModelScope · BF16 基础检查点(仅预训练)
- MiniCPM5-1B-GGUF · ModelScope · 适用于 llama.cpp / Ollama / LM Studio 的 GGUF
- MiniCPM5-1B-MLX · ModelScope · 适用于 Apple Silicon 的 MLX / 4bit
模型信息
MiniCPM5-2B 具有以下特点:
- 类型:因果语言模型
- 架构:标准
LlamaForCausalLM - 参数量:2,516,756,480
- 非嵌入参数量:1,981,982,720
- 层数:42
- 注意力头数(GQA):Q 为 16,KV 为 2
- 上下文长度:131,072
简介
MiniCPM5-2B 是 MiniCPM5 系列中的第二个模型。它专为本地助手、编码 agent、工具调用工作流以及偏好紧凑模型的推理场景而设计。该模型在保持较小部署占用空间的同时,提供原生长上下文支持。
评估结果
我们将 MiniCPM5-2B 与同尺寸级别的强开源模型进行比较,包括 LFM2.5-2.6B、Qwen3.5-2B 和 Gemma-4-E2B-it,同时列出 Qwen3.5-4B、granite-4.2-3B、Nemotron-3-Nano-4B、Gemma-4-E4B-it 和 LFM2.5-8B-A1B 等更大模型以供参考。
在此对比组内,MiniCPM5-2B 以 53.9 的平均分达到了 2B 级开源 SOTA,并且也超过了此处包含的所有更大模型(最高为 51.1)。其优势在代码推理、数学推理、长上下文理解、工具调用以及多个 agentic 任务中最为明显。