MiniCPM-RobotTrack
MiniCPM-RobotTrack
摘要
MiniCPM-RobotTrack是OpenBMB基于MiniCPM4-0.5B构建的紧凑型视觉-语言-动作模型,用于具身目标跟踪。该模型将自然语言指令与融合后的DINOv3和SigLIP视觉特征相结合,直接预测未来八个[x, y, yaw]航点。通过自动检查与人工审核剔除异常数据,并采用DAgger风格持续添加困难样本。在宇树Go2板载平台上实现5+ FPS和约180 ms端到端延迟。模型权重和代码以Apache-2.0许可证开源。
MiniCPM-RobotTrack 是一个基于 MiniCPM4-0.5B 构建的紧凑型视觉-语言-动作模型,用于目标跟踪,具有以下亮点:
Benchmark 结果
推理示例
请确保 transformers>=4.56,<5。
致谢
许可证
模型权重和代码以 Apache-2.0 许可证开源。
译自 OpenBMB · HF · 录于 二〇二六年八月二十六日