Thinking Machines Lab 公布端到端 4-bit 训练方法,在 Inkling 2 Small 上从预训练到 RL rollout 统一使用 NVFP4 前向与 MXFP8 反向的数值配方。
AI INSIGHT
Thinking Machines Lab 发布端到端 4-bit 训练技术报告
AI 摘要
Thinking Machines Lab 公布端到端 4-bit 训练方法,在 Inkling 2 Small 上从预训练到 RL rollout 统一使用 NVFP4 前向与 MXFP8 反向的数值配方。