PPO

DeepSeek R1-Zero无需人类标注即可实现准确推理，通过强化学习自主发展自我验证和搜索能力。TinyZero展示了其在CountDown游戏中的复现成果，成本不到30美元。