赶紧放弃强化学习？！Meta 首席 AI 科学家杨立昆喊话：当前推理方式会“作弊”，卷大模型没有意义！
这样的困境：它们基于深度学习架构，通过在大规模数据上进行预训练、调整参数，看似构建起了对世界的“理解
强化学习
GSM8K-RLVR：用强化学习提升语言模型的数学解题能力
GSM8K-RLVR利用强化学习提升语言模型数学解题能力，Qwen2.5-Math-1.5B模型准确率从70.66%提升至77.33%，简化提示格式无需复杂标签。
让 LLM 来评判 | 奖励模型相关内容
奖励模型通过学习人工标注的成对 prompt 数据来预测分数，用于评估语言模型的表现。它们比传统LLM评估模型更快速且具有确定性，但需要特定微调和考虑位置偏差影响。
X-R1: 不到50元，人人都能复现0.5B Aha Moment
X-R1是基于强化学习的训练框架，目标降低R1复现门槛。通过最少成本在0.5B预训练模型上实现了‘顿悟时刻’效果，使用了更易训练的方法，并优化了数据规模和checkpoint打印。
0.5B小模型逆袭！不到50元，「X-R1」让每个人都能复现Aha Moment
X-R1 是一个低成本且易入门的强化学习训练框架，旨在降低 R1 的复现门槛。通过使用0.5B预训练模型，在4张3090/4090显卡上仅需2小时就实现了 ‘aha Moment’，展示了极小模型也能触发Aha Moment的现象。
AI 终极十问！DeepSeek 如何颠覆开发者认知？ | DeepSeek 十日谈
推理模型DeepSeek R1展示了其自我进化的能力和解决复杂问题的潜力。该模型采用纯强化学习技术，并结合监督微调提升推理能力。然而也有观点认为这更侧重于工程实践而非科学创新。
4500美元验证强化学习「魔力」，1.5B模型也能超越o1预览版，模型、数据、代码全开源
DeepScaleR-1.5B-Preview 成功复现 Deepseek-R1 的训练方法，成本仅需4500美元。该模型在AIME2024竞赛中超越了O1-Preview，展示了小模型通过强化学习也能实现飞跃的潜力。