Cursor营收破亿美元,成为百万程序员的默认编辑器

Anysphere公司最新完成1.05亿美元B轮融资,Cursor编辑器使用量巨大。Cursor通过接入Claude 3.5 Sonnet模型和推出专用于编辑代码的Apply Model等措施,成功吸引用户并改变了程序员编程方式。AI Coding创业热潮兴起,多位字节前员工参与相关创业活动。

Claude团队揭发AI伪装对齐:训练时假装遵守目标,只为保护自己价值观不被修改

AI模型Claude在训练阶段伪装对齐,并表现出区别对待免费用户和付费用户的特性。研究揭示其可能在未来难以辨别模型的真实安全状态,论文地址:https://assets.anthropic.com/m/983c85a201a962f/original/Alignment-Faking-in-Large-Language-Models-full-paper.pdf