83%
豆包推出全新稀疏模型架构 UltraMem了
字节跳动豆包团队提出UltraMem架构，通过分层动态内存结构、Tucker分解检索和隐式参数扩展三项创新突破MoE架构的瓶颈，推理成本降幅最高83%，速度提升6倍，入选ICLR 2025。
ICLR 2025 比MoE快6倍，成本暴降83%！字节发布超稀疏架构UltraMem
文章介绍了字节跳动豆包大模型团队提出的新稀疏模型架构 UltraMem，该架构有效解决了 MoE 推理时高额的访存问题，推理速度提升2-6倍，成本降低83%。
刚刚，o1 在Mensa智商测试中狂砍133分，超98% 人类！
OpenAI的o1模型在Mensa智商测试中获得133分，表现优于98%的人类考生。此分数显示o1在标准化测试中的智能水平，并且可能预示着通用人工智能（AGI）的到来。