Workflow
4万星开源项目被指造假!MemGPT作者开撕Mem0:为营销随便造数据,净搞没有意义的测试!
AI前线·2025-08-13 06:02

整理 | 褚杏娟 "我真的厌倦了看到那些急于求成的科技初创公司,为了讨好风投而在数据上撒谎,还贴上'SOTA'的 标签。"有网友吐槽。 事情源于高人气开源智能体记忆项目 Mem0 在今年 4 月底发布的一篇论文。论文中,该项目团队为 可扩展的、以记忆为核心的架构 Mem0 提出了增强版本,并声称在 LOCOMO 上打败了所有人,其 中 , Mem0 在 "LLM-as-a-Judge" 指 标 上 相 较 于 OpenAI 提 高 了 26% 。 ( 论 文 地 址 : https://arxiv.org/abs/2504.19413) 当地时间 8 月 13 日, 另一个高人气的智能体记忆框架 MemGPT 的创始团队 Letta AI ,其联合创始 人兼 CTO Sarah Wooders 对此公开指控: 几个月前,Mem0 发布了 MemGPT 的基准测试数据,并声称在记忆方面达到了 "SOTA" 水 平。 奇怪的是,我完全不知道他们到底是怎么跑这个基准测试的,如果不对 MemGPT 做重大修 改,这个测试根本没法完成(他们没有回应我们关于实验具体运行方式的询问)。 arXiv 并不是经过同行评审的平台 ...