Workflow
Physics of Language Models
icon
Search documents
Z Tech|独家解读Meta朱泽园开源新基线,用10%算力跑赢Llama3-8B,科学方法引领新范式,语言模型物理学迈入新时代
Z Potentials· 2025-08-02 02:19
01 物理学式的 AI 科学革命 即便是最顶尖的大模型,依然会在简单推理和常识问题上犯错。这是算法极限,还是训练范式出了问题? 我们能否像物理学家一样,用客观、可控的实验 揭示"AGI"本质? 《Physics of Language Models( 语言模型 物理学)》 ,正是将AI研究带入"物理学范式"的项目,由Meta FAIR研究院的朱泽园概念化发起 ,并统筹设 计。朱泽园是LoRA技术合作者、Katyusha优化算法发明者、清华本科,麻省理工博士、Google Codejam全球编程大赛第二名、IOI两届国际金牌,论文引 用超三万。他从优化理论深耕多年,现专注于AI基础理论和智能本质的科学探索。 02 用物理学方法追寻智能的普适规律 将"智能"拆解为 原子化 、可控的任务维度(推理、知识、结构理解等) ,为每个维度设计合成实验,最大限度减少"现实世界数据"的噪音; 用可控实验,揭示不同模型架构的极限与短板 ,不仅看"刷分",更追溯"为何如此""如何突破"; 坚持客观、可验证的科学精神和学术思想传承 ,推动AI从工程走向基础科学。 本次开源, 是Physics of Language Models自诞 ...
挖人上瘾的Meta又被员工吐嘈:不帮忙宣传项目,开源只会越来越糟
机器之心· 2025-08-01 01:30
机器之心报道 机器之心编辑部 申请转发项目推文近一年才批准? 近日,Meta CEO 马克・扎克伯格的一篇《 个人超级智能 》公开信赚尽了眼球,其中不仅提到他们已经看到了「AI 系统自我改进的迹象」,还表示他们将会「谨 慎选择开源内容」。 上下滑动查看 一时之间,相关的讨论和争议达到了又一轮小高潮。而与此同时,Meta 内部风波暗涌。一方面为追赶 AI 顶级研究阵地,Meta 砸下逾 140 亿美元重注 Scale AI,并 组成 Meta Superintelligence Labs (MSL),广揽来自 OpenAI、DeepMind 等顶级团队的 AI 人才,提供百万乃至上亿美元签约金;另一方面,Meta 内部却又被屡屡 爆出存在五花八门的关于资源、人力、内部管控等的纷争,甚至还有一位名为 Tijmen Blankevoort 的研究科学家曾发长文控诉 Meta 内部文化和组织失调的惨淡景 象。 更多详情可参阅我们之前的一篇报道《 是的,LeCun 要向 28 岁的 Alexandr Wang 汇报!这是 Meta 新 AI 团队的一些独家内部消息 》。 现在,又有更多有关 Meta 内部混乱和低效的细 ...