计算机行业周报:Meta推出开源Llama 3,关注国内AI产业技术进步
CHINA DRAGON SECURITIES·2024-04-24 06:00
证券研究报告 计算机 报告日期:2024年04月 22日 推出开源 ,关注国内 产业技术进步 Meta Llama 3 AI ——计算机行业周报 华龙证券研究所 摘要: 开源推动大模型产业进步,有望进一步推动国内算力需求。近期, 投资评级:推荐(维持) Meta 发布开源大模型Llama38B 和70B 两个版本。Llama 3是目 最近一年走势 前世界上最强大的开源大模型之一,已经在 Meta 系产品中全面 上线。训练数据方面,Llama 3 基于15T 的数据进行了训练,与 Llama 2 相比,Llama3的训练集规模扩大了七倍,代码数据量也 增加了四倍。算力方面,Llama 3 基于两个定制的 2.4万 GPU 集 群来进行模型训练。目前 Llama 3 支持的上下文长度虽是前一代 的两倍,但只有 8K 的上下文长度,相比近期国内外发布的支持 200K 左右上下文的大模型较为逊色。我们认为Llama 3的开源有 望推动全球大模型产业技术进步,从而进一步推动算力需求和基 于大模型的AI 应用落地速度。 分析师:孙伯文 全球 PC 出货量温和复苏,国内外厂商加快布局 AIPC。根据市 场调研机构 ...