腾讯研究院AI速递 20250818
腾讯研究院·2025-08-17 16:01
生成式AI 一、 谷歌开源Gemma 3 270M,4个注意力头专为终端而生 1. 谷歌发布轻量级模型Gemma 3 270M,下载仅241MB,拥有2.7亿参数,其中嵌入参数1.7亿个,Transformer模 块1亿个; 2. 模型极致节能,在Pixel 9 Pro手机上25次对话仅消耗0.75%电量,INT4量化后可在资源受限设备上高效运行; 3. 在IFEval基准测试上超越Qwen 2.5同级模型,支持高效指令遵循,下载量已突破两亿次,专为特定任务微调设 计。 https://mp.weixin.qq.com/s/IH64apP7SmHVCwHKfTGOsQ 二、 Meta 正式开源了 DINOv3,通用SOTA 级视觉基础模型 1. Meta开源DINOv3视觉基础模型,采用自监督学习,首次全面超越弱监督模型,在多个密集预测任务中表现优于专 业解决方案; 2. 模型采用创新的Gram Anchoring策略和旋转位置编码(RoPE),参数规模扩展至70亿,训练数据扩展至17亿张图 像; 3. DINOv3商业许可开源,提供多种规模模型系列(含ViT-B、ViT-L等),并专门训练了卫星图像骨干网络 ...