Meta 发布 Llama 4 大模型:混合专家架构引领 AI 新时代

重大进展与多模态能力

Meta 公司推出了其最新的开源人工智能模型 Llama4,标志着其在人工智能领域的又一重大进展。Llama4分为两个版本,分别命名为 Scout 和 Maverick,旨在提升 AI 模型的功能与表现。Meta 表示,Llama4是一个多模态大模型,能够处理文本、图像、视频和音频等多种数据类型,并能在这些格式之间自由转换。

混合专家架构的优势

值得一提的是,Llama4系列首次采用了“混合专家”(MoE)架构,这一新颖设计极大地提高了模型的训练和响应效率。通过将模型划分为多个专注于特定任务的“专家”子模型,Llama4在处理复杂查询时能够表现得更加迅速且精准。

image.png

模型配置与未来展望

根据 Meta 的介绍,Scout 和 Maverick 是目前公司最先进的模型。其主要特性如下:

  • Scout:活跃参数数量为170亿,配备16个“专家”模型,总参数达到1090亿。
  • Maverick:同样拥有170亿个活跃参数,然而“专家”模型数量增至128个,总参数量达到了惊人的4000亿。

此外,Meta 还在研发一款名为Behemoth的更强大模型,声称其是 “新模型中的教师”,预示着未来更多的创新。

卓越的视觉理解与应用

这些模型经过大量未标注的数据训练,展现出卓越的视觉理解能力。现在,Scout 和 Maverick 可在 Llama.com 以及 Meta 的合作伙伴平台上公开获取,并已在 WhatsApp、Messenger 和 Instagram Direct 等社交平台上推广使用。

开源人工智能的愿景

Meta 的首席执行官扎克伯格在发布会上表示:“我们的目标是建立世界领先的人工智能,并将其开源,让更多的人受益。” 他强调,Llama4的推出标志着开源人工智能的崛起,将改变行业的格局。

未来投资与行业影响

Meta 计划在未来一年中投入高达650亿美元来扩展其人工智能基础设施,尽管投资者对大型科技公司的实际回报仍然持谨慎态度。这一系列的动作无疑将使 Meta 在 AI 领域更具竞争力,并推动整个行业的技术革新。

Meta 发布 Llama 4 大模型:混合专家架构引领 AI 新时代

YiAI团队

YiAI团队

AI大模型技术专家团队

YiAI团队是一支专注于AI大模型应用的技术团队,由来自国内外知名科技公司的AI专家组成。 我们致力于为企业和开发者提供高质量、低成本的AI大模型API服务,涵盖文本生成、对话交互、 内容理解、知识问答等多个领域。团队拥有丰富的大规模语言模型开发和应用经验,深入理解 企业在AI落地过程中的实际需求和技术痛点。