· Quartz
Mistral发布万亿参数模型,挑战中国
图片: Steve A Johnson 来自 Unsplash
Mistral正在推出一款拥有1万亿参数的开源AI模型,号称在中国以外地区领先,该模型在欧洲使用4000块英伟达GPU训练。这款名为Mistral Large 4(简称ML4)、绰号“Le Chonk”的模型,在网络、编程、制造、金融和多模态相关任务上尤为擅长。模型权重将于10月27日公开发布。
Mistral于周二发布了这款新的开放权重AI模型,西方公司正竞相缩小与中国开发者在这一市场上的能力差距。这款名为Mistral Large 4(简称ML4)、绰号“Le Chonk”的模型拥有1万亿参数,在综合基准性能上将跻身全球顶尖开放权重模型之列,Mistral声称它是中国以外开发的最强开放权重模型,且领先幅度可观。ML4拥有490亿活跃参数,在Mistral位于欧洲的自有数据中心,依托4000块英伟达Grace Blackwell GPU,从零开始训练了约两个月。Mistral以160多种语言训练该模型,涵盖欧盟所有官方语言。在基准测试中,ML4在DeepSWE v1.1上得分61.7%,在AutomationBench上得分59.9%;在一项涵盖漏洞复现与修补的人工分析网络指数测试中,它达到82%,其Cybench得分为93%。该模型正以预览形式向开发者、网络安全专业人士以及国家主管机构开放,随后其权重将于10月27日公开发布。Mistral首席执行官Arthur Mensch在发布活动上表示,该模型优于许多竞争对手的开放权重模型,并称“欧洲无法竞争的说法并不属实”。
来源与版权
原始来源: Quartz