大模型之家讯 刚刚马斯克的AI创企xAI正式发布了大模型Grok-1,其参数量达到了3140亿,超过OpenAI GPT-3.5的1750亿。这是迄今参数量最大的开源大语言模型,遵照Apache 2.0协议开放模型权重和架构。Grok-1是一个混合专家(Mixture-of-Experts,MOE)大模型。xAI称这是他们自己从头训练的大模型,Grok-1没有针对特定应用进行微调。
大模型之家讯 刚刚马斯克的AI创企xAI正式发布了大模型Grok-1,其参数量达到了3140亿,超过OpenAI GPT-3.5的1750亿。这是迄今参数量最大的开源大语言模型,遵照Apache 2.0协议开放模型权重和架构。Grok-1是一个混合专家(Mixture-of-Experts,MOE)大模型。xAI称这是他们自己从头训练的大模型,Grok-1没有针对特定应用进行微调。