财新传媒
财新传媒
1111111
财新通行证
T中

GPT革命|马斯克旗下大模型开源 称参数量3410亿

文|财新 刘沛林,赵薇(实习)
2024年03月18日 15:55
Grok-1允许商业途径使用,并且允许用户自由修改开发、分发软件
news 原图 资料图:xAI的标志。图:视觉中国

  【财新网】马斯克旗下的大模型公司对外公开源代码。当地时间3月17日,马斯克(Elon Musk)的人工智能公司xAl在全球最大的编程项目托管平台GitHub上发布了预训练大语言模型Grok-1的源代码,目前收藏超11.7k星数。Grok-1使用Apache-2.0开源协议,这意味着它允许商业途径使用,并且允许用户自由修改开发、分发软件。

  xAI于官网公布了Grok -1更多技术细节。xAI称,Grok-1的预训练数据止于2023年10月,是一款原始基础模型,并没有针对任何特定应用进行微调,Grok-1背后参数为3140亿。xAI在开源界面上提示,需要GPU有足够显存才能运行该模型。作为参考,2020年5月OpenAI发布的GPT-3模型参数约为1750亿,Meta的开源大模型Llama-2目前对外提供的最大参数的模型为700亿参数。

责任编辑:屈运栩 | 版面编辑:吴秋晗

财新网所刊载内容之知识产权为财新传媒及/或相关权利人专属所有或持有。未经许可,禁止进行转载、摘编、复制及建立镜像等任何使用。

如有意愿转载,请发邮件至hello@caixin.com,获得书面确认及授权后,方可转载。

推荐阅读
财新移动
说说你的看法...
分享
取消
发送
注册
 分享成功

订阅财新网主编精选版电邮>>