当地时间3月17日,马斯克的AI创企xAI宣布开源3140亿参数的混合专家模型Grok-1,以及该模型的权重和网络架构,并向公众开放下载。

据了解,Grok-1是一款基于混合专家系统(Mixture-of-Experts,MoE)技术构建的大语言模型,拥有3140亿参数,远超OpenAI GPT-3.5的1750亿。是迄今参数量最大的开源大语言模型,遵照Apache 2.0协议开放模型权重和架构。

潇湘晨报综合

爆料、维权通道:应用市场下载“晨视频”客户端,搜索“帮忙”一键直达“晨意帮忙”平台;或拨打热线0731-85571188。政企内容服务专席19176699651。

举报/反馈

友情提示

本站部分转载文章,皆来自互联网,仅供参考及分享,并不用于任何商业用途;版权归原作者所有,如涉及作品内容、版权和其他问题,请与本网联系,我们将在第一时间删除内容!

联系邮箱:1042463605@qq.com