股票配资申请
你的位置:哈尔滨股票配资申请_股票配资申请_股票配资在线开户 > 股票配资申请 > 【马斯克又搞了个参数量超GPT-3.55倍的大模型,开源了还能免费用
【马斯克又搞了个参数量超GPT-3.55倍的大模型,开源了还能免费用
2024-04-04 06:47    点击次数:159

【马斯克又搞了个参数量超GPT-3.55倍的大模型,开源了还能免费用】

马斯克旗下的AI创企xAI近日宣布,其大语言模型Grok-1已经实现开源,并向公众开放下载。据悉,Grok-1是一款基于混合专家系统技术构建的大语言模型,拥有高达3140亿的参数量,超越了OpenAI GPT-3.5的1750亿。

据报导,Grok-1遵照Apache 2.0协议开放了模型权重和架构,这是迄今参数量最大的开源大语言模型之一。值得一提的是,Grok-1始终由xAI自行训练完成,在2023年10月完成了其预训练阶段。目前发布的是Grok-1在预训练阶段结束时的原始基础模型检查点,即该模型并未针对任何具体应用进行微调。

xAI的目标之一就是与OpenAI、谷歌、微软等竞争对手在大模型领域展开较量,它的团队成员来自众多知名企业和研究机构,包括OpenAI、谷歌DeepMind、谷歌研究院、微软研究院等。尽管xaI尚未公布Grok-1的具体测试成绩,但人们对于它与其他公司的大模型之争将会成为行业内的关注焦点表示期待。