全球资讯

GPT革命|Meta推4050亿参数开源模型 扎克伯格称开源AI是未来

资料图:Meta的CEO扎克伯格。图:视觉中国

  【旭才科技】开源模型和闭源模型的竞赛还在持续。美国当地时间7月23日,Facebook母公司Meta(NASDAQ:META)宣布推出Llama 3.1开源模型,包含4050亿、700亿、80亿三个参数版本。Meta称,此前开源大模型能力落后于闭源模型,随着此次4050亿参数版本开源模型的发布,开源模型将成为领导者。

  今年4月,Meta刚发布了开源大模型Llama 3系列,包含80亿、700亿参数的两个版本,其中700亿参数的版本能力对标GPT-3.5,其长文本能力仅为支持8K上下文窗口,远落后于128K左右的行业平均水平,Meta当时称将在接下来数月推出更强长文本能力、多种尺寸的模型(详见旭才科技报道《GPT革命|Meta发布新一代开源模型 模型开闭源之争持续》)。



Related posts

特斯拉引领人形机器人展示热潮 Optimus距离大规模应用还有多远?

admin

一季度中国汽车销量同比增长11.2% 出口面临复杂局面

admin

英镑多头狂欢后的意外急转:美国经济收缩如何打乱汇市棋局 周三(4月30日)北美时段,英镑兑美元延续回调,交投于1.3300水平附近。尽管美国公布一系列疲软经济数据后美元削减了部分涨幅,英镑仍在日内低位徘徊,显示出明显的相对弱势。

admin