科技快讯-K

美国国家工程院外籍院士沈向洋:不上万亿参数,以后不好说是通用大模型

在2024全球开发者先锋大会上,美国国家工程院外籍院士沈向洋表示,大模型将横扫所有垂直行业。以A100为参考,通用大模型没有万卡、不上万亿参数的话,基本上以后就不太好意思说是通用模型,而行业大模型大致上是一个千亿卡的训练规模、千亿参数,企业大模型可能是百张卡、百亿参数。(科创板日报)