GLM-5.5 曝光:传参数规模冲上 2.5 万亿—3.5 万亿,或引入循环 Transformer

大模型之家讯 10月23日,网传智谱 GLM Coding Plan 补偿通知剧透下一代模型:“新模型发布后,还会额外赠送一次额度重置机会哈”。同期爆料称 GLM-5.5 参数规模或达2.5万亿至3.5万亿,而8月发布的 GLM-5.3 总参数约7430亿,若属实则扩容3.4至4.7倍。需注意,MoE 架构下总参数量与单 token 激活量并不等同。另有传闻称将引入循环 Transformer,官方尚未确认。

上一篇:

下一篇:

发表回复

登录后才能评论