Meta发布全新Megabyte模型,解决算力损耗硬伤

品玩5月30日讯,据新智元报道, Meta 近日发布了一种全新的模型架构,可以有效减少算力损耗。

据报道,Meta 的这个模型架构被称为 Megabyte,是一种多尺度解码器架构,可以对超过一百万字节的序列进行端到端可微分建模。Megabyte 能跨多种格式生成超过100万个token,并超越GPT-4等模型背后的现有 Transformer架构的功能。

原创文章,作者:,如若转载,请注明出处:https://knewsmart.com/archives/153007

(0)
上一篇 2023年5月30日 下午3:58
下一篇 2023年5月30日 下午3:58

相关推荐

发表回复

登录后才能评论