01.23.24 | 20:58 PM
Stability AI 推出 Stable LM 2 1.6B 小语言模型
BY 媒介360
Stability AI 发布了一款名为 Stable LM 2 1.6B 的新型模型。据了解,该模型在约 2 万亿个 Tokens 上进行了两个周期的训练,涉及英语、西班牙语、德语、荷兰语等多语种数据。

Stability AI 表示,Stable LM 2 1.6B 在多数基准测试中的表现优于其他参数不超过 2B 的小型语言模型,包括微软的 Phi-2(2.7B)、TinyLlama 1.1B 和 Falcon 1B。

此外,这款较小的 Stable LM 模型在一些测试中甚至超越了 Stability AI 早期推出的 Stable LM 3B 型号。

需要指出的是,由于 Stable LM 2 1.6B 参数规模较小,可能会出现高幻觉率等潜在问题。目前,该模型已在 Hugging Face 平台上发布。
advertisement