03.19.24 | 20:38 PM
月之暗面AI Kimi 开启200万字无损上下文内测
BY 媒介360

国内 AI 初创公司月之暗面宣布,其智能助手产品 Kimi 在长上下文窗口技术上再次取得突破,无损上下文长度提升了一个数量级到 200 万字。

支持 200 万字上下文的 Kimi 已于昨日启动内测,用户可以在 Kimi 网页版申请内测资格。

月之暗面团队透露,为了达到更好的长窗口无损压缩性能,其研发和技术团队从模型预训练到对齐、推理环节均进行了原生的重新设计和开发,没有走「滑动窗口」、「降采样」等技术捷径,攻克了很多底层技术难点。

advertisement