Manta模型支持1亿Token上下文
摘要
德国AI实验室Empero发布Manta，单次可读入1亿Token，是常见百万级模型的100倍；8800万Token年报中藏20个暗号找对18个，约1000万Token中藏50个找对43个；架构、速度、成本均未披露，仅开放少量试用。
原文片段
从百万到1亿Token，Manta把AI上下文容量提高两个数量级 动察 Beating AI 快讯，德国 AI 实验室 Empero 发布了一个叫 Manta 的模型，号称一次能读入 1 亿 Token，是目前常见的百万 Token 上下文模型的 100 倍。 Empero 把标普 500 公司共 1269 份年报和季报，一口气塞进 Manta，足足 8800 万 Token。然后在这些文件里藏了 20 个暗号，让模型逐个找出来。结果找对了 18 个。团队又试了一次，在约 1000 万 Token 中藏入 50 个非常相似的暗号，Manta 找对了 43 个。 Empero 还拿真实的 …