跳到主要内容
检索

# MemT-1.0

1 篇关联报道

订阅更新
  1. openbiox Bizard

    MemT-1.0把记忆做进模型计算:128K历史下持久状态存储约为全上下文KV缓存的1/66

    MemTensor 团队发布记忆基础模型 MemT-1.0,把持久且动态演化的记忆作为模型计算的内生部分,推理时不再访问原始上下文。它由动态局部记忆与可训练的超记忆组成,持久状态大小恒定,在 128K 历史长度下存储约为全上下文 KV 缓存的 1/66。在 11 项记忆基准上,MemT-1.0-Flash 与 MemT-1.0-Nano 在被评估的参数化记忆方法中分列第一和第二,但文本记忆系统整体仍领先,尤其在需要细粒度证据检索的长历史上。

已读完全部报道