北京
分享至
岩芯矩阵（Yanxin Matrix）开源了 EdgeRock-4B。这个模型的核心是一套叫「记忆岩锚」（Rock Memory Anchor，RMA）的机制，用来把内存占用固定在一个稳定水平。
在 256K 上下文下，它比原模型少用了 99.1% 的 KV Cache，同时保留了较强的推理能力。
吞吐表现上，单张 GPU 上达到原模型的 6.42 倍。长上下文场景里，缓存和吞吐通常是一对互相拉扯的指标，EdgeRock-4B 把两端同时压了下来。
特别声明：以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布，本平台仅提供信息存储服务。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.
