国家知识产权局信息显示,上海汇阳川科技有限公司申请一项名为“一种超长上下文张量并行增量注意力与差异压缩传输方法”的专利,公开号CN122363881A,申请日期为2026年3月。
专利摘要显示,本申请涉及自然语言处理领域,尤其涉及一种超长上下文张量并行增量注意力与差异压缩传输方法,其采用多级精度滑动窗口注意力机制,根据窗口与当前计算位置的距离,及窗口内容信息熵动态分配fp16/int8/int4等精度级别;通过张量并行增量注意力引擎实现跨GPU/节点的增量注意力计算与异步All‑Reduce同步,提升计算效率;利用语义差异压缩传输技术,基于相似度检测仅传输差异数据,大幅减少跨节点传输开销;结合极限压榨安全控制策略,通过硬件监控与动态功耗/频率调节实现性能与安全的平衡。本发明可显著降低超长上下文处理的显存占用与传输开销,提升计算效率与硬件利用率,增强大模型对长文本的理解能力,适配异构硬件环境,适用于大模型推理与训练场景。
天眼查资料显示,上海汇阳川科技有限公司,成立于2025年,位于上海市,是一家以从事互联网和相关服务为主的企业。企业注册资本50万人民币。通过天眼查大数据分析,上海汇阳川科技有限公司。
声明:市场有风险,投资需谨慎。本文为AI基于第三方数据生成,仅供参考,不构成个人投资建议。
本文源自:市场资讯
作者:情报员
特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.