国家知识产权局信息显示,锐西科技(北京)有限公司申请一项名为“用于大模型分布式训练的梯度压缩与通信优化方法”的专利,公开号CN122654067A,申请日期为2026年5月。
专利摘要显示,本发明提供了用于大模型分布式训练的梯度压缩与通信优化方法,应用于配备 GPU 与 RDMA 网络接口控制器的分布式同步训练集群。本方法通过采集梯度张量统计特征与 RDMA 链路实时状态生成通信特征向量;将梯度张量切分为匹配 NIC 传输粒度的梯度分块并分配独立压缩策略槽位;通过确定性状态机为各分块匹配压缩策略与通信路由,决策过程与反向传播计算重叠执行;接收端硬件解压缩,通过误差反馈补偿机制抑制压缩精度损失。本发明实现压缩与路由协同优化,提升计算通信并行度,有效降低梯度通信延迟,提升大模型分布式训练效率。
天眼查资料显示,锐西科技(北京)有限公司,成立于2016年,位于北京市,是一家以从事软件和信息技术服务业为主的企业。企业注册资本1137.3539万人民币。通过天眼查大数据分析,锐西科技(北京)有限公司共对外投资了4家企业,参与招投标项目48次,财产线索方面有商标信息36条,专利信息17条,此外企业还拥有行政许可3个。
声明:市场有风险,投资需谨慎。本文为AI基于第三方数据生成,仅供参考,不构成个人投资建议。
本文源自:市场资讯
作者:情报员
特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.