品玩3月6日讯,据 InfoQ 报道,YuanLab.ai团队正式开源Yuan3.0 Ultra多模态基础大模型,成为全球仅有的三个万亿级开源多模态大模型之一。该模型基于混合专家(MoE)架构,初始参数1515B,通过自研的Layer-Adaptive Expert Pruning(LAEP)算法优化至1010B,预训练效率提升49%,激活参数为68.8B。
Yuan3.0 Ultra采用统一多模态架构,集成视觉编码器、语言主干与对齐模块,并引入Localized Filtering Attention(LFA)机制,在DocMatix、ChatRAG、Spider等企业级评测中全面领先GPT-5.2、Gemini 3.1 Pro及Claude Opus 4.6,显著提升复杂文档理解、检索增强生成、Text-to-SQL及工具调用能力。
训练方面,模型优化Fast-thinking强化学习策略,改进Reflection Inhibition Reward Mechanism(RIRM),在提升准确率的同时减少14.38%输出token,实现高效推理。Yuan3.0 Ultra已全面开源,支持16bit与4bit版本下载,旨在推动大模型在企业Agent场景中的规模化落地。
![]()
特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.